Big Data manual de instrucciones de aprendizaje

En primer lugar, las direcciones del plan de estudios

  1. Base de Datos de la Universidad de Xiamen Lab
    http://dblab.xmu.edu.cn/

  2. "tecnologías y la aplicación del principio de Big Data" la enseñanza de la página oficial
    http://dblab.xmu.edu.cn/post/bigdata/

  3. "Big programación de base de datos, experimentos y la caja tutorial" la enseñanza de la página web oficial
    http://dblab.xmu.edu.cn/post/bigdatapractice/
    Nota: los libros de texto recomendados

  4. experimentos Big Data entorno Linux archivo de imagen de máquina virtual
    http://dblab.xmu.edu.cn/blog/1645-2/
    dirección de espejo: https: //pan.baidu.com/s/1kUWaNWz#list/path=%2F
    cuadro visual 5.2 + ubuntu 06/14/04

  5. bosques de lluvia editado por "tecnología de grandes volúmenes de datos y la aplicación del principio de" enseñar a apoyar gran instalación de software de datos y la programación de las guías de práctica
    http://dblab.xmu.edu.cn/post/5663/
    página Web que contiene importante Descarga de software y programación de las guías de práctica en dos partes contenido.

  6. Apoyo grande de datos de software Descargar
    https://pan.baidu.com/s/1ZuY142dtMERuh4vfliAgJg#list/path=%2F
    código de extracción: gx0b

  7. de datos grandes cursos en línea lluvia maderas altavoz de nivel de entrada (cursos incluyen vídeo)
    http://dblab.xmu.edu.cn/post/bigdata-online-course/#lesson0

  8. tecnologías y aplicación de los principios del Capítulo II Hadoop grande de procesamiento de datos de la guía de estudio arquitectura de grandes volúmenes de datos
    http://dblab.xmu.edu.cn/blog/285/

  9. hadoop distribuye ficticia etapa de montaje autónomo
    http://dblab.xmu.edu.cn/blog/install-hadoop/

  10. mars Eclipse Descargar
    https://www.eclipse.org/downloads/packages/release/mars/2

  11. instalación del clúster hadoop pasos
    http://dblab.xmu.edu.cn/blog/install-hadoop-cluster/

  12. ssh estudio publicado principio de cifrado:
    https://www.cnblogs.com/linzetong/p/10382432.html
    https://www.cnblogs.com/pcheng/p/9629621.html
    https://blog.csdn.net/ udeankyd / Article / Detalles / 81059704
    https://blog.csdn.net/a1510841693/article/details/83743989

  13. tecnologías y la aplicación del principio del sistema de archivos distribuido Big Data hdfs guía de estudio Capítulo
    http://dblab.xmu.edu.cn/blog/290-2/

  14. Grandes Principios y aplicaciones de datos CAPÍTULO IV HBase distribuido guía de estudio base de datos
    http://dblab.xmu.edu.cn/blog/install-hbase/

  15. hbase principio, los conceptos básicos y la arquitectura
    https://blog.csdn.net/woshiwanxin102213/article/details/17584043

  16. El uso de Eclipse para compilar y ejecutar programas de MapReduce _Hadoop2.6.0_Ubuntu / CentOS (informes de laboratorio 7)
    http://dblab.xmu.edu.cn/blog/hadoop-build-project-using-eclipse/

  17. bosques de lluvia editado por "tecnología de grandes volúmenes de datos y la aplicación del principio de" materiales de apoyo sobre cuestiones prácticas máquina
    http://dblab.xmu.edu.cn/post/5645/
    Nota: después de la escuela corresponden experimento con el libro, pero el formato es diferente, desde los estudiantes punto de vista.

  18. Universidad de Xiamen bosques de lluvia editado Laboratory Manual sobre "Tecnología de grandes volúmenes de datos y la aplicación del principio de la" sala de enseñanza completa de la máquina
    http://dblab.xmu.edu.cn/post/6131/
    Nota: De acuerdo con el experimento libro después de la escuela

  19. PPT Descargar
    http://dblab.xmu.edu.cn/post/5633/

  20. Mooc Universidad China (Hadoop) (aún no ha comenzado, no puede ver)
    http://www.icourse163.org/course/XMU-1002335004

  21. NetEase nube aula (Hadoop)
    https://study.163.com/course/courseMain.htm?courseId=1002887002& trace_c_p_k2 = 036309fb1fd04d16bad3fad81fe6e28a # / courseDetail? La pestaña = 1

  22. Los libros de texto de lluvia maderas Spark web oficial
    http://dblab.xmu.edu.cn/post/spark/
    incluyen manuales de laboratorio URL

  23. La lluvia de semillas de chispa grandes volúmenes de datos Tutorial de inicio (versión Scala) (libro de texto de texto - una versión simplificada)
    http://dblab.xmu.edu.cn/blog/spark/
    principales materiales de aprendizaje

  24. instalación Scala (informe de la prueba 1)
    http://dblab.xmu.edu.cn/blog/929-2/

  25. Scala Descargar
    https://www.scala-lang.org/download/2.11.8.html
    https://www.scala-sbt.org/download.html

  26. la instalación de encendido (informe de la prueba 2)
    http://dblab.xmu.edu.cn/blog/1307-2/

  27. aplicaciones chispa de escritura utilizando Eclipse (Scala + SBT)
    http://dblab.xmu.edu.cn/blog/1490/

  28. NetEase aula nube (el Spark)
    https://study.163.com/course/introduction/1005031005.htm

  29. Universidad MOOC Chino (Spark)
    http://www.icourse163.org/course/XMU-1205811805

  30. Libro de texto Baidu disco de red
    https://pan.baidu.com/s/1l80bqAUpvnFTMNRHEyODeQ#list/path=%2F
    extracción de código: vdgm

  31. ppt descarga
    http://dblab.xmu.edu.cn/post/7659/#kejianxiazai

  32. aplicación chispa que se ejecuta en un cluster
    http://dblab.xmu.edu.cn/blog/1217-2/

  33. Spark 2,0 entorno de clúster distribuido para construir
    http://dblab.xmu.edu.cn/blog/1187-2/

  34. Spark Guía de inicio rápido - Spark instalación y el uso básico
    http://dblab.xmu.edu.cn/blog/spark-quick-start-guide/

  35. aula de vídeo NetEase nube (la chispa)
    https://study.163.com/course/introduction.htm?courseId=1005031005#/courseDetail?tab=1

Dos, el informe de prueba hadoop

Informe 1, 1 prueba:

2019/10/3 ubuntukylin16.04 (original) de disco de instalación original
2019/10/3 ubuntukylin16.04 (1) = ubuntukylin16.04 ( original) + montados vmware-herramientas

Informe 2, 2 laboratorio:

Ubuntukylin16.04 03/10/2019 (2) = Ubuntukylin16.04 (1) + ssh
05/10/2019 Ubuntukylin16.04 (3) = Ubuntukylin (2) + JDK
05/10/2019 Ubuntukylin16.04 (4) = ubuntukylin (3) + hadoop (单机Version)
10/14/2019 Ubuntukylin16.04 (5) = Ubuntukylin16.04 (4) + disposición de distribución falsa

informe 3, 3 laboratorio:

25/10/2019 master = ubuntukylin16.04 (4) + clúster configuración
10.25.2019 esclavo1 = ubuntukylin16.04 (4) + configuración de clúster

informe 4, 4 laboratorio:

05/11/2019 ubuntukylin16.04 (5,5) = ubuntukylin16.04 ( 5) + Eclipse ( instalación de la línea)
: 1) basado en ubuntu (Eclipse Instalación 5) versión, se forma versión 5.5.
2) basado en ubuntu (5.5) versión, la práctica completa shell HDFS.
3) Sobre la base de ubuntu (5.5) versión, basado en el eclipse total hdfs desarrollo del programa.
Nota: La línea instalación de Eclipse-java-mars-2- linux-GTK-x86_64.tar.gz, muy tarjeta, difícilmente puede utilizar, así que en vez de instalación de línea, el número de versión es 3.8.1

informe de 5, 5 laboratorio:

03/11/2019 ubuntukylin16.04 (6) = ubuntu16.04 ( 5) + hbase + hbase independiente configuración
11.03.2019 ubuntukylin16.04 (7) = ubuntu16.04 ( 6) + hbase configuración de pseudo-distribuido Edición
: 1) basado en ubuntu versión (5) versión, hbase configuración completa stand-alone, ubuntu formado (6).
2) Sobre la base de ubuntu (6) versión, distribuida de seudo completa hbase, formando ubuntu (7) versión.
3) Sobre la base de ubuntu (7) versión, ejercicios completos de mando hbase Shell.

informe 6, 6 laboratorio:

03/11/2019 ubuntukylin16.04 (8) = ubuntukylin16.04 ( 7) + Eclipse ( instalación de la línea) + hbase programa de ejemplo
contenido:
1) basado en ubuntu (7) versión, eclipse instalación de la línea, ubuntu (8) formada.
2) basada en Ubuntu (8) de la versión completa, eclipse prácticas de programación hbase.

7, 7 informe de prueba

12/15/2019 ubuntukylin16.04 (9) = ubuntukylin16.04¬ ( 8) + hadoop-Eclipse-Kepler-plugin-2.6.0.jar
: basado en ubuntu 1) (8) versión, la instalación de enchufe eclipse, ubuntukylin16 formando 0,04 (9) versión.
2) basado en Ubuntu (9) versión, el desarrollo completo del programa Eclipse MapReduce.

Tres, el informe de prueba de chispa

1 informe de prueba 1: Instalar la Scala

07/02/2020 ubuntukylin16.04 (10) = ubuntukylin16.04 (4) + scala-2.11.8

: 1) en base a ubuntukylin16.04 (4) versión Instalación scala-2.11.8, ubuntukylin16.04 formado (10)
se refieren a http://dblab.xmu.edu.cn/blog/spark/ aprendizaje rápido porción Scala, ejemplos de ejercicios realizados.

2, el informe de prueba 2: Instalación de chispa

2020/2/10 ubuntukylin16.04 (11) = ubuntukylin16.04 (10) + + spark2.1.0 sbt0.13.15

Contenido: Referencia http://dblab.xmu.edu.cn/blog/1307-2/, basado ubuntukylin16.04 (10), y el montaje spark2.1.0 sbt0.13.15

四, Enjoy!

Publicado 75 artículos originales · ganado elogios 8 · Vistas a 10000 +

Supongo que te gusta

Origin blog.csdn.net/qq_21516633/article/details/105173414
Recomendado
Clasificación