En primer lugar, las direcciones del plan de estudios
-
Base de Datos de la Universidad de Xiamen Lab
http://dblab.xmu.edu.cn/ -
"tecnologías y la aplicación del principio de Big Data" la enseñanza de la página oficial
http://dblab.xmu.edu.cn/post/bigdata/ -
"Big programación de base de datos, experimentos y la caja tutorial" la enseñanza de la página web oficial
http://dblab.xmu.edu.cn/post/bigdatapractice/
Nota: los libros de texto recomendados -
experimentos Big Data entorno Linux archivo de imagen de máquina virtual
http://dblab.xmu.edu.cn/blog/1645-2/
dirección de espejo: https: //pan.baidu.com/s/1kUWaNWz#list/path=%2F
cuadro visual 5.2 + ubuntu 06/14/04 -
bosques de lluvia editado por "tecnología de grandes volúmenes de datos y la aplicación del principio de" enseñar a apoyar gran instalación de software de datos y la programación de las guías de práctica
http://dblab.xmu.edu.cn/post/5663/
página Web que contiene importante Descarga de software y programación de las guías de práctica en dos partes contenido. -
Apoyo grande de datos de software Descargar
https://pan.baidu.com/s/1ZuY142dtMERuh4vfliAgJg#list/path=%2F
código de extracción: gx0b -
de datos grandes cursos en línea lluvia maderas altavoz de nivel de entrada (cursos incluyen vídeo)
http://dblab.xmu.edu.cn/post/bigdata-online-course/#lesson0 -
tecnologías y aplicación de los principios del Capítulo II Hadoop grande de procesamiento de datos de la guía de estudio arquitectura de grandes volúmenes de datos
http://dblab.xmu.edu.cn/blog/285/ -
hadoop distribuye ficticia etapa de montaje autónomo
http://dblab.xmu.edu.cn/blog/install-hadoop/ -
mars Eclipse Descargar
https://www.eclipse.org/downloads/packages/release/mars/2 -
instalación del clúster hadoop pasos
http://dblab.xmu.edu.cn/blog/install-hadoop-cluster/ -
ssh estudio publicado principio de cifrado:
https://www.cnblogs.com/linzetong/p/10382432.html
https://www.cnblogs.com/pcheng/p/9629621.html
https://blog.csdn.net/ udeankyd / Article / Detalles / 81059704
https://blog.csdn.net/a1510841693/article/details/83743989 -
tecnologías y la aplicación del principio del sistema de archivos distribuido Big Data hdfs guía de estudio Capítulo
http://dblab.xmu.edu.cn/blog/290-2/ -
Grandes Principios y aplicaciones de datos CAPÍTULO IV HBase distribuido guía de estudio base de datos
http://dblab.xmu.edu.cn/blog/install-hbase/ -
hbase principio, los conceptos básicos y la arquitectura
https://blog.csdn.net/woshiwanxin102213/article/details/17584043 -
El uso de Eclipse para compilar y ejecutar programas de MapReduce _Hadoop2.6.0_Ubuntu / CentOS (informes de laboratorio 7)
http://dblab.xmu.edu.cn/blog/hadoop-build-project-using-eclipse/ -
bosques de lluvia editado por "tecnología de grandes volúmenes de datos y la aplicación del principio de" materiales de apoyo sobre cuestiones prácticas máquina
http://dblab.xmu.edu.cn/post/5645/
Nota: después de la escuela corresponden experimento con el libro, pero el formato es diferente, desde los estudiantes punto de vista. -
Universidad de Xiamen bosques de lluvia editado Laboratory Manual sobre "Tecnología de grandes volúmenes de datos y la aplicación del principio de la" sala de enseñanza completa de la máquina
http://dblab.xmu.edu.cn/post/6131/
Nota: De acuerdo con el experimento libro después de la escuela -
PPT Descargar
http://dblab.xmu.edu.cn/post/5633/ -
Mooc Universidad China (Hadoop) (aún no ha comenzado, no puede ver)
http://www.icourse163.org/course/XMU-1002335004 -
NetEase nube aula (Hadoop)
https://study.163.com/course/courseMain.htm?courseId=1002887002& trace_c_p_k2 = 036309fb1fd04d16bad3fad81fe6e28a # / courseDetail? La pestaña = 1 -
Los libros de texto de lluvia maderas Spark web oficial
http://dblab.xmu.edu.cn/post/spark/
incluyen manuales de laboratorio URL -
La lluvia de semillas de chispa grandes volúmenes de datos Tutorial de inicio (versión Scala) (libro de texto de texto - una versión simplificada)
http://dblab.xmu.edu.cn/blog/spark/
principales materiales de aprendizaje -
instalación Scala (informe de la prueba 1)
http://dblab.xmu.edu.cn/blog/929-2/ -
Scala Descargar
https://www.scala-lang.org/download/2.11.8.html
https://www.scala-sbt.org/download.html -
la instalación de encendido (informe de la prueba 2)
http://dblab.xmu.edu.cn/blog/1307-2/ -
aplicaciones chispa de escritura utilizando Eclipse (Scala + SBT)
http://dblab.xmu.edu.cn/blog/1490/ -
NetEase aula nube (el Spark)
https://study.163.com/course/introduction/1005031005.htm -
Universidad MOOC Chino (Spark)
http://www.icourse163.org/course/XMU-1205811805 -
Libro de texto Baidu disco de red
https://pan.baidu.com/s/1l80bqAUpvnFTMNRHEyODeQ#list/path=%2F
extracción de código: vdgm -
ppt descarga
http://dblab.xmu.edu.cn/post/7659/#kejianxiazai -
aplicación chispa que se ejecuta en un cluster
http://dblab.xmu.edu.cn/blog/1217-2/ -
Spark 2,0 entorno de clúster distribuido para construir
http://dblab.xmu.edu.cn/blog/1187-2/ -
Spark Guía de inicio rápido - Spark instalación y el uso básico
http://dblab.xmu.edu.cn/blog/spark-quick-start-guide/ -
aula de vídeo NetEase nube (la chispa)
https://study.163.com/course/introduction.htm?courseId=1005031005#/courseDetail?tab=1
Dos, el informe de prueba hadoop
Informe 1, 1 prueba:
2019/10/3 ubuntukylin16.04 (original) de disco de instalación original
2019/10/3 ubuntukylin16.04 (1) = ubuntukylin16.04 ( original) + montados vmware-herramientas
Informe 2, 2 laboratorio:
Ubuntukylin16.04 03/10/2019 (2) = Ubuntukylin16.04 (1) + ssh
05/10/2019 Ubuntukylin16.04 (3) = Ubuntukylin (2) + JDK
05/10/2019 Ubuntukylin16.04 (4) = ubuntukylin (3) + hadoop (单机Version)
10/14/2019 Ubuntukylin16.04 (5) = Ubuntukylin16.04 (4) + disposición de distribución falsa
informe 3, 3 laboratorio:
25/10/2019 master = ubuntukylin16.04 (4) + clúster configuración
10.25.2019 esclavo1 = ubuntukylin16.04 (4) + configuración de clúster
informe 4, 4 laboratorio:
05/11/2019 ubuntukylin16.04 (5,5) = ubuntukylin16.04 ( 5) + Eclipse ( instalación de la línea)
: 1) basado en ubuntu (Eclipse Instalación 5) versión, se forma versión 5.5.
2) basado en ubuntu (5.5) versión, la práctica completa shell HDFS.
3) Sobre la base de ubuntu (5.5) versión, basado en el eclipse total hdfs desarrollo del programa.
Nota: La línea instalación de Eclipse-java-mars-2- linux-GTK-x86_64.tar.gz, muy tarjeta, difícilmente puede utilizar, así que en vez de instalación de línea, el número de versión es 3.8.1
informe de 5, 5 laboratorio:
03/11/2019 ubuntukylin16.04 (6) = ubuntu16.04 ( 5) + hbase + hbase independiente configuración
11.03.2019 ubuntukylin16.04 (7) = ubuntu16.04 ( 6) + hbase configuración de pseudo-distribuido Edición
: 1) basado en ubuntu versión (5) versión, hbase configuración completa stand-alone, ubuntu formado (6).
2) Sobre la base de ubuntu (6) versión, distribuida de seudo completa hbase, formando ubuntu (7) versión.
3) Sobre la base de ubuntu (7) versión, ejercicios completos de mando hbase Shell.
informe 6, 6 laboratorio:
03/11/2019 ubuntukylin16.04 (8) = ubuntukylin16.04 ( 7) + Eclipse ( instalación de la línea) + hbase programa de ejemplo
contenido:
1) basado en ubuntu (7) versión, eclipse instalación de la línea, ubuntu (8) formada.
2) basada en Ubuntu (8) de la versión completa, eclipse prácticas de programación hbase.
7, 7 informe de prueba
12/15/2019 ubuntukylin16.04 (9) = ubuntukylin16.04¬ ( 8) + hadoop-Eclipse-Kepler-plugin-2.6.0.jar
: basado en ubuntu 1) (8) versión, la instalación de enchufe eclipse, ubuntukylin16 formando 0,04 (9) versión.
2) basado en Ubuntu (9) versión, el desarrollo completo del programa Eclipse MapReduce.
Tres, el informe de prueba de chispa
1 informe de prueba 1: Instalar la Scala
07/02/2020 ubuntukylin16.04 (10) = ubuntukylin16.04 (4) + scala-2.11.8
: 1) en base a ubuntukylin16.04 (4) versión Instalación scala-2.11.8, ubuntukylin16.04 formado (10)
se refieren a http://dblab.xmu.edu.cn/blog/spark/ aprendizaje rápido porción Scala, ejemplos de ejercicios realizados.
2, el informe de prueba 2: Instalación de chispa
2020/2/10 ubuntukylin16.04 (11) = ubuntukylin16.04 (10) + + spark2.1.0 sbt0.13.15
Contenido: Referencia http://dblab.xmu.edu.cn/blog/1307-2/, basado ubuntukylin16.04 (10), y el montaje spark2.1.0 sbt0.13.15