1 Intergiciel d'application
1.1 Intergiciel de message
1.1.1 Kafka 1.1.2
ActiveMQ
1.1.3 RabbitMQ
1.2 Intergiciel de cache
1.2.1 Redis de cache distribué
1.4 Planification de tâches distribuée
2 Composants Big Data
2.1 Synchronisation des données
2.1.1 Accès CDC (OGG)
2.1.2 Synchronisation des interfaces
2.1.3 Synchronisation par lots basée sur l'horodatage (DXETL)
2.1.4 Synchronisation des fichiers (Flume)
2.1.5 Accès à la file d'attente des messages (Kafka)
2.2 Données stockage
2.2.1 Stockage d'objets (stockage d'objets Baidu)
2.2.2 Base de données de séries chronologiques (PowerTSDB)
2.2.3 Base de données de graphes (base de données de graphes Baidu)
2.2.4 Entrepôt de données MPP (GreenPlum) 2.2.5
Base de données NoSQL (HBase)
2.2.6 MySQL
2.2. 7PostgreSQL
2.2.8 Base de données distribuée
2.2.9MongoDB
2.3 Calcul de données
2.3.1 Recherche en texte intégral (Elasticsearch)
2.3.2 Calcul par lots (MapReduce, Spark, Hive)
2.3.3 Calcul de flux (SparkStreaming, Flink)
2.3.4 Calcul de fusion hétérogène (Presto, Spark)
2.3.5 Memory computing (Impala, Spark)
2.4 Tool service
2.4.1 Data model tool
2.4.2 Tag management tool
2.4.3 Self-service analysis (Tablau)
2.4.4 Statistiques de rapport (Report Center)
2.4.5 Développement de données (Data Factory)
2.4.6 Exploration de données
2.4.7 Moteur de service de données (Service Engine)