Composants back-end après partage de composants - plate-forme ELT open source airbyte

arrière-plan

Récemment, nous explorons divers composants et outils communs sur le front-end, le back-end et le système, et réorganisé certains des composants communs pour former un sujet de composant standardisé, qui inclura plus tard certains composants couramment utilisés dans différentes langues. . Bienvenue à tous pour continuer à faire attention.

Informations de base sur les composants

Composant : airbyte
Accord open source : Afficher la licence
Site officiel : airbyte.com

contenu

Dans cette section, nous partageons airbyte, une plateforme ELT open source .

La mission d'Airbyte est de faire des pipelines d'intégration de données une marchandise.

Un connecteur sans entretien que vous pouvez utiliser en quelques minutes. Validez simplement vos sources et référentiels et obtenez le bon connecteur pour vos modifications de schéma et d'API.

Construire de nouveaux connecteurs devient trivial. En assurant la planification et l'orchestration, nous facilitons l'ajout des nouveaux connecteurs dont vous avez besoin dans la langue de votre choix.

Conçu pour couvrir la longue traîne et les besoins des connecteurs. Bénéficiez des connecteurs éprouvés de la communauté et adaptez-les à vos besoins spécifiques.

Vos données restent dans votre cloud. Prenez le contrôle total de vos données et du coût du transfert de données.

Étant donné qu'Airbyte est auto-hébergé, aucun processus de conformité de sécurité n'est nécessaire.

Plus de tarification basée sur le volume comme l'offrent les solutions basées sur le cloud.

fonctionnalité

Construit pour l'extensibilité : Adaptez les connecteurs existants ou construisez-en facilement de nouveaux selon vos besoins.

Schéma de normalisation facultatif : entièrement personnalisable, en commençant par des données brutes ou quelques suggestions de données normalisées.

Planificateur complet : automatisez votre réplication à la fréquence dont vous avez besoin.

Surveillance en temps réel : nous enregistrons toutes les erreurs en détail pour vous aider à comprendre.

Mises à jour incrémentielles : la réplication automatique est basée sur des mises à jour incrémentielles pour réduire vos coûts de transfert de données.

Actualisation complète manuelle : Parfois, vous devez resynchroniser toutes vos données pour recommencer.

Autonomie de débogage : modifiez et déboguez les pipelines selon vos besoins sans attendre.

L'utilisation spécifique est la suivante :
1. installation de docker

git clone https://github.com/airbytehq/airbyte.git
cd airbyte
docker-compose up

Visitez maintenant http://localhost:8000

Pour une utilisation spécifique, veuillez vous référer au README

Cet article déclare :

88x31.png

Creative Commons License
Ce travail est autorisé par CN Hua Shao sous la licence internationale Creative Commons Attribution-Noncommercial 4.0.