Back-End-Komponenten nach der gemeinsamen Nutzung von Komponenten – Open-Source-ELT-Plattform airbyte

Hintergrund

Vor kurzem haben wir verschiedene gemeinsame Komponenten und Tools auf Front-End-, Back-End- und Systemseite untersucht und einige der gemeinsamen Komponenten neu organisiert, um ein standardisiertes Komponententhema zu bilden, das später einige häufig verwendete Komponenten in verschiedenen Sprachen enthalten wird . Begrüßen Sie alle, weiterhin darauf zu achten.

Grundlegende Informationen zu Komponenten

Komponente: airbyte
Open-Source-Vereinbarung: Lizenz anzeigen
Offizielle Website: airbyte.com

Inhalt

In diesem Abschnitt teilen wir airbyte, eine Open-Source-ELT-Plattform .

Die Mission von Airbyte ist es, Datenintegrations-Pipelines zu einer Ware zu machen.

Ein wartungsfreier Steckverbinder, den Sie in wenigen Minuten verwenden können. Validieren Sie einfach Ihre Quellen und Repositories und erhalten Sie den richtigen Konnektor für Ihre Schema- und API-Änderungen.

Das Erstellen neuer Konnektoren wird trivial. Durch die Bereitstellung von Planung und Orchestrierung machen wir es sehr einfach, die neuen Konnektoren, die Sie benötigen, in der Sprache Ihrer Wahl hinzuzufügen.

Entwickelt, um den langen Schwanz und die Anforderungen von Steckverbindern abzudecken. Profitieren Sie von den bewährten Konnektoren der Community und passen Sie diese an Ihre spezifischen Bedürfnisse an.

Ihre Daten bleiben in Ihrer Cloud. Übernehmen Sie die volle Kontrolle über Ihre Daten und die Kosten der Datenübertragung.

Da Airbyte selbst gehostet wird, sind keine Sicherheits-Compliance-Prozesse erforderlich.

Keine volumenbasierten Preise mehr, wie sie Cloud-basierte Lösungen bieten.

Besonderheit

Auf Erweiterbarkeit ausgelegt: Passen Sie vorhandene Konnektoren an oder erstellen Sie ganz einfach neue Konnektoren für Ihre Anforderungen.

Optionales Normalisierungsschema: vollständig anpassbar, beginnend mit Rohdaten oder einigen Vorschlägen für normalisierte Daten.

Complete Scheduler: Automatisieren Sie Ihre Replikation mit der von Ihnen benötigten Häufigkeit.

Echtzeit-Überwachung: Wir protokollieren alle Fehler im Detail, damit Sie sie verstehen können.

Inkrementelle Updates: Die automatische Replikation basiert auf inkrementellen Updates, um Ihre Datenübertragungskosten zu senken.

Manuelle vollständige Aktualisierung: Manchmal müssen Sie alle Ihre Daten neu synchronisieren, um von vorne zu beginnen.

Debugging-Autonomie: Ändern und debuggen Sie Pipelines nach Bedarf, ohne zu warten.

Die spezifische Verwendung ist wie folgt:
1. Docker-Installation

git clone https://github.com/airbytehq/airbyte.git
cd airbyte
docker-compose up

Besuchen Sie jetzt http://localhost:8000

Informationen zur spezifischen Verwendung finden Sie in der README

Dieser Artikel erklärt:

88x31.png

Creative Commons License
Dieses Werk ist von CN Hua Shao unter der Creative Commons Attribution-Noncommercial 4.0 International License lizenziert .