Airbyte – Open-Source-ELT

 (airbyte.io)
7 Punkte von xguru 2021-02-01 | 1 Kommentare | Auf WhatsApp teilen

  • Open-Source-Alternative zu Fivetran/Stitch

  • Kann von einem einzelnen Node an selbst gehostet und genutzt werden

  • Integration mit K8s und Airflow

  • Update-Planung, manuelle vollständige Resynchronisierung, Echtzeit-Monitoring

  • Startet mit 41 Sources und 6 Destinations und fügt kontinuierlich weitere Connectoren hinzu (gemeinsam mit der Open-Source-Community)

→ Destination: Redshift, Snowflake, BigQuery, Postgres, lokales JSON/CSV

→ Source: Google Analytics, Facebook Ads, Google Ads, Salesforce, SQL Server/MySQL/Postgres, Jira, Intercom, Github, Looker, Mailchimp, Mixpanel, Marketo, Sendgrid, Slack, Shopify, Stripe, Twilio, Zendesk, Zoom..

  • Wie die Bezeichnung als EL(T)-Tool auf der Website andeutet, liegt die Stärke bei Extract und Load,

Transform wird zwar auch über eigene SQL-/Java-Transformer unterstützt, offenbar lässt sich aber auch dbt verwenden.

Verwandte Beiträge

1 Kommentare

 
xguru 2021-02-01

Für Fivetran, Stitch und dbt siehe das GeekNews-YouTube-Video „Die aktuelle Dateninfrastruktur verstehen“.