Saltar al contingut

Connectar una font de dades

OpenDome ingesta fonts estructurades a través de taps Singer (Meltano). La distribució OSS inclou els taps estàndard; els connectors ERP premium són un add-on Enterprise.

Taps integrats Apache-2.0

Section titled “Taps integrats ”
  • tap-postgres
  • tap-mysql
  • tap-salesforce
  • Taps custom — funciona qualsevol tap que segueixi l’spec de Singer.

Enterprise Els connectors premium (SAP, Workday, ERP bancari) s’inclouen al tier comercial.

  1. Proporciona credencials. Les credencials es reparteixen entre un Secret (sensible) i un ConfigMap (no sensible):

    PUT /v1/tenants/{t}/connectors/{c}/credentials
  2. Selecciona streams. Tria quines taules/objectes replicar:

    PUT /v1/tenants/{t}/connectors/{c}/streams
  3. Estableix el mètode de replicació per stream (full table, incremental basat en clau, CDC basat en log):

    PUT /v1/tenants/{t}/connectors/{c}/replication
  4. Llança una sincronització:

    POST /v1/tenants/{t}/connectors/{c}/runs

Les dades aterren al lakehouse de la cel·la (Iceberg, a iceberg.raw.*), a punt per ser curades i modelades en OSL. L’orquestració corre dins de la cel·la amb Dagster — sense callbacks al control-plane en mode standalone.

La replicació basada en CDC necessita els privilegis i la configuració correctes a la font (p. ex. replicació lògica a Postgres). Comprova els requisits de la teva font abans de seleccionar un mètode basat en log.