Kafka Connect

Ihr Hub für die Verknüpfung von Apache Kafka® mit all Ihren Systemen

Kafka Connect

Kafka Connect ist ein in Apache Kafka enthaltenes Framework, das Kafka mit anderen Systemen integriert. Der Zweck von Kafka Connect ist es, das Hinzufügen von neuen Systemen zu Ihren skalierbaren und sicheren Daten-Pipelines zu vereinfachen.

Um Daten zwischen Kafka und einem anderen System zu kopieren, müssen die Benutzer Kafka Connectors für diejenigen Systeme instanziieren, für die sie ein Verschieben bzw. Abrufen von Daten vornehmen möchten. Quellen-Connectors importieren Daten von einem anderen System (z. B. von einer relationalen Datenbank nach Kafka) und Senken-Connectoren exportieren Daten (z. B. die Inhalte eines Kafka-Topics in eine HDFS-Datei).

Nachfolgend finden Sie viele der nennenswerten und derzeit zur Verfügung stehenden Connectors.

Confluent Connectors

Confluent Connectors werden von Confluent entwickelt, getestet, dokumentiert und vollständig unterstützt.

  • CONNECTORTAGSENTWICKLER/SUPPORTDOWNLOAD
  • ActiveMQ (Source)AMQ, ActiveMQ, JMS, Message BrokerConfluentConfluent
  • Amazon S3 (Senke)S3ConfluentConfluent
  • Elasticsearch (Senke)search, Elastic, log, analyticsConfluentConfluent
  • HDFS (Senke)HDFS, Hadoop, HiveConfluentConfluent
  • IBM MQ (Source)IBM MQ, JMS, Message BrokerConfluentConfluent
  • JDBC (Quelle)JDBC, MySQLConfluentConfluent
  • JDBC (Senke)JDBC, MySQLConfluentConfluent
  • JMS (Source)JMS, Message BrokerConfluentConfluent
  • Replicator (source)Kafka, Cluster, ReplicationConfluentConfluent

Zertifizierte Connectors

Zertifizierte Connectors wurden von Anbietern unter Verwendung des Kafka-Connect-Frameworks entwickelt. Diese Connectors erfüllen die Kriterien von erprobten Verfahren für die Code-Entwicklung, die Schema-Registry-Integration sowie Sicherheit und Dokumentation.

  • CONNECTORTAGSENTWICKLER/SUPPORTDOWNLOAD
  • Attunity (Quelle)CDC, Oracle, MSSQL Server, MySQL, DB2, Postgres, Cloudera, MapR, Flat FilesAttunityAttunity
  • Azure IoTHub (Quelle)IoT, MessagingMicrosoftAzure
  • Couchbase (Quelle)Couchbase, NoSQLCouchbaseCouchbase
  • Couchbase (Senke)Couchbase, NoSQLCouchbaseCouchbase
  • Dbvisit Replicate (Quelle)CDC, OracleDbvisitDbvisit
  • HVRCDC, Oracle, MS SQL, DB2, PostgresHVRHVR
  • IBM Data Replication (Quelle)CDCIBMIBM
  • JustOne (Senke)PostgresJustOneJustOne
  • Kinetica (Quelle)GPU, RDBMSKineticaKinetica
  • Kinetica (Senke)GPU, RDBMSKineticaKinetica
  • Oracle GoldenGate CDC, OracleOracleOracle
  • SAP HANA (Senke)HANA, RDBMSSAPSAP
  • SAP HANA (Quelle)HANA, RDBMSSAPSAP
  • Striim (Quelle)CDC, MS SQLServer, Oracle, MySQLStriimStriim
  • Syncsort DMX (Quelle)DB2, IMS, VSAM, CICSSyncsortSyncsort
  • Syncsort DMX (Senke)DB2, IMS, VSAM, CICSSyncsortSyncsort
  • Vertica (Quelle)VerticaHP EnterpriseHP Enterprise
  • Vertica (Senke)VerticaHP EnterpriseHP Enterprise
  • VoltDB (Senke)VoltDB, NewSQLVoltDBVoltDB
  • Xenon (Sink)XenonLevyxXenon

Weitere Connectors verfügbar

Weitere Connectors, die unter Verwendung des Kafka Connect Frameworks entwickelt wurden: