Confluent Parallel Consumer Adapter für
SAP Integration Suite
10–500x höherer Durchsatz als der SAP Standard-Adapter. Parallelisierung auf Record-Key-Level, Avro, Protocol Buffers, Schema Registry und automatisiertes Fehlerhandling – für maximale Performance in SAP Integration Suite und Edge Integration Cell.
Integration
Iflow / EIC
Parallel Consumer
SAP CPI
Apache Kafka
Cloud · On-Premise · EIC
High-Throughput Kafka-Integration –
10–500x mehr Durchsatz als der SAP Standard
Der KaTe Confluent Parallel Consumer Adapter enthält alle Funktionen des Kafka Adapters und ergänzt diese mit parallelisierbaren Verarbeitungsfunktionen für maximalen Durchsatz.
- Topics, Partitionen, Ack-Modus konfigurierbar
- Consumer-Commits anpassbar
- Wildcards und durable Subscriptions
- Verarbeitung vom Anfang, Ende oder beliebiger Position
- 10–500x höherer Durchsatz
- Parallelisierung auf Record-Key-Level
- Konfigurierbarer Threadpool
- Batchverarbeitung (n Records pro Iflow)
- PLAIN, PLAIN_SASL, SASL_SSL
- SASL-Plain / SASL-SCRAM
- OAuth2 Authentifizierung
- Client Certificate Authentication
- Filterung nach Headern, Keys und Dateninhalten
- Deduplizierung via Offset oder Record Header
- Frei definierbare Group Names
- Unordered und ordered Szenarien
- Fehlerweiterleitung an Error Topic / Dead Letter Topic
- Deserialisierungsfehler automatisch behandelbar
- Non-blocking und asynchrone Verarbeitung
- Feingranulare Fehlerstrategien konfigurierbar
- Avro und Protocol Buffers Unterstützung
- Schema Registry Integration
- Integriertes Schema-Generierungstool
- JSON zu XML Transformation
Verarbeitungsmodelle im Vergleich –
Standard vs. Parallel Consumer
Der KaTe Confluent Parallel Consumer Adapter bietet drei Verarbeitungsmodelle: Partition-Based Processing (SAP Standard), Key-Ordered Processing und Unordered Processing – für maximale Flexibilität bei unterschiedlichen Anforderungen.
Warum der Confluent Parallel Consumer Adapter
die richtige Wahl ist
High-Throughput Kafka-Integration mit SAP Integration Suite – ohne Erhöhung des Partition-Counts, mit vollständiger Fehlerbehandlung und Avro/Protobuf-Unterstützung.
KaTe vs. SAP Standard
Zusammenfassung
| Feature | SAP Standard Kafka Adapter | Confluent Parallel Consumer Adapter |
|---|---|---|
| Parallelism model | Limitiert durch Anzahl Kafka partitions | Konfigurierbarer Threadpool ermöglicht hohe Parallelität mit einem Single consumer |
| Ordering guarantees | Ordering guaranteed nur pro Partition | Ordering garantiert auf Message key level (optional), mit paralleler Ausführung über verschiedene Keys |
| Throughput scaling | Benötigt Erhöhung des Partition counts zur Skalierung | Skaliert ohne Erhöhung der Partitions bis zu 10–500× höherer Durchsatz möglich. |
| Iflow execution | Blockierte Aufrufe stoppen das Nachrichtenverarbeitung teilweise oder ganz | Non-blocking und asynchronous processing ohne das die Nachrichtenverarbeitung blockiert wird durch Fehler oder einzelne „Slow" Records. |
| Automated Error handling | Nicht unterstützt, manche Fehler sind nicht direkt sichtbar (deserialization) | Errorhandling für Deserialization / Data transformation oder iflow execution error kann automatisch eingestellt werden. Fehler werden dann gelogt (als Fehlermessage) und ignoriert oder an eine error topic/deadletter topic geforwardet |
| Offset /Group Name control | Nicht unterstützt | Jegliche Art des Starts möglich (Start, Ende) des Offsets oder Reprozessierung von beliebigen Offsets. Group Names frei definierbar |
| Message acknowledgment | Offset commits auf partition level | Feingranulare, message-level acknowledgment und processing control |
| Advanced Monitoring | Nicht unterstützt | Reiche monitoring user experience (consumer lag, 1:1 Erkennen welches Kafka record welche Iflow Ausführung erzeugt hat auf einen Blick und out of the box) |
| Filtering | Nicht unterstützt, nur manuel in jedem einzelnen iflow implementierbar | Filtering mit Headern oder data contents um unnötige Messagelast zu vermeiden |
| Avro/Protobuf and JSON with schema registry | Nicht unterstützt | Unterstützt, inklusive der Data transformation und Schema generation zu XML |
Einfach starten – flexibel skalieren
Kontaktieren Sie uns – innerhalb von 48 Stunden erhalten Sie Zugang zum Adapter für Ihre Testumgebung.
Die Installation in Ihrer SAP Integration Suite ist in wenigen Schritten erledigt, da unser Team Sie beim Onboarding begleitet.
Erste produktive Szenarien laufen schnell an, sodass Sie nach Bedarf skalieren können – ohne Vorausinvestitionen.
Unterstützte Plattformen & Kafka-Distributionen
Ob Confluent Cloud, Apache Kafka oder Azure Event Hubs – der KaTe Confluent Parallel Consumer Adapter ist kompatibel mit allen gängigen Kafka-Distributionen und SAP-Plattformen.
KaTe Launchpad – mehr Kontrolle beim Aufbau und Betrieb
Das KaTe Launchpad erweitert den Confluent Parallel Consumer Adapter um eine integrierte Toolbox für Entwickler und Betriebsteams, sodass alle wichtigen Funktionen direkt aus der SAP Integration Suite heraus nutzbar sind.
Generator
Kafka-Konfigurationen, Topic-Strukturen, Schema-Definitionen und SAP Integration Suite Iflow-Channel-Definitionen werden automatisch generiert, sodass der Konfigurationsaufwand für neue Kafka-Integrationsszenarien erheblich sinkt und die Inbetriebnahme beschleunigt wird.
Service List Display & Tester
Der Service List Display bietet eine Übersicht aller konfigurierten Kafka-Topics, Consumer-Gruppen, Broker-Verbindungen und Schema-Registry-Einträge, während der integrierte Tester das Senden und Empfangen von Kafka-Records direkt aus der SAP Integration Suite ermöglicht.
SAP Technologie- und Migrationsberatung –
Zukunftssichere Integration
Die KaTe GmbH ist Ihr kompetenter Partner für SAP Technologie- und Migrationsprojekte. Unser Fokus liegt auf der sicheren und reibungslosen Transformation von bestehenden SAP PO-Landschaften hin zur modernen SAP Integration Suite.
- Migration von SAP PO zu SAP Integration Suite – inklusive Analyse, Architekturdesign und technischer Umsetzung
- Implementierung und Optimierung der SAP Edge Integration Cell – für eine flexible und sichere Hybridintegration
- SAP BTP Beratung – Nutzung moderner Services und Tools für Innovation und Prozessautomatisierung
- Technologiebasierte Strategieberatung – von Cloud-Integration bis API-Management
Wir analysieren Ihre bestehenden Kafka-Interfaces in SAP PO und entwickeln einen strukturierten Migrationsplan für die SAP Integration Suite – damit Ihre Kafka-Integrationen ohne Betriebsunterbrechung migriert werden.
Mehr erfahrenTesten Sie unsere SAP PO Adapter für Kafka, MQTT, AMQP, AWS und weitere – 30 Tage kostenlos.
Alle SAP PO Adapter ansehenIntegraMon vereint alle SAP CPI-Tenants und Edge Integration Cells in einem einzigen Dashboard – mit proaktivem Alerting, KI-Unterstützung und automatisierten KPI-Reports.
IntegraMon entdeckenHäufige Fragen
Antworten auf die wichtigsten Fragen zum KaTe Confluent Parallel Consumer Adapter für SAP Integration Suite.
Was ist der Confluent Parallel Consumer Adapter für die SAP Integration Suite?
Als spezialisierte High-Throughput-Erweiterung des KaTe Kafka Adapters optimiert der KaTe Confluent Parallel Consumer Adapter die Verarbeitung auf SAP Integration Suite oder Edge Integration Cell (EIC). Er enthält alle Funktionalitäten des KaTe Kafka Adapters und ergänzt diese mit parallelisierbaren Verarbeitungsfunktionen für hohen Durchsatz – bis zu 10–500x mehr als der SAP Standard-Adapter.
Welche Kernfunktionen bietet der Confluent Parallel Consumer Adapter?
Mit dem Adapter lassen sich folgende Kernfunktionen nutzen:
- Parallelisierung auf Record-Key-Level (statt Partition-Level)
- Batchverarbeitung (n Records als einzelne Iflow-Nachricht)
- Filterung nach Headern, Keys und Dateninhalten
- Deduplizierung via Offset oder Record Header
- Automatisiertes Fehlerhandling (Error Topic / Dead Letter Topic)
- Avro/Protocol Buffers mit Schema Registry und automatischer Schema-Generierung
Welche Sicherheitsstandards werden unterstützt?
Weil Enterprise-Umgebungen höchste Sicherheitsanforderungen stellen, unterstützt der Adapter alle gängigen Kafka Security Standards: PLAIN, PLAIN_SASL, SASL_SSL, SASL-Plain/SASL-SCRAM, OAuth2 sowie Client Certificate Authentication für Broker- und ServiceRegistry-Verbindungen.
Wie unterstützt der Adapter hohe Performance und Fehlerbehandlung?
Da die Parallelisierung auf Record-Key-Level erfolgt, ermöglicht der Adapter 10–500x höheren Durchsatz für Single und Batched Records ohne Verlust der funktionalen Reihenfolge zusammenhängender Records. Fehler bei Deserialisierung, Datentransformation oder nachgelagerter Verarbeitung können automatisch an ein Fehlerziel weitergeleitet oder dokumentiert und ignoriert werden – Non-blocking und asynchron.
Worin unterscheidet sich der Adapter von Standardadaptern der SAP Cloud Integration?
Während der SAP Standard-Adapter auf Partition-Level parallelisiert, bietet der KaTe Confluent Parallel Consumer Adapter gegenüber dem SAP Standard:
- 10–500x höherer Durchsatz ohne Erhöhung des Partition-Counts
- Parallelisierung ohne Blockierung durch einzelne „Slow" Records
- Automatisiertes Fehlerhandling auch für Deserialisierungsfehler
- Avro/Protobuf-Unterstützung mit Schema Registry
- Batchverarbeitung in einer Iflow-Ausführung
- Filterung und Deduplizierung bei hohem Datendurchsatz
- Frei definierbare Group Names und beliebige Stream-Positionen
Auf welchen SAP-Plattformen läuft der Confluent Parallel Consumer Adapter?
Der Adapter ist kompatibel mit SAP Cloud Integration (CPI) und SAP Edge Integration Cell (EIC) – sodass sowohl reine Cloud-Szenarien als auch hybride On-Premise/Cloud-Umgebungen abgedeckt werden. Darüber hinaus ist er im SAP App Center gelistet und damit offiziell als SAP-Partner-Lösung verfügbar.
Welche Kafka-Distributionen werden unterstützt?
Ob Confluent Cloud, Apache Kafka (alle Versionen), Azure Event Hubs mit Kafka-Protokoll oder AWS MSK – der Adapter ist kompatibel mit allen gängigen Kafka-Distributionen, da er das standardisierte Kafka-Protokoll verwendet. Auch Confluent Platform On-Premise mit Schema Registry wird vollständig unterstützt.
Wie funktioniert die Avro- und Protocol-Buffers-Unterstützung?
Der Adapter unterstützt Avro und Protocol Buffers nativ, sodass binäre Datenformate direkt in XML übersetzt werden – und umgekehrt. Dank der integrierten Schema Registry Integration und dem mitgelieferten Schema-Generierungstool entfällt die manuelle Schema-Pflege, während die JSON-zu-XML-Transformation ebenfalls out of the box verfügbar ist.
Wie läuft die Installation und Inbetriebnahme ab?
Nach dem Start des 30-Tage-Trials erhalten Sie innerhalb von 48 Stunden Zugang zum Adapter. Die Installation in Ihrer SAP Integration Suite erfolgt in wenigen Schritten, da das KaTe-Team Sie beim Onboarding begleitet. Erste produktive Szenarien laufen typischerweise innerhalb weniger Tage an – ohne Vorausinvestitionen oder langwierige Projektphasen.
Welche Lizenzmodelle gibt es für den Confluent Parallel Consumer Adapter?
Der KaTe Confluent Parallel Consumer Adapter ist als flexible Lizenz erhältlich, die sich an Ihrem tatsächlichen Nutzungsumfang orientiert. Nach dem kostenlosen 30-Tage-Trial können Sie zwischen verschiedenen Lizenzoptionen wählen – sprechen Sie uns für ein individuelles Angebot an, damit wir gemeinsam das passende Modell für Ihre Anforderungen finden.
Bereit für High-Throughput Kafka-Integration?
Kontaktieren Sie uns für ein kostenloses 30-Tage-Trial oder ein individuelles Beratungsgespräch. Wir richten Ihren Testlauf innerhalb von 48 Stunden ein.