Взаимодействие с Kafka
Протокол Kafka - один из доступных форматов для запросов к данным в TDG. Формат позволяет как читать данные с сервера (брокера), а затем обрабатывать их, так и отправлять данные во внешние системы. В терминологии Kafka TDG при работе с запросами можно настроить как в качестве consumer (получение объектов), так и в качестве producer (отправка объектов). Для взаимодействия с шиной данных Apache Kafka в TDG используется коннектор типа Kafka.
Документация охватывает следующие темы, связанные с Kafka:
- Запросы к данным через Kafka-коннектор - пример настройки и работы с коннектором Kafka;
- Cправочник по настройке коннектора
- полное описание параметров конфигурации для коннектора Kafka;
- Метрики - метрики для мониторинга работы коннектора Kafka;
- Решение проблем - часто возникающие ошибки при работе с Kafka и способы их устранения.