创建Kafka数据源用于实现Dataphin能够读取Kafka的业务数据,及能够向Kafka写入数据。在引入Kafka的业务数据至Dataphin和将Dataphin的数据写入至Kafka的场景中,您需要先创建Kafka数据源。本文为您介绍如何创建Kafka数据源。
背景信息
Kafka是一种消息队列,用于处理实时数据。Dataphin支持对接Kafka09、Kafka010、Kafka011。如果您使用的是Kafka,在对接Dataphin进行数据开发或将Dataphin的数据导出至Kafka,您需要先完成Kafka数据源的创建。Kafka不同版本的功能介绍,请参见官方文档:
Dataphin支持通过公网连接Kafka。为避免因数据源白名单限制导致数据对接访问失败,您需将Dataphin公网环境下的IP地址段添加到数据源的白名单中。
使用限制
Dataphin仅支持超级管理员和项目管理员角色创建数据源。
如何添加项目成员并授予项目管理员角色,请参见添加项目成员。
步骤一:添加Dataphin IP地址至Kafka白名单
您需要将公网环境下的Dataphin IP地址添加至至Kafka访问白名单中。
地域 | IP地址 |
---|---|
华东2(上海) | 47.102.151.182 |
华南1(深圳) | 119.23.173.65 |
华北2(北京) | 123.56.104.202 |
华东1(杭州) | 47.96.75.100 |