阿里云首页 相关技术圈

Dataphin将csv文件同步到hive库,目标hive库字段值为NULL

产品名称 

Dataphin

产品模块 

数据集成

概述

通过该问题的分析处理过程,提供以下场景问题处理排查思路和注意点:管道任务数据集成到hive之后,hive库查询集成数据为空

问题描述

将本地csv文件数据集成到hive库中,任务运行成功,但是查询hive库发现集成的数据为空

hive输出组件配置截图:

任务运行日志没有报错,如下图:

hive库中查询集成的数据的字段都为空值NULL:

问题原因

客户创建hive表时没有指定分隔符,管道中分割符填写不对导致。

解决方案

该问题是由于选择的hive目标表创建时没有指定分隔符,需要在管道的输出配置中指定分割符为\u0001。hive中textfile格式建表不指定分隔符,默认都是\u0001,读写都要指定。

更多信息

 

相关文档

 

 

首页 Dataphin将csv文件同步到hive库,目标hive库字段值为NULL