DataX最新版本v202309,新增HdfsReader支持parquet文件格式的问题
Author: 834425560Created Dec 1, 2023Updated Aug 29, 2026
hive版本 : hive3 hdfs版本 : 3.1.5 场景 : 使用hive建表语句在建表时指定文件存储格式为parquet,压缩格式为snappy; ds调度上新建任务,datax节点下配置文件中设置参数 "fileType": "PARQUET",运行任务提示以下错误,查阅datax的使用文档也并未找到新版本的使用说明以及报错处理 报错内容 :文件类型与用户配置的fileType类型不一致,请确认您配置的目录下面所有文件的类型均为[PARQUET] 有没有遇到相同问题的大佬,求助!
Source: alibaba/DataX