数据同步

本文整理数据同步相关问题的处理方法,便于快速定位原因并完成修复。

问题1:数据同步动态分区报错

解决方案

点击作业配置,在资源配置中选择高级定义,并添加自定义的JSON参数配置 "hive.exec.dynamic.partition.mode": "nonstrict"

20240824181823

问题2:数据同步添加静态值报错

解决方案

注意这里要使用单引号

20240824181909

问题3:String or binary data would be truncated.

SQL Server执行异常

String or binary data would be truncated.

解决方案

检查数据库中字段的长度是否受限制,比如varchar(10)太短,需要改成varchar(2000)
alter table users
    alter column username varchar(2000) null
go