Q:DataHub同步延迟很大,不符合5min/64m归档一次
- 检查数据同步状态,若为EXECUTING代表同步任务正常
- 可能原因:数据同步点位设置有误,页面创建默认从当前时间创建
- 如何解决:创建同步时指定时间为数据最早写入时间
Q:Datahub归档状态显示为hang?
点击问号按钮查看详情,会显示hang原因,进行更正
DataHub归档状态为error
解决办法:查看失败原因,尝试重启归档
Q:Odps partition not in partition config. partition:ts traceId: 20200331160333a838dc0bcc14e600]
- MaxCompute中对应的分区信息不在DataHub的分区信息中。这个多见于使用SystemTime或者EventTime模式同步的方式,这种方式,需要MaxCompute中固定存在三级分区分别是ds/hh/mm,分区类型为String,如果匹配不上,就会报这个错误。
maxcompute新加一个字段流程
- 首先Topic schema需要使用appendField新加字段,然后connector也需要新加字段,最后调用connector reload方法进行重启,具体所用到的方法见https://help.aliyun.com/document_detail/158841.html?spm=a2c4g.11186623.6.589.6f621a12k5u2ia#h2-connector-10
数据同步脏数据会自动清理的吗
- 脏数据指的是在datahub里,写不到下游的数据【下游产品无法接收】,同步时候会自动跳过
datahub里面在配置数据同步的页面的时候,出现了字段信息太多的问题,导致后面的页面无法上翻
- 全屏即可下翻