京东云流数据总线数据归档

数据归档

接入到流总线的数据最长可以保存7天,如果你需要将数据永久保存下来,需要开启归档功能,并把数据持久化到你想保存的地方

1.点击所创建的主题名称

2.进入该主题的详细页面后,点击左侧的“归档”,并开启右侧的开启按钮

3.配置归档信息

归档触发条件:数据进行归档的触发条件,可以已时间或者数据量大小为条件进行归档的触发条件

归档目标设置:可以选择数据归档到的目的地.例如数据计算服务,云存储.

如果选择了数据计算服务,后面需要选择“数据库”“数据表”.

消息识别模式:
-分隔符识别schema:你可以自己制定数据的分隔符,以便程序对消息进行解析处理
-JSON识别schema:系统将自动识别json文件,并进行解析

消息样式:

输入消息样例后,系统将根据你输入的分隔符识别schema,在字段对照中,你需要对解析后的归档字段和目标端库表中的字段进行对应关系映射.

配置好映射关系后,点击确认完成归档设置