抽取管理
在项目中心的抽取管理模块,可以看到整个项目目前已有的所有抽取任务
选择全部连接时弹窗显示数据连接,可选择某一连接,查看相关抽取记录
1、发送日报:可推送抽取记录,选择发送日报,添加发送对象,发送时间(发送内容的范围为:前一天0点~当天0点)0至24内,将时间内的抽取记录发送给设置的接收人
2、立即抽取:选择下方抽取记录,点击立即抽取,将对选中的数据连接进行抽取
3、禁用:选择下方抽取记录,可对选中的抽取任务禁用,此条抽取任务【状态】显示【禁用】
4、启用:选择禁用的抽取任务,点击启用,可继续进行抽取
5、设置禁用规则:开启后,系统会定期将满足条件的抽取任务禁用
规则:连续抽取失败n次、连续七天无报告或大屏依赖的抽取任务、抽取数量连续n次超过x万
满足规则的抽取任务自动被禁用,同时可选择确定后立即执行
抽取记录显示表名、数据连接、类型、状态、调度信息、占用空间、成功率、创建人、优先级、操作
1、点击【表名】后可查看表内详细信息
2、数据连接显示该抽取任务的数据连接类型及名称
3、类型:显示【全量】或【增量】抽取
4、状态:显示【加载中】【成功】【失败】【禁用】四种状态,可查看抽取任务的状态
5、调度任务:【最近抽取时间】【下次抽取时间】【任务频率】(排序(按抽取时间排序)、筛选(按抽取频率抽取))
6、占用空间:占用MPP资源的多少
7、成功率:抽取任务中,抽取成功占比
8、创建人:显示此次抽取任务的创建人
9、优先级:【1-最高】【2-次高】【3-中等】【4-次低】【5-最低】【无】
在进行多个抽取任务时,将抽取任务划分优先级进行抽取。同时在【优先级】旁可进行筛选,查看不同优先级的记录
10、操作:
【抽取设置】
抽取方式:全量覆盖抽取、全量追加抽取、增量抽取、增量抽取(滚动覆盖) 抽取方式详见:数据抽取
高级设置:
①失败自动重跑:重跑次数n次、重跑间隔n分钟
②仅当检测以下表数据更新后才抽取:以下数据源的数据发生变更时,表信息会自动同步到有数服务器,有数将会自动完成抽取任务,不需要用户手动触发。勾选后,需要用户主动调用有数接口告知该表数据已经更新,否则不会触发抽取,并且定时任务设置将不再生效
③添加定时任务:可选择任务的频率、日期、时间、开始/终止日期进行抽取,同时可勾选暂停定时任务
【更多】
历史记录、查看血缘、变更创建人、查看依赖项、删除、告警设置、任务ID