| ... | ... | @@ -148,6 +148,8 @@ failures_number(爬取失败次数:0--max_failure_number)等字段 |
|
|
|
| shixin | shixin业务表,记录所有业务字段 | bdp-rds-003.mysql.rds.aliyuncs.com | utn_risk.risk_shixin
|
|
|
|
| zhongben | zhongben业务表,记录所有业务字段 | bdp-rds-001.mysql.rds.aliyuncs.com | utn_ng_risk.risk_zhongben
|
|
|
|
| xianxiao | xianxiao业务表,记录所有业务字段 | bdp-rds-001.mysql.rds.aliyuncs.com | utn_ng_risk.risk_xianxiao
|
|
|
|
|
|
|
|
|
|
|
|
##钉钉预警
|
|
|
|
**找新预警:以zhongben找新为例，其余三种数据预警逻辑一致，每天找新成功的爬虫日志少于10条时预警**
|
|
|
|
```angular2html
|
| ... | ... | @@ -196,5 +198,4 @@ failures_number(爬取失败次数:0--max_failure_number)等字段 |
|
|
|
2.代码生成新的执行id进行爬虫任务发布
|
|
|
|
```
|
|
|
|
|
|
|
|
<!--来源于kafka还是归集的文件、topic的group？-->
|
|
|
|
|
|
|
|
<!--来源于kafka还是归集的文件、topic的group？--> |
|
|
\ No newline at end of file |
