... | ... | @@ -38,7 +38,7 @@ https://wenshu.court.gov.cn/website/parse/rest.q4w |
|
|
<!--无需更新?每天全量更新?逐条轮询更新?多久更新完一轮?或其他-->
|
|
|
|
|
|
```buildoutcfg
|
|
|
每个月一次性取一年的数据量,按发布日期的逆序排序,取存量发布日期的最后日期以后的数据进行更新
|
|
|
|
|
|
```
|
|
|
|
|
|
### 增量采集策略
|
... | ... | @@ -46,7 +46,8 @@ https://wenshu.court.gov.cn/website/parse/rest.q4w |
|
|
<!--新增数据怎么来?无需单独采集新增数据?-->
|
|
|
|
|
|
```buildoutcfg
|
|
|
当前:接数据库已有数据的最后的时间开始,截止到当前的时间进行增量采集
|
|
|
周新增:每周三,周日,获取前7天的数据
|
|
|
月新增:每月28号,获取前29天数据
|
|
|
```
|
|
|
|
|
|
---
|
... | ... | |