... | @@ -77,9 +77,9 @@ wenshu_spider |
... | @@ -77,9 +77,9 @@ wenshu_spider |
|
|
|
|
|
<!--redis host port db key 优先级说明-->
|
|
<!--redis host port db key 优先级说明-->
|
|
|
|
|
|
* redis host: redis://:utn@0818@bdp-mq-001.redis.rds.aliyuncs.com:6379/0
|
|
* redis host: redis://:utn@0818@bdp-mq-001.redis.rds.aliyuncs.com:6379/7
|
|
* redis port: 6379
|
|
* redis port: 6379
|
|
* redis db: 0
|
|
* redis db: 7
|
|
* redis key:
|
|
* redis key:
|
|
* wenshu_keys
|
|
* wenshu_keys
|
|
|
|
|
... | @@ -203,6 +203,7 @@ detail: 详情信息,其中每个字典为一条数据,只有这一种类型 |
... | @@ -203,6 +203,7 @@ detail: 详情信息,其中每个字典为一条数据,只有这一种类型 |
|
<!--可能与超级数据一致,可能不同的data_type的爬虫结果结构不同,超级数据是把所有data_type的结果组合在一起-->
|
|
<!--可能与超级数据一致,可能不同的data_type的爬虫结果结构不同,超级数据是把所有data_type的结果组合在一起-->
|
|
|
|
|
|
* 详情页爬虫,通过时间条件`"search_keys": "cprq"`爬取
|
|
* 详情页爬虫,通过时间条件`"search_keys": "cprq"`爬取
|
|
|
|
* 特别说明:html字段除了正常html格式外,另有纯文本格式,如:"不公开理由:以调解方式结案的";
|
|
|
|
|
|
```json
|
|
```json
|
|
{
|
|
{
|
... | @@ -384,4 +385,5 @@ public-company-spider-data-* |
... | @@ -384,4 +385,5 @@ public-company-spider-data-* |
|
* 数据库地址:10.8.6.74
|
|
* 数据库地址:10.8.6.74
|
|
* 数据库类型:hive
|
|
* 数据库类型:hive
|
|
* 库名:risk
|
|
* 库名:risk
|
|
* 表名:ods_lawsuit |
|
* 表名:ods_lawsuit
|
|
\ No newline at end of file |
|
|