... | @@ -400,26 +400,31 @@ index => "gravel-spider-data-%{log_date}" |
... | @@ -400,26 +400,31 @@ index => "gravel-spider-data-%{log_date}" |
|
# **数据清洗**
|
|
# **数据清洗**
|
|
|
|
|
|
## 责任人
|
|
## 责任人
|
|
|
|
李子健
|
|
|
|
|
|
## 代码地址
|
|
## 代码地址
|
|
|
|
project-collie-app/app_juzi_data/udms/juzi_rongzi_company
|
|
|
|
project-collie-app/app_juzi_data/udms/juzi_rongzi_company_members
|
|
|
|
project-collie-app/app_juzi_data/udms/juzi_rongzi_company_org
|
|
|
|
project-collie-app/app_juzi_data/udms/juzi_rongzi_company_product
|
|
|
|
|
|
## 部署地址
|
|
## 部署地址
|
|
<!--机器及线上代码地址-->
|
|
<!--机器及线上代码地址-->
|
|
|
|
10.8.6.228
|
|
|
|
/home/collie/product/app_juzi_data
|
|
|
|
|
|
## 部署方法及说明
|
|
## 部署方法及说明
|
|
<!--运行方法及运行命令、supervisor配置、supervisor的program等-->
|
|
<!--运行方法及运行命令、supervisor配置、supervisor的program等-->
|
|
- [ ] crontab + data_pump
|
|
- [ ] crontab + data_pump
|
|
- [ ] supervisor + data_pump
|
|
- [X] supervisor + data_pump
|
|
- [ ] supervisor + consumer
|
|
- [ ] supervisor + consumer
|
|
|
|
|
|
## 数据接收来源
|
|
## 数据接收来源
|
|
<!--来源于kafka还是归集的文件、topic的group?-->
|
|
<!--来源于kafka还是归集的文件、topic的group?-->
|
|
|
|
归集的文件
|
|
|
|
|
|
## 数据存储表地址
|
|
## 数据存储表地址
|
|
|
|
|
|
* 数据库地址:
|
|
* 数据库地址:bdp-rds-005.mysql.rds.aliyuncs.com
|
|
* 表名: |
|
* 库名:utn_ng_qmp_info
|
|
\ No newline at end of file |
|
* 表名:juzi_rongzi_company、juzi_rongzi_company_members、juzi_rongzi_company_org、juzi_rongzi_company_product |
|
|
|
\ No newline at end of file |