data_stream/yhc_certificate.md

+## 代码地址
+    udm: http://tech.pingansec.com/granite/project-collie-app/-/tree/master/app_certificate/udms/yhc_certificate
+    data_pump: http://tech.pingansec.com/granite/project-collie-app/-/blob/master/app_certificate/data_pump/yhc_certificate.yml
+
+## 部署地址
+  <!--机器及线上代码地址-->
+    host: 10.8.6.84 
+    path: /home/collie/product/app_certificate
+
+## 部署方法及说明
+  <!--运行方法及运行命令、supervisor配置、supervisor的program等-->
+- [x] crontab + data_pump
+- [ ] supervisor + data_pump
+- [ ] supervisor + consumer
+
+## 数据接收来源
+  <!--来源于kafka还是归集的文件、topic的group？-->
+    萤火虫T+7推送文件
+    文件类型：json文件，文件名中包含certificate
+    文件路径: /data3_227/qxb_data/json
+
+## 数据存储地址
+    
+    内部业务表：
+    * 数据库地址：bdp-rds-003.mysql.rds.aliyuncs.com
+    * 数据库名：utn_ng_biz_info
+    * 表名：
+        (1) tb_certificate
+        (2) tb_certificate_detail
+
+    对外输出表：
+    * 数据库地址：10.8.6.87
+    * 数据库名：utn_ng_biz_info
+    * 表名：
+        (1) tb_certificate
+        (2) tb_certificate_detail
+        
+
+## 业务表结构
+```sql
+CREATE TABLE `tb_certificate` (
+  `id` bigint(20) unsigned NOT NULL AUTO_INCREMENT COMMENT 'ID-自增序列',
+  `unique_id` char(32) NOT NULL COMMENT '证书名称+编号+企业名称+发证日期的MD5',
+  `cert_type` varchar(255) DEFAULT NULL COMMENT '证书名称，',
+  `cert_no` varchar(255) DEFAULT NULL COMMENT '许可编号',
+  `company_name` varchar(255) NOT NULL COMMENT '企业名称',
+  `company_name_digest` char(32) DEFAULT NULL COMMENT '主体唯一键',
+  `company_id` char(32) DEFAULT NULL COMMENT '主体唯一键',
+  `grade` varchar(127) DEFAULT NULL COMMENT '资质等级（列表）',
+  `responsible_person` varchar(127) DEFAULT NULL COMMENT '企业负责人',
+  `lic_text` varchar(2000) DEFAULT NULL COMMENT '许可内容',
+  `org_an` varchar(255) DEFAULT NULL COMMENT '发证单位',
+  `sv_dep` varchar(255) DEFAULT NULL COMMENT '监制部门',
+  `issue_date` date DEFAULT NULL COMMENT '发证日期',
+  `start_date` date DEFAULT NULL COMMENT '开始日期',
+  `end_date` date DEFAULT NULL COMMENT '截止日期',
+  `source_url` varchar(1000) DEFAULT NULL COMMENT '原始链接URL',
+  `use_flag` tinyint(4) DEFAULT '0' COMMENT '使用标记，10废弃删除',
+  `is_history` tinyint(4) DEFAULT '0' COMMENT '是否是历史数据，1历史数据',
+  `create_time` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间',
+  `update_time` datetime NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP COMMENT '更新时间',
+  PRIMARY KEY (`id`),
+  UNIQUE KEY `idx_unique_id` (`unique_id`) USING BTREE,
+  KEY `idx_company` (`company_name`) USING BTREE,
+  KEY `idx_company_digest` (`company_name_digest`) USING BTREE,
+  KEY `idx_create_time` (`create_time`) USING BTREE,
+  KEY `idx_update_time` (`update_time`) USING BTREE,
+  KEY `idx_cert_no` (`cert_no`),
+  KEY `idx_cert_type` (`cert_type`)
+) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT='资质证书主表';
+
+CREATE TABLE `tb_certificate_detail` (
+  `id` bigint(20) unsigned NOT NULL AUTO_INCREMENT COMMENT 'ID-自增序列',
+  `unique_id` char(32) NOT NULL COMMENT '证书名称+编号+企业名称+发证日期的MD5',
+  `detail_record` char(32) NOT NULL COMMENT '字段分类+字段名的MD5',
+  `field_class` varchar(255) DEFAULT '资质信息' COMMENT '明细字段分类值',
+  `field_name` varchar(255) DEFAULT NULL COMMENT '中文字段名',
+  `field_value` varchar(4000) DEFAULT NULL COMMENT '数据值',
+  `use_flag` tinyint(4) DEFAULT '0' COMMENT '使用标记，10废弃删除',
+  `is_history` tinyint(4) DEFAULT '0' COMMENT '是否是历史数据，1历史数据',
+  `create_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间',
+  `update_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP COMMENT '更新时间',
+  PRIMARY KEY (`id`),
+  UNIQUE KEY `idx_cert_detail` (`unique_id`,`detail_record`) USING BTREE,
+  KEY `idx_create_time` (`create_time`) USING BTREE,
+  KEY `idx_update_time` (`update_time`) USING BTREE
+) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT='资质信息明细';
+```
+
+## 数据样例
+```json
+{
+    "rowkey": "00036cf69e41f2e9d7844e4a4e42d772",
+    "company_id": "5274310ffd26c3d806557026950302d9",
+    "company_name": "四川省道达工程设计有限公司",
+    "start_date": "2018-10-09",
+    "end_date": "2023-10-09",
+    "cert_no": "工程设计资质证书",
+    "type": "A251015268",
+    "detail": "{企业名称=四川省道达工程设计有限公司,
+				发证日期=2018-10-09,
+				证书有效期=2023-10-09,
+				资质证书号=A251015268,
+				资质名称=工程设计市政行业道路工程专业乙级，工程设计公路行业公路专业丙级}",
+    "create_time": "2022-04-28 05:24:09",
+    "update_time": "2022-04-28 05:24:09",
+    "deleted": 0
+}
+```
\ No newline at end of file