Skip to content

GitLab

  • Projects
  • Groups
  • Snippets
  • Help
    • Loading...
  • Help
    • Help
    • Support
    • Community forum
    • Submit feedback
    • Contribute to GitLab
  • Sign in / Register
K
kb
  • Project overview
    • Project overview
    • Details
    • Activity
    • Releases
  • Repository
    • Repository
    • Files
    • Commits
    • Branches
    • Tags
    • Contributors
    • Graph
    • Compare
  • Issues 2
    • Issues 2
    • List
    • Boards
    • Labels
    • Service Desk
    • Milestones
  • Merge requests 0
    • Merge requests 0
  • Operations
    • Operations
    • Incidents
  • Analytics
    • Analytics
    • Repository
    • Value Stream
  • Wiki
    • Wiki
  • Members
    • Members
  • Activity
  • Graph
  • Create a new issue
  • Commits
  • Issue Boards
Collapse sidebar
  • granite
  • kb
  • Wiki
    • Lake
  • company_weibo

Last edited by 王 潘玉 Jun 14, 2022
Page history

company_weibo

经营状况-微博数据

存储信息

aliyun-mysql-rds
  • host: bdp-rds-003.mysql.rds.aliyuncs.com
  • port: 3306
  • user: **
  • password: **
  • database: utn_ng_biz_info

建表语句

//业务表
CREATE TABLE `company_weibo` (
  `id` bigint(20) NOT NULL AUTO_INCREMENT COMMENT '自增id',
  `company_id` char(32) DEFAULT NULL COMMENT 'company_name_digest的MD5值',
  `company_name` varchar(255)  DEFAULT NULL COMMENT '企业名称',
  `company_name_digest`  varchar(255)  DEFAULT NULL COMMENT '根据company_name关联digest',
  `name` varchar(255)  NOT NULL COMMENT '微博名称',
  `icon` varchar(255)  DEFAULT NULL COMMENT '微博logo',
  `info` text  COMMENT '简介',
  `tags` text  COMMENT '标签',
  `count` varchar(255)  DEFAULT NULL COMMENT '发微博的数量',
  `fans` varchar(255)  DEFAULT NULL COMMENT '粉丝数',
  `follow_count` varchar(255)  DEFAULT NULL COMMENT '关注数',
  `source_url` varchar(255)  NOT NULL COMMENT '微博链接',
  `create_time` datetime DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间',
  `update_time` datetime DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP COMMENT '更新时间',
  `use_flag` int(1) DEFAULT '0' COMMENT '是否删除,10:删除,0:正常有效数据',
  PRIMARY KEY (`id`) USING BTREE,
  UNIQUE KEY `sourceUrl` (`source_url`),
  KEY `company_name` (`company_name`) USING BTREE,
  KEY `company_name_digest` (`company_name_digest`) USING BTREE
) ENGINE=InnoDB  ROW_FORMAT=DYNAMIC COMMENT='经营信息-微博';

//中间表
CREATE TABLE `company_weibo_yhc_details` (
  `id` bigint(20) NOT NULL AUTO_INCREMENT COMMENT '自增id',
  `company_id` varchar(200)  DEFAULT NULL,
  `company_name` varchar(255)  DEFAULT NULL COMMENT '企业名称',
  `name` varchar(255)  NOT NULL COMMENT '微博名称',
  `icon` varchar(255)  DEFAULT NULL COMMENT '微博logo本地服务器上图片地址',
  `info` text  COMMENT '简介',
  `tags` text  COMMENT '标签',
  `count` varchar(255)  DEFAULT NULL COMMENT '发微博的数量',
  `fans` varchar(255)  DEFAULT NULL COMMENT '粉丝数',
  `follow_count` varchar(255)  DEFAULT NULL COMMENT '关注数',
  `source_url` varchar(255)  not NULL COMMENT '微博链接',
  `create_time` datetime DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间',
  `update_time` datetime DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP COMMENT '更新时间',
  `use_flag` int(1) DEFAULT '0' COMMENT '是否删除,10:删除,0:正常有效数据',
  `upload` int(1) NULL DEFAULT 0 COMMENT '是否上传,1:已上传,0:未上传,2:不用上传',
  `external_data_source` varchar(255) DEFAULT NULL COMMENT '外部数据来源',
  `yhc_icon` varchar(255)  DEFAULT NULL COMMENT '微博logo',
  `company_name_digest`  varchar(255)  DEFAULT NULL COMMENT '根据company_name关联digest',
  PRIMARY KEY (`id`) USING BTREE,
  UNIQUE KEY `sourceUrl` (`source_url`),
  KEY `company_name` (`company_name`) USING BTREE,
  KEY `company_name_digest` (`company_name_digest`) USING BTREE
) ENGINE=InnoDB  ROW_FORMAT=DYNAMIC COMMENT='经营信息-微博中间数据';

//原始表
CREATE TABLE `company_weibo_yhc` (
  `rowkey` varchar(200)  NOT NULL,
  `company_id` varchar(200)  DEFAULT NULL,
  `company_name` varchar(255)  DEFAULT NULL COMMENT '企业名称',
  `name` varchar(255)  NOT NULL COMMENT '微博名称',
  `ico` varchar(255)  DEFAULT NULL COMMENT '微博logo',
  `info` text  COMMENT '简介',
  `tags` text  COMMENT '标签',
  `count` varchar(255)  DEFAULT NULL COMMENT '发微博的数量',
  `fans` varchar(255)  DEFAULT NULL COMMENT '粉丝数',
  `follow_count` varchar(255)  DEFAULT NULL COMMENT '关注数',
  `source_url` varchar(255)  DEFAULT NULL COMMENT '微博链接',
  `create_time_yhc` datetime DEFAULT NULL COMMENT '创建时间',
  `update_time_yhc` datetime DEFAULT NULL COMMENT '更新时间',
  `deleted` int(1) DEFAULT '0' COMMENT '是否删除,1:删除,0:未删除',
  PRIMARY KEY (`rowkey`) USING BTREE,
  KEY `company_name` (`company_name`) USING BTREE
) ENGINE=InnoDB  ROW_FORMAT=DYNAMIC COMMENT='经营信息-微博原始数据';

数据字典

业务表company_weibo

表名 字段名 字段类型 注释
id bigint(20) 自增id
company_id char(32) company_name_digest的MD5值
company_name varchar(255) 企业名称
company_name_digest varchar(255) 根据company_name关联digest
name varchar(255) 微博名称
icon varchar(255) 微博logo
info text 简介
tags text 标签
count varchar(255) 发微博的数量
fans varchar(255) 粉丝数
follow_count varchar(255) 关注数
source_url varchar(255) 微博链接
create_time datetime 创建时间
update_time datetime 更新时间
use_flag int 是否删除,10:删除,0:正常有效数据

样例

id company_id company_name company_name_digest name icon info tags count fans follow_count source_url create_time update_time use_flag
203 780fd3bdd9647bee605bd7b6ef39ad3b 左启科技(北京)有限公司 af3bfc66a6b36ebf006a4f7d00ca83fe 左启互动传媒 weibo_avatar/7c/67/7c670fde5676ac2eae782a56916b856b.jpg 左启互动多年来一直为客户提供线上互动技术解决方案,专注社会化营销解决方案的互动营销,长期专注于以社交... 75 192 222 https://weibo.com/u/5986876584 2022-06-10 16:06:01 2022-06-12 13:01:02 0
204 7f551435b31776b3d91359f9859c845b 虎林市大斑咖啡店 3351c4e6c091a9576c3527cd86b1edbf 大斑BigBan咖啡甜品店 weibo_avatar/3c/42/3c4204ab5de3150b9a1635d94ce446aa.jpg 美食/甜品/咖啡/酒吧/烘焙 110 100 112 https://weibo.com/u/7040817564 2022-06-10 16:06:01 2022-06-12 13:01:03 0
205 b987b45c0801693fb885d5df0a1c19d5 平凉尚学人文教育科技有限公司 06925708a38e82683c435c9a382bcffb 平凉尚学人文教育科技有限公司 weibo_avatar/20/96/20964db4ccb59fbb33632f333d0e3954.jpg 让我们一切为了孩子的进步而努力 搞笑幽默/八卦杂谈/校园生活/新闻热点 154 61 110 https://weibo.com/renwenjiaoyu2013 2022-06-10 16:06:01 2022-06-12 13:01:03 0

说明

  • 通过比较唯一键source_url补充及更新数据至业务表
Clone repository
  • README
  • basic_guidelines
  • basic_guidelines
    • basic_guidelines
    • dev_guide
    • project_build
    • 开发流程
  • best_practice
  • best_practice
    • AlterTable
    • RDS
    • azkaban
    • create_table
    • design
    • elasticsearch
    • elasticsearch
      • ES运维
    • logstash
View All Pages