Skip to content

GitLab

  • Projects
  • Groups
  • Snippets
  • Help
    • Loading...
  • Help
    • Help
    • Support
    • Community forum
    • Submit feedback
    • Contribute to GitLab
  • Sign in / Register
K
kb
  • Project overview
    • Project overview
    • Details
    • Activity
    • Releases
  • Repository
    • Repository
    • Files
    • Commits
    • Branches
    • Tags
    • Contributors
    • Graph
    • Compare
  • Issues 2
    • Issues 2
    • List
    • Boards
    • Labels
    • Service Desk
    • Milestones
  • Merge requests 0
    • Merge requests 0
  • Operations
    • Operations
    • Incidents
  • Analytics
    • Analytics
    • Repository
    • Value Stream
  • Wiki
    • Wiki
  • Members
    • Members
  • Activity
  • Graph
  • Create a new issue
  • Commits
  • Issue Boards
Collapse sidebar
  • granite
  • kb
  • Wiki
    • Lake
  • ec_ebusiness

Last edited by 李子健 Jul 30, 2021
Page history
This is an old version of this page. You can view the most recent version or browse the history.

ec_ebusiness

电商店铺数据表

传统电商平台包括淘宝、天猫、1688、京东、苏宁、国美、蘑菇街、聚美优品、网易考拉等

数据存储

阿里云Mysql,tb_ebusiness_data.company_id 关联的企业信息存储在指南针的应用库,通过指南针的一个接口去查询企业信息
  • host: bdp-rds-007.mysql.rds.aliyuncs.com
  • user: ***
  • password: ***
  • database: utn_ec
  • table: tb_ebusiness_data

建表语句

CREATE TABLE `tb_ebusiness_data` (
  `shop_id` int(11) NOT NULL AUTO_INCREMENT COMMENT '自增主键',
  `platform_name` varchar(32) DEFAULT NULL COMMENT '平台名称',
  `shop_name` varchar(128) DEFAULT NULL COMMENT '店铺名称',
  `shop_url` varchar(512) DEFAULT NULL COMMENT '店铺网址',
  `user_rate_url` varchar(256) DEFAULT NULL COMMENT '卖家信息页网址',
  `platform_shop_id` varchar(32) DEFAULT NULL COMMENT '店铺ID',
  `unique_shop_id` varchar(32) DEFAULT NULL COMMENT '店铺唯一标识(平台店铺ID的MD5摘要)',
  `shop_type` tinyint(2) DEFAULT NULL COMMENT '店铺类型:1 B店 2C店',
  `contactor_id` varchar(32) DEFAULT NULL COMMENT '卖家ID',
  `contactor_name` varchar(128) DEFAULT NULL COMMENT '卖家名称',
  `shop_create_time` varchar(32) DEFAULT NULL COMMENT '开店时间',
  `open_time` varchar(16) DEFAULT NULL COMMENT '开店时长(年)',
  `is_dead` tinyint(2) DEFAULT '0' COMMENT '是否下线',
  `dead_time` datetime DEFAULT NULL COMMENT '下线时间',
  `company_id` int(11) DEFAULT NULL COMMENT '企业ID',
  `company_name` varchar(128) DEFAULT NULL COMMENT '企业名称',
  `company_name_digest` char(32) DEFAULT NULL COMMENT '主体唯一键',
  `lightup` tinyint(2) DEFAULT '1' COMMENT '是否亮照',
  `is_self` tinyint(2) DEFAULT '0' COMMENT '是否自营',
  `category_lv1` varchar(64) DEFAULT NULL COMMENT '店铺一级分类(淘宝归一)',
  `category_lv2` varchar(64) DEFAULT NULL COMMENT '店铺二级分类(淘宝归一)',
  `category_lv3` varchar(64) DEFAULT NULL COMMENT '店铺三级分类(淘宝归一)',
  `platform_category_lv1` varchar(64) DEFAULT NULL COMMENT '店铺一级分类(平台)',
  `platform_category_lv2` varchar(64) DEFAULT NULL COMMENT '店铺二级分类(平台)',
  `platform_category_lv3` varchar(64) DEFAULT NULL COMMENT '店铺三级分类(平台)',
  `province` varchar(64) DEFAULT NULL COMMENT '省份',
  `city` varchar(64) DEFAULT NULL COMMENT '城市',
  `county` varchar(128) DEFAULT NULL COMMENT '地区',
  `total_sold` bigint(20) DEFAULT '0' COMMENT '总销量',
  `total_count` int(11) DEFAULT '0',
  `fans_count` bigint(20) DEFAULT '0' COMMENT '粉丝数',
  `order_num` int(11) DEFAULT NULL,
  `tel_phone` varchar(64) DEFAULT NULL COMMENT '联系电话',
  `delivery_location` varchar(64) DEFAULT NULL COMMENT '商品发货地',
  `current_location` varchar(64) DEFAULT NULL COMMENT '所在地区(平台卖家信息里标记)',
  `area_empty` tinyint(11) DEFAULT '0',
  `shop_credit_rate` varchar(32) DEFAULT NULL,
  `shop_score` double DEFAULT NULL,
  `describe_score` double DEFAULT NULL COMMENT '宝贝与描述相符',
  `describe_compare` varchar(32) DEFAULT NULL COMMENT '比同行业平均水平(宝贝描述相符)',
  `service_score` double DEFAULT NULL COMMENT '卖家的服务态度',
  `service_compare` varchar(32) DEFAULT NULL COMMENT '比同行业平均水平(卖家服务态度)',
  `logistics_score` double DEFAULT NULL COMMENT '物流服务的质量',
  `logistics_compare` varchar(32) DEFAULT NULL COMMENT '比同行业平均水平(物流服务质量)',
  `create_time` datetime DEFAULT NULL COMMENT '创建时间',
  `update_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
	`use_flag` smallint(6) DEFAULT '0' COMMENT '使用标记',
  `is_history` smallint(6) DEFAULT '0' COMMENT '是否是历史数据',
  PRIMARY KEY (`shop_id`) ,
  UNIQUE KEY `IX_UNIQUE_SHOP_ID` (`unique_shop_id`),
  KEY `IX_PLATFORM_SHOP_ID` (`platform_shop_id`),
  KEY `IX_PLATFORM_NAME` (`platform_name`),
  KEY `IX_IS_DEAD` (`is_dead`),
  KEY `IX_COMPANY_ID` (`company_id`),
  KEY `IX_SHOP_TYPE` (`shop_type`),
  KEY `IX_COMPANY_NAME_DIGEST` (`company_name_digest`),
  KEY `IX_PROVINCE` (`province`),
  KEY `IX_CITY` (`city`),
  KEY `IX_COUNTY` (`county`),
  KEY `IX_CREATE_TIME` (`create_time`),
  KEY `IX_UPDATE_TIME` (`update_time`)
) ENGINE=InnoDB AUTO_INCREMENT=12379819 DEFAULT CHARSET=utf8 COMMENT='电商店铺数据';

数据结构

{
    "shop_id": "自增主键",
    "platform_name": "平台名称",
    "shop_name": "店铺名称",
    "shop_url": "店铺网址",
    "user_rate_url": "卖家信息页网址",
    "platform_shop_id": "店铺ID",
    "unique_shop_id": "店铺唯一标识摘要",
    "shop_type": "店铺类型",
    "contactor_id": "卖家ID",
    "contactor_name": "卖家名称",
    "shop_create_time": "开店时间",
    "open_time": "开店时长(年)",
    "is_dead": "是否下线",
    "dead_time": "下线时间",
    "company_id": "企业ID",
    "company_name": "企业名称",
    "company_name_digest": "企业名称摘要",
    "lightup": "是否亮照",
    "is_self": "是否自营",
    "category_lv1": "店铺一级分类(淘宝归一)",
    "category_lv2": "店铺二级分类(淘宝归一)",
    "category_lv3": "店铺三级分类(淘宝归一)",
    "platform_category_lv1": "店铺一级分类(平台)",
    "platform_category_lv2": "店铺二级分类(平台)",
    "platform_category_lv3": "店铺三级分类(平台)",
    "province": "省份",
    "city": "城市",
    "county": "地区",
    "total_sold": "总销量",
    "total_count": "",
    "fans_count": "粉丝数",
    "order_num": "",
    "tel_phone": "联系电话",
    "delivery_location": "商品发货地",
    "current_location": "平台标记地区",
    "area_empty": "",
    "shop_credit_rate": "",
    "shop_score": "",
    "describe_score": "宝贝与描述相符",
    "describe_compare": "比同行业平均水平(宝贝描述相符)",
    "service_score": "卖家的服务态度",
    "service_compare": "比同行业平均水平(卖家服务态度)",
    "logistics_score": "物流服务的质量",
    "logistics_compare": "比同行业平均水平(物流服务质量)",
    "create_time": "创建时间",
    "update_time": "更新时间"
}

数据字典

字段名 字段类型 注释
platform_name varchar 平台名称
shop_name varchar 店铺名称
shop_url varchar 店铺网址
user_rate_url varchar 卖家信息页网址
platform_shop_id varchar 店铺ID
unique_shop_id varchar 店铺唯一标识摘要,md5(platform_name+platform_shop_id),其中天猫和淘宝平台统一使用md5(淘宝+platform_shop_id)
shop_type tinyint 店铺类型,1:B店 2: C店
contactor_id varchar 卖家ID
contactor_name varchar 卖家名称
shop_create_time varchar 开店时间
open_time varchar 开店时长(年)
is_dead tinyint 是否下线,0:正常营业 1:店铺已下线
dead_time datetime 下线时间
company_id int 企业ID
company_name varchar 企业名称
company_name_digest varchar 主体唯一键
lightup tinyint 是否亮照,1:亮照 0:未亮照
is_self tinyint 是否自营,0:非自营 1:自营(京东平台特有)
category_lv1 varchar 店铺一级分类(淘宝归一)
category_lv2 varchar 店铺二级分类(淘宝归一)
category_lv3 varchar 店铺三级分类(淘宝归一)
platform_category_lv1 varchar 店铺一级分类(平台)
platform_category_lv2 varchar 店铺二级分类(平台)
platform_category_lv3 varchar 店铺三级分类(平台)
province varchar 省份
city varchar 城市
county varchar 地区
total_sold bigint 总销量(未更新)
total_count int (未更新)
fans_count bigint 粉丝数(未更新)
order_num int (未更新)
tel_phone varchar 联系电话(未更新)
delivery_location varchar 商品发货地
current_location varchar 所在地区(平台卖家信息里标记)
area_empty tinyint (未更新)
shop_credit_rate varchar (未更新)
shop_score double (未更新)
describe_score double 宝贝与描述相符
describe_compare varchar 比同行业平均水平(宝贝描述相符)
service_score double 卖家的服务态度
service_compare varchar 比同行业平均水平(卖家服务态度)
logistics_score double 物流服务的质量
logistics_compare varchar 比同行业平均水平(物流服务质量)
create_time datetime 创建时间
update_time datetime 更新时间
use_flag smallint 使用标记,10废弃使用
is_history smallint 是否是历史数据,1历史数据

样例

{
    "shop_id": 4958,
    "platform_name": "天猫",
    "shop_name": "nike官方旗舰店",
    "shop_url": "http://shop71955116.taobao.com",
    "user_rate_url": "https://rate.taobao.com/user-rate-UOmkWMmgyvFg4.htm",
    "platform_shop_id": "71955116",
    "unique_shop_id": "574ebea2da1677c1a6fcea73fb1d07ab",
    "shop_type": 1,
    "contactor_id": "890482188",
    "contactor_name": "nike官方旗舰店",
    "shop_create_time": "2012-05-18 14:00:43",
    "open_time": "9",
    "is_dead": 0,
    "dead_time": null,
    "company_id": 5453159,
    "company_name": "耐克商业(中国)有限公司",
    "company_name_digest": null,
    "lightup": 1,
    "is_self": null,
    "category_lv1": "运动户外",
    "category_lv2": null,
    "category_lv3": null,
    "platform_category_lv1": null,
    "platform_category_lv2": null,
    "platform_category_lv3": null,
    "province": "上海市",
    "city": "上海市",
    "county": "杨浦区",
    "total_sold": 268038,
    "total_count": 1628,
    "fans_count": 2363,
    "order_num": 4,
    "tel_phone": null,
    "delivery_location": "上海",
    "current_location": null,
    "area_empty": 0,
    "shop_credit_rate": "5846828",
    "shop_score": null,
    "describe_score": 4.7,
    "describe_compare": "-1.55%",
    "service_score": 4.8,
    "service_compare": "-1.08%",
    "logistics_score": 4.8,
    "logistics_compare": "0.00%",
    "create_time": "2019-07-24 11:48:19",
    "update_time": "2021-06-15 03:04:56"
}

说明

  1. 当前表的店铺数据来源:通过各平台的店铺搜索接口、店铺信息接口、资质页面等途径,采集店铺的各项信息
  2. 当前店铺更新情况
    • 淘宝、天猫
      • 店铺新增:已暂停
      • 店铺下线判断:正常
      • 店铺B、C店判断:正常
      • 店铺平台判断:正常
      • 资质采集:正常(受账号限制)
    • 1688
      • 店铺新增:已暂停
      • 店铺下线判断:已暂停
      • 店铺其他信息更新:已暂停
    • 京东
      • 店铺新增:已暂停
      • 店铺其他信息更新:正常
    • 苏宁
      • 店铺新增:已暂停
      • 店铺其他信息更新:正常
    • 国美
      • 店铺新增:已暂停
      • 店铺其他信息更新:正常
Clone repository
  • README
  • basic_guidelines
  • basic_guidelines
    • basic_guidelines
    • dev_guide
    • project_build
    • 开发流程
  • best_practice
  • best_practice
    • AlterTable
    • RDS
    • azkaban
    • create_table
    • design
    • elasticsearch
    • elasticsearch
      • ES运维
    • logstash
View All Pages