Skip to content

GitLab

  • Projects
  • Groups
  • Snippets
  • Help
    • Loading...
  • Help
    • Help
    • Support
    • Community forum
    • Submit feedback
    • Contribute to GitLab
  • Sign in / Register
K
kb
  • Project overview
    • Project overview
    • Details
    • Activity
    • Releases
  • Repository
    • Repository
    • Files
    • Commits
    • Branches
    • Tags
    • Contributors
    • Graph
    • Compare
  • Issues 2
    • Issues 2
    • List
    • Boards
    • Labels
    • Service Desk
    • Milestones
  • Merge requests 0
    • Merge requests 0
  • Operations
    • Operations
    • Incidents
  • Analytics
    • Analytics
    • Repository
    • Value Stream
  • Wiki
    • Wiki
  • Members
    • Members
  • Activity
  • Graph
  • Create a new issue
  • Commits
  • Issue Boards
Collapse sidebar
  • granite
  • kb
  • Wiki
    • Lake
  • ec_app

Last edited by 李子健 Jul 29, 2021
Page history
This is an old version of this page. You can view the most recent version or browse the history.

ec_app

平台APP应用数据表

数据存储

阿里云Mysql
  • host: bdp-rds-007.mysql.rds.aliyuncs.com
  • user: ***
  • password: ***
  • database: utn_ec
  • table: tb_app_data

建表语句

CREATE TABLE `tb_app_data` (
  `id` int(11) NOT NULL AUTO_INCREMENT COMMENT '自增id',
  `app_id` varchar(64) NOT NULL COMMENT '平台APP ID',
  `app_name` varchar(64) DEFAULT NULL COMMENT 'APP名称',
  `package_name` varchar(128) DEFAULT NULL COMMENT '包名',
  `category_name` varchar(64) DEFAULT NULL COMMENT '分类名称',
  `app_size` varchar(64) DEFAULT NULL COMMENT '软件大小',
  `version_no` varchar(64) DEFAULT NULL COMMENT '版本号',
  `app_update_time` date DEFAULT NULL COMMENT '最新版本更新时间',
  `app_score` varchar(32) DEFAULT NULL COMMENT '评分',
  `comment_num` varchar(32) DEFAULT NULL COMMENT '评论数',
  `download_num` varchar(32) DEFAULT NULL COMMENT '下载次数',
  `product_unit` varchar(128) DEFAULT NULL COMMENT '出品单位(app发布者)',
  `company_name_digest` char(32) DEFAULT NULL COMMENT '主体唯一键',
  `data_source` varchar(100) DEFAULT NULL COMMENT '数据来源',
  `province` varchar(16) DEFAULT NULL COMMENT '省份',
  `city` varchar(64) DEFAULT NULL COMMENT '城市',
  `county` varchar(64) DEFAULT NULL COMMENT '地区',
  `app_desc` longtext COMMENT '应用介绍',
  `new_features` text COMMENT '新版特性',
  `permissions` text COMMENT '权限详情',
  `icon_url` varchar(256) DEFAULT NULL COMMENT 'APP图标链接',
  `app_download_url` varchar(256) DEFAULT NULL COMMENT 'APP下载链接',
  `home_page` varchar(255) DEFAULT NULL COMMENT 'APP官方主页',
  `app_state` smallint(2) DEFAULT '0' COMMENT 'APP状态:0 初始(未爬取详情) 、1 正常、9 已下线(详情不能访问)',
  `labels` varchar(128) DEFAULT NULL COMMENT 'APP标签(多个标签用“,”隔开)',
  `create_time` timestamp  NOT NULL COMMENT '收录时间',
  `update_time` datetime  NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP COMMENT '最后更新时间',
  `use_flag` smallint(6) DEFAULT '0' COMMENT '使用标记',
  `is_history` smallint(6) DEFAULT '0' COMMENT '是否是历史数据',
  PRIMARY KEY (`id`),
  UNIQUE KEY `idx_id_name` (`app_id`,`app_name`),
  KEY `idx_digest` (`company_name_digest`) ,
  KEY `idx_create_time` (`create_time`),
  KEY `idx_update_time` (`update_time`),
  KEY `idx_app_name` (`app_name`),
  KEY `idx_package_name` (`package_name`),
  KEY `idx_app_state` (`app_state`),
  KEY `idx_app_id` (`app_id`)
) ENGINE=InnoDB AUTO_INCREMENT=5220537 DEFAULT CHARSET=utf8 COMMENT='移动APP数据';

数据结构

{
    "id": "自增主键",
    "app_id": "平台APP ID",
    "app_name": "APP名称",
    "package_name": "包名",
    "category_name": "分类名称",
    "app_size": "软件大小",
    "version_no": "版本号",
    "app_update_time": "最新版本更新时间",
    "app_score": "评分",
    "comment_num": "评论数",
    "download_num": "下载次数",
    "product_unit": "出品单位(app发布者)",
    "company_name_digest": "主体唯一键",
    "data_source": "数据来源",
    "province": "省份",
    "city": "城市",
    "county": "地区",
    "app_desc": "应用介绍",
    "new_features": "新版特性",
    "permissions": "权限详情",
    "icon_url": "APP图标链接",
    "app_download_url": "APP下载链接",
    "home_page": "APP官方主页",
    "app_state": "APP状态",
    "labels": "APP标签",
    "create_time": "收录时间",
    "lastupdatetime": "最后更新时间",
    "use_flag": "使用标记",
    "is_history": "是否是历史数据"
}

数据字典

字段名 字段类型 注释
app_id int 平台APP ID
app_name varchar APP名称
package_name varchar 包名
category_name varchar 分类名称
app_size varchar 软件大小
version_no varchar 版本号
app_update_time date 最新版本更新时间
app_score varchar 评分
comment_num varchar 评论数
download_num varchar 下载次数
product_unit varchar 出品单位(app发布者)
company_name_digest char 主体唯一键
data_source varchar 数据来源
province varchar 省份
city varchar 城市
county varchar 地区
app_desc longtext 应用介绍
new_features text 新版特性
permissions text 权限详情
icon_url varchar 图标链接
app_download_url varchar APP下载链接
home_page varchar APP官方主页
app_state smallint APP状态,0: 初始(未采集详情) 1:正常 9:APP已下线
labels varchar APP标签(多个标签用“,”隔开)
create_time timestamp 收录时间
update_time datetime 最后更新时间
use_flag smallint 使用标记,10废弃使用
is_history smallint 是否是历史数据,1历史数据

样例

{
    "id": 101275,
    "app_id": 524613,
    "app_name": "水滴信用",
    "package_name": "com.shuidi.app",
    "category_name": "效率办公",
    "app_size": "10.29M",
    "version_no": "3.0.1",
    "app_update_time": "2021-05-18",
    "app_score": "10",
    "comment_num": "324",
    "download_num": null,
    "product_unit": "上海凭安征信服务有限公司",
    "province": "上海市",
    "city": "上海市",
    "county": "长宁区",
    "app_desc": "查企业 找客户 就上水滴信用\r\n水滴信用已覆盖2.1亿+社会实体信息,数据信息与国家权威网站同步实时更新!\r\n水滴信用专注于企业信用信息工商征信查询,为各界人士提供丰富、全面、客观、权威的企业信息,是各界商务人士必备的企业征信利器。 \r\n\r\n【水滴信用能查什么?】 \r\n企业背景:联系电话、企业关系、股权结构、法人信息、董监高信息、股东信息、对外投资、变更记录、企业年报、分支机构 \r\n企业风险:企业自身可能存在风险、企业周边可能存在风险 \r\n老板背景:老板商业角色、所有企业、合作伙伴、风险扫描\r\n企业发展:融资历史、核心团队、企业业务、投资事件、竞品信息 \r\n司法风险:法律诉讼、法院公告、失信人、被执行人、开庭公告\r\n经营风险:经营异常、行政处罚(信用中国)、严重违法、股权出资、动产抵押、欠税公告、司法拍卖等\r\n经营状况:招投标、债券信息、购地信息、招聘、税务评级、抽查检查、进出口信用、资质证书、微信公众号等\r\n知识产权:商标信息、专利、软件著作权、作品著作权、网站备案等\r\n100+项数据,数据库定期更新,查企业、找客户,就上水滴信用!\r\n\r\n水滴信用网页版:www.shuidi.cn\r\n客服QQ:3223469629\r\n客服电话:33533026-863\r\n客服邮箱:shuidi@pingansec.com",
    "new_features": "版本 3.0.1\r\n全新设计的水滴信用现已上线。查企业,找客户,就上水滴信用。快来体验吧~\r\n1.优化了部分BUG。\r\n2.优化了数据查询性能。",
    "permissions": "● 获取定位\r\n允许应用通过网络或卫星对设备进行定位\r\n\r\n● 获取额外的位置信息提供程序命令\r\n获取额外的位置信息提供程序命令。恶意应用程序可借此干扰 GPS 或其他位置源的正常工作。\r\n\r\n● 查看网络状态\r\n允许应用程序查看所有网络的状态。\r\n\r\n● 开关WLAN\r\n允许应用开启或关闭WLAN\r\n\r\n● 开关蓝牙\r\n允许应用开启或关闭蓝牙\r\n\r\n● 拨打电话\r\n允许应用直接拨打电话\r\n\r\n● 拍摄照片和视频\r\n允许应用拍摄照片或录制视频\r\n\r\n● 更改网络连接性\r\n允许应用程序更改网络连接的状态。\r\n\r\n● 更改 Wi-Fi 状态\r\n允许应用程序连接到 Wi-Fi 接入点以及与 Wi-Fi 接入点断开连接,并对配置的 Wi-Fi 网络进行更改。\r\n\r\n● 完全的互联网访问权限\r\n允许应用程序创建网络套接字。\r\n\r\n● 控制闪光灯\r\n允许应用程序控制闪光灯。\r\n\r\n● 检索当前运行的应用程序\r\n允许应用程序检索有关当前和最近运行的任务的信息。恶意应用程序可借此发现有关其他应用程序的保密信息。\r\n\r\n● 直接安装应用程序\r\n允许应用程序安装全新的或更新的 Android 包。恶意应用程序可能会借此添加其具有任意权限的新应用程序。\r\n\r\n● 控制媒体音量\r\n允许应用调整媒体音量\r\n\r\n● 装载和卸载文件系统\r\n允许应用程序装载和卸载可移动存储器的文件系统。\r\n\r\n● 查阅敏感日志数据\r\n允许应用程序从系统的各个日志文件中读取信息。这样,应用程序就可以发现关于您手机使用情况的一般信息,其中可能包含个人信息或私密信息。\r\n\r\n● 获取手机信息\r\n允许应用获取手机号、IMEI、IMSI\r\n\r\n● 开机时自动启动\r\n允许应用程序在系统完成启动后即自行启动。这样会延长手机的启动时间,而且如果应用程序一直运行,会降低手机的整体速度。\r\n\r\n● 录音\r\n允许应用程序访问录音路径。\r\n\r\n● 修改/删除 SD 卡中的内容\r\n允许应用程序写入 SD 卡。\r\n\r\n● 控制振动器\r\n允许应用程序控制振动器。\r\n\r\n● 防止手机休眠\r\n允许应用程序防止手机进入休眠状态。\r\n\r\n● 修改系统设置项\r\n允许应用修改系统设置情况",
    "icon_url": "http://file.market.xiaomi.com/thumbnail/PNG/l114/AppStore/03e8eb5a968e44c7d1a6bfa4a6faeb15d898a3607",
    "app_download_url": null,
    "home_page": "https://shuidi.cn/user/privacy",
    "app_state": 1,
    "create_time": "2021-06-19 22:06:06",
    "update_time": "2021-06-19 22:06:06"
}

说明

Clone repository
  • README
  • basic_guidelines
  • basic_guidelines
    • basic_guidelines
    • dev_guide
    • project_build
    • 开发流程
  • best_practice
  • best_practice
    • AlterTable
    • RDS
    • azkaban
    • create_table
    • design
    • elasticsearch
    • elasticsearch
      • ES运维
    • logstash
View All Pages