《电子商务数据分析基础》课件（模块二）单元一 数据采集认知

电子商务数据分析基础模块二基础数据采集CONTENT目录单元一数据采集认知单元二数据采集的渠道及工具单元三市场数据采集单元四运营数据采集单元五产品数据采集1.了解电子商务数据采集的概念；2.熟悉电子商务数据采集的原则；3.熟悉电子商务数据采集的方法和步骤；4.熟练掌握电子商务数据采集工具的使用；5.能够独立完成电子商务市场、运营、产品数据采集。学习目标知识导图单元一数据采集认知单元一数据采集认知一、数据采集的概念

数据采集也叫数据获取，是指通过在平台源程序中预设工具或程序代码，获取商品状态变化、资金状态变化、流量状态变化、用户行为和信息等数据内容的过程，为后续进行数据分析提供数据准备。单元一数据采集认知二、数据采集的原则合法性及时性准确性有效性单元一数据采集认知及时性进行数据采集需要尽可能地获取到电子商务平台最新数据，只有最新的数据与往期数据进行比对才能更好地发现当前的问题和预测变化趋势。有效性在进行数据采集过程中，需要注意数值期限的有效性。单元一数据采集认知准确性在数据分析过程中每个指标的数据可能需要参与各种计算，有些数据的数值本身比较大，参与计算之后就可能出现较大的偏差，在进行数据采集时需要确保所摘录的数据准确无误，避免数据分析时出现较大偏差。合法性数据采集还需要注意数据采集的合法性，比如在进行竞争对手数据采集过程中只能采集相关机构已经公布的公开数据，或是在对方同意的情况下获取的数据，而不能采用商业间谍、非法窃取等非法手段获取。单元一数据采集认知三、数据采集的方法网页数据采集系统日志数据采集数据库采集报表采集调查问卷采集单元一数据采集认知网页数据采集

在采集行业及竞争对手数据时，在电商平台上的一些数据诸如商品属性数据（商品结构少标题、品牌、价格、销量、评价）可以直接进行摘录或使用火车采集器、八爪鱼采集器等爬虫采集工具进行采集。单元一数据采集认知系统日志数据采集

在网站日志中记录了访客IP地址、访问时间、访问次数、停留时间、访客来源等数据。通过对这些日志信息进行采集、分析，可以挖掘电子商务企业业务平台日志数据中的潜在价值。数据库采集

通过数据库采集系统直接与企业业务后台服务器结合，将企业业务后台每时每刻产生的大量业务记录写入到数据库中，最后由特定的处理系统进行数据分析。单元一数据采集认知报表采集

对于一些独立站点可能没有如每天咨询客户数、订单数等数据指标统计功能，在进行数据采集时可以通过每日、周的工作报表进行相应数据采集。单元一数据采集认知调查问卷采集

在进行用户需求、习惯、喜好、产品使用反馈等数据进行采集时常常会用到调查问卷，数据采集人员通过设计具有针对性的问卷，采用实际走访、电话沟通、网络填表等方式进行信息采集。单元一数据采集认知四、数据采集的步骤确定采集范围及人员分工1

进行数据采集前首先需要根据数据采集目标进行分析，明确数据采集的指标范围和时间范围。接着明确这些数据需要从哪些途径及部门采集，最后确定参与部门和人员配备。单元一数据采集认知建立必要的数据指标规范及并完成数据采集2

数据指标需对数据进行唯一性标识，并且贯穿之后的数据查询、分析和应用，建立数据指标规范是为了使后续工作有一个可以遵循的原则，也为庞杂的数据分析工作确定了可以识别的唯一标识。确定后选择相应的数据渠道及工具开始数据采集。单元一数据采集认知数据检查3完整性检查准确性检查规范性检查完成数据采集后对数据进行复查或计算合计数据，将其和历史数据进行比较。同时还要检查字段的完整性，保证核心指标数据完整。在数据采集录入的过程中可能会有个别数据出现录入错误，可以通过平均、求和等操作与原始数据进行比对，如发现比对结果不匹配，则需要检查出相应的错误数据。检查采集的数据中是否存在有多个商品标识编码相同或同一数据出现多个数据指标等。某电子商务企业为了能够让更多的客户了解