数据采集与处理 课件 任务2 认知数据采集方案

项目二数据采集概述任务二认知数据采集方案【任务导入】

某淘宝网店长期经营零食坚果类商品，市场采购部门决定在近期计划增加产品种类，现需要在“葡萄干”、“巴旦木”、“碧根果”三类商品中选择一种，选择的依据主要为商品近一年的用户关注度高、目标用户群体大等。

任务描述：要求数据分析人员针对该需求撰写数据采集与处理方案，并对相关数据进行采集。为了确保数据采集结果的准确性和可靠性，在数据采集之前一般都需要制定一份完整的数据采集方案。一份完整的、有指导意义的数据采集方案应该包括一下几方面的内容。一、确定数据采集与处理的目的及任务目的:就是数据分析人员完成数据分析后对项目运营各部门基于什么样的目的提出的建议及调整策略。只有明确了数据采集与处理的目的及任务，才能确定数据采集范围,即向谁采集和采集什么，以及采集所采用的方式方法。数据采集与处理的目的应尽可能具体,要抓住主要矛盾,突出中心问题，切忌轻重不分，只有这样才能提高数据采集的质量。（一）数据采集的概念一、确定数据采集与处理的目的及任务在确定数据采集与处理目的时要适当的进行背景介绍，让项目参与人员了解该数据项目的来龙去脉，明确分析的环境和所处情况。（一）数据采集的概念二、确定数据采集对象和采集单位确定数据采集对象，首先需要对所研究的现象进行认真分析，掌握其主要特征；其次需要明确数据采集对象范围,划清与其他社会现象的界限，避免资料的重复或遗漏，保证采集的数据资料的准确性。三、拟定数据采集提纲和采集表数据采集提纲是在数据采集前所确定的数据采集项目,包括需要向数据采集单位了解的有关的标志和其他情况。（一）拟定数据采集提纲（二）设计数据采集表数据采集表是搜集原始资料的基本工具,把数据采集提纲中的各个数据采集项目按照一定的顺序排列在一定表格内，就构成了数据采集表。三、拟定数据采集提纲和采集表商务数据采集表常用的形式有以下几种：1.店铺流量类数据采集报表店铺流量类数据采集表主要是为了了解店铺的流量来源情况及流量结构，常用的数据采集报表有店铺UV、PV、IP数据采集表等。店铺UV数据采集表三、拟定数据采集提纲和采集表2.店铺日常运营数据类采集报表店铺运营类数据采集表类型多样，最常见的就是店铺运营日报表，包含的数据指标通常有流量类、订单类、转化类、交易类等。店铺运营日报表三、拟定数据采集提纲和采集表3.营销推广类数据采集表营销推广工作直接关系到整店的成交转化情况，因此营销推广数据采集表在日常运营过程中使用也非常广泛，营销推广类数据采集表通常包含通过各营销推广渠道的成交类指标、流量类指标、费用类指标等。CPS推广基础数据登记表四、确定数据来源渠道及数据采集工具（一）数据采集来源常见的数据采集来源大致可以分为三类：1.日常数据采集：主要包括平台运营数据、网站数据库数据以及企业管理系统数据等2.专题数据采集：专项调研数据和实验实测数据。3.外部环境数据：行业发展数据及竞争对手数据。四、确定数据来源渠道及数据采集工具（二）常用的数据采集渠道与采集工具数据采集渠道与采集工具一览表采集渠道采集工具适用范围政府部门、行业协会、媒体爬虫、Excel等行业数据等数据平台百度指数、360指数等行业数据的关注热度等商家后台生意参谋、京东商智、店侦探、自有系统等；市场数据、客户数据、产品数据等咨询公司数据平台爬虫、Excel等行业数据、产品数据等问卷调研问卷星、腾讯在线表单等目标客户分析、产品体验等五、确定数据采集时间和采集方法六、制订数据采集工作的组织实施计划数据采集的成功实施必须要有严密细致的组织工作,因此,必须在数据采集方案中拟定一个周密的组织实施计划。其