数据采集与处理 课件 任务3 认知数据采集的方法

项目二数据采集概述任务3认知数据采集的方法（一）数据的常见种类按照获取途径的不同，可分为初级数据和次级数据。1.初级数据一、初级数据的采集方法初级数据也称原始数据或一手数据，是指反映被调查对象原始状况的数据，是直接从被研究对象处取得的资料。如原始记录、统计台账，调查问卷答案，实验结果等。初级数据的优点是及时、可信度高，可以解决二手数据不能解决的问题；但也存在主观性强、收集成本高、难以收集的问题。（一）数据的常见种类2.次级数据一、初级数据的采集方法次级数据又称二手数据，是指已经存在的经他人整理分析过的数据，如期刊，报纸、广播、电视以及互联网上的资料，各级政府机构公布的资料，企业内部记录和报告等。次级数据的优点是客观、易于获取、取得迅速、成本低；缺点是相关性、时效性、可靠性较差。（二）初级数据的采集方法1.实地调查法一、初级数据的采集方法1）访问法

访问法是通过有目的、有计划、有方向的口头交谈向被调查者了解问题和情况，获取原始资料的一种方法。

该种方法的优点是:被调查对象的回答率大大高于问卷法，适应性强，调查内容机动性大，访谈者对资料采集过程可进行有效控制；缺点是：访谈成本高、匿名性差，访谈结果与访谈人员的素质、能力及其现场表现直接相关。

根据调查人员与被调查者接触方式的不同，又可将访问法分为人员访问、电话访问、邮寄访问和网上访问等。1.实地调查法一、初级数据的采集方法2）观察法观察法是指观察者带有明确目的到观察现场，凭借自己的眼睛或摄像器材，在调查现场进行实地考察，记录正在发生的市场行为或状况，以获取各种原始资料的一种非介入性调查方法，又称为直接观察法。

观察法一般用于对受访者客观状况进行调查，这种方法的主要特点是：调查者与被调查者不发生直接接触，而是由调查者从侧面直接地或间接地借助仪器把被调查者的活动按实际情况记录下来，避免让被调查者感觉正在被调查，从而提高调查结果的真实性和可靠性，使取得的资料更加贴近实际。1.实地调查法一、初级数据的采集方法2）观察法优点：是可以获得更加真实，客观的原始资料；缺点:首先，观察法仅是取得表面性资料，只能观察到正在发生的动作和现象；其次，调查者必须具备较高的业务能力、敏锐的洞察能力和良好的记忆力；再次，观察法要求较高的调研费用和较长的观察时间。1.实地调查法一、初级数据的采集方法3）实验法实验法是指在实验中控制一个或多个变量，在有控制的条件下得到观测结果的一种调查方法。在实验中，研究人员要控制某一情形的所有相关方面，操纵少数感兴趣的变量，然后观察实验的结果，获得的实验数据就是在实验中控制实验对象而搜集到的变量数据。1.实地调查法一、初级数据的采集方法4）报告法报告法亦称通讯法，是指由受访者填写有关报告表格，向调查人员报告自身情况的资料采集方法。

这种方法是被调查者根据统计报表的格式要求，按照隶属关系，逐级向有关部门上报统计资料的一种调查方法。其特点是：具有统一项目、统一表式、统一要求和统一上报程序;能够进行大量调查。现行统计报表制度采用的就是这种方法。1.实地调查法一、初级数据的采集方法5）问卷调查法问卷调查法就是根据调查目的，由调查者运用统一设计的问卷向被选取的调查对象了解情况或征询意见的调查方法。问卷调查法是目前最常用的调查方法,其优点在于利用问卷限定了访问员的询问方式和受访者的回答方式,从而有助于获得符合分析要求的定量数据。问卷调查法不需要访问员进行自由联想和发挥,从而降低了对访问员自身素质的要求,更适用于大规模的民意调查和商业调查活动。2.网络直接调查法一、初级数据的采集方法网络直接调查法即利用互联网直接进行问卷调查、电子邮件调查、网上论坛调查、网上在线座谈会调查调查等收集初级数据的地方。（一）内部数据采集二、次级数据的采集方法

内部数据来自组织内部。内部数据的采集来源为业务资料、统计资料、数据库等，采集方法包括报表采集、数据库采集、系统日志数据采集等。（一）内部数据采集二、次级数据的采集方法（1）报表采集。企业可以通过相关业务部门每日、每周、每月的工作报表进行采集，如销售明细、出入库清单、客服记录等，进行数据采集。（2）数据库采集。企业将数据库采集系统直接对接到业务后台的服务器。业务后台每时每刻都会产生大量业务记录，并可直接被数据库采集系统采集，最后由特定的处理系统进行数据分析。（3）系统日志数据采集。系统日志数据采集主要针对互联网上的商务活动，例如网站日志会记录访客IP地址、访问时间、访问次数、停留时间、访客来源等数据。通过对这些日志信息进行采集、分析，可以挖掘数据中的潜在价值。（二）外部数据采集二、次级数据的采集方法外部数据是指来自组织外部获得的二手数据。外部数据的采集来源为公开出版的资料、计算机数据库、互联网资料等。（二）外部数据采集二、次级数据的采集方法1.文献资料采集

文献资料采集主要是通过政府部门、行业协会、新闻媒体、出版社等发布的统计数据、行业调查报告、新闻报道、出版物采集数据。2.情报联络网法

情报联络网法,就是企业在全国范围内或国外有限地区内设立情报联络网,使情报资料采集工作的触角伸到四面八方。3.专业数据库

数据库指的是按照一定要求采集且具有内部相关性的数据的集合体。例如,中国知网数据库、辛迪加数据等。（二）外部数据采集二、次级数据的采集方法1.文献资料采集

文献资料采集主要是通过政府部门、行业协会、新闻媒体、出版社等发布的统计数据、行业调查报告、新闻报道、出版物采集数据。2.情报联络