大数据审计技术 教案 项目四 审计数据采集与预处理（6课时）

教案首页课程名称：《大数据审计技术》授课班级授课日期课题审计数据采集与处理学时2教学目标知识目标1.了解审计数据采集的概念；2.归纳审计数据采集的要点、方法与步骤3.了解审计数据清洗及预处理的作用和审计数据质量要求；4.掌握解决审计数据质量问题和预处理的方法技能目标1.能够灵活运用PowerBI进行审计数据采集2.能够灵活运用PowerBI进行审计数据清洗及预处理素养目标1.养成分析并解决问题的基本职业素养；2.提升职业道德水平和综合职业素质；3.具有数据保密意识和良好职业道德；4.树立遵纪守法的法律意识和风险意识。教学重点难点及突破教学重点：数据获取与预处理教学难点：PowerBI数据处理教学资源教材、案例、在线开放课程、PowerBI官方文档等教学环节安排1.课程回顾2.新课讲解与演练3.教师布置工作任务4.学生完成工作任务5.教师总结6.复习与预习任务发布教学后记重庆财经职业学院教案教学步骤与内容教学随记一、上节内容回顾1.上节课程内容的总结回顾；2.上节课程目标达成情况（学生学习成果）的反馈，课前测试；二、新课讲授与演练项目认知：审计数据采集及预处理（任务驱动教学）项目名称工作任务教学过程考核方式审计数据采集及预处理审计数据采集1.师生互动学习审计数据采集的概念、特点、方法和步骤。2.学生在教师引导下完成课堂实操任务。【课程思政】遵纪守法，做守法公民，社会稳定的守护知识考核：教学管理APP知识测试；技能与素养考核：教学管理APP考勤、讨论、PBL分组任务。审计数据清洗及预处理1.师生互动学习审计数据预处理的作用、质量要求、质量问题处理及预处理方法。2.学生在教师引导下完成课堂实操任务。审计数据验证1.师生互动学习审计数据验证的内蓉及方法。2.学生在教师引导下完成课堂实操任务。项目背景与任务要求介绍课前发布项目背景情况与任务要求，教师教学管理平台发布问题了解学生掌握情况，根据情况确定是否需要讲解。知识准备（一）审计数据采集的概念1.审计数据采集的定义所谓审计数据采集，就是审计人员为了完成审计任务，按照审计目标的需求，在审前调查提出的数据资料清单的基础上，采用一定的方法和工具从被审计单位或其他来源获取相关电子数据的过程。2.审计数据采集的对象审计数据采集的对象一般是被审计单位信息系统中的电子数据，或数据库中的备份数据，审计人员也可以从其他来源获得与被审计单位相关的审计数据，如从市场监督管理、税务等部门获得相关审计数据。（二）审计数据采集的特点一般来说，审计数据采集具有以下特点。1.选择性选择性是指审计人员在进行审计数据采集时只采集与审计需求相关的数据。2.目的性目的性是指审计数据采集是为进行审计数据分析，发现审计线索，获取审计证据做基础数据准备的。审计数据采集是开展大数据审计的首要步骤，是为进行审计数据分析、发现审计线索、获取审计证据做基础数据准备的，具有一定的目的性。3.可操作性可操作性是指审计人员在进行审计数据采集时，需要根据被审计单位的实际情况选择最合适的审计数据采集方案。4.复杂性被审计单位信息化程度的差异性造成了审计人员在审计数据采集过程中不能采用同一种审计数据采集方法，必须根据被审计单位的实际情况，选择合适的审计数据采集方法，从而造成了审计数据采集的复杂性。（三）审计数据采集的方法一般而言，审计数据采集的方法大致可以分为以下几类，但不限于此。1.直接复制2.通过中间文件采集3.通过ODBC接口采集4.通过备份／恢复的方式采集5.通过专用模板采集（四）审计数据采集的步骤在实际的大数据审计过程中，审计数据采集一般可以归纳为以下几个主要步骤，如图所示。任务实施任务一数据采集子任务一文件数据采集PowerBI可以获取多种文件格式的数据，包括Excel、文本、CSV、XML、JSON、PDF等，本任务中获取的是存储在文件夹中2020年1月到2022年12月三年期间36个Excel数据表的数据，我们可以使用PowerBI数据获取功能中的从“文件夹”获取数据功能来采集多个Excel数据表的数据。子任务二数据库数据采集数据库是一种重要的数据存储方式，企业的许多数据都是存储在数据库中的，作为一名审计人员掌握如何从数据库中采集和获取数据是非常有必要的。利用PowerBI从数据库中采集数据子任务三网页数据采集对外部数据往往不能通过企业获取的数据文件或数据库获取，需要从网页进行采集和抓取，PowerBI也提供了从网页采集和获取数据的功能。利用PowerBI从网页采集数据。任务二数据处理子任务一不完整数据预处理不完整数据一般有删除和数据补齐两种处理方式。一般在数据量较大、缺失数据不能有效补齐，同时缺失数据不会对分析结果造成重大影响时，可将有缺失数据的数据记录直接删除；在数据量较小且缺失数据会对数据分析结果造成影响时一般不能将数据删除，可以采用均值、临近值或通过数据关联、信息关联等方式找到缺失数据的具体数值将其补齐。（一）查找数据质量问题（二）删除缺失值（三）补齐缺失值子任务二错误数据预处理错误值也包括直接删除和修正（补缺）两大类处理方式。错误值删除处理方式一般也是在数据量大，且错误数据不能补齐的情况下采用；在数据量较小且错误数据能够补齐时一般都是采用数据修正或补齐两种方式。（一）删除错误值（二）修正错误值子任务三不一致数据预处理不一致数据主要是指同一字段中数据格式不一致，对本任务中不一致数据的处处理可以采用替换值的方式进行处理子任务四重复数据处理本任务中出现的重复数据经过审计人员核查发现确实是订单信息录入重复，需要将重复数据删除任务小结1.PowerBI支持多种类型数据的导入和获取，包括Excel、文本、CSV、XML、JSON、SQLServer、Access、Oracle、SAPBusinessWarehouse、Web等多种文件、数据库、网页数据类型，在使用PowerBI进行数据采集时，应结合需求选择恰当的类型和方式。 2.相较于Python、八爪鱼、ContentGrabber等专业数据采集软件，数据运用PowerBI进行数据采集的灵活性相对差一些，当PowerBI不能满足数据采集需求时可以考虑采用上述专业的数据采集软件进行数据采集。3.通过恰当的数据预处理工作，可以有效提升审计数据的完整性、正确性和一致性，能够在一定程度上保证审计数据分析的质量，在进行审计数据缺失值、错误值、不一致值和重复值处理时一定要结合数据的实际情况采取恰当的处理方法。4.PowerQuery中常用的用于数据预处理的功能包括删除行、替换值、设置数据类型、添加列等，同学们应熟练掌握以上功能的使用技巧。三、发布任务教师将实训任务发布到教学管理平台，学生完成任务后提交任务。四、学生完成工作任务学生在教学管理平台完成相关实验。五、教师对学生完成情况进行总结教师通过教学管理平台及时了解本节课教学目标的达成情况。六、预习任务发布在线课程学习，预习下节课内容重庆财经职业学院教案首页课程名称：《大数据审计技术》授课班级授课日期课题审计数据验证-检查钩稽关系是否正确学时2教学目标知识目标1.了解审计数据验证的意义；2.归纳总结审计数据验证的方法技能目标1.能够灵活运用审计数据验证方法进行审计数据验证。素养目标1.养成分析并解决问题的基本职业素养；2.提升职业道德水平和综合职业素质；3.具有数据保密意识和良好职业道德；4.树立遵纪守法的法律意识和风险意识。教学重点难点及突破教学重点：审计数据验证教学难点：审计数据验证教学资源教材、案例、在线开放课程、PowerBI官方文档等教学环节安排1.课程回顾2.新课讲解与演练3.教师布置工作任务4.学生完成工作任务5.教师总结6.复习与预习任务发布教学后记重庆财经职业学院教案教学步骤与内容教学随记一、上节内容回顾1.上节课程内容的总结回顾；2.上节课程目标达成情况（学生学习成果）的反馈，课前测试；二、新课讲授与演练项目认知：审计数据采集及预处理（任务驱动教学）项目名称工作任务教学过程考核方式审计数据采集及预处理审计数据采集1.师生互动学习审计数据采集的概念、特点、方法和步骤。2.学生在教师引导下完成课堂实操任务。【课程思政】遵纪守法，做守法公民，社会稳定的守护知识考核：教学管理APP知识测试；技能与素养考核：教学管理APP考勤、讨论、PBL分组任务。审计数据清洗及预处理1.师生互动学习审计数据预处理的作用、质量要求、质量问题处理及预处理方法。2.学生在教师引导下完成课堂实操任务。审计数据验证1.师生互动学习审计数据验证的内容及方法。2.学生在教师引导下完成课堂实操任务。项目背景与任务要求介绍课前发布项目背景情况与任务要求，教师教学管理平台发布问题了解学生掌握情况，根据情况确定是否需要讲解。知识准备（一）审计数据验证的意义在大数据审计的过程中，审计人员必须不断进行审计数据验证，以保证审计数据采集的真实性和完整性，以及审计数据预处理和审计数据分析的正确性。审计数据验证不仅是确保电子数据真实、正确的重要手段，也是提高审计数据采集、审计数据预处理和审计数据分析质量，降低审计风险的重要保证。1.需要验证数据的真实性2.需要验证数据的完整性3.减少人为所造成的失误（二）审计数据验证的内容1.验证待采集数据的真实性2.验证待采集数据的完整性3.验证转换后数据的准确性4.验证转换后数据的完整性5.验证转换后数据的有效性（三）审计数据验证的方法一般来说，审计数据验证的方法主要有以下几种。1.利用数据库的完整性约束性进行验证2.利用数据量进行统计验证(1)核心数据验证(2)验证记录条数3.利用业务规则进行验证4.数据结构转换验证5.利用抽样方法进行验证任务实施子任务一检查钩稽关系是否正确对2022年1月至12月收发存汇总表钩稽关系的检查可以利用公式“期末=期初+入库-出库”从金额和数量两方面开展。本任务针对收发存汇总表勾稽关系采用逐月检查的方式开展。任务小结1.审计数据验证包括验证待采集数据的真实性、完整性和验证转换后数据的准确性、完整性和有效性，以减少人为所造成的失误。2.审计数据验证的方法利用数据库的完整性约束性、用数据量统计、利用业务规则、数据结构转换、抽样进行验证，但不仅限于此。三、发布任务教师将实训任务发布到教学管理平台，学生完成任务后提交任务。四、学生完成工作任务学生在教学管理平台完成相关实验。五、教师对学生完成情况进行总结教师通过教学管理平台及时了解本节课教学目标的达成情况。六、预习任务发布在线课程学习，预习下节课内容重庆财经职业学院教案首页课程名称：《大数据审计技术》授课班级授课日期课题审计数据验证-查找重号、断号出库单学时2教学目标知识目标技能目标1.能够灵活运用审计数据验证方法进行审计数据验证。素养目标1.养成分析并解决问题的基本职业素养；2.提升职业道德水平和综合职业素质；3.具有数据保密意识和良好职业道德；4.树立遵纪守法的法律意识和风险意识。教学重点难点及突破教学重点：审计数据验证教学难点：审计数据验证教学资源教材、案例、在线开放课程、PowerBI官方文档等教学环节安排1.课程回顾2.新课讲解与演练3.教师布置工作任务4.学生完成工作任务5.教师总结6.复习与预习任务发布教学后记重庆财经职业学院教案教学步骤与内容教学随记一、上节内容回顾1.上节课程内容的总结回顾；2.上节课程目标达成情况（学生学习成果）的反馈，课前测试；二、新课讲授与演练项目认知：审计数据采集及预处理（任务驱动教学）项目名称工作任务教学过程考核方式审计数据采集及预处理审计数据采集1.师生互动学习审计数据采集的概念、特点、方法和步骤。2.学生在教师引导下完成课堂实操任务。【课程思政】遵纪守法，做守法公民，社会稳定的守护知识考核：教学管理APP知识测试；技能与素养考核：教学管理APP考勤、讨论、PBL分组任务。审计数据清洗及预处理1.师生互动学习审计数据预处理的作用、质量要求、质量问题处理及预处理方法。2.学生在教师引导下完成课堂实操任务。审计数据验证1.师生互动学习审计数据验证的内容及方法。2.学生在教师引导下完成课堂实操任务。项目背景与任务要求介绍课前发布项目背景情况与任务要求，教师教学管理平台发布问题了解学生掌握情况，根据情况确定是否需要讲解。任务实施子任务二查找重号、断号出库单被审计单位出库单号采用“CK-XXXX-XXXXXX”的规则进行出库单编号，其中“CK”代表出库，“XXXX”代表年份，“XXXXXX”代表当年的出库顺序号。要求出库顺序号必须连续、不能出现重号、漏号的情况，审计人员获取到被审计单位“2022年1月至12月出库明细表”，该表包含出库单号、出库日期、出库用途、领用部门、领用人等信息。值得注意的是为了方便管理，公司每天由专人一次性对商品的出库打包处理，所以一张出库单上只有一种物料（商品）。（一）查找重号出库单针对该公司出库单的特点，审计人员决定采用PowerBI作为分析工具对出库单号进行重号验证（二）查找断号出库单针对