4.2-机器人色块分拣图像数据集标注《智能机器人技术应用》

项目四机械臂色块分拣深度神经网络模型训练创灵实验平台机器人色块分拣图像数据集标注任务二职业能力目标01任务描述与要求02任务分析与计划03知识储备04任务实施05任务检查与评价06任务小结07任务拓展08任务二机器人色块分拣图像数据集标注掌握精灵标注助手标注工具使用，在Window10上安装图片标注工具；学习并了解目标检测图像标注要求；掌握语音识别关键字匹配；掌握标注数据转换，使用图片标注工具进行相应分类图片标注，并能够自行编写Python脚本，自动化处理标注数据。掌握精灵标注助手标注工具使用掌握目标检测图像标注要求掌握标注数据转换职业能力目标01实验目的实验内容职业能力目标01任务描述与要求02任务分析与计划03知识储备04任务实施05任务检查与评价06任务小结07任务拓展08任务二机器人色块分拣图像数据集标注

此任务要求同学们掌握精灵标注助手标注工具使用，在Window10上安装图片标注工具；学习并了解目标检测图像标注要求；掌握标注数据转换，使用图片标注工具进行相应分类图片标注，并能够自行编写Python脚本，自动化处理标注数据。任务描述任务要求掌握精灵标注助手标注工具使用，完成工具安装；掌握目标检测图像标注要求，学习如何对图像数据进行类型标注；标注数据并完成数据转换。任务描述与要求02职业能力目标01任务描述与要求02任务分析与计划03知识储备04任务实施05任务检查与评价06任务小结07任务拓展08任务二机器人色块分拣图像数据集标注任务分析思考一下，数据标注在生活中还应用于哪些方面？根据自己的了解，为什么要将标注数据进行转换后再进行模型训练？任务分析与计划03任务计划表项目名称创灵实验平台任务名称机器人色块分拣图像数据集标注计划方式自主设计计划要求请用6个计划步骤来完整描述出如何完成本次任务序号任务计划1

2

3

4

5

6

通过上面的思考，你是否对本任务要完成的工作有所了解？让我们一起来制订完成本次任务的实施计划吧！任务分析与计划03职业能力目标01任务描述与要求02任务分析与计划03知识储备04任务实施05任务检查与评价06任务小结07任务拓展08任务二机器人色块分拣图像数据集标注04知识储备数据标注2目标检测1标注数据转换3什么是目标检测？04

目标检测，也叫目标提取，是一种基于目标几何和统计特征的图像分割。它将目标的分割和识别合二为一，其准确性和实时性是整个系统的一项重要能力。尤其是在复杂场景中，需要对多个目标进行实时处理时，目标自动提取和识别就显得特别重要。目标检测04目标检测常用的评价指标有：交并比，准确率，精度，召回率，FPR，F1-Score，PR曲线-AP值，ROC曲线-AUC值，mAP值。交并比：检测结果的矩形框与样本标注的矩形框的交集与并集的比值。准确率：最常见的评价指标，就是被检测正确的样本数除以所有的样本数。精度：真正的正样本数除以预测为正样本的样本数。召回率：预测正确的正样本数除以所有真正的正样本数。FPR：指实际负例中，错误的判断为正例的比例。F1-Score：精确率和召回率的调和平均数，最大为1，最小为0。PR曲线-AP值：精度与召回率的曲线，以精度为纵坐标，召回率为横坐标，AP值也称为平均准确率，是对不同召回率点上的准确率进行平均，在PR曲线图上表现为PR曲线下面的面积。AP的值越大，则说明模型的平均准确率越高。ROC曲线-AUC值：以FPR为横坐标，以TPR(灵敏度)为纵坐标。AUC是Areaundercurve的首字母缩写，即ROC曲线下的面积，介于0和1之间。mAP值：即平均精度均值，指不同召回率下的精度的平均值。目标检测任务的六大难点与挑战041.待检测目标尺寸很小，导致占比小，检测难度大；2.关于小目标检测的问题，可以参考：深度学习检测小目标常用方法；3.待检测目标尺度变化大，网络难以提取出高效特征；4.待检测目标所在背景复杂，噪音干扰严重，检测难度大；5.待检测目标与背景颜色对比度低，网络难以提取出具有判别性的特征；6.各待检测目标之间数量极度不均衡，导致样本不均衡；7.检测算法的速度与精度难以取得良好平衡。04知识储备213数据标注标注数据转换目标检测04什么是数据标注？

数据标注是指给原始数据（如图像、视频、文本、音频和3D等）添加标签的过程，带有标签的数据被称为训练数据，这些标签形成了数据属于哪一类对象的表示，帮助机器学习模型在未来遇到从未见过的数据时，也能准确识别数据中的内容，训练数据可以有多种形式，包括图像、语音、文本或特征，这取决于所使用的机器学习模型和手头要解决的任务。它可以是有标注的或无标注的。当训练数据被标注时，相应的标签被称为GroundTruth。04数据标注

图像数据标注包括2D包围框标注、多边形标注、语义分割标注、关键点标注、折线标注、立体框标注等。语音/音频数据标注是对来自人、动物、环境、乐器等的音频成分进行分类和转写。文本标注类型较为丰富，但不论哪种类型，它背后的主要意图是让机器学习算法能够理解文本背后的语义含义。思考一下，如果数据集中存在错误标注会有什么影响？有什么解决方案？04知识储备213目标检测数据标注数据转换什么是数据转换？04

数据转换是将数据从一种格式或结构转换为另一种格式或结构的过程。数据转换对于数据集成和数据管理等活动至关重要。数据转换可以包括一系列活动：可以转换数据类型，通过删除空值或重复数据来清理数据，丰富数据或执行聚合，具体取决于项目的需要。请根据自己的了解，解释一下我们为什么要进行数据转换？这不是会增加计算量吗？为什么要进行数据转换？04

软件的全面升级，肯定带来数据库的全面升级，每一个软件对其后面的数据库的构架与数据的存诸形式都是不相同的，这样就需要数据的转换了。

主要是由于数据量的不断增加，原来数据构架的不合理，不能满足各方面的要求。由数据库的更换，数据结构的更换，从而需要数据本身的转换。职业能力目标01任务描述与要求02任务分析与计划03知识储备04任务实施05任务检查与评价06任务小结07任务拓展08任务二机器人色块分拣图像数据集标注图片标注205任务实施安装图片标注工具1安装图片标注工具步骤一：下载精灵标注助手安装包可到上下载对应window10版本的安装包，或使用实验提供的资源包里的安装包进行安装安装图片标注工具步骤一：下载精灵标注助手安装包可到上下载对应window10版本的安装包，或使用实验提供的资源包里的安装包进行安装步骤二：安装精灵标注助手双击安装包，选择我接受，如下图：步骤三：选择安装目录点击安装，进行软件安装，如下图安装图片标注工具步骤三：选择安装目录点击安装，进行软件安装，如下图。安装图片标注工具步骤四：打开安装好的精灵标注工具，如下图。安装图片标注工具注：可以正常打开安装后的软件，则表明安装成功图片标注205任务实施安装图片标注工具1步骤一：打开安装好的精灵标注工具，如下图。图片标注步骤二：新建一个标注项目（图片数据在同级目录下image.rar）图片标注步骤二：新建一个标注项目（图片数据在同级目录下image.rar）图片标注步骤三：导入要标注的图片(注：导入的图片路径不能有中文)，分类值填写【red,green,yellow,blue】(注：直接填写单词，中间使用英文逗号间隔，不需要附带引号)，点击创建。图片标注步骤三：导入要标注的图片(注：导入的图片路径不能有中文)，分类值填写【red,green,yellow,blue】(注：直接填写单词，中间使用英文逗号间隔，不需要附带引号)，点击创建。步骤四：标注框选择后，标注信息填写选择对应的类别，然后按住ctrl+s完成标注保存。图片标注步骤五：完成所有的数据标注后点击中间的菜单，导出标注信息xml文件，如下图：图片标注导出标记信息步骤六：完成所有的数据标注后点击中间的菜单，导出标注信息xml文件，如下图：图片标注选择确定导出步骤七：最后我们要完成我们的数据标注并检查，我们要得到我们对应分类好的数据：

也就是我们设置的red、green、yellow、blue等颜色分类数据，便于我们在下一章使用模型训练工具。图片标注模型训练工具职业能力目标01任务描述与要求02任务分析与计划03知识储备04任务实施05任务检查与评价06任务小结07任务拓展08任务二机器人色块分拣图像数据集标注任务检查与评价06序号评价内容评价标准分值得分1知识运用（20%）掌握相关理论知识，理解本次任务要求，制定详细计划，计划条理清晰，逻辑正确（20分）20分

理解相关理论知识，能根据本次任务要求、制定合理计划（15分）了解相关理论知识，有制定计划（10分）无制定计划（0分）2专业技能（40%）安装图片标注工具，完成图片标注，并将标注结果导出。（40分）40分

安装图片标注工具，完成图片标注。（25分）安装图片标注工具。（15分）没有完成机机器人色块分拣图像数据集标注实验。（0分）3核心素养（20%）具有良好的自主学习能力、分析解决问题的能力、整个任务过程中有指导他人（20分）20分

具有较好的学习能力和分析解决问题的能力，任务过程中无指导他人（15分）能够主动学习并收集信息，有请教他人进行解决问题的能力（10分）不主动学习（0分）4课堂纪律（20%）设备无损坏、设备摆放整齐、工位区域内保持整洁、无干扰课堂秩序（20分）20分

设备无损坏、无干扰课堂秩序（15分）无干扰课堂秩序（10分）干扰课堂秩序（0分）总得分1、请参照评价标准完成自评和对其他小组的互评。2、各组请代表分析本组任务实施经验。职业能力目标01任务描述与要求02任务分析与计划03知识储备04任务实施05任务检查与评价06任务小结07任务拓展08任务二机器人色块分拣图像数据集标注任务小结07

在大家学习完本任务后，是否还有许多为解决的问题？那么接下来我们来进行任务小结，通过流程图了解本章学习了什么，对相应知识进行巩固复习，并对下一章机械臂