基于计算机视觉的自动胶囊检测机研发可行性报告

1、基于计算机视觉的自动胶囊检测机研发可行性报告一、立项的背景和意义意义综述：胶囊检测采用人工方式，效率低，招工难，若能实现自动检测，将极大提升本行业的产能与竞争力，实现产业转型升级。1、国内胶囊生产情况概述目前中国年产胶囊约2000亿粒，产能约占全球的30%，是全球主要的胶囊生产加工基地。预计中国胶囊生产将保持每年二位数的增长，产业巨大，对企业所在地的经济增长、保证就业起到了积极的作用。2、当前困难与问题胶囊产业正逐步走向自动化、智能化的产业道路，但作为其中关键的环节胶囊缺陷检测环节，还停留在手工阶段，目前的检测方式完全依赖于人工。人工方式主要存在以下问题：招工日益困难，目前不少企业因检测工不到

2、位而影响了生产，而检测工的频繁跳槽亦对企业的正常生产造成了极大影响，目前各企业对引入自动检测手段或设备需求极其迫切； 人工检测速度慢，跟不上大规模生产的需求；目前国内一流胶囊企业人工检测速度峰值达6万粒/小时左右；一般企业人工检测速度为3-5万粒/小时左右； 检测结果易受检测者主观因素（熟练程度、经验判断等）影响；人工方式对劳动者视力会造成极大影响，这既会造成大量劳动纠纷，也不符合国家保护劳动者相关权益的基本精神。检测手段的落后已成为胶囊生产的行业短板，严重制约了行业的快速发展。3、立项意义根据以上分析，实现胶囊自动化检测意义重大。若能实现自动化检测，既可以克服行业短板、促进企业快速发展，也有

3、利于劳动者权益保护，同时有助于企业转型升级、提升企业竞争力。二、国内外研究现状和发展趋势研究综述：胶囊检测是基于计算机视觉而开发的应用系统，其成功与否关键在于计算机视觉算法的开发，目前该领域被国外所垄断。1、国外现状综述国外该领域发展情况可概括为：核心算法先进成熟，一般不介入低端的应用系统开发。1.1成熟的算法-Halcon国外目前已开发出成熟的计算机视觉函数库，其中全球最知名的是德国的MVTec Halcon（V7.0）。该函数库可为用户快速开发图像分析和机器视觉程序提供1100多种性能突出的控制库，用以解决模糊分析、形态识别、模式匹配、3D校正等问题。该函数库具有很高的商业化程度，使用费用

4、很高。1.2开源的算法-OpenCV该算法于1999年由Intel建立，是一个开源的跨平台计算机视觉库，可以运行在Linux、Windows和Mac OS操作系统上。可实现图像处理和计算机视觉方面的很多通用算法。该算法因开源（免费）而得到广大计算机视觉应用开发商的使用。1.3在胶囊行业中的应用现状如同计算机操作系统一样，国外主要将精力放在核心算法（含API）研究上，一般不介入低端的应用系统开发。且因胶囊制造属劳动密集型产业，发达国家基本上没有类似产业，因此这一产品的国际市场基本空白。2、国内现状国内该领域发展情况可概括为：既无核心函数库，亦无成熟的应用领域。2.1国内软件研发现状目前国内没有计

5、算机视觉核心函数，也没有可与Halcon匹敌的商业化软件。国内开发任何计算机视觉领域应用程序，要么向国外支付高额的软件版权费，要么使用开源的OpenCV，做些简单的应用开发。目前Halcon收费标准大致有二种：n 收取年费，一般为90万欧元/年n 按次收费，一般按安装的次数或台数收费，约5000元人民币/台2.2自动检测过程模型根据检测需求，自动检测设备基本工作原理如下：要完成上述工作，该设备需具备以下几类模块：2.3各模块分析机械装置：该装置实现胶囊的下料、输送，是整个检测系统的硬件承载设备，该装置生产加工属传统的机械加工行业，无技术难度，且属于产能饱和行业。相机：检测系统的“眼睛”，主要用

6、于高速摄像，提取胶囊表面情况，为计算机判决提供图象依据。光源：用于为被检测系统提供透视光线。分析系统：该系统是整个检测系统的核心，根据提取的胶囊表面情况进行大容量、高性能、快速度的图象分析、比对、处理，为下一步动作提供触发依据。控制部分：根据判决结果，触发相应控制系统，将次品剔除并收集成品。输出系统：显示检测内容，输出检测结果。2.4国内产品开发现状目前国内已有6-8家企业正在进行自动检测机产品开发，但开发主要表现为在租用国外核心算法的基础上开发控制电路和机械硬件部分，开发工作科技含量不高。这些企业分布为：杭州3家，上海2家，新昌3家（其中一家与广东潮州合作开发）。3、发展趋势从行业需求来看，

7、不断提高的自动化检测方式必将取代人工方式，成为胶囊生产不少或缺的一个环节。同时，计算机视觉在其它工业领域也将进一步得到广泛应用，产业前景巨大。如与绍兴特色产业紧密结合的纺织品检测、塑料片材检测、轴承等机加工检测、纸张检测、集成电路表面检测等，这些领域都将采用计算机视觉检测系统。三、研究开发内容和技术关键1、研究开发内容本产品的研发包括实际问题数学建模、系统仿真、核心算法研发、光学系统开发、控制软件研发、机械设备研发等六部分，其中核心算法研发最关键。1）暇疵量化与数学建模将胶囊的暇疵进行量化处理并建立相应数学模型是研究工作的首要步骤。这一工作包括暇疵类型整理（收集、分类、归纳）、建立图片库、模型

8、建立、模型校正与优化。2）系统仿真为了探讨本研究工作是否可行，是否具备现实操作性，必须建立仿真系统平台对问题进行模拟，以期为后续决策提供依据。系统仿真将在一个月内完成，其工作包括仿真平台搭建、仿真系统程序开发、仿真测试、输出结论。3）核心算法开发核心算法开发包括软件工程算法研究、建模、基于VC的源程序开发。4）光学系统开发光学系统是计算机视觉的“眼睛”，其研究工作并不是核心，但关系到整个系统的高效性和准确性。光学系统开发包括各种高速相机在工业中的应用、相机物理参数研究与确定、光源配置参数与调试工作。5）控制电路开发 控制电路是整个系统构成的有机组成部分，它将根据计算机判决系统进行有效触发，启动

9、相应控制程序，合理收集检测后的成品和次品。6）机械部分设计工业外型设计关系到产品的美观、实用，是产品研发的重要工作。2、技术关键计算机视觉系统核心算法开发是本项研究的技术关键，这部分工作是整个研究工作的核心和重中之重，也决定了整个项目的成败。关键在于要突破国外技术的垄断，面向对象开发相关算法、建立特定函数、编制系统源程序。四、预期目标预期经济指标：一期销售额达到300万元人民币，每年节汇10万欧元产业化前景：从胶囊检测延伸至纺织品检测、集成电路检测、片材检测、机加工检测，可普遍代替当前的人工检测方式，市场巨大1、经济指标1.1国内厂家调研目前国内约有100多家胶囊生产企业，其分布如下：省份数量

10、省份数量省份数量省份数量浙江57安徽3重庆2内蒙古1江苏6湖北3广西1山西1四川6北京2河北1上海1江西5福建2河南1天津1广东4吉林2黑龙江1辽宁1山东4陕西2青海1湖南1总计1091.2国内规模较大的胶囊企业情况省份名单生产规模（亿粒）安徽安徽黄山胶囊股份有限公司200山西山西广生胶囊有限公司200江苏苏州胶囊有限公司180江苏江苏力凡胶囊有限公司120江西武宁县林全胶囊有限公司广西南宁林全胶囊有限公司120山东青岛益青药用胶囊有限公司100青海青海明诺胶囊有限公司80江西九江昂泰胶囊有限公司60上海上海广得利胶囊有限公司60新昌县绍兴月山胶囊有限公司50新昌县新昌钱江胶囊有限公司80新昌

11、县浙江和信胶囊有限公司78新昌县浙江创始胶囊有限公司50新昌县浙江绿健胶囊有限公司60诸暨市浙江双鹰空心胶囊50嵊州市新昌县药峰胶囊有限公司50新昌县浙江天龙胶丸有限公司110新昌县浙江宏辉胶丸有限公司80新昌县浙江药联胶丸有限公司50新昌县新昌县天林化工胶囊有限公司60新昌县浙江新大中山胶囊有限公司60新昌县新昌县石城胶丸有限公司50嵊州市浙江昂利康胶囊有限公司601.3新昌调研情况绍兴市共有51家胶囊企业，占了全国企业总数的50%左右。其中新昌县共有44家胶囊企业，年产值超50亿的23家企业中，新昌占据了11家，新昌也因此有“中国胶囊之乡”之称。新昌县集中了如此众多的胶囊企业，为我公司本地

12、化科研与服务提供了更为便利的条件。1.4生产线所需检测机配置情况 一般而言，生产线和检测机的配置如下：生产线类型半套检测机配置全套检测机配置全国生产线总量半套检测机需求全套检测机需求1条半自动线2台1台980条半自动线1960台980台1条全自动线1台270条全自动线270台总计1960台1250台1.5市场容量预估目前各厂家全套检测机定价在16-18万人民币之间，半套检测机尚无定价。假设全套、半套检测机价格相同，以每台15万人民币计，全套检测机市场容量约1.8亿左右，半套检测机市场容量约3亿左右，全部3210台自动检测机可形成约4.8亿左右的市场。2、社会效益2.1最大程度降低劳动伤害使用自

13、动检测机，人工介入大幅降低，对于保护劳动者权益与身心健康大有裨益。2.2带动机械产业发展该产品若实现市场化，将极大带动机械加工行业的发展，在一定程度上缓解机械行业产能过剩的局面。3、后续前景广阔在前期开发基础上，对其它行业进行了调研。结果表明，该检测机可延伸到纺织品检测、机械加工检测、纸张检测、塑料片材检测、集成电路检测等行业，市场前景非常广阔。五、研究方案、技术路线、组织方式与课题分解1、研究方案1.1研究的方法1）数学建模法数学模型（Mathematical Model）是一种模拟，是用数学符号、式子、程序、图形等对实际课题本质属性的抽象而又简洁的刻划，它或能解释某些客观现象，或能预测未来

14、的发展规律，或能为控制某一现象的发展提供某种意义下的最优策略或较好策略。数学模型一般并非现实问题的直接翻版，它的建立常常既需要对现实问题深入细微的观察和分析，又需要灵活巧妙地利用各种数学知识。这种应用知识从实际课题中抽象、提炼出数学模型的过程就称为数学建模（Mathematical Modeling）。 不论是用数学方法在科技和生产领域解决哪类实际问题，还是与其它学科相结合形成交叉学科，首要的和关键的一步是建立研究对象的数学模型，并加以计算求解。数学建模是本次研究方法中最重要的一种研究方法，其作用在于把胶囊暇疵转化成数学模型，便于计算机系统读取、识别、处理与判决，从而做出相关的触发。2）系统仿

15、真法系统仿真（system simulation），就是根据系统分析的目的，在分析系统各要素性质及其相互关系的基础上，建立能描述系统结构或行为过程的、且具有一定逻辑关系或数量关系的仿真模型，据此进行试验或定量分析，以获得正确决策所需的各种信息。在本研究工作中，不可能完全在胶囊生产行业进行大量测试，这既无必要，也会导致研究工作拖沓冗长。建立仿真系统、系统的结构模型和量化分析模型，将其转换为适合在计算机上验证的仿真系统，这可极大地推进研究工作。系统仿真法是本研究工作中关键方法之一。3）实验法实验法是人们为实现预定目的，在人工控制条件下，通过干预和控制科研对象而观察和探索科研对象有关规律和机制的一种

16、研究方法。它是人类获得知识、检验知识的一种实践形式。在本研究方案中，要实现胶囊自动检测，必须通过大量的实验进行测试、预演、调整及论证，必然广泛使用实验法。1.2研究的步骤本研究步骤将严格按以下步骤进行：暇疵量化与数学建模、系统仿真及结果输出、核心算法开发、光学系统开发、控制电路开发及机械配套。暇疵量化及其数学模型是否能成功建立，是整个研究的基础，必须在充分研究实际问题及客户需要的基础上建立准确的模型，为后期研究提供准确的底层数据，否则整个研发将难以为继。系统仿真是在仿真平台上验证本研究课题是否备现实操作性。系统仿真工作具有否定性，直接关系到本项目是否需要继续深入进行。核心算法开发和光学系统开发

17、、控制电路开发具有并行性，可在核心算法启动并取得相应结果后次递启动。2、技术路线核心任务3、组织方式根据本研究课题的实际需要及其跨学科的特点，将整个研发中心分别项目规划和研发二大部门，采用如下组织方式。4、课题分解课题子课题责任人基于视觉检测的算法研究暇疵图库建立与数学建模软件工程算法研究与建模检测程序代码编写与优化（VC6.0）光学系统研究各种高速相机在工业中的应用研究相机物理参数研究与确认光源及其配置参数研究与选择控制系统研究成次品收集与剔除控制软件研究机械部分研究机械承载部分选型与研究新型电机在传送中的应用六、计划进度安排阶段任务起止时间任务分解完成标志市场可行性调研2011/5/1-2

18、011/5/31胶囊行业现状摸底完成调研报告 量化相关指标 完成立项依据胶囊性征调研与分析生产线状况及其对自动检测的影响胶囊暇疵标准化研究客户需求分析调研国内外竞争对手调研市场容量调研与我方市场预期暇疵量化与数学建模2011/5/20-2011/5/31暇疵分类、收集与拍照，建立图片库图片库完成2011/6/1-2011/7/20暇疵数学建模先于仿真平台建设完成2011/7/21-项目结题模型校正与优化模型完成系统仿真与可行性研究2011/8/1-2011/9/30与北京自动化所建立合作关系，依托其完成仿真平台建设仿真平台建设完成搭建实验平台，验证检测技术可行性完成基于仿真需要的算法设计与代码

19、编写2011/10/1-2011/10/30仿真测试与验证给出仿真结论基于计算机视觉的算法研究2011/11/1-2012/4/30软件工程算法研究与建模给出自主知识版权的算法2012/5/1-2012/9/30检测程序代码编写与优化（VC6.0）2012/10/1-2013/1/1算法测试、验证，系统联调样机试验成功光学系统研究2012/5/1-2012/9/30各种高速相机在工业中的应用研究光学系统方案完成相机物理参数研究与确认光源及其配置参数研究与选择控制系统研究2012/10/8-2012/10/30成次品收集与剔除控制软件研究单片机控制源程序完成机械部分研究2012/5/1-2012

20、/9/30机械承载部分选型与研究完成样机设计与生产 产品机械定型新型电机在传送中的应用产品推广2013/1/1-产品推广，验证产品，迎接市场挑战七、现有工作基础和条件1、人员基础该产品是一个跨学科的项目，涉及计算机软件、计算机视觉、光学、电路与系统、自动控制、机械等多个学科，这对研发人员学科及专业背景有较高要求。为此，公司组织了约14人的研发团队。具体情况如下：北京大学 清华大学 浙江大学 上海交大 博士研究生 6人 硕士研究生 4人 1人 本科 1人 1人 1人 合计 1人 1人 11人 1人 2、实验条件本项目充分依托浙江大学等高校实验室，立足高品质科研平台及先进的实验设备，开展建模、测试

21、、仿真等相关研发工作。2.1 浙江大学工业控制技术实验室该实验室是国家级高科技研究重点实验室之一，以控制理论、自动化仪表及系统、系统工程与优化、以及机器人技术为主要研究方向。实验室承担了国家九五和十五攻关、863计划、国家杰出青年科学基金和国家自然科学基金等重要研究课题近百项，获国家和省部委科技进步奖20 余项，其中国家科技进步奖二等奖2项，三等奖1项，省部委科技进步一等奖3项。该实验室为我方课题提供工业控制咨询与实验。2.2 浙江大学先进控制技术实验室先进控制研究所研究方向涵盖控制理论与控制工程、检测技术与自动化装置、模式识别与智能系统等学科。研究所先后承担了一大批国家级应用基础研究和攻关项目，在工业过程控制理论与总线技术方面取得了一系列重要成果，其中多项成果获国家科技进步奖。该研究所为我方课题提供控制软件研发咨询。2.3 浙江大学计算机科学与技术学院该学院软件工程系主要从事软件架构、算法等研究与教学，目前承担国家自然科学基金重大研究计划及重点项目各1项，省科技厅重大重点项目3项，省基金重点项目1项。该系拥有先进的软件仿真平台及功能全面的各类实验室。该系及其实验室为我方提供软件编程仿真平台。3、机械加工实验条件公司向外界租赁了设备先进的机加工车间，为设备研发、样机生产、调试提供便利条件。该车间拥有各类数字化车、铣、刨、磨设备，能实现精密