大数据技术在台湾的应用

大数据技术在台湾的应用

大数据时代为创新时代发展提供数据通讯2012年中秋节前一天，台湾趋势科技公司的创始人张明正计划在莲花以西看到太平洋，并举行一场以海为石相思的户外婚礼。200多名游客抵达莲花。然而根据CNN天气预报,那几天台湾将迎来超级台风,而且会从花莲登陆,这让他犹豫不决,到底婚礼该换到台北大饭店,还是如期在花莲举办?这时他想到了近来十分流行的大数据技术,于是马上找来KNY台湾天气资讯APP,这个软件收集了过去几十年来台湾各地的全部气象资料。张明正想知道中秋节当天花莲会不会下雨?通过对数十年的海量资料分析后显示,花莲中秋节当天下大雨的机会只有30%,这让他打定主意,照原订计划,为儿子顺利地举行了一场圆满的婚礼。通过这件事,让张明正看到了大数据技术在台湾推广应用的潜在商机。随后几个月,他突然间活跃于台湾各大企业,主动去敲中华电信董事长吕学锦和广达董事长林百里的门,希望与他们沟通未来在大数据领域的合作。“先有了云计算,才有大数据,这是延续下来的发展。”他操着一贯的兴奋语气说,“云计算是真的赚钱,但很无趣,如今到处都在建服务器资料中心,但大数据的应用就很有趣,资料分析后马上就能给出回馈,进入回馈经济学的时代。”成立于1988年的台湾趋势科技公司,目前是全球著名的防毒软件研发企业,当然要走在科技的最前沿,成为大数据浪潮中的先驱者。早在2011年11月,该公司的研发人员就与美国联邦调查局的探员合作,攻破了史上最大的僵尸网络案件,解救出400万台一度被胁持的电脑。当时这400万台电脑都被植入了木马程序而中毒,不知不觉成为僵尸网络的一分子。威胁在于幕后主脑一旦下个命令,400万台电脑便会同时攻击某台特定电脑,使这台电脑无法承受。假设那是美国联邦调查局或银行金库的电脑,后果将不堪设想。而趋势科技公司所应用的便是与海量资料相关的分析技术。如今,趋势科技公司的客户已遍布五大洲,全球至少有1500万台电脑安装了他们研制的防毒软件,每天要处理100亿笔动态资料。要在茫茫网海中搜寻威胁在哪里,传统的技术早就不堪使用。于是趋势科技公司成为最早探索海量资料技术的企业,尤其对海量分析目前最重要的工具Hadoop软件研究甚深,至今成绩斐然,每天能够拦截2亿次病毒代码。也因此,一个没料到的收获是,趋势科技从此意外由防毒专家扩大到其他的业务,成为“大数据咨询顾问”。两年前,一种名为“进阶持续性渗透攻击”的电脑病毒成为网络病毒的新霸主。这种属于量身订做的病毒传播力弱,但穿透性强,目的在于窃取大企业的商业机密。例如攻击者有机会拿到富士康集团高级经理的名片,取得其Email地址后,倘若他想知道富士康代工生产的下一代苹果iPhone手机究竟有什么特点,便可能针对该Email信箱安装后门程序,发起进阶持续性渗透攻击,盗取企业机密。为了应付这种与以往大不相同的攻击方式,便要采取新的杀毒方案,方法之一就是拿出1500万台电脑组成的庞大数据库进行快速对比,分析病毒行为,及时予以侦测及封锁。危机反而变成了商机,善用Hadoop海量分析,让进阶持续性渗透攻击成为新的电脑防毒商机。趋势科技公司全球研发暨大中华区业务执行副总张伟钦指出:2012年第一季开始在日本卖这个新产品时,营业额截至年底皆是一直往上飙升,甚至某个政府机构一口气就下了200万美元的订单。无心插柳柳成荫,趋势科技公司进入海量资料的世界,最初动机是因为数据量大到曾经被迫停摆、无法即时回应才投入研发,之后才发现原来在资讯安全威胁以外有如此巨大的需求。大数据让城市更安全有一家在全台湾有十几个工厂的科技公司,生产线上每天记录下大量的资料,包括上百个制程的温度、湿度、速度等。资料里的秘密在于,若能仔细分析,这些是提升反串极为重要的参考指标。“但资料真的太大了,真的是海量。”趋势科技公司研究开发部技术经理廖淑盈说:“从中科、南科到竹科搜集的资料量,每天达14TB,这家公司无法处理如此海量资料,于是请我们提供咨询服务。”趋势科技公司采取的应对方法是“正常与异常比对”,由于每个制程皆严密监控,就拿良率最高的制程环境为标准,万一某一次的良率降低了,便与标准做比较。廖淑盈举例说:“对照后,若发现某个制程温度异于平常,原因是温度从最高到最低的容许值,设了10%的弹性所致,便会建议厂方以后设紧一些。”作为全球最前瞻的防毒软件研发企业,趋势科技公司目前的新业务都是与防毒无关的大数据咨询服务,如今光是在台海两岸大约就有15个大客户。该公司董事长张明正透露,其中来自大陆的客户,不乏数千万元人民币的计划案。张明正认为,“所谓大数据技术就是云计算加移动装置,再加传感器,这是未来20、30年最重要的产业结构。台湾擅长做硬件,海量资料的末端感应器商机,台湾绝对能掌握。”他预言说:大数据绝对会成为一个产业,而那些通过海量资料处理能力而驶入蓝海的企业,将会赢得丰厚的回报。也因此,该公司计划未来长期投入技术交流平台,开班授课,为台湾培养海量资料所需的人才。大数据浪潮下,张明正看到的新机会是开发各种各样每人每天带在身上的传感器。他指出,有一家美国厂商想出“Pebble手表”(也称“小黑石手表”)的产品概念,即将个人手机与电脑中的资讯都直接连接到手表上随时显示,仅这个概念就吸收了1000万美元资金。而类似这种手表就是台湾企业可以开发的商机。研发生产这种可以上传与下传分析资料的传感器一直是台湾厂商的强项,现在流行把5、6个传感器全部设置在一个小小的IC芯片上。此外,传感器的次系统要同时整合模拟电路和数字电路,会有电、有磁、有热。但国外已经很少有人在设计生产模拟电路,只有台湾企业的IC制程高达80%以上生产这种耐用且很便宜的IC芯片,有利于大量散布的低成本需求,这是台湾独有优势。张明正最近发现,台湾奇美医学中心精神科主治医师张凤麟也有类似的发明。过去13年来,张凤麟积累病人资料,自费1000多万元新台币研发一种电子“情绪指环”,戴在食指上,随时可将手指温度以曲线图的形式呈现在电脑屏幕上。若波形向上,即代表血管较为扩张,手指温热,意味着受测者处于比较放松的心理状态。“情绪指环”原本是用来辅导患者记住放松时的心理感觉,反复练习,便可自行放松。张明正得知这项研究成果后如获至宝,双方决定合作,希望导入大数据的商机中。张明正还介绍说:中国大陆某位市长告诉他,该市已不再通过兴建机场来发展当地经济,但若台湾厂