改变ICT产业结构的巨量数据分析 智能应用 影音
DForum0522
Event

改变ICT产业结构的巨量数据分析

  • DIGITIMES企划

近几年来,能够将动态、庞大、多变化的结构性和非结构性的数据,进行储存、转换、串流、传输、分析等各种处理运算的巨量数据分析技术及应用,已经成为许多ICT业者掌握商机的重要布局领域。

如Google、Amazon与Facebook等业者,正应用巨量数据技术发展云端服务和社交媒体;Oracle、SAP、EMC与Teradata等业者,则是以数据管理软件为基础,进一步开发巨量数据分析软件;IBM与HP等业者,更已从过去的硬件制造与销售型态,逐步转型并整合巨量数据领域的信息服务与软件产品,衍生出高附加价值的经营模式。顾问服务大厂如Accenture,亦透过与其他资通讯大厂的策略联盟,发展出专精于各行业别的巨量数据领域知识的信息服务。

面对快速增加的数据量,企业不可能用人工一一处理,必须善用巨量数据分析解决方案,才能有效处理数据,做为决策参考。

面对快速增加的数据量,企业不可能用人工一一处理,必须善用巨量数据分析解决方案,才能有效处理数据,做为决策参考。

巨量数据带动系统服务市场

由于巨量数据分析应用能够针对因为社群网站或移动数据等动态性质的非结构性巨量数据,进行实时性、高复杂性的分析,以协助企业能在短时间内做出决策,也因此成为未来ICT业者创造商机的新机会,包括信息服务中的基础架构、开发布署、商业流程等相关信息系统的应用所衍生的服务,都可能因此受惠。

在巨量数据分析等应用带动下,全球系统服务市场将会维持成长轨迹。经济部技术处预估全球系统服务市场规模至2016年将可达7,132亿美元,其中又以亚太地区的成长速度最快,其次为中南美洲,西欧地区则因仍垄罩在金融危机的阴霾下,仍会呈现衰退状况。

至于行业别方面,则是以金融业与政府为主。在台湾市场方面,随着风险控管、云端运算、国际会计准则(International Financial Reporting System;IFRS)与个资法的发展,以及整体内需市场之基本面稳定,市场规模也将持续扩展,预估2016年台湾系统整合市场规模可达新台币506亿元。

尽管台湾系统服务市场持续成长,但相比全球市场,台湾市场成长空间仍然相当有限,而且用户市场愈大,巨量数据分析的附加价值也愈高,进军海外市场,势必是台湾巨量数据分析业者必然的选择。

国内大陆市场不可轻忽

但由于巨量数据分析技术,大多掌握在欧美业者手上,台湾业者若想要站稳脚步,势必得向国内大陆市场进军。事实上,国内大陆由于发展网际网络,加上三亿人以上的移动用户市场规模,巨量数据的成长速度更是惊人,加上网络购物市场迅速成长,也让巨量数据分析技术在国内大陆市场,有着相当大的成长空间。

如阿里巴巴目前已能从旗下的淘宝、天网等购物网站平台,撷取出网店销售及客户消费型行为的巨量数据,包括消费者在页面停留时间(过程数据)、成交时间地点、交易行为统计(业务数据)等,进一步分析以掌握消费者的思维,判断消费者偏好,再销售给特定厂商。

传统的商品销售模式,常会面临到市场判断失准,因为销售不佳而导致进货库存过多,进而形成企业营运负担。但阿里巴巴提供的巨量数据分析,却可以协助厂商解决无法掌握消费者需求的问题。

如位于广州的鼎骏,代理超过20个以上的钟表品牌,要优先销售那些型号或品牌,九成以上是藉由阿里巴巴提供的数据分析,而非经营者自行判断,在库存风险大幅降低的情况下,自然也有助于提高利润。

事实上,国内大陆也是目前台湾系统服务业者最大的外销市场,尤其在国内大陆于2011年3月推动的「十二五规划」中,有相当比例的内容与信息服务有关,其中包括信息科技架构建置、金流与物流之改造、加强物流网应用推动、财务类基本信息应用开发,以及全面提高产业信息化水准等,其实都与巨量数据分析息息相关。

经济部技术处指出,台湾系统服务业者若想要进入国内大陆市场,需要与当地的代理业主合作,如鼎新与神州数码公司合作。台湾中小企业也可寻求与台湾较大规模之企业合作,由大型企业带领进入国内大陆市场,如与中华电信合作推展云端服务,或与鼎新合作进行利基行业的系统服务,可能会更有保障。

寻求与具有关键技术的全球系统服务大厂合作,也是可行之道,或是与国内大陆的大型信息软件业者或网络服务营运商协同合作,共同建立与营运特殊垂直领域或产业别之系统服务平台或应用软件市集。

储存及带宽需求都将大幅增加

巨量数据分析的应用趋势,同时也带动硬件制造的商机,尤其是对数据储存产品的帮助更是明显,因为目前的数据会变成「巨量」,主要是来自于社群网络、智能手机应用的蓬勃发展,包含RFID信息、传感器网络信息、网际网络文件、社交网络数据、影音图片、网络查找纪录、客服中心呼叫记录、医学记录,甚至是生产线机台设备产生的Log记录,数据结构千变万化,也因此IBM研究发现,全球数据量至2020年将会增加为40 ZB,约为2005年全球数据量的300倍,而且在未来10年内,信息量增加的速度仍将呈现快速成长的趋势。

但数据不能只是储存,还必须进行分析及传递,而在巨量数据的趋势下,需要处理的数据量,单次就可能是TB等级以上,企业自然就得设法掌握高效率的数据处理技术,而且还得同时面对大量结构与非结构数据要同时分析的状况,如何让数据在不同架构的平台下能够互通与共同分析,并使资源有效的被利用,建构可以弹性因应档案需求而调整的储存系统,也成为必要考量。

另一个巨量数据分析带动的趋势,就是传递数据的带宽速度需求,势必也会跟着大幅成长。根据Cisco预估,2017年全球每月移动数据流量将高达11.2 Exabytes,约为2012年的13倍,这也凸显台湾必须尽快进入4G快捷移动服务年代,才能应付更为庞大的数据量。

用户与企业应充分合作

但也因为巨量数据的分析能力强大,除了个人数据外,包括网络效能与应用运行信息、网站浏览与移动应用使用信息、无线网络位置信息、收费网络电视服务使用信息等,都可进行分析,企业很可能会因此掌握到连用户自己都不清楚的偏好或行为,如果法令不够周全,企业不够谨慎,这些巨量数据所分析的结果,若没有妥善利用,就可能会衍生侵犯用户隐私权的问题。

除了进一步订定更为严谨的个人数据保护相关法规外,企业最好也能事先明确告知用户有关隐私权政策的修改,并让用户能够自行选择是否被追踪信息,以减少用户反弹。为了避免用户因为不希望隐私外露,而不愿提供数据,造成巨量数据分析不够完整的结果,企业也可透过提供对用户有利的价格选项或服务功能,获取用户同意自愿被收集个人信息。

唯有用户与企业开诚布公,在数据使用的透明度及价值充分合作,巨量数据所产生的价值才得以凸显,也才能为未来更多的ICT应用创造更精准、更有价值的发展方向。


关键字