大数据行业的发展与集聚

点小蓝字加关注!

随着人们对大数据的预测和预期不断加速,企业数据团队发现自己正处于一个快速变革的领域,既受到各种可能性的鼓舞,又因为各种局限性受折磨。2018年,大数据将继续沿着这两条路线发展:提供更多提高了可访问性的选择,同时又让那些寻找所有复杂问题答案的企业感到沮丧。


处理大数据的四个环节:


收集:原始数据种类多样,格式、位置、存储、时效性等迥异。数据收集从异构数据源中收集数据并转换成相应的格式方便处理。


存储:收集好的数据需要根据成本、格式、查询、业务逻辑等需求,存放在合适的存储中,方便进一步的分析。


变形:原始数据需要变形与增强之后才适合分析,比如网页日志中把IP地址替换成省市、传感器数据的纠错、用户行为统计等。


分析:通过整理好的数据分析what happened、why it happened、what is happening和what will happen,帮助企业决策。


图表:大数据的各个环节

大数据研究意义

1、对信息技术产业的影响

大数据的热潮兴起于新一代信息技术的融合发展,物联网、移动互联网、数字家庭、社会化网络等应用使得数据规模快速扩大,对大数据的处理和分析的需求日益旺盛,推动了大数据领域的发展。反过来,大数据的分析、优化结果又反馈到这些应用中,进一步改善其使用体验,支撑和推动新一代信息技术产业的发展。


大数据将为信息产业带来新的增长点。2020年世界数据总量将达40万亿GB,人均5.2TB。面对爆发式增长的海量数据,基于传统架构的信息系统已难以应对,同时传统商业智能系统和数据分析软件面对以视频、图片、文字等非结构化数据为主的大数据时,也缺少有效的分析工具和方法。信息系统普遍面临升级换代的迫切需求为信息产业带来新的、更为广阔的增长点。


同时,大数据将加速信息技术产品的创新融合发展。大数据面临着有效存储、实时分析等挑战,必将对芯片、存储产业产生重要影响,将推动一体化数据存储处理服务器、内存计算等产品的升级创新。对数据快速处理和分析的需求,将推动商业智能、数据挖掘等软件在企业级的信息系统中得到融合应用,成为业务创新的重要手段。


2、对信息技术应用的影响

大数据的效用不仅仅是在移动互联网上,它被认为是继云计算、物联网之后信息技术产业又一次颠覆性的技术变革,对经济发展、企业的决策、组织和业务流程、个人生活方式都将产生巨大的影响。目前,大数据的开发和利用在国内还处于起步阶段,一些电子商务企业利用大数据做一些研究报告和趋势分析,而从趋势看,未来大数据将会拓展到科研和政府管理领域。


大数据时代的来临对信息技术应用的影响主要有两个方面:一方面促使数据获取、数据存储更广泛,如出现云计算、云存储;另一方面激发了信息技术挖掘数据的强烈需求,未来发展更趋向于信息的价值提升和决策智能化,例如建设智慧城市。


大数据目前在两个方面表现出最重要的价值,一是促进信息消费,加快经济转型升级,二是关注社会民生,带动社会管理创新。


传统制造业有了大数据,可以从“制造”向“智造”升级——从产品设计端到最终销售,都可以通过大数据进行智能分析。企业可以快速响应市场需求、科学研发产品,并且精准营销。目前汽车行业已在借助大数据,对数亿网民与汽车相关的请求进行大数据挖掘,形成行业指数和分析报告,帮助汽车企业了解消费者需求。内容创新方面,手机、电视、冰箱等传统电子和电器产品,由于有了大数据,产品变得智能化,激发了用户的新一轮消费需求。消费者的强劲需求,又直接促进了企业利用大数据进行产品形态和内容的创新。


社会管理创新方面,春运迁徙地图这个普通人亲近大数据的案例,是交通领域基于数据的一次新尝试。未来在教育、就业、公共卫生等众多关键领域,大数据的分析洞察,也将发挥越来越重要的作用。


图表:中国大数据产业市场规模

中国大数据产业发展特征

一是顶层设计不断加强,政策机制日益健全。发改委工信部网信办等46个部委共同建立了促进大数据发展部际联席会议制度,全国有30多个省市制定实施了大数据相关的政策文件。 


二是关键的技术领域不断取得突破,创新能力显著增强。大数据的软硬件自主研发的实力快速提升一大批大数据的技术和平台处理能力也开始跻身世界的前列。


三是行业应用逐渐深入,对经济发展的带动作用凸显。包括在电信、互联网、交通、金融、工业、农业、医疗等行业的应用不断深化,大大改善了人们的生产生活方式。 


四是区域布局持续优化,产业规模不断壮大。全国推进建设了八个国家大数据综合试验区,开展大数据方面的实践探索,形成了一批集聚发展区。 


五是产业发展环境日益完善。大数据的基础设施法律法规标准体系安全保障能力,包括产业生态人才队伍都在不断的加强。