2019年中国大数据行业研究报告

类别:行业 机构:深圳前瞻资讯股份有限公司 研究员:李明俊/徐烁/朱茜 日期:2019-11-26

大数据行业发展现状

      1.1 大数据的定义

      大数据(big data),是指需要通过快速获取、处理、分析以从中提取价值的海量、多样化的交易数据、交互数据与传感数据,其规模往往达到了PB(1024TB)级。不同机构对大数据也有不同的定义。

      麦肯锡对大数据的定义:一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合,具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。

      移动信息化研究中心对大数据的定义:大数据是帮助企业利用海量数据资产,实时、精确地洞察未知逻辑领域的动态变化,并快速重塑业务流程、组织和行业的新兴数据管理技术。

      IDC认为大数据具备海量(volume)、异构(Variety)、高速(Velocity)和价值(Value)四大特性。

    1.1 大数据的价值

      随着移动互联网、云计算、物联网等信息技术产业发展日新月异,信息传输、存储、处理能力快速上升,导致数据量的指数型递增。

      传统简单抽样调查分析已无法满足当下对数据时效性、海量性、精确性的需求。大数据的出现改变了传统数据收集、存储、处理挖掘的方式,数据采集方式更加多样化,数据来源更加广泛、多样化,数据处理方式也由简单因果关系转向发现丰富联系的相关关系,同时,大数据还能基于历史数据分析,提供市场预测,促成决策。

      目前,大数据已从概念落到实地,在精准营销、智慧医疗、影视娱乐、金融、教育、体育、安防等领域均有大量应用,随着云计算、物联网、移动互联网等支撑行业快速发展,未来大数据将拥有更为广阔的应用市场空间。

      1.1 大数据产业构建

      大数据产业构建可分为6个层次,分别为:硬件设施、基础服务、数据来源、技术开发、融合应用及产业支撑。

      1、硬件设施包括采集设备、传输设备、计算存储、设计集成4个方面;2、基础服务包括网络服务、云平台服务、系统开发3个方面;3、数据来源包括政府数据、行业数据、企业数据、物联网数据、通信数据、互联网数据、第三方数据7个方面;4、技术开发包括数据管理、技术研究、信息安全3个方面;5、融合应用包括工业、农业、政府、医疗、金融、电信、电商等行业需求相关的整体解决方案;6、产业支撑包括数据评估中心、数据交易中心、科研机构、行业联盟、咨询机构、论坛会展、融资平台、孵化机构等。

      1.2 大数据储量规模爆发式增长

      随着物联网、电子商务、社会化网络的快速发展,全球大数据储量迅猛增长,成为大数据产业发展的基础。根据国际数据公司(IDC)的监测数据显示,2013年全球大数据储量为4.3ZB(相当于47.24亿个1TB容量的移动硬盘),2018年全球大数据储量达到33.0ZB,同比增长52.8%。

      从大数据储量分布情况来看,美国大数据储量占比为21%,EMEA(欧洲、中东、非洲)占比为30%,中国地区占比为23%。

      1.2 全球大数据发展战略开启

      基于大数据对各个行业的深入影响,2012年以来,美国、欧盟、日本等主要发达经济体积极推进大数据发展战略。

      1.2 全球大数据市场规模保持增长,软件市场占比上升

      根据Wikibon研究数据,全球大数据市场规模将从2018年的420亿美元增长至2024年的840亿美元,年复合增长率为12.3%。

      从细分市场来看,大数据软件市场份额占比将呈逐渐上升趋势,2018年,大数据软件市场份额占比为33.3%,到2024年,大数据软件市场份额占比将上升至41.0%;大数据硬件市场比重则呈下降趋势,2018年大数据硬件市场规模约为120亿美元,占比为28.6%,到2024年硬件所占比重预计将下降至24.1%。

      1.2 全球大数据领先企业概况

      全球排名靠前大数据企业主要包括IBM、SAP、HPE、Teradata、Oracle、Amazon、Microsoft、Google、Palantir、Splunk等。根据Wikibon数据,2017年,IBM全球大数据市场的10%份额,SAP占4%, Oracle 、HPE和Splunk各占据3%市场份额。

      根据市场分析和调查,2017年全球有53%的公司采用大数据分析,2019年,这比例上升至64%。2019年大数据分析在任务优化及业务自动化领域使用将更加普及。根据Frost & Sullivan数据,大数据分析市场规模正以29.7%的年复合增长率增长,预计到2023年增长至406亿美元。

      1.3 大数据政策密集出台构建多层次大数据体系

      2015年来,国家出台了一系列大数据政策,覆盖生态环境大数据、农业大数据、水利大数据、城市大数据、医疗大数据、交通旅游服务大数据等多层次下游应用市场。2016-2017年为大数据相关政策出台高峰期,根据赛迪不完全统计数据,2016年国家层面出台大数据政策12个,省级层面出台大数据55个;2017年国家层面出台大数据政策10个,省级层面则达到75个。

      同时伴随地方大数据政策出台,各地政府相继成立了大数据管理机构,促进大数据产业发展。

      1.3 中国大数据产业规模

      2015年8月,国务院颁布《促进大数据发展行动纲要》,大数据正式上升为国家发展战略。2016年,工信部印发了《大数据产业发展规划(2016-2020年)》,全国引来大数据产业建设高峰,目前已形成八大大数据综合试验区,建成100多个大数据产业园。伴随新一代信息技术、智慧城市、数字中国等发展战略逐步推动社会经济数字化转型,大数据的产业支撑得到强化,应用范围加速拓展,产业规模实现快速增长。根据赛迪数据显示,2018年中国大数据产业规模为4384.5亿元,同比增长23.5%;到2021年,中国大数据产业规模将超过8000亿元。从企业业务布局来看,大数据产业主要集中在华北、华东及中南地区。

      1.3 大数据产业园成为集聚大数据资源重要载体

      2016年2月,国家发改委、工信部和网信办同意贵州建设全国首个大数据综合试验区,2016年10月,第二批大数据综合试验区获得批复,包括两个跨区类综试区(京津冀、珠江三角洲),四个区域示范类综试区(上海、河南、重庆、沈阳),一个大数据基础设施统筹发展类综试区(内蒙古)。国家大数据综合试验区的成立,对国家大数据开放共享、大数据应用创新、大数据产业集聚等方面起到重要促进作用。

      八大国家大数据综合试验区成立后,各地政府和企业也在积极推进大数据产业的发展,陆续设立大数据产业园区。截至2018年底,国内建成的大数据产业园超过100个,大数据产业园成为集聚大数据产业资源的重要载体。

      1.4 大数据硬件市场概况

      大数据硬件是指数据的产生、传输、存储、计算处理等所需的相关硬件设备,包括传感器、采集器、读写器、信息传输设备、芯片、服务器、存储设备、网络安全防护设备等。

      当前中国正加速从数据大国向着数据强国迈进。根据IDC和数据存储公司希捷的一份报告显示,到2025年,随着中国物联网等新技术的持续推进,其产生的数据将超过美国,中国产生的数据量将从2018年的7.6ZB增至2025年的48.6ZB。数据量的快速增长将继续推动数据存储、数据处理等相关硬件市场需求。根据赛迪数据显示,2018年,中国大数据硬件市场规模为2541.7亿元,同比增长13.2%,到2020年,中国大数据硬件市场规模将达到2850.1亿元。

       1.4 大数据软件市场概况

    大数据软件是指用于实现数据采集、存储、分析挖掘和展示的各类软件,包括大数据计算软件、大数据存储软件、数据查询检索软件、基础平台软件、平台管理软件、系统工具软件和大数据应用软件等。

      根据赛迪数据,近年来中国大数据软件市场规模实现较快增长,2018年中国大数据软件市场规模为822.5亿元,同比增长30.5%,到2020年大数据软件市场规模将达到1362.6亿元。

      1.4 大数据服务市场概况

      大数据服务的内容涵盖范围较广,主要包括了大数据查询服务、大数据分析服务、大数据交易服务、大数据安全等。

      大数据查询服务是指大数据拥有者对数据进行封装,为客户提供按需的数据查询服务,典型案例包括阿里数据超市、数据魔方;大数据分析服务是指大数据服务提供商为企业提供大数据分析能力和大数据价值挖掘服务。

      此外,大数据服务又可分为在线大数据分析服务和离线大数据分析服务,在线大数据分析服务主要依托SaaS或PaaS云服务形式,为客户提供在线分析服务。

      根据赛迪数据,2018年,中国大数据服务市场规模为1317.3亿元,同比增长36.6%,到2020年,中国大数据服务市场规模将达到2393.1亿元

    大数据行业发展前景与趋势

      4.1 大数据行业发展前景

      随着越来越多的企业走向在线平台,企业的生产运营转向数字化管理,极大的刺激了全球大数据市场需求。同时在云计算、人工智能、物联网、信息通信等技术交织应用驱动经济和生活数字化发展趋势下,大数据市场仍将保持较快增长。据前瞻对国内外多家权威机构关于2020年大数据市场的预测数据汇总分析,乐观估计2020年全球大数据市场规模在2100亿美元左右,中国大数据产业规模在6000亿元左右。

      4.2 大数据行业发展趋势

      未来推动大数据行业市场需求增长的主要因素

      物联网的兴起

      得益于物联网的发展,智能手机已经应用于控制家用电器上,Google Assistant、小米小爱相关智能设备在家庭中实现特定任务自动化

      人工智能的广泛应用

      AI执行任务比人类更快、更精确,从而能g减少错误并改善整体流程,这使得人们可以更加专注于更关键的任务,同时提升服务质量

    暗数据迁移到云

      尚未转换为数字格式的数据称为暗数据,它是尚未开发的巨大存储库,未来这些模拟数据库将被数字化并在迁移到云中,它们的利用,有利于企业进行预测分析决策

    量子计算

      尽管量子计算尚处于起步阶段,但相关研究实验从未停止,量子计算将能够极大提升计算机数据处理能力,缩短处理时间。很快,诸如Google,IBM和Microsoft之类的大型科技公司将开始测试量子计算机,并将其集成到他们的业务流程中

    边缘计算

      随物联网发展,企业收集数据方式逐渐转向设备端,对数据传输处理延迟提出更高要求,由于边缘计算相对云计算更加靠近数据源头,可以有效降低数据传输处理到反馈的迟延,同时具有显著效率成本优势和安全隐私保护优势

    开源解决方案.

      越来越多的免费数据和软件工具公开可用,例如开源软件,在加速数据处理方面取得了较大进步,同时具有实时访问和响应数据功能,小型组织和初创企业将从中受益。毫无疑问,开源软件更加便宜,可以帮助企业降低运营成本,未来将会蓬勃发展。

      大数据行业发展趋势

      数据安全与隐私保护需求日渐高涨

      安全与隐私保护意识日益增强,敏感信息约束和数据安全检查成为互联网、移动端的用户数据管控的难点

    单一大数据平台向大数据、人工智能、云计算融合的一体化平台发展

    传统的单一大数据平台已经无法满足用户的应用需求,而将大数据、人工智能、云计算融于一体的大数据分析平台,将成为一个联系IT系统与从员工、客户、合作伙伴、社会,到设备的一个全生态的核心系统

    发挥数据价值,企业逐步推进数字化转型

    越来越多的企业将“数字”视为核心资源、资产和财富,纷纷制定数字化转型战略,以抢占数字经济的新的制高点。大部分企业将制定数字化战略,积极推进数字化转型,达到敏捷业务创新和业务智能的发展目标

    中小大数据企业聚焦细分市场领域

      随着大数据产业链逐渐完善,在大数据各个细分市场,包括硬件支持、数据源、交易层、技术层、应用层以及衍生层等,都出现了大量不同类型的中小独立公司,带动各自领域的技术与应用创新。随大数据应用层次深入,产业分工将更加明确,中小企业需聚焦于细分领域,推出针对性产品,寻找自己的定位与价值