大数据及其产业发展方向与趋势（1）

大数据及其

产业发展趋势与方向（1）

胡经国

未来10年大数据发展趋势

科学家经过10年的研究才首次破解人类DNA。13年后，这项工作仅在24小时之内就能够完成。一直以来，我们都在不断改进数据处理工具。数据数量也在过去10年间爆炸式增长。那么，还有创新的空间吗让我们来看看，数据科学界的顶尖大师们是如何看待未来10年（2016-2026年）大数据发展趋势的，他们又对大数据未来如何改变世界作何猜想？

1、数据分析简单化是新潮流

首先，数据分析将变得更加“傻瓜式”。商业数据分析工具将不再对编程能力提出要求。不论是应用还是研发都会变得非常简单。

2、改进大数据管理平台

微软公布了PowerBI的新工具。Salesforce公司也推出了一款商业分析应用程序生成器。这两家公司都为非研发人员改进了他们的大数据管理平台。

链接：PowerBI

PowerBI是一款商业智能（BusinessIntelligence，BI）软件。

PowerBI目前分为两个产品体系：

①、PowerBI标准解决方案

其主流ERP（企业资源计划）版本，预设丰富实用的分析模型，安装即可用，降低BI技术门槛，向全民普及BI应用。

②、PowerBI绿色开发平台

这是一个平台性产品，通过数据视图管理、数据转换管理、OLAP数据库管理、多维报表设计、即席报表设计等一系列功能，可快速帮助企业IT人员在现有ERP/CRM等信息系统基础之上，构建多维分析模型，制作即席报表，制作分析报告，发布管理驾驶舱等BI的应用。

链接：CRM

CRM（CustomerRelationshipManagement，客户关系管理）是指企业为了提高核心竞争力，利用相应的信息技术以及互联网技术，协调企业与顾客之间在销售、营销和服务上的交互，从而提升其管理方式，向客户提供创新式个性化的客户交互和服务的过程。其最终目标是吸引新客户、保留老客户以及将已有客户转变为忠实客户，从而增加市场。

3、对未来的预测将会前所未有精确

微软分析师DuncanWatts指出未来十年，数据驱动研究将会经历一场大变革，宣布理论的终结。

资料收集数量将翻倍增长。如此一来，事件预测将变得更加准确。

大数据和商业智能将被继续用于预测一切。我说的是一切：从疾病的爆发到股票的价格从电网的瘫痪到即将到来的流行趋势。

我们对未来的预测将会前所未有精确举例来说，美国联合包裹服务公司UPS）已经能够运用置于卡车关键部位上的传感器发回的数据通过这种方式，他们就能预测机械故障每年给这家公司节省了数百万美元。

现在连天气预报也变得可信起来啦生活在这个时代真棒

谷歌公司早已开始了预报实验。他们按照地点分析了搜索关键词，预测出美国哪些地区将会爆发流感高峰。他们的预测被证明是准确无误的

我们还应该特别关注印第安纳大学的一项实验他们预测三天内的股价变化，也有87%的正确率。所有的数据全都基于推特

4、实时数据分析将成为必需品

DataTorrent公司总裁PhuHoang指出流系统和实时数据分析将成为各行各业的必需品。

Spare5的马特本克和MongoDB的凯利斯德曼认为，公司和企业将要结合像Storm、Spark、ApacheKafka那样的各种流分析工具来管理他们的数据基础设施。

JavaScript将会垄断大数据可视化。虽然现在我们在很大程度上依赖R语言和Python，但是随着对简单化和网络可用性需求的增大，这种情况很快就会得到改变。

DataScience公司的简斯旺森已经指出大数据产业，将会有越来越多的开源项目用网络语言开发。那么，大数据科学就会适应JavaScript。

5、人工智能将会拥有思考能力

IBM甲骨文公司和谷歌科学家观点认为“大数据将会在AI（人工智能，ArtificialIntelligence）技术方面带来新改变。”

科学家认为，基于软件的智能机器、虚拟个人助理、智能顾问和自动驾驶汽车将在未来得到大规模推广。

由于不断的学习，现在Siri、Cortana语音助手都变得更加智能。你使用它们越多，它们就越懂你，包括你的爱好、愿望和偏好。

⑴、请思考以下几件事：丰田在AI五年研发项目的投入高达10亿美元通用汽车将投资5亿美元开发自动驾驶汽车谷歌、优步、苹果和特斯拉都提出创新

⑵、未来常见的数据处理任务将依靠于：机器学习特性曲线图自然语言处理量子计算跨公司客户数据交换

JeffVance指出企业将能融合全球范围内的客户数据，节省数10亿美元并提高投资回报率。

企业和创业公司都将会从数据交流中获益。随着公司在其本身环境中的发展，公司之间的数据共享正在成形。举例来说，IBM已经把当地气候数据和来自太平洋瓦电公司、本田公司的数据结合起来。如此一来，他们就能准确找到汽车充电点的最佳位置。Inrix公司将收集数据和汽车移动数据结合起来，预测交通拥堵的发生。所有大型移动运营商都把定位数据卖给了AirSage公司。由此，该公司可以给100多个美国城市提供实时交通报告。

⑶、全球数据化时代就要到来

分析师ViktorMayer-Schonberger和KennethCukier指出全球数据化时代就要到来，并且把市场技术推向全新水平

数百万人的一举一动都会被公司收集，并且进入交易市场。这就是新的行为广告方式。

我们让这一方式变得简单。每天我们都通过推特和Facebook分享动态在亚马逊上留下心愿单，手机里都有定位应用。如果浪费这些大数据，才真是暴殄天物。

美国一些州使用智能仪表来实时监控耗电量。有了这些数据，很容易就能重现你的行为和家庭活动因为每一个电器都有不同的功率信号。

苹果现在已经有技术能够监测你的体温、心率和血氧浓度只需通过像耳塞一样简单的设备就能完成。

GreenGoose是一家家居用品制造创业公司他们在产品中植入微型无线传感器。你每次刷牙、用牙线剔牙或是锻炼的时候，这些微型无线传感器就会收集有用数据。

好吧，这听起来确实有点瘆得慌。这合法吗事实上，人们自愿出钱购买被追踪的特权。上面提到的这家公司已经在VentureBeat大会上筹集了10万美元的投资。

NoahChomsky教授指出：不管是大型供应商还者是政府，为了他们的利益，他们就能使用你的数据，而且他们也一定会这么做。

很多供应商在你自己还没有反应过来之前就知道你下一步要干什么了。他们也会准备好相应的服务。

很显然，Target公司已经通过客户的购买物品计算出有哪些女性客户怀孕了。然后他们就会给这些客户提供优惠券作为祝贺。在一个案例中，一个父亲甚至也是通过这种方式才知道自己女儿怀孕了。

Gartner咨询公司分析师指出到10年之后，会有将近一半违反商业道德的行为是与数据相关。这导致新的流行趋势用户隐私和数据保护。在处理这类事件和诉讼时，如果有数据这个老大哥在身边，收益将会相当可观。

⑷、大数据能拯救生命

Franz公司JansAasman指出未来，数据分析和AI技术将能拯救生命，研究疑难杂症并且促进医药研发。好的一面是，医疗保健和安全性将会得到提高。

现在，传统的听诊器已经过时了。数字听诊器已经取而代之。甚至可以用手机应用同步。血糖仪也经历了这样的革新。

十年后，将能在全球范围内提供2亿个无线健康检测仪。这些设备将能向他们的医护工作者汇报病人的状况。除此之外，收集来的数据还能极大帮助慢性病的深入研究。

MarketPsyche公司也通过5百万条博客、社交平台和推特收集数据，来追踪人们的情绪状态。

除了在分析领域、云技术方面的应用前景以外，Scale-out发展将成为大数据未来发展方向的主流。ScaleOut（Scalehorizontally）意即横向扩展，向外扩展ScaleUp（Scalevertically）意即纵向扩展，向上扩展

大数据有容量大，多样化，速度快和高价值四大特点。但随着人们对于大数据的逐渐了解，开始讨论大数据究竟能够给人们带来什么样的价值?

未来，大数据产业有十大发展方向：大数据分析快速发展

数据蕴藏价值，但是数据的价值需要用IT技术去发现、去探索，数据的积累并不能够代表其价值的多少。如何发现数据中的价值已经成为企业用户密切关注的话题于是大数据分析领域就成为了人们密切关注的问题毕竟，这直接关系到数据的利用情况。随着大数据行业IT基础设施的不断完善，大数据分析技术将迎来快速发展不同的挖掘技术挖掘方法将是人们未来比较重视的领域因为，这个领域直接关系到数据价值的最终体现方式。分布式存储有了用武之地

大数据的特点之一就是数量多大这就使得大数据存储管理面临挑战这个问题需要新的技术来解决分布式存储技术将作为未来解决大数据存储的重要技术。分布式存储系统将数据分散存储在多台独立的设备上。这就解决了传统存储方式的存储性能瓶颈问题。分布式网络存储系统采用可扩展的系统结构，利用多台存储服务器分担存储负荷，利用位置服务器定位存储信息它不但提高了系统的可靠性、可用性和存取效率，易于扩展。大数据与云计算紧密结合

如果再找一个可以跟大数据并驾齐驱的IT热词，云计算无疑是跟大数据关系非常大的一个词语。很多人在提到大数据的时候总会想到云计算二者还是有很多不同的一句话来解释二者：云计算是硬件资源的虚拟化，大数据则是海量数据的高效处理。

虽然大数据与云计算并不是一个东西，但是二者之间还是有着千丝万缕的关系的。云计算相当于我们的计算机和操作系统，将大量的硬件资源虚拟化之后再进行分配使用大数据则是我们处理的数据。云计算是大数据处理的最佳平台未来，这种趋势的发展将越来越让二者的关系更紧密。隐私问题让大数据受影响

数据价值对于企业来说是非常重要的但是同样也有阻碍大数据发展的一些因素在这些因素中，隐私问题无疑是困扰大数据发展的一个非常重要的因素。一些我们之前看似并不重要的数据信息，在大数据中心许多这样的信息就很可能被用以轻松了解一个人的近期情况，从而，造成了个人隐私问题。而且如今随着大数据的发展，个人隐私越来越难以保护。有可能出现利用数据犯罪的情况当然关于大数据隐私方面的法律法规并不完备，还需要有专门的法规来为大数据的发展扫除障碍。大数据推动基础架构向横向发展

大数据基础架构是大数据首先面临的挑战，如何让基础架构能够存取更多的数据？传统的基础架构能否满足用户需求？目前来说，虽然基础架构面临着一些挑战，但是挑战并不是很大随着大数据行业的发展，而且这种数据的增长将呈现爆炸式增长，就对传统的基础架构形成了挑战。随着大数据量的逐渐增大，可以通过分布式的处理方式把复杂应用分散到分布式系统的各个节点上而传统的数据处理将是运算能力非常强、CPU主频非常高的一台机器来处理，而不是大数据这种多个节点、多个CPU核数来处理这代表了大数据时代发展方向——从Scale-up纵向扩展，向上扩展转向Scale-out横向扩展，向外扩展。数据共享联盟成立

对于大数据来说，未来可能将不同的行业更加细分，针对不同的行业有着不同的分析技术。但是同样对于大数据来说，数据的多少虽然不意味着价值更高，更多的数据无疑更有助于一个行业的数据分析价值的发现。例如，对于医疗行业，如果每一个医院对自己的数据进行分析，那么相信也能够获得相应的价值但是如果想获得更多的更大的价值，那么就需要全国甚至全世界的医疗信息共享这样才能够通过共享平台进行分析，获取更大的价值所以，数据可能会呈现一种共享的趋势，数据联盟可能成立。大数据安全越来越受重视

随着数据价值的越来越重要，大数据的安全稳定也将会逐渐被重视大数据不断增长，无论对数据存储的物理安全还是对数据的管理方式都要求越来越高从而对数据的多副本与容灾机制提出更高的要求。大数据将催生一些新行业

一个新行业的出现必将在工作职位方面有新的需求大数据的出现也将推出一批新的就业岗位，例如，大数据分析师，数据管理专家等等。具有丰富经验的数据分析人才将成为稀缺的资源；数据驱动型工作将呈现爆炸式的增长。大数据将成为企业IT核心

随着大数据价值逐渐被发展，大数据将成为企业IT的核心毕竟在这个以盈利为主导的行业环境中，谁能够为企业带来更多的价值将会更重要。以往IT系统更多在企业中扮演辅助工作的角色而随着大数据的发展，IT系统也将具有更大的意义。如今，社会化数据分析也正在崛起这对于IT和非IT来说都影响深远。越来越多的企业将开始分析舆情、地理位置、行为、社交图景和富媒体社会化数据，来更好地了解客户需求，进行更有效的风险管理IT部门也开始利用社交媒体应用协作解决问题或者定义需求。中国将成为大数据最重要的市场

2016年5月30日编写于重庆

2019年12月7日修改于重庆

2022年5月8日修改于重庆

4

（编辑：温州站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!