“2020年,全球将产生10倍于现在的海量数据。今天所有的硬盘加起来也装不下这些数 据。”29日,中国互联网协会、中国新闻社主办的2015产业互联网大会在浙江举行,百度开放云总经理刘炀在由国内领先的IT基础架构供应商——杭州华三 通信技术有限公司发起的“云计算与大数据”分论坛上说。
中国互联网民数已经达到了全球第一。2014年,中国互联网人口达到了6.5亿,普及率达到47.9%。“我们人多,不足为奇,但我们的普及率超过 了世界的平均水平,这说明中国人真的需要互联网。”中国互联网协会创会理事长、原中国科学院副院长胡启恒说,她给出了一种猜测,未来十年,中国网民人数将 突破10个亿。
如此背景之下,大数据时代已经来临。目前,百度开放云已正式开放,这是一个公有云的服务。目前,开放的产品有计算(云服务器、负载均衡)、存储(云盘、对象存储、关系型数据库、简单缓存服务)、分布式计算、安全以及其他服务等。
“这只是第一步,今天开放的服务大部分是百度三层大数据引擎中下面的一层,未来会有越来越多服务在百度云上进行开放。”刘炀说,随着百度云开放,会帮助大家降低成本,加速创新。
越来越多的“开放”,让云计算在未来的互联网生态中越来越近。
未来“装不下”云计算和大数据成新路
随着互联网迫切地“被需要”,一些问题也随之而来。刘炀给出了一组数据,2020年,全球将有260亿物联网设备,全球移动连接数量将大于1000亿,目前仅约70亿。同时,全球将产生10倍于现在的海量数据,并消耗完现有的所有电脑硬盘空间。
未来似乎已“装不下”了,此时,云计算与大数据的出现给未来开了一扇窗。
百度已经看到了这扇窗,有着强大的技术积累的百度,从2003年起,已在大规模地分布式应用上进行研究,随后,在分布式存储、分布式的建设等方面,百度一直走在云计算和大数据的前沿,并一直在进行探索。
刘炀介绍,搜索是百度的业务,百度能够收纳的网页越多,就可以做得越大。目前,百度收录了全世界超万亿网页,存储了100PB数据,大约相当于5000个国家图书馆的信息量总和。
“每天有几十亿的访问,流量很大,有中国网民,也有国外的网民。从业务需求的驱动力来说,不管是网页库的规模,还是用户访问量的规模,我们必须做分布式的解决方案。”他说,不仅规模大,多样性也是百度的需求之一。
数据快速成长智能分析成必须
随着业务的成长,数据量的成长也非常快。百度拥有大量的数据,流量非常大,还在每天快速增长中。
数据可以帮助我们做什么?在刘炀看来,根据数据,可以做大量的运营数据分析,可以帮助分析人员快速找到该做什么,什么样的用户体验是好的。
“但光靠人的脑袋分析数据是远远不够的,因为当数据量非常大的时候,光靠人找因果关系是不够的。”他认为,在今天的大数据时代,其实人们在乎的不是因果关系,而是关联关系。
“当一个事发生的时候,另外一个事一定会发生,这不是靠人脑全部发现的,这导致百度除了可以处理很多数据,还可以进行数据智能。千亿的因素不可能用人脑搞清楚,这里需要用特别先进的技术去处理。”他说。
数据的价值让云计算和大数据在未来,成为一种必须。
工业制造中的云计算和大数据
“未来是大数据IoT的时代,除了电脑、笔记本、手机外,还有很多穿戴设备,比如手环和各种各样的手表等,但这些设备远远不够,我们相信在工业界的数据量也非常大,工业设备上会产生无穷多的数据。”刘炀认为,在工业界,云计算和大数据也是必要的。
他举例,今天,百度有几十万台机器,每台机器上有几百万个硬盘。几百万个硬盘就是产生大量数据的物联网。因为这些硬盘都在进行着数据监控,分析算术、温度等等,百度监督非常多的硬盘物理数据,然后把物理数据汇集起来,进行学习,对硬盘发生故障进行预测。
这样的技术,影响了百度整个工作的模式。百度可以提前把数据从故障盘迁移到其他硬盘中,使得硬盘损坏并不会对业务进行影响。此后,对硬盘进行休眠和批量的修理。
“除了在百度内部应用,我们和某一家风电的公司也进行合作,在他们的设备上安装监控的采集器,采集分类设备的指标,并对分类设备出现的故障进行预测,这会大大降低公司的成本。”刘炀说。
据了解,2015产业互联网大会由中国互联网协会、中国新闻社主办,中国新闻社浙江分社承办。本次大会以“大智移云,产业互联”为主题,以“互联 网+制造”为核心,探讨传统产业在信息化互联网时代的发展,交流在云计算大数据方面的新应用。国内领先的IT基础架构供应商华三通信为大会提供网络支 持。
大会是世界产业互联网第一阵营中美德日的高峰对话:中国互联网之母、原中科院副院长胡启恒、美国工业互联网联盟理事长理查德博士、德国联邦投资贸易 署驻华代表schoo、德国弗劳恩霍夫研究院智能无线研发首席科学家DirkReichelt博士现身杭州论剑。同时,微软、GE、IBM、因特尔、西门子、宝马、松下、阿里巴巴、华三、海尔、华为等名企高级负责人也均赴会。大会还发起在浙江杭州成立中美产业互联网联合实验室,旨在加强中美在产业互联网领 域交流与合作。(完)
官方微博
官方微信公众号
官方百家号