我们来聊聊今天的话题,什么是云计算,什么是大数据,大多数人听到这两个词汇,都会觉得这和我的生活有什么关系呢?了解学习这些东西对我有什么帮助呢?首先我们得明确一点,这两个概念它和我们的生活已近很贴近了,或者说我们已经离不开它们了。
云计算是什么
先看看什么是云计算吧,我们身处于海量数据的时代,比如说:网页搜索、微信消息、云盘存储的数据、在线直播、股票信息等等,这些数据在让你能看到的时候,大部分都是已经经过处理的,这部分的业务就需要服务器来完成,那么单台服务器能满足像“百度一下”这样大的业务么?答案是否定的。
举个例子来说,我们自己电脑大家都用的很熟悉了,当你在后台执行很多任务的时候就会卡顿,会感觉访问网页很慢,打开程序很慢,这是因为电脑CPU可能性能达不到,内存可能不够了,硬盘IO写满了等等,当我们电脑配置不行的时候可以提高计算机的硬件配置,那么这样做对服务器有效么?答案是可以有一定的提高。但是能完全解决问题么?答案自然又是否定的。
在我们的主角即将登场之前得说说负载均衡,何为负载均衡,负载均衡文如其意,是将业务分布在多台不同的服务器上,这样有效的解决了我们之前单台服务器不能满足业务的问题。可是新的问题又来了,一是大量的服务器我们管理起来很麻烦;二是大量的服务器可能会有部分时间处于闲置状态会很浪费资源;三是业务很不灵活,不同的业务可能就需要对应不同的服务器。
那我们该怎么办呢,能不能一个人管理几百上千台服务器呢,当然是可以的,这种技术方式就是云计算。典型的云计算从物理形态上来说分为N:1、1:N这两种,很多时候这两者也是相互结合存在的。
N:1这样的形态很少见,超级计算机“天河一号”、“天河二号”等都属于这样的,把多个服务器虚拟逻辑成一台服务器,满足超大规模的计算量,比如:模拟大自然的天气、计算卫星运行轨迹等,这种技术的前身就是“分布式计算”。
1:N是一台性能超强的服务器,根据我们自身的实际需求虚拟化为多个服务器,满足不同业务的部署,做大资源利用最大化。也因为我们把服务器虚拟化之后,都可以实现远程管理,远程维护。
以为这就是云计算了么?当然上面说的这两项都是实现云计算最基础的部分,就叫做“虚拟化”,那我们还缺少什么?缺少“自动化”。
从历史的角度来看,人类的进化实际上就是一步步让自己变得更为懒惰,我们为了让管理更为简洁、方便、省事,技术人员实现了自动化部署服务器,自助式提供服务器资源,也由此对云计算有了一个使用范围上的定位,分为三类“公有云”、“私有云”、“混合云”。
混合云最典型的服务商就是亚马逊、百度云、阿里云、腾讯云等等,这些服务商自己有非常庞大的业务量,需要建设大规模的数据中心满足自己的需求,除了满足自己需求外,还会把部分闲置的计算资源、存储资源提供给其他需要使用的企业、集体或者个人。通过自助式的软件平台,收取一定的费用。同时具备自用目的,并且提供对外服务的,被称为混合云。
那么我们再来理解公有云和私有云就很好理解了,公有云就是纯粹提供对外服务,专业提供IDC机房,靠此项技能生存的。私有云就是集团、企业、组织等为自己需求设计的,即为私有云。
未来通过技术不断革新,“软件定义网络”、“软件定义存储”等等,云将如同这个字一样,数据处理不再有地域和边界的限定。计算资源也如同电力、水、天然气这些我们常用的资源一样,可以为每一个人提供所需、提供便利。
大数据是什么
另外一个词汇“大数据”,这个单词英文就是Big Date,很大的数据,在现在来说就是海量的数据。大数据从技术角度上来讲大致需要解决两个问题,一是如何存储海量的数据;二是如何在这海量的数据中找到价值。
我们先看一个案例,“双十一购物狂欢节”,这个由阿里公司推出的活动让全世界都看到了中国庞大的消费市场,那么我们来看看从技术上怎么剖析这个案例。首先计算上来说,肯定使用了阿里云,存储的数据用到了双活、异地灾备、异步备份等等。
再来看看产生的数据,2014年“天猫双十一”成交额571亿元,2015年“天猫双十一”912.17亿元,从这两组数据能看出庞大的交易量,伴随着订单数,一个普通的会计部门估计当天都疯掉了吧?那么我们看看阿里,虽然交易额不断地再创高峰,通过平台数据处理,有效的化解了交易产生的财务计算方便的问题,这就是一种大数据技术典型应用。
阿里通过交易的每一个顾客的订单、金额、商品等等,就可以通过数据分析、数据挖掘的方式调整自己的产业布局,这减少的不仅仅是人力方面的投入,在能效方面效果也是非常惊人。
学院在云计算和大数据上做了什么
作为信息化的“大脑”学院投入资金建设了数据中心,虚拟化平台采用了华三的CAS,用于处理信息化平台产生的大规模数据。在教学、实训领域,引入了“云计算实训室”、“数据存储实训室”等等。在大数据方面,已经引入学生管理平台、教务管理平台等用于对学院各项数据作出综合全面分析。
所以从学生的角度出发,学习掌握虚拟化、数据挖掘、数据分析、自动化控制是很有必要和发展空间的。
这两个很科普的概念,希望能通过我的这篇文章,能让读者对这两个概念有所认知。