大数据与云计算

云计算的定义:云计算是一种商业计算模型。它将计算任务分布在大量计算机构成的资源池上,使各种应用系统能够根据需要获取计算力、存储空间和信息服务。

云计算的特点:超大规模、高可靠性、高伸缩性、虚拟化、通用性、极其廉价、按需服务。

云计算技术的体系结构

SOA构建层:封装云计算能力成标准的Web Services服务,并纳入到SOA体系;

管理中间件层:负责资源管理、任务管理、用户管理和安全管理等工作,云计算的资源管理,并对众多应用任务进行调度,使资源能够高效、安全地为应用提供服务;(核心)

资源池层:将大量相同类型的资源构成同构或接近同构的资源池;
(核心)

物理资源层:计算机、存储器、网络设施、数据库和软件等。

云计算的服务类型:将基础设施作为服务(IaaS)、将平台作为服务(PaaS)和将软件作为服务(SaaS)。

IaaS将硬件设备等基础设施封装成服务供用户使用。(即裸机)
亚马逊云计算AWS(Amazon Web Services)的弹性计算云EC2和简单存储服务S3、百度云服务器。(阿里云服务器ECS)

PaaS对资源的抽象层次更进一步,它提供用户应用程序的运行环境。
Google APP Engine和微软的云计算操作系统Microsoft Windows Azure、百度、腾讯云、阿里云。(国内有SAE (Sina App Engine),国外的Heroku)

SaaS的针对性更强,它将某些特定应用软件功能封装成服务。
Salesforce公司提供的在线客户关系管理CRM(Client Relationship Management)服务、百度云盘、Apple的iCloud、Google的Google Doc。

云计算的优势:
成本更低。简而言之,能赚钱。

为什么云计算拥有划时代的优势?云计算为什么能挣钱?云计算为什么比传统的高性能计算成本更低?

答:主要原因在于它的技术特征规模效应所带来的压倒性的性能价格比优势。

1.系统建设和管理成本
(1)云计算技术的容错能力很强,使得我们可以使用低端硬件代替高端硬件,采购费用明显降低。
(2)云计算设施的管理是高度自动化的,极少需要人工干预,可以大大减少管理人员的数量。
(3)云计算数据中心的规模越大,单位成本也就减低了。

2.电力和制冷成本
(1)数据中心的耗电非常大,云计算的数据中心可以建在电费成本低的地方。
(2)云计算的数据中心可以采用水冷降温技术。

3.资源的利用率
(1)IDC(传统互联网数据中心)一般采用服务器托管和虚拟主机等方式对网站提供服务。每个租用IDC的网站所获得的网络带宽、处理能力和存储空间都是固定的。网站拥有者为了应对这些突发流量,会按照峰值要求来配置服务器和网络资源,造成资源的平均利用率只有10%~15%。
(2)而云计算平台提供的是有弹性的服务,它根据每个租用者的需要在一个超大的资源池中动态分配和释放资源,而不需要为每个租用者预留峰值资源。
(3)此外云计算平台的规模极大,其租用者数量非常多,支撑的应用种类也是五花八门,比较容易平稳整体负载,因而云计算资源利用率可以达到80%左右,这又是传统模式的5~7倍。

综上所述,由于云计算有更低的硬件和网络成本、更低管理成本和电力成本,也有更高的资源利用率,两个乘起来就能够将成本节省30倍以上。这是云计算成为划时代技术的根本原因。

大数据的定义:海量数据或巨量数据,其规模巨大到无法通过目前主流的计算机系统在合理时间内获取、存储、管理、处理并提炼以帮助使用者决策。

大数据、云计算、人工智能的关系

通过云计算与人工智能去处理海量或巨量的数据从而达到我们的目标。

发表回复

Breeze Wang

A student majoring in Software Engineering at Central South University has an understanding of software development techniques, software architecture, and is able to use Godot to develop game projects. I am currently in the Game Development Laboratory at Central South University. I have experience participating in Global Game Jam. Loving game development.