paulwong

云计算介绍

什么是云计算?
  • 网格计算(Grid Computing)
  • 分布式计算(Grid Computing)
  • 并行计算(Parallel Computing)
  • 效用计算(Utility Computing)
  • 网络存储(Network Storage Technologies)
  • 虚拟化(Virtualization)
  • 负载均衡(Load Balance)
表现方式
  • 基础架构即服务(IaaS):Amazon Simple Storage Service,通过Webservice API向外界提供存储服务,数据存到分布式的各个地方
  • 平台即服务(PaaS):Google App Engine,开发平台,写一个JAVA程序部署到上面;Amazon Elastic Compute Clouding
  • 软件即服务(SaaS):Salesforce.com,提供在线的CRM,根据需要买帐号,服务等,企业无须开发系统;Google App,提供一整套的办公系统
以上所介绍的可以称为公有云。

云计算给我们带来了什么
  • 小企业:通过公有云降低成本,按需采购IT资源,以小拨大
  • 中大企业:通过私有云,提供全新的IT交付方式,高效可扩展的系统
  • 开发者:全新的开发模式,需要做一个转换,即熟悉大规模并行运算
关键技术
  • 分布式计算模型:MapReduce
  • 分布式文件系统:HDFS
  • 分布式数据库系统:HIVE
云计算对企业的价值
高度可用性,高度可扩展性

案例
  • 金融数据收集分析系统:以廉价的IT设备收集少量金融数据,前端有各种模块收集数据-->云计算模式进行数据处理
    -->保存到传统数据库-->用户展现
  • IT知识库系统:前端数据取模-->云计算模式进行数据处理-->用户查询-->查询API
JAVA平台对云计算的支持
著名的开源实现:Hadoop

项目组成
  • Pig
  • Chukwa
  • Hive
  • MapReduce
  • HDFS
  • Zookeeper
  • Core(核心部份,任务分配,调度)
  • Avro(处理序列号)


MapReduce模型
  • 源数据(Map)-->中间数据(Reduce)-->结果数据
  • 处理流程:客房端提交任务-->Master Node决定如何折分任务-->分到各节点
  • 实现:先启动Hadoop系统-->编写客户端程序-->使用Hadoop运行客户端程序

posted on 2012-02-29 17:59 paulwong 阅读(230) 评论(0)  编辑  收藏 所属分类: 云计算


只有注册用户登录后才能发表评论。


网站导航: