|
本帖最后由 Castelo 于 2012-6-17 18:46 编辑 今天是父亲节，先祝福各位朋友的父亲 父亲节好。 最近很多朋友开始做 云计算 方向 之前一直做Web服务，所以经常问及，因此偶尔涉猎。 云计算，不仅提供了如同软件的功能。还把个人计算机、巨型计算机和超级计算机连结在一起的网络集群却正在真真实实地走向大众化，这对那些中小企业和创业者来说无疑是一个福音。 程序员 似乎从去年开始就跟云计算杠上了，月月讲。讲技术，讲架构，讲平台，讲语言，讲未来。 云计算怎么看都怎么是一种趋势。 连隔壁的朋友考上的哈工大都是云计算方向了。 似乎它确实是一种未来的可能性。 下面的严肃的文章摘自 上海研究中心 的论文 1.1 云计算的定义 云计算(Cloud Computing)是一种新近提出的计算 模式。维基百科给云计算下的定义：云计算将IT相关 的能力以服务的方式提供给用户，允许用户在不了 解提供服务的技术、没有相关知识以及设备操作能 力的情况下，通过Internet获取需要服务 [1] 。 中国云计算网将云定义为：云计算是分布式 计算（Distributed Computing）、并行计算（Parallel Computing）和网格计算（Grid Computing）的发展， 或者说是这些科学概念的商业实现 [2] 。 Forrester Research 的分析师 James Staten 定义云 为:“云计算是一个具备高度扩展性和管理性并能够 胜任终端用户应用软件计算基础架构的系统池”。 虽然目前云计算没有统一的定义，结合上述定 义，可以总结出云计算的一些本质特征，即分布式 计算和存储特性，高扩展性，用户友好性，良好的 管理性。云计算技术具有以下特点： (1) 云计算系统提供的是服务。服务的实现机制 对用户透明，用户无需了解云计算的具体机制，就 可以获得需要的服务。 (2) 用冗余方式提供可靠性。云计算系统由大量 商用计算机组成机群向用户提供数据处理服务。随 着计算机数量的增加，系统出现错误的概率大大增 加。在没有专用的硬件可靠性部件的支持下，采用 软件的方式，即数据冗余和分布式存储来保证数据 的可靠性。 (3) 高可用性。通过集成海量存储和高性能的计 算能力，云能提供一定满意度的服务质量。云计算 系统可以自动检测失效节点，并将失效节点排除， 不影响系统的正常运行。 (4) 高层次的编程模型。云计算系统提供高级别 的编程模型。用户通过简单学习，就可以编写自己 的云计算程序，在“云”系统上执行，满足自己的 需求。现在云计算系统主要采用Map-Reduce模型。 (5) 经济性。组建一个采用大量的商业机组成的 机群相对于同样性能的超级计算机花费的资金要少 很多。 1.2 云计算的应用场景 云计算有着广泛的应用前景。如表1所示： 表1 云计算的应用领域 领域 应用场景 科研 地震监测 海洋信息监控 天文信息计算处理 医学 DNA信息分析 海量病历存储分析 医疗影像处理 网络安全 病毒库存储 垃圾邮件屏蔽 图形和 图像处理 动画素材存储分析 高仿真动画制作 海量图片检索 互联网 Email服务 在线实时翻译 网络检索服务 云计算在天文学 [7] 、医学等各个领域有着广泛的 应用前景。3 综合评论 趋势科技和瑞星等安全厂商纷纷提出了“安全 云”计划。如今，每天有2万多种新的病毒和木马产 生，传统的通过更新用户病毒库的防毒模式，受到 了严峻的挑战，用户端的病毒库将过于庞大。趋势 科技和瑞星的“安全云”将病毒资料库放在“云” 端，与客户端通过网络相连，当“云”在网络上发 现不安全链接时，可以直接形成判断，阻止其进入 用户机器，从根本上保护机器的安全。 据趋势科技大中华区执行总裁张伟钦介绍，趋 势科技已投入了大量资金，在全球数个地方建设了 新型数据中心。同时，趋势科技还花费了1000多万 美元，租借了34000多台服务器，构建了一个服务遍 及全球的“安全云”。目前趋势科技已将公司中低 端的部分产品线放到“云安全”计划中，而高端的 大部分产品线，仍在准备过程中。 谷歌提供的Gmail、Google Earth、Google Analytics 等服务都基于其云计算服务器运行 [8] 。谷歌基于云计 算提供的翻译服务具有现今最好的性能 [9] 。对互联网 和美国人生活的一项研究显示，大约70%的在线用户 使用以上“云计算”服务。 1.3 云计算的发展 目前，亚马逊，微软，谷歌，IBM，Intel等公司 纷纷提出了“云计划”。例如亚马逊的AWS (Amazon Web Services) [3] 、IBM和谷歌联合进行的“蓝云”计划 等。这对云计算的商业价值给予了巨大的肯定。同 时学术界也纷纷对云计算进行深层次的研究。例如 谷歌同华盛顿大学以及清华大学合作，启动云计算 学术合作计划(Academic Cloud Computing Initiative)， 推动云计算的普及，加紧对云计算的研究。美国 卡耐基梅陇大学等提出对数据密集型的超级计算 （DISC：Data Intensive SuperComputing）进行研究， 本质上也是对云计算相关技术开展研究。 IDC的调查显示，未来五年云计算服务将急速增 长，预期2012年市场规模可达420亿美元。目前企业 导入云计算已逐渐普及，并且有逐年成长趋势。估 计在2012年，企业投入在云计算服务的支出将占整 体IT成本的25%，甚至在2013年提高至IT总支出的三 分之一。 由此可见，在各大公司以及学术界的共同推动 下，云计算技术将会持续发展。 1.4 云计算与其他超级计算的区别 1.4.1 云计算与网格计算的区别 Ian Foster 将网格定义为：支持在动态变化的分 布式虚拟组织（Virtual Organizations）间共享资源， 协同解决问题的系统 [4] 。所谓虚拟组织就是一些个 人、组织或资源的动态组合。 图1“云”系统的结构 图2 网格的结构 图1和图2分别为云及网格的结构示意图。图1 显 示，云计算是一种生产者—消费者模型，云计算系 统采用以太网等快速网络将若干机群连接在一起， 用户通过因特网获取云计算系统提供的各种数据处 理服务。图2显示，网格系统是一种资源共享模型， 资源提供者亦可以成为资源消费者，网格侧重研究 的是如何将分散的资源组合成动态虚拟组织。 云计算和网格计算的一个重要区别在于资源调 度模式。云计算采用机群来存储和管理数据资源， 运行的任务以数据为中心。即调度计算任务到数据 存储节点运行。而网格计算，则以计算为中心。计 算资源和存储资源分布在因特网的各个角落，不强 调任务所需的计算和存储资源同处一地。由于网络 带宽的限制，网格计算中的数据传输时间占总运行 时间的很大一部分。 1.4.2 云计算系统与传统超级计算机的区别 超级计算机拥有强大的处理能力，特别是计算 能力。2008年11月17日，最新一期的Top500 [6] 榜单发 布。冠军“RoadRunner”是IBM为美国 Los Alamos 国 家实验室建造的计算机系统。它的运算速度达到了1.026 Petaflop/s。RoadRuner超级计算机包含12960个 IBM PowerXcell 8i处理器以及6948个分布于刀片服务 器上的AMD Opteron芯片刀片服务器安装在288个IBM BladCener机架上。RoadRuner拥有80TB的内存，外存 使用1.5PB容量的Panasas存储，外存通过10Gb/秒以 太网进行连接。耗资超过1亿美元。 TOP500对超级计算机的排名方式可以看出， 传统的超级计算机注重运算速度和任务的吞吐率。 以运算速度为核心进行计算机的研究和开发。而云 计算则以数据为中心，同时兼顾系统的运算速度。 传统的超级计算机耗资巨大，远超云计算系统。例 如，趋势科技花费1000多万美元租用34000多台服务 器，构建自身的“安全云”系统。 1.5 云计算的关键技术 云计算是一种新型的超级计算方式，以数据为 中心，是一种数据密集型的超级计算 [10] 。在数据存 储、数据管理、编程模式等方面具有自身独特的技 术。 1.5.1 数据存储技术 游客，如果您要查看本帖隐藏内容请回复 几经波折。终于知道怎么回复可见了。这个控件提供的地方真够隐蔽的。。。。太隐蔽了  看完了也再说几句？？？？？关于他跟Web服务？关于B2B,B2C? 关于不同的商业模式 等等等等、。、 |
[技术| 编程·课件·Linux] 云计算 关键技术：存储，数据管理，编程模型
Castelo
· 发布于 2012-06-17 15:07
· 4070 次阅读
转载文章时务必注明原作者及原始链接，并注明「发表于 软院网 RuanYuan.Net 」，并不得对作品进行修改。
| 有段时间常去智能车网站。熟悉一个哥们，但凡他问别人问题，标题必然是“跪求”、"大哥大姐"之类的词眼；他分享东西的时候，也是支付学分才能浏览，并且数十个学分换来的可能是一句我这个IQ无法理解的话。 |
| 有段时间常去智能车网站。熟悉一个哥们，但凡他问别人问题，标题必然是“跪求”、"大哥大姐"之类的词眼；他分享东西的时候，也是支付学分才能浏览，并且数十个学分换来的可能是一句我这个IQ无法理解的话。 |
呵呵