云计算的底层框架(云计算技术应用框架)

云计算的发展需要多种语言的参与。HADOOP只是云计算产品的底层框架，适用于云盘、分布式计算等底层业务。云产品很少只用一种开发语言就能解决所有问题。语言只是一个工具。关键是要学会如何针对不同的应用场景正确选择合适的工具。云产品的框架有很多，例如OpenStack是用Python编写的，Hadoop是用Java编写的。

Ceph架构概述及其特性

Ceph概述

Ceph旨在提供更好的性能、可靠性和可扩展性，它是一个集成的分布式存储系统。

Ceph项目源于Sage的博士研究（第一个成果于2004年发表），随后贡献给开源社区。经过几年的发展，得到众多云计算厂商的支持和广泛使用。RedHat和OpenStack都可以与Ceph集成，支持虚拟机镜像的后端存储。

Ceph的特点

高性能

a.放弃传统的中心化存储元数据寻址方案，采用CRUSH算法来均衡分布数据，高度并行。

b.可以针对不同负载实施副本放置规则，例如跨机房、机架感知等，同时考虑容灾域隔离。

c.支持数千个存储节点规模，可支持TB到PB级别的数据。

高可用性

a.副本数量可灵活控制。

b.支持故障域隔离和数据强一致性。

c.自动修复和自愈多种故障场景。

d.无单点故障且自我管。

高可扩展性

a.去中心化。

b.灵活扩展。

c.随着节点数量的增加而线性增加。

功能丰富

a.支持块存储、文件存储、对象存储三种存储接口。

b.支持自定义接口和多语言驱动。

Hadoop概述及其功能

Hadoop是由Apache基金会开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下开发分布式程序。释放集群的力量以实现快速计算和存储。Hadoop实现了一个称为HDFS的分布式文件系统（HadoopDistributedFileSystem）。

HDFS具有高度容错性，设计用于部署在低成本硬件上，并为访问应用程序数据提供高吞吐量（高吞吐量）。这适合具有大型数据集应用程序的用户。HDFS放宽了POSIX要求并允许对文件系统内的数据进行流式访问。Hadoop框架的核心设计是HDFS和MapReduce。HDFS提供大规模数据的存储，MapReduce提供大规模数据的计算。

云计算有不同的开发语言

Hadoop和云计算是不同的。HADOOP开发首选JAVA，其次是C/C++或Python。云计算很复杂，选择会根据应用程序的不同而有所不同。很少有云产品只使用一种开发语言来解决所有问题。语言只是一个工具。关键是要学会如何针对不同的应用场景正确选择合适的工具。云产品的框架有很多，例如OpenStack是用Python编写的，Hadoop是用Java编写的。

HADOOP只是云计算产品的底层框架，适用云盘、分布式计算等底层业务。中上层开发所使用的语言根据产品的特点和工程师的技术特点而有所不同。

云计算架构分为三层：基础设施层、平台层和软件服务层。

拓展知识：

虚拟化是其中之一基础云计算技术需要掌握硬件原理和虚拟化技术，包括管理虚拟机和容器、虚拟机如何运行、性能优化等。虚拟化技术不仅适用于单台服务器，还可以将多台服务器组合成更大的虚拟机，实现资源集中管理，提高系统适应需求和环境的能力。虚拟化技术应用范围广泛，可以提高资源利用率、降低成本、提供强大的计算能力。在云计算中，虚拟化技术的应用价值不仅在于提高资源利用率、降低成本，还在于提供强大的计算能力。

一般来说，普遍接受的云架构分为三个层次：基础设施层、平台层和软件服务层。相应的名称是IaaS、PaaS和SaaS。IaaS，基础设施即服务，中文名称为基础设施即服务。

IaaS主要包括计算机服务器、通信设备、存储设备等，可以提供IT基础设施服务，如计算能力、存储能力、存储或网络容量等供用户按需使用，即可在基础设施处配置等级。IaaS完整应用的核心在于虚拟化技术。通过虚拟化技术，可以将不同的计算设备同步虚拟为虚拟资源池中的计算资源，存储设备同步虚拟为存储资源，存储在虚拟资源组中，并可以整合网络。虚拟资源组中的资源。当用户订购这些资源时，数据中心管理者直接将订购的份额打包给用户，从而实现IaaS。

PaaS，PlatformasaService，中文名称为平台即服务。如果我们从传统计算机架构中“硬件+操作系统/开发工具+应用软件”的角度来看，那么云计算的基础层提供的功能与操作系统和开发工具相同。事实上，PaaS的定位确实如此，它的定位是为用户提供一整套通过互联网开发、运行和操作应用软件的支撑平台。与个人计算机软件开发模式类似，程序员可以使用开发工具在配备Windows或Linux操作系统的计算机上开发和部署应用软件。微软的WindowsAzure和谷歌的GAE可以认为是PaaS平台中最著名的两个产品。

SaaS，软件即服务。简单来说，它是一种通过互联网提供软件服务的软件应用模式。在这种模式下，用户不再需要大量投入建设硬件、软件和开发团队，而只需要支付一定的租赁费用就可以通过互联网享受相应的服务，并且整个系统由厂商维护。承担责任

云计算架构参考模型包括物理基础设施、虚拟化层、云服务层和应用层。

物理基础设施是云计算架构的基础，包括服务器、网络设备、存储设备等硬件资源。这些资源构成了云计算的基础设施，并通过互联网连接起来，提供存储和计算能力。

1.虚拟化层：

虚拟化层构建在物理基础设施之上，将物理资源抽象为虚拟资源，并通过虚拟化技术进行管理和分配。虚拟化层可以实现资源的动态分配和灵活扩展，提高资源利用率和灵活性。

2.云服务层：

云服务层是云计算架构的核心部分，提供各种云服务。。，包括基础设施即服务（IaaS）、平台即服务（PaaS）和软件即服务（SaaS）。这些云服务可以根据用户需求进行选择和部署，并提供弹性计算、存储、数据库、消息队列等功能。

3.应用层：

应用层是用户最直接使用的层，比如各种云应用、业务系统等。在应用层，用户可以通过云服务层提供的接口和工具来开发、部署和管理自己的应用程序。云计算架构可以支持多种类型的应用程序，包括企业应用程序、移动应用程序和大数据分析。

这些层次构成了云计算架构参考模型，相互关联共同构建了一个完整的云计算平台。云计算通过虚拟化物理资源并提供多种云服务，帮助用户降低成本、提高效率，实现灵活的资源管理和应用部署。

扩展您的知识：

云计算是一种分布式计算，其中“云”被分解。这是一种将大数据处理程序划分为无数小程序，通过由多个服务器组成的系统对这些小程序进行处理和分析，并获得结果并返回给用户的方法。