hdfs ceph存储大数据,数据在Ceph集群中的存储方式

CentOS7部署Ceph Distributed 存储架构随着OpenStack成为开源云计算的标准软件栈，Ceph也成为OpenStack 存储的首选后端。因为它还支持block 存储和object 存储，所以很自然地被用作云计算框架openstack或cloudstack的整体存储 backend，硬盘存储:硬盘存储是电脑中的永久-3 存储模式，其中-3 -2。

这只能说是主流技术，不是核心技术；目前国内很多公司主要使用Hadoop生态系统中的技术，如Hadoop、yarn、zookeeper、kafka、flume、spark、hive、Hbase等。这并不是说这些技术是唯一的，它们只是方便应用。还有数据。所以这个问题你先有问题。大数据是方向场，就像你问什么是饮食，它有哪些方面。

在ForresterResearch最近的一份研究报告中，对数据整个生命周期中的22项技术的成熟度和轨迹进行了评估。这些技术为Da 数据的实时性、预测性和综合洞察力做出了巨大贡献。1.预测分析技术，这也是Da 数据的主要功能之一。预测分析允许公司通过分析大型数据来源来发现、评估、优化和部署预测模型，从而提高业务绩效或降低风险。同时“Da 数据”的预测分析也与我们的生活息息相关。

问题1:目前主流的分布式文件系统有哪些？各有什么优缺点？目前，除了GPFS之外，还有几个主流的分布式文件系统，包括PVFS、Lustre、PanFS和GoogleFS。1.PVFS(ParallelVirtual)项目是由克莱姆森大学创建的运行Linux集群的开源项目。目前PVFS还存在以下不足:1)管理节点单一:只有一个管理节点来管理meta 数据。当集群系统达到一定规模时，管理节点会过度繁忙，进而管理节点成为系统的瓶颈；2)缺乏数据 存储的容错机制:当一个I/O节点失效时，数据将不可用；3)静态配置:PVFS只能在启动前配置，一旦系统运行，不能改变原有配置。

虽然数据分析工具有几千万种，组合起来总是一样的。不外乎数据采集，数据 -2/，数据管理，数据计算，数据分析。SAS、R、SPSS、python、excel是最常提到的数据分析工具。PythonPython是一种面向对象的解释性计算机编程语言。Python语法简洁明了，类库丰富强大。