• 欢迎访问显哥博客,本网站纯属学习技术,绝无商业用途,欢迎小伙伴们共同学习!研究技术!QQ:52249909 加我QQ
  • 世界75亿人,这么小的概率,能认识你,是我一生的幸运,不妨加个QQ接触一下:52249909 加我QQ

HDFS简介

HDFS简介
HDFS概述—–基本特征基于商用硬件环境HDFS具有高容错性,并且被部署在廉价的硬件之上HDFS向应用程序提供高的数据吞吐访问,适合于需要处理大规模海量数据集的应用HDFS遵循部分POSIX协议要求,可以确保应用程序以流的方式访问文件系统数据HDFS的对现实应用环境的假设及其目标硬件失效流式数据访问海量数据集追加写入……继续阅读 »

lixian 5年前 (2019-10-25) 20102浏览

Hadoop体系架构概述

Hadoop体系架构概述
Hadoop概述基于Apache基金会下的一个开源项目,致力于开发一个可靠的、大规模的分布式计算框架用户可采用简单的计算模型在计算机集群下对大规模的数据进行分布式处理设计理念之一是扩展单一的服务器为成千上万机器的集群,且集群中每一个机器同时提供本地计算力和存储力Hadoop框架是在应用层检测和处理硬件失效问题,而不是依赖于硬件自身来维持高可用性。……继续阅读 »

lixian 5年前 (2019-10-25) 20183浏览

云计算技术之分布式系统

云计算技术之分布式系统
一、解释GFS和HDFS的区别1.GFS和HDFS都采用单一主控机+多台工作机的模式,由一台主控机(Master)存储系统全部元数据,并实现数据的分布、复制、备份决策,主控机还实现了元数据的checkpoint和操作日志记录及回放功能。2.GFS最为复杂的部分是对多客户端并发追加同一个文件,即多客户端并发Append模型 。GFS允许文件被多次或者多个客……继续阅读 »

lixian 5年前 (2019-10-18) 935浏览

虚拟化技术的简要概括总结

虚拟化技术的简要概括总结
1. 主流的虚拟化类型有哪些?有什么区别?(1)、XEN: 我们云计算目前选择的是XEN的开源平台,是真正基于硬件的虚拟。需要在该平台上进行二次开发和封装,XEN对性能损耗比较小,在5%左右。XEN的用户每个是独立的占用物理资源,我们的全部是占用独立的硬件资源,稳定性有保障。(2)、VMWARE:业内领先的虚拟化产品,在市场上占据领先地位,目前最新版……继续阅读 »

lixian 5年前 (2019-10-09) 994浏览