博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
大数据学习笔记1
阅读量:5971 次
发布时间:2019-06-19

本文共 521 字,大约阅读时间需要 1 分钟。

Hadoop Distributed File System(HDFS)是一个运行在商用硬件平台上的分布式文件系统;DFS在廉价硬件平台上提供高可靠的文件服务,提供数据访问的高吞吐量,适合那些运行在大数据集上的应用。HDFS并不完全符合POSIX文件系统方面的标准,这是因为HDFS运行环境和POSIX filesystem适用的环境是不同。HDFS支持对文件系统数据的流式访问。

1HDFS的特性:

1检测失败,迅速回复(核心目标)
2以数据流的方式访问数据集(访问)
3大数据存储,将文件分散到集群的数千节点,多大数据宽带,优化大数据(存储)
4一次写入多次读取的模式;并提供两种性能:hflush以及append;hflush保持数据的一致性与持久性;append对提供重新打开已关闭的问题并添加额外的数据(数据的完整与稳定)
5就近计算原则,减少网络消耗与吞吐量,并提高计算效率(计算原则)
6易移植

 

本文主要是看这篇文章归纳而来:http://blog.csdn.net/kickxxx/article/details/8242093

转载于:https://www.cnblogs.com/wzlol/p/7989198.html

你可能感兴趣的文章
数组面试题-子数组之和
查看>>
在Web.config或App.config中的添加自定义配置
查看>>
delphi XE2-新的里程碑
查看>>
使用delphi 开发多层应用(六)kbmMW返回流到客户端
查看>>
使用Eclipse调试JDK源码
查看>>
c#实现Javascript的encodeURIComponent()函数
查看>>
破解最令人蛋疼的10种用户体验设计师
查看>>
Jvascript学习实践案例
查看>>
POJ 2081
查看>>
传说中效率最高的最大流算法(Dinic) [转]
查看>>
node.js入门 - 7.异常处理与多进程开发
查看>>
巧用Link标签加载资源,确保加载完为止
查看>>
实现系统菜单的两种方式
查看>>
幸福框架:元数据驱动开发
查看>>
类对象RMI的简单实现
查看>>
Android 应用开发实例之情景模式
查看>>
ios中图层和view的关系
查看>>
Linux 查看文件内容的命令
查看>>
python开发_difflib字符串比较
查看>>
被解放的姜戈01 初试天涯
查看>>