博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
Hadoop源代码分析(二)
阅读量:5124 次
发布时间:2019-06-13

本文共 596 字,大约阅读时间需要 1 分钟。

下面给出了Hadoop的包的功能分析。

 

Package

Dependences

tool

提供一些命令行工具,如DistCp,archive

mapreduce

Hadoop的Map/Reduce实现

filecache

供HDFS文件的本地缓存,用于加快Map/Reduce的数据访问速度

fs

文件系统的抽象,可以理解为支持多种文件系统实现的统一文件访问接口

hdfs

HDFS,Hadoop的分布式文件系统实现

ipc

一个简单的IPC的实现,依赖于io提供的编解码功能

参考:http://zhangyu8374.iteye.com/blog/86306

io

表示层。将各种数据编码/解码,方便于在网络上传输

net

封装部分网络功能,如DNS,socket

security

用户和用户组信息

conf

系统的配置参数

metrics

系统统计数据的收集,属于网管范畴

util

工具类

record

根据DDL(数据描述语言)自动生成他们的编解码函数,目前可以提供C++和Java

http

基于Jetty的HTTP Servlet,用户通过浏览器可以观察文件系统的一些状态信息和日志

log

提供HTTP访问日志的HTTP Servlet

转载于:https://www.cnblogs.com/itgg168/archive/2012/11/22/2782406.html

你可能感兴趣的文章
Java基础知识:Java实现Map集合二级联动3
查看>>
Teamwork(The sixth day of the team)
查看>>
(转)腾讯2011.10.15校园招聘会笔试题
查看>>
拉格朗日乘子法
查看>>
[deviceone开发]-do_RichLabel的简单示例
查看>>
【10】jQuery学习——入门jQuery选择器之表单选择器
查看>>
WPF--TextBlock的ToolTip附加属性
查看>>
linux环境配置
查看>>
《Java并发编程的艺术》之阻塞队列
查看>>
深入浅出 Java Concurrency (6): 锁机制 part 1[转]
查看>>
【算法】禁忌搜索算法(Tabu Search,TS)超详细通俗解析附C++代码实例
查看>>
MFC取消菜单栏
查看>>
第四次作业
查看>>
安防摄像头Onvif、RTSP、GB28181转web无插件直播卡顿分析
查看>>
POJ 2349 Prim
查看>>
C++总结笔记(二)面向对象
查看>>
WCF系列(1)—— CustomBehavior 入门
查看>>
Hibernate一对一关联------主键关联(亲测成功)
查看>>
Centos7.5 lnmp+mongodb扩展
查看>>
markdown绘图插件----mermaid简介
查看>>