中文字幕一区二区不卡_一区二区三区四区久久_97成人资源网_gogo高清午夜人体在线_91久久精品国产亚洲_亚洲在线观看视频

新闻中心

首页 > 新闻中心 > 行业新闻 >

浅议Hadoop分布式文件系统HDFS的访问接口

时间:2017-11-06 18:53:18   阅读:

  访问HDFS可以通过很多种方式。可以通过java API调用,也可以使用C语言封装的API;HDFS还提供了浏览器访问的方式;目前通过WebDAV协议访问的工作正在开发中。
 
1.Hadoop API
 
  HadoopAPI包括如下几种主要的包(Package)。
 
  (1)org.apache.hadoop.conf:定义了系统参数的配置文件处理API。
 
  (2)org.apache.hadoop.dfs: Hadoop分布式文件系统(HDFS)模块的实现。
 
  (3)org.apache.hadoop.fs:定义了抽象的文件系统API。
 
  (4)org.apache.hadoop.io:定义了通用的I/0 API,用于针对网络、数据库、文件等数据对象做读/写操作。
 
  (5)org.apache.hadoop.ipc:用于网络服务端和客户端的工具,封装了网络异步I/O的基础模块。
 
  (6)org.apache.hadoop.mapred:Hadoop分布式计算系统(MapReduce)模块的实现,包括任务的分发调度等。
 
  (7)org.apache.liadoop.metrics:定义了用于性能统计信息的API,主要用于mapred和dfs模块。
 
  (8)org.apaclie.liadoop.record:定义了针对记录的I/0 API类及一个记录描述语言翻译器,用于简化将记录序列化成语言中性的格式(Language-neutral Manner)。
 
  (9)org.apache.hadoop.tools:定义了一些通用的工具。
 
  (10)org.apache.hadoop.util定义了一些公用的API。
 
  在org.apache.hadoop.fc众多类中,最重要的是FileSystem抽象类。为了便于方便编程使用和提供一定的文件访问安全性,HDFS将上层客户端需要的操作封装在FileSystem类中通过这个类提供给上层文件操作的抽象。它定义了文件系统中的一些基本操作,如create、rename、delete、mkdirs等,还定义了分分布式文件系统具有的操作,如copyFromLocalFUe,copyToLocalFile等。其中,LocalFileSystem和DistributedpileSystem继承与此类,分别实现了本地文件系统和分布式文件系统。
 
2.浏览器接口
 
  典型的HDFS安装会配置一个Web服务器开放自己的命名空间,其TCP端口是可配的,这样用户就可以通过Web浏览器浏览HDFS的命名空间并査看集群当前的基本状态和信息。在默认配置下http://namenode-name:50070这个页面列出了集群里的所有DataNode和集群的基本状态。
 
?

闽公网安备 35010002000114号

主站蜘蛛池模板: 在线不卡中文字幕 | 一本色综合久久 | 日韩欧美精品综合一区二区三区 | 欧美精品一卡二卡 | 日韩成人免费一级毛片 | 亚洲国产成人av在线观看 | 久久妻 | 97影院理论午夜论不卡 | 91精品久久久久久久99蜜桃 | 自拍偷在线精品自拍偷 | 国产毛片a | 成人一级| 亚洲国产成人资源在线软件 | 欧美激情视频二区三区 | 人人人妻人人澡人人爽欧美一区 | 人妻少妇精品中文字幕av | 久久人人爽人人爽人人爽 | 国产日韩免费 | 精品国产乱码久久久久久郑州公司 | 狠狠亚洲丁香综合久久 | 在线观看欧美日韩 | 天天操天天摸天天舔 | 久久亚洲综合伊人 | 免费一级黄 | 欧美一级片毛片免费观看视频 | 加勒比久草 | 影音先锋男人资源在线观看 | 免费99精品国产自在现线观看 | 国产精品第100页 | 国产成人无码精品久久久性色 | 国产精品国语自产拍在线观看 | 亚洲一区二区观看 | 久久伊人电影 | 久久这里只有免费精品6www | 日韩欧 | 天天综合网在线观看视频 | 91精品国产91久久久久久麻豆 | 日韩欧美一区二区不卡看片 | 欧美久久网 | 免费无遮挡又黄又爽网站 | 日本一区午夜艳熟免费 |