大家在查： Popsicles Ocado 沙城 RMQ 埔里镇 phascolarctos fiendly Joshi Johansen 觅求

HDFS

网络一个分布式文件系统(Hadoop Distributed File System)；分布式文件存储系统

HDFS

HDFS

HDFS

一个分布式文件系统(Hadoop Distributed File System)

...开分布式存储,Hadoop框架包含了分布式存储系统HDFS(Hadoop Distributed File System),其存储和数据结构很类似Google的…

分布式文件存储系统

Hadoop由2个部分构成：分布式文件存储系统（HDFS）和MapReduce计算模型。关于这2个部分，可以参考一下Google的论 …

1

Not to be outdone , commercial Hadoop pioneer Cloudera announced an HDFS partnership of its own yesterday .

商业 Hadoop 的先驱 Cloudera 也不甘示弱，于昨天发布了自己的 HDFS 合作伙伴计划。

2

Once done , you'll have two text files in HDFS ready to be processed .

完成之后，在 HDFS 中就有两个文本文件等待处理。

3

The DataNode stores HDFS data in files in its local file system . The DataNode has no knowledge about HDFS files.

Datanode 并不知道关于文件的任何东西，除了将文件中的数据保存在本地的文件系统上。

5

Is there any additional work being done to simplify the management of a cluster , the HDFS, MapReduce processes, etc. ?

那么管理这样一个集群、HDFS 以及 MapReduce 的处理还有什么额外的工作需要做吗？

6

From the perspective of an end user , HDFS appears as a traditional file system .

从最终用户的角度来看，HDFS 就像传统的文件系统一样。

7

HBase is a database representation over Hadoop's HDFS, permitting MapReduce to operate on database tables over simple files .

HBase 是数据库在 Hadoop 的 HDFS 上的表现，在简单文件上执行 MapReduce 以操作数据库表。

12

If you mess up something , you can format the HDFS and clear the temp directory specified in hadoop-site. xml and start again.

如果弄乱了什么东西，可以格式化 HDFS 并清空 hadoop-site.xml 中指定的临时目录，然后重新启动。

13

The previous two commands will generate two directories under HDFS, one "input " and one "output . "

前两个命令会在 HDFS 中生成两个目录，“input ”和 “output ”。

14

Recall that at the top of the Hadoop cluster is the namenode, which manages the HDFS.

位于 Hadoop 集群最上层的是 namenode ，它管理 HDFS 。

15

The primary objective of HDFS is to store data reliably even in the presence of failures .

HDFS 的主要目标就是实现在失败情况下的数据存储可靠性。

17

The HDFS client software implements checksum checking on the contents of HDFS files .

HDFS 客户端软件实现了 HDFS 文件内容的校验和。

18

Note the format below , which moves the source file to the HDFS subdirectory (input ).

注意，下面的命令格式把源文件转移到 HDFS 子目录（input ）中。

19

You 've seen how to inspect the HDFS, but if you're looking for information about Hadoop's operation , you 'll find the Web interfaces useful .

您已经知道如何检查 HDFS 了，但是如果要寻找 Hadoop 的操作的相关信息，会发现 Web 界面很有用。

20

Run the following command to format the Hadoop distributed file system to initialize.

运行以下命令对 HDFS 分布式文件系统进行格式化。

21

In this case, use the put command , which moves a file from the local file system into the HDFS (see Listing 4 ).

在这里，使用 put 命令把文件从本地文件系统转移到 HDFS 中（见清单 4 ）。

22

You do this easily with the get utility (analogous to the put you executed earlier to write files into HDFS).

只需使用 get 实用程序（它与前面在 HDFS 中写文件所用的 put 相似）。

23

It provides metadata services within HDFS.

它在 HDFS 中提供元数据服务。

24

The NameNode machine is a single point of failure for an HDFS cluster. If the NameNode machine fails, manual intervention is necessary.

Namenode 在 HDFS 是单点存在，如果 Namenode 所在的机器错误，手工的干预是必须的。

25

Using the FileSystem package to access HDFS (a much better approach than in my previous posting).

使用的文件包进入 HDFS （一种更好的方法比我上篇）。

26

For example , Twitter sends logging messages to Hadoop and writes the data directly into HDFS, the Hadoop Distributed File System .

比如 Twitter 发送登陆信息到 Hadoop ，并直接写入 HDFS，Hadoop 文件系统。

27

You can also extract the file from HDFS using the hadoop-0. 20 utility (see Listing 8 ).

还可以使用 hadoop-0.20 实用程序从 HDFS 中提取文件（见清单 8 ）。

28

In this example we assume that there is a directory in HDFS for every day .

在这个示例中，我们假设在 HDFS 中有针对每个日期的目录。

29

breaking up storage into a set of volumes (uses multiple HDFS clusters )

把存储拆分成一组文件卷集（使用多个 HDFS 集群）

30

releasing federated storage across HDFS instances, in the next major Hadoop release

在 Hadoop 的下一个主要版本将会发布跨 HDFS 实例的联合存储

热词推荐

大家在看