欢迎来到小居数码网-一家分享数码知识,生活小常识的网站,希望可以帮助到您。

当前位置:生活小常识 > 数码知识 >
优质

hdfs常用操作(hdfs基本操作)

数码知识

丁泊峻优秀作者

原创内容 来源:小居数码网 时间:2024-08-10 20:31:01 阅读() 收藏:27 分享:50

导读:您正在阅读的是关于【数码知识】的问题,本文由科普作家协会,生活小能手,著名生活达人等整理监督编写。本文有483个文字,大小约为2KB,预计阅读时间2分钟。

1、启动HDFS:

hdfs基本操作

1、启动HDFS:

2、WebConsole访问:

端口:50070

3、操作命令:

-mkdir:创建目录,-p:先创建父目录。

-ls:查看某个HDFS的目录;

-ls -R:查看某个HDFS的目录,包括子目录;

-lsr:查看某个HDFS的目录,包括子目录;

-put:上传文件;

-copyFromLocal:上传文件;

-moveFromLocal:上传文件,相当于剪切;

-copyToLocal:下载文件;

-get:下载文件;

-rm:删除目录;

-rmr:删除目录,如果存在子目录先删除子目录;

-getmerge:将某个HDFS下的文件,先合并,再下载;

示例:student01.txt存储1和2,student02.txt存储3和4,使用-getmerge合并下载到a.txt文件。

-cp:拷贝;

-mv:移动;

-count:统计hdfs对应路径下的目录个数,文件个数,文件总计大小;

显示为:目录个数,文件个数,文件总计大小,输入路径;

-du:显示hdfs对应路径下每个文件夹和文件的大侠;

-text、-cat:将文本文件或某些格式的非文本文件通过文本格式输出;

balancer:如果管理员发现某些DataNode保存数据过多,某些相对较少,可以使用命令手动启动内部的均衡过程;

4、管理命令:hdfs dfsadmin ***

-report:显示文件系统的基本数据;

-safemode:HDFS的安全模式命令;

5、JavaAPI操作

1、依赖的Jar包:

/root/training/hadoop-2.7.3/share/hadoop/common

/root/training/hadoop-2.7.3/share/hadoop/common/lib

/root/training/hadoop-2.7.3/share/hadoop/hdfs

/root/training/hadoop-2.7.3/share/hadoop/hdfs/lib

2、示例代码:

test3设置:

test4设置,先停止hdfs,配置完成后重启:

上面就是小居数码小编今天给大家介绍的关于(hdfs基本操作)的全部内容,希望可以帮助到你,想了解更多关于数码知识的问题,欢迎关注我们,并收藏,转发,分享。

94%的朋友还想知道的:

(299)个朋友认为回复得到帮助。

部分文章信息来源于以及网友投稿,转载请说明出处。

本文标题:hdfs常用操作(hdfs基本操作):http://sjzlt.cn/shuma/154503.html

猜你喜欢