您的位置:首页 > 数码常识数码常识
hdfs常用操作(hdfs基本操作)
2025-05-14人已围观
hdfs常用操作(hdfs基本操作)
1、启动HDFS:
hdfs基本操作1、启动HDFS:2、WebConsole访问:
端口:50070
3、操作命令:
-mkdir:创建目录,-p:先创建父目录。
-ls:查看某个HDFS的目录;
-ls -R:查看某个HDFS的目录,包括子目录;
-lsr:查看某个HDFS的目录,包括子目录;
-put:上传文件;
-copyFromLocal:上传文件;
-moveFromLocal:上传文件,相当于剪切;
-copyToLocal:下载文件;
-get:下载文件;
-rm:删除目录;
-rmr:删除目录,如果存在子目录先删除子目录;
-getmerge:将某个HDFS下的文件,先合并,再下载;
示例:student01.txt存储1和2,student02.txt存储3和4,使用-getmerge合并下载到a.txt文件。
-cp:拷贝;
-mv:移动;
-count:统计hdfs对应路径下的目录个数,文件个数,文件总计大小;
显示为:目录个数,文件个数,文件总计大小,输入路径;
-du:显示hdfs对应路径下每个文件夹和文件的大侠;
-text、-cat:将文本文件或某些格式的非文本文件通过文本格式输出;
balancer:如果管理员发现某些DataNode保存数据过多,某些相对较少,可以使用命令手动启动内部的均衡过程;
4、管理命令:hdfs dfsadmin ***
-report:显示文件系统的基本数据;
-safemode:HDFS的安全模式命令;
5、JavaAPI操作
1、依赖的Jar包:
/root/training/hadoop-2.7.3/share/hadoop/common
/root/training/hadoop-2.7.3/share/hadoop/common/lib
/root/training/hadoop-2.7.3/share/hadoop/hdfs
/root/training/hadoop-2.7.3/share/hadoop/hdfs/lib
2、示例代码:
test3设置:
test4设置,先停止hdfs,配置完成后重启:
上面就是小居数码小编今天给大家介绍的关于(hdfs基本操作)的全部内容,希望可以帮助到你,想了解更多关于数码知识的问题,欢迎关注我们,并收藏,转发,分享。
94%的朋友还想知道的:
教你操作步骤(智能电视怎么装第三方软件)
ps图形怎么旋转怎么操作(ps图形旋转变换)
wps云办公进行文档加密操作流程(wps云文档加密如何设置)
word绘制流程图步骤操作(word绘制流程图)
154503
1、启动HDFS:
hdfs基本操作1、启动HDFS:2、WebConsole访问:
端口:50070
3、操作命令:
-mkdir:创建目录,-p:先创建父目录。
-ls:查看某个HDFS的目录;
-ls -R:查看某个HDFS的目录,包括子目录;
-lsr:查看某个HDFS的目录,包括子目录;
-put:上传文件;
-copyFromLocal:上传文件;
-moveFromLocal:上传文件,相当于剪切;
-copyToLocal:下载文件;
-get:下载文件;
-rm:删除目录;
-rmr:删除目录,如果存在子目录先删除子目录;
-getmerge:将某个HDFS下的文件,先合并,再下载;
示例:student01.txt存储1和2,student02.txt存储3和4,使用-getmerge合并下载到a.txt文件。
-cp:拷贝;
-mv:移动;
-count:统计hdfs对应路径下的目录个数,文件个数,文件总计大小;
显示为:目录个数,文件个数,文件总计大小,输入路径;
-du:显示hdfs对应路径下每个文件夹和文件的大侠;
-text、-cat:将文本文件或某些格式的非文本文件通过文本格式输出;
balancer:如果管理员发现某些DataNode保存数据过多,某些相对较少,可以使用命令手动启动内部的均衡过程;
4、管理命令:hdfs dfsadmin ***
-report:显示文件系统的基本数据;
-safemode:HDFS的安全模式命令;
5、JavaAPI操作
1、依赖的Jar包:
/root/training/hadoop-2.7.3/share/hadoop/common
/root/training/hadoop-2.7.3/share/hadoop/common/lib
/root/training/hadoop-2.7.3/share/hadoop/hdfs
/root/training/hadoop-2.7.3/share/hadoop/hdfs/lib
2、示例代码:
test3设置:
test4设置,先停止hdfs,配置完成后重启:
上面就是小居数码小编今天给大家介绍的关于(hdfs基本操作)的全部内容,希望可以帮助到你,想了解更多关于数码知识的问题,欢迎关注我们,并收藏,转发,分享。
94%的朋友还想知道的:
教你操作步骤(智能电视怎么装第三方软件)
ps图形怎么旋转怎么操作(ps图形旋转变换)
wps云办公进行文档加密操作流程(wps云文档加密如何设置)
word绘制流程图步骤操作(word绘制流程图)
154503
很赞哦! ()