博客
关于我
Hadoop 创建用户及HDFS权限,HDFS操作等常用Shell命令
阅读量:660 次
发布时间:2019-03-15

本文共 994 字,大约阅读时间需要 3 分钟。

Hadoop 权限配置指南

为了保证 Hadoop 环境的正常运行,权限设置必须正确。以下是针对 Hadoop 组和目录权限的具体操作步骤,帮助您完成必要的配置。

1. 组成员管理

为了实现组权限的管理,需要按照以下步骤操作:

sudo addgroup Hadoopsudo usermod -a -G hadoop larrysudo gedit /etc/sudoers

在 sudoers 文件中,添加以下权限:

root ALL=(ALL) ALLhadoop ALL=(ALL) ALL

2. 紫乎街 hive> 权 directories 权

您需要对 Hadoop 目录进行权限设置:

sudo chown -R larry:hadoop /home/larry/hadoopsudo chmod -R 755 /home/larry/hadoop

3. HDFS 权 configurations

在 HDFS 中,权限设置至关重要。您可以按照以下步骤执行:

sudo bin/hadoop dfs -chmod -R 755 /sudo bin/hadoop dfs -ls /

调整文件所有者:

sudo bin/hadoop fs -chown -R larry /

若需解除安全模式:

sudo bin/hadoop dfsadmin -safemode leave

4. 文件拷贝与查看

通过以下命令实现文件的拷贝与查看:

hadoop fs -copyFromLocal local_file hdfs_pathhadoop fs -cat file:///file3/user/hadoop/file4

文件和目录权限管理:

hadoop fs -chgrp -R hadoop /pathhadoop fs -chmod -R 755 /pathhadoop fs -chown -R larry:hadoop /path

文件本地拷贝:

hadoop fs -copyToLocal hdfs_path local_file

文件复制(支持多个源或目标):

hadoop fs -cp src_path /dest/path

查看目录大小:

hadoop fs -du /path

以上操作将帮助您完成 Hadoop 环境的权限配置,确保系统运行顺畅。

转载地址:http://djlmz.baihongyu.com/

你可能感兴趣的文章
python系列【仅供参考】:python之subprocess模块rsync拉取文件
查看>>
python系列【仅供参考】:python 远程rdp
查看>>
python基础
查看>>
Python基本语法与变量类型
查看>>
python基本数据类型(容器)- tuple list dict set
查看>>
python基本工资的调整方案_Python薪资又涨了!这可咋办!
查看>>
Python基准测试和性能分析内存管理和垃圾回收
查看>>
Python基于RESTful风格的接口自动化测试实战
查看>>
python基于pygame实现跨年烟花效果
查看>>
python基于flask搭建http服务(四)—— Docker容器化部署
查看>>
python基于flask搭建http服务(二)—— 实现Excel上传、数据清洗、入库
查看>>
python基于flask搭建http服务(三)—— 使用gunicorn部署项目
查看>>
python基于flask搭建http服务(一)—— 实现数据查询和Excel导出
查看>>
Python块键盘/鼠标输入
查看>>
python在心理学研究中的应用有哪些_心理学在线研究可用平台简介和应用进展
查看>>
python在使用HTMLTestRunner时,报告为空,错误提示<_io.TextIOWrapper name='<stderr>' mode='w' encoding='utf_8'>...
查看>>
python在gpu上运行_【python】python开启GPU加速
查看>>
Python在def函数中使用for循环
查看>>
Python在def函数中使用for循环
查看>>
Python在Conda环境中,但在Windows虚拟环境中没有激活
查看>>