博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
Cloudera Mountable HDFS (hadoop-fuse-dfs).
阅读量:5925 次
发布时间:2019-06-19

本文共 1293 字,大约阅读时间需要 4 分钟。

使用 cloudera 挂载HDFS ,关于部署HDFS 可以参考

前一段时间做HDFS 测试,mount HDFS 过程 ,整理一下分享!

 

1 获取cdh3 yum 源

 
  1. wget -c http://archive.cloudera.com/redhat/cdh/cdh3-repository-1.0-1.noarch.rpm 

2 安装下载的rpm 包

 
  1. yum --nogpgcheck localinstall cdh3-repository-1.0-1.noarch.rpm 

//安装后将得到 cloudera-cdh3.repo 文件

 
  1. [root@namenode ~]# ll /etc/yum.repos.d/ 
  2. total 40 
  3. -rw-r--r-- 1 root root 1926 Aug 29  2011 CentOS-Base.repo 
  4. -rw-r--r-- 1 root root  631 Aug 29  2011 CentOS-Debuginfo.repo 
  5. -rw-r--r-- 1 root root  626 Aug 29  2011 CentOS-Media.repo 
  6. -rw-r--r-- 1 root root 5390 Aug 29  2011 CentOS-Vault.repo 
  7. -rw-r--r-- 1 root root  201 Jul 14  2011 cloudera-cdh3.repo 

3 导入 rpm key

 
  1. rpm --import http://archive.cloudera.com/redhat/cdh/RPM-GPG-KEY-cloudera

4 安装 hadoop-0.20-fuse

 
  1. yum install hadoop-0.20-fuse 

5 安装配置java 环境

 
  1. //下载安装jdk 
  2. chmod +x jdk-6u26-linux-x64-rpm.bin  
  3. ./jdk-6u26-linux-x64-rpm.bin  
  4.  
  5. //编辑 profile 
  6. vim /etc/profile 
  7. export JAVA_HOME=/usr/java/jdk1.6.0_26 
  8. export PATH=$JAVA_HOME/bin:$PATH 
  9.  
  10. //载入环境变量
  11. souce /etc/profile

6 配置 /etc/hosts文件添加namenode

 
  1. vim /etc/hosts 
  2.  
  3. 10.0.100.75      namenode 

7 创建挂载点并挂载hdfs

 
  1. mkdir -p /data/hdfs/ 
  2. chown -R hdfs:hdfs /data/hdfs/ 
  3. hadoop-fuse-dfs dfs://namenode:8020 /data/hdfs 

8 卸载hdfs

 
  1. umount /data/hdfs 

 

结束

https://ccp.cloudera.com/display/CDHDOC/Mountable+HDFS

本文转自 dongnan 51CTO博客,原文链接:http://blog.51cto.com/dngood/798894

转载地址:http://mnovx.baihongyu.com/

你可能感兴趣的文章
从Visual Studio中生成Linux设备
查看>>
小米空调来了,意外的是还一起来了一个马桶盖
查看>>
技术贴:触摸屏(TP)技术交流
查看>>
oracle监听
查看>>
书生云王东临:真正的超融合产品要像“机器猫” 开箱即用
查看>>
什么是Freedoc?Freedoc是什么?
查看>>
中国人工智能学会通讯——基于视频的行为识别技术 1.1 什么是行为
查看>>
IDC:第一季度全球服务器市场收入下滑4.6% 市场为重大升级做准备
查看>>
[图] DevOps:提速从研发到交付流程
查看>>
云应用基础技术成熟需七年时间
查看>>
每个程序员都可能犯过的10个错误
查看>>
甲骨文宣布供应链管理云平台支持LogFire仓库管理系统
查看>>
存储世界瞬息万变 SSD掀行业浪潮
查看>>
IBM与博世合作打造轻松的工业物联网
查看>>
新款ATM恶意软件Alice 可对抗动态分析 但目前需要物理接触主机
查看>>
Facebook用户遭遇千年虫:瞬间有了46年老友
查看>>
Power的力量
查看>>
重复数据删除:块级技术VS.字节级技术
查看>>
免杀新姿势:利用线程将恶意代码注入到内存中
查看>>
使用RxJava从多个数据源获取数据
查看>>