?

疯狂java

?
您现在的位置: 疯狂软件 >> 新闻资讯 >> 正文

hadoop基本用法回顾


 

       研一时,跟着老师写完了一个大数据项目,现在不怎么写了,发现很多东西都忘了,还要从网上找资料,从今天起,开始多写博客,每天更新一篇作为记录
       今天复习hadoop的基本用法:【配置ubuntu启动环境说明,本人的hadoop ubuntu虚拟机已经配置好了】(hdfs-site.xml,core-site.xml,mapred-site.xml已经配置好了,本次是设置ubuntu快捷启动和eclipse远程连接这两个操作)
①添置ubuntu启动hadoop环境变量:查看首先env一下,看一看当前的环境变量,然后找到etc/profile文件,加入如下:
注意,加完环境变量后,不想重启的话,source一下
②启动hadoop的file system,yarn等如下:
       hadoop eclipse访问问题1,加入hadoop插件后(这里需要注意,eclipse添加插件的时候,需要下载一个包【hadoop-common-2.6.0-bin】,不然连接会报错),加入包(hadoop-common-2.6.0-bin)后,没有反应,查了其他人的博客,选择删除掉eclipse下的update文件夹,重启,果然好了
 
?