6、HDFS 的 Java API 操作 |
您所在的位置:网站首页 › hdfs的javaapi操作写数据 › 6、HDFS 的 Java API 操作 |
1、HDFS 的 Java API 操作介绍
hdfs 在生产应用中主要是客户端的开发,其核心步骤是从 hdfs 提供的 api 中构造一个 HDFS 的访问客户端对象,然后通过该客户端对象操作(增删改查)HDFS 上的文件 。 2、eclipse 安装与配置连接 hdfs需要的安装包: ① 下载一个 eclipse 开发工具 eclipse-jee-luna-SR1-win32-x86_64.zip ,官网下载地址:https://www.eclipse.org/downloads/packages/ ; ② 解压到指定文件夹 D:\eclipse_x86_64\eclipse ; ③ 把 hadoop-eclipse-plugin-2.6.5.jar 插件放入到 D:\eclipse_x86_64\eclipse/plugins 文件夹下 ; ④ 双击启动解压包下的 eclipse.exe 文件,第一次打开需要设置工作环境,你可以指定工作目录(D:\eclipse_x86_64\eclipse-workspace),点击 Launch 安装,安装完成便可以进入到eclipse的操作界面;点击 windows --> Perspective --> Reset Perspective -- > yes 重置一下主界面;点击 windows –> show view –>Project Explorer 这时候多了DFS Location,接下来配置后便可以启用; ⑤ 在windows上安装hadoop: 将” hadoop-2.7.7-centos-6.7.tar.gz”解压到 windows 系统下一个文件夹下(暂时可以不用配置环境变量),文件夹的 路径最好不要带中文。我的目录是:D:\hadoop_win_2.7.7\hadoop-2.7.7 ; ⑥ 回到打开的 eclipse 操作界面,点击 windows –> prefrences -> 会出现一个对话框;找到Hadoop MapReduce 选项:然后把你安装的 hadoop 路径配置上,就是上一步你解压的那 个文件夹:D:\hadoop_win_2.7.7\hadoop-2.7.7 ,点击Apply and Close; ⑦ 然后点击 windows –> show view –> Other –> MapReduce Tools文件夹下的 --> Map/Reduce Locations-->双击打开; ⑧ 点击打开击右上角图标 |
今日新闻 |
点击排行 |
|
推荐新闻 |
图片新闻 |
|
专题文章 |
CopyRight 2018-2019 实验室设备网 版权所有 win10的实时保护怎么永久关闭 |