Hadoop安全云盘开发（第3篇）

7007

第3篇

环境搭建完毕后，我们开始迫不急待地投入到项目的开发中。首先要解决的问题是如何在java代码中调用Hadoop HDFS Java API，对文件进行操作，包括文件的上传、下载、删除和移动等。其实这些操作并不困难，只要在网上搜一下，就有大量的例子代码，稍加修改，将相关参数改成本机的配置便可以完成。但是，在具体的实施之中，还是遇到了一些棘手的问题。我把网上下载的代码改好后，一运行就会报错。
这个问题可把我们难住了，我们一直以为是代码的错误，将代码一改再改，浪费了大约5天的时间，才把这个问题解决。我们仔细看了报出的错误，主要是涉及到一些权限的问题。原来由于Eclipse使用hadoop插件交作业时，会默认以DrWho身份将作业写入HDFS文件系统中，对应的也就是HDFS上的/user/hadoop，由于用户DrWho对目录并没有写入权限，所以会导致异常发生。需要在命令行中执行获取权限操作：$./hadoopfs-chmod777/。
这样，我们就顺利地在java代码中调用了Hadoop HDFS Java API。