设为首页 收藏本站
查看: 908|回复: 0

[经验分享] 用JakartaCommon的net组件来做ftp 文件传输

[复制链接]

尚未签到

发表于 2016-6-10 07:45:28 | 显示全部楼层 |阅读模式
package com.wwkj.cms.test.ftp;

import java.io.BufferedInputStream;
import java.io.BufferedOutputStream;
import java.io.File;
import java.io.FileInputStream;
import java.io.FileNotFoundException;
import java.io.FileOutputStream;
import java.io.IOException;
import java.io.InputStream;
import java.net.SocketException;
import java.text.SimpleDateFormat;
import java.util.Comparator;
import java.util.Properties;
import java.util.TreeSet;

import org.apache.commons.io.FileUtils;
import org.apache.commons.net.ftp.FTP;
import org.apache.commons.net.ftp.FTPClient;
import org.apache.commons.net.ftp.FTPClientConfig;
import org.apache.commons.net.ftp.FTPFile;
import org.apache.commons.net.ftp.FTPReply;

import com.wwkj.cms.framework.log.LoggerAdapter;

/**
* 实现FTP 客户端的各种操作
*
* 其实JDK里面也有支持FTP操作的包【jre/lib下的rt.jar】,但是SUN的DOC里面并没有提供相应文档,
* 因为这里面的包,不被官方支持,建议不要使用。我们可以使用第三方提供的包apache.commons。 apache.commons的包,都有文档,方便使用
* 另外IBM也有提供一个ftp包,我没有用过,有兴趣的可以去研究一下
*
* @commons-net:http://apache.mirror.phpchina.com/commons/net/binaries/commons-net-1.4.1.zip
* @jakarta-oro:http://mirror.vmmatrix.net/apache/jakarta/oro/source/jakarta-oro-2.0.8.zip
* @commons-io:http://apache.mirror.phpchina.com/commons/io/binaries/commons-io-1.3.2-bin.zip
*
* @author 高新强
* @version 2008-06-10 Ftp.java
*
*/
public class Ftp {

    private static LoggerAdapter logger;
    /**
     * FTP 登录用户名
     */
    private static String UserName;
    /**
     * FTP 登录密码
     */
    private static String Password;
    /**
     * FTP 服务器地址IP地址
     */
    private static String Ip;
    /**
     * FTP 端口
     */
    private static int Port;
    /**
     * 属性集
     */
    private static Properties Property = null;
    /**
     * 配置文件的路径名
     */
    private static String ConfigFile = "src/com/wwkj/cms/test/ftp/ftpconfig.properties";
    /**
     * FTP 客户端代理
     */
    private static FTPClient FtpClient = null;
    /**
     * 时间格式化
     */
    private static SimpleDateFormat dateFormat = new SimpleDateFormat(
            "yyyy-MM-dd hh:mm");
    /**
     * FTP
     */
    private static final String[] FILE_TYPES = { "文件", "目录", "符号链接", "未知类型" };
    /**
     * 传输模式为二进制文件.
     */
    public static final int BINARY_FILE_TYPE = FTP.BINARY_FILE_TYPE;
    /**
     * 传输模式为ASCII,默认为ASCII
     */
    public static final int ASCII_FILE_TYPE = FTP.ASCII_FILE_TYPE;
     public  static int  i=1;
    public static void main(String[] args) {
        // setConfigFile("ftpconfig.properties");// 设置配置文件路径
        connectServer();
        // makeDirectory("eeee");

        // changeWorkingDirectory("webroot");//进入文件夹webroot
        // listRemoteFiles("*.jsp");//列出webroot目录下所有jsp文件
        setFileType(FTP.BINARY_FILE_TYPE);// 设置传输二进制文件

        //uploadFile("G:/临时文件/万维公司员工交通通讯报销标准(2008修订版).doc",
        //        "中国人也/万维公司员工交通通讯报销标准(2008修订版).doc");//
        // 上传文件woxingwosu.xml,重新命名为myfile.xml
        // renameFile("viewDetail.jsp",
        // "newName.jsp");//将文件viewDetail.jsp改名为newName.jsp
        uploadManyFile("G:/临时文件/staxmem", "dirdirdir/");
        // deleteFile("/testtest/");//删除一个文件UpdateData.class
        // deleteEmptyDirectory("dfd");//
        // loadFile("jakarta-oro-2.0.8.jar", "E:/tmp/00000000000000001.jpg");//

        // 01.jpg,并且重新命名为G:/临时文件/00000000000000001.jpg
        // uploadFile("G:/临时文件");

        // listRemoteFiles("eeee");// 列出所有文件和目录
        // listRemoteFiles("58-20166.jpg");// 列出指定的文件和目录
        closeConnect();// 关闭连接
    }

    /**
     * 上传单个文件,并重命名
     *
     * @param localFilePath--本地文件路径
     * @param newFileName--新的文件名,可以命名为空""
     * @return true 上传成功,false 上传失败
     */
    public static boolean uploadFile(String localFile, String newFileName) {
        boolean flag = true;
        try {

            connectServer();
            FtpClient.setFileType(BINARY_FILE_TYPE);
            // ftp.setFileType(FTP.ASCII_FILE_TYPE);
            FtpClient.enterLocalPassiveMode();
            // ftp.changeWorkingDirectory(remoteDir);
            FtpClient.setFileTransferMode(FTP.STREAM_TRANSFER_MODE);
            File file = new File(localFile);

            File newFile = new File(newFileName);
            String dir = newFile.getParentFile().getPath();
            if (!FtpClient.changeWorkingDirectory(dir)) {// 如果不能进入dir下,说明此目录不存在!

                if (!makeDirectory(newFile.getParentFile().getPath())) {

                    System.out.println("创建文件目录【" dir "】 失败!");
                }
            }
            changeWorkingDirectory("/");// 回到FTP根目录
            InputStream input = new FileInputStream(file);

            if (input == null) {
                System.out.println("本地文件不存在");
                logger.debug("本地文件不存在,请重新选择!");

            }
            if (newFileName.trim().equals("")) {

                newFileName = file.getName();

            }
            flag = FtpClient.storeFile(newFileName, input);
            if (flag) {
                System.out.println("upload File succeed");

            } else {
                System.out.println("upload File false");

            }
            input.close();

        } catch (IOException e) {
            e.printStackTrace();
            logger.debug("本地文件上传失败!", e);
            // TODO: handle exception
        } catch (Exception e) {
            e.printStackTrace();
            // logger.debug("本地文件上传失败!", e);
            // TODO: handle exception
        }
        return flag;
    }

    /**
     * 上传多个文件
     *
     * @param localFilePath--本地文件夹路径
     * @return true 上传成功,false 上传失败
     */
    public static String uploadManyFile(String localFile) {
        boolean flag = true;
        StringBuffer strBuf = new StringBuffer();
        int n = 0;
        try {
            connectServer();
            File file = new File(localFile);// 在此目录中找文件

            File file2[] = file.listFiles();

            for (int i = 0; i < file2.length; i ) {

                File file1 = new File(file2.getAbsolutePath());
                if (file1.isDirectory()) {// 文件夹中还有文件夹
                    uploadManyFile(file2.getAbsolutePath());
                } else {
                    flag = uploadFile(file2.getAbsolutePath(), "");
                }
                if (!flag) {
                    n ;
                    strBuf.append(file2.getName() "\r\n");

                }
            }
            if (n > 0) {

                strBuf.insert(0, "共有" n "上传失败,分别为\r\n");
            }
            System.out.println(strBuf.toString());
        } catch (NullPointerException e) {
            e.printStackTrace();
            // logger.debug("本地文件上传失败!找不到上传文件!", e);
            // TODO: handle exception
        } catch (Exception e) {
            e.printStackTrace();
            logger.debug("本地文件上传失败!", e);
            // TODO: handle exception
        }
        return strBuf.toString();
    }

    /**
     * 上传多个文件
     *
     * @param localFilePath--本地文件夹路径
     * @param newFileName--目标路径
     * @return true 上传成功,false 上传失败
     */
    public static String uploadManyFile(String localFile, String newFileName) {
        boolean flag = true;
        StringBuffer strBuf = new StringBuffer();
        int n = 0;
        try {
            connectServer();
            File file = new File(localFile);// 在此目录中找文件

            File file2[] = file.listFiles();

            for (int i = 0; i < file2.length; i ) {

                File file1 = new File(file2.getAbsolutePath());
                System.out.println(file1.isFile());
                if (file1.isDirectory()) {// 文件夹中还有文件夹

                    uploadManyFile(file2.getAbsolutePath(), newFileName);
                } else {
                    String tmpNewFileName = "";
                    if (newFileName.substring(newFileName.length() - 1).equals(
                            "/")) {

                        tmpNewFileName = newFileName file2.getName();
                    } else {

                        tmpNewFileName = newFileName "/" file2.getName();
                    }
                    System.out.println(tmpNewFileName);
                    flag = uploadFile(file2.getAbsolutePath(),
                            tmpNewFileName);
                }
                if (!flag) {
                    n ;
                    strBuf.append(file2.getName() "\r\n");

                }
            }
            if (n > 0) {

                strBuf.insert(0, "共有" n "上传失败,分别为\r\n");
            }
            System.out.println(strBuf.toString());
        } catch (NullPointerException e) {
            e.printStackTrace();
            logger.debug("本地文件上传失败!找不到上传文件!", e);
            // TODO: handle exception
        } catch (Exception e) {
            e.printStackTrace();
            logger.debug("本地文件上传失败!", e);
            // TODO: handle exception
        }
        return strBuf.toString();
    }

    /**
     * 下载文件
     *
     * @param remoteFileName
     *            --服务器上的文件名
     * @param localFileName--本地文件名
     * @return true 下载成功,false 下载失败
     *
     */
    public static boolean loadFile(String remoteFileName, String localFileName) {
        boolean flag = true;
        connectServer();
        // 下载文件
        BufferedOutputStream buffOut = null;
        try {
            buffOut = new BufferedOutputStream(new FileOutputStream(
                    localFileName));
            flag = FtpClient.retrieveFile(remoteFileName, buffOut);
        } catch (Exception e) {
            e.printStackTrace();
            logger.debug("本地文件下载失败!", e);
        } finally {
            try {
                if (buffOut != null)
                    buffOut.close();
            } catch (Exception e) {
                e.printStackTrace();

            }
        }
        return flag;
    }

    /**
     * 删除一个文件
     */
    public static boolean deleteFile(String filename) {
        boolean flag = true;
        try {
            connectServer();

            flag = FtpClient.deleteFile(filename);
            if (flag) {
                System.out.println("delete  File succeed");

            } else {
                System.out.println("delete File false");

            }
        } catch (IOException ioe) {
            ioe.printStackTrace();
        }
        return flag;
    }

    /**
     * 删除目录
     */
    public static void deleteDirectory(String pathname) {
        try {
            connectServer();
            File file = new File(pathname);
            if (file.isDirectory()) {
                File file2[] = file.listFiles();
            } else {
                deleteFile(pathname);

            }
            FtpClient.removeDirectory(pathname);
        } catch (IOException ioe) {
            ioe.printStackTrace();
        }
    }

    /**
     * 删除空目录
     */
    public static void deleteEmptyDirectory(String pathname) {
        try {
            connectServer();
            FtpClient.removeDirectory(pathname);
        } catch (IOException ioe) {
            ioe.printStackTrace();
        }
    }

    /**
     * 列出服务器上文件和目录
     *
     * @param regStr
     *            --匹配的正则表达式
     */
    @SuppressWarnings("unchecked")
    public static void listRemoteFiles(String regStr) {
        connectServer();
        try {
            // FtpClient.changeWorkingDirectory(regStr);
            String files[] = FtpClient.listNames(regStr);
            if (files == null || files.length == 0)
                System.out.println("There has not any file!");
            else {
                for (int i = 0; i < files.length; i ) {
                    System.out.println(files);

                }

            }
        } catch (Exception e) {
            e.printStackTrace();
        }
    }

    /**
     * 列出Ftp服务器上的所有文件和目录
     *
     */
    public static void listRemoteAllFiles() {
        connectServer();
        try {
            String[] names = FtpClient.listNames();
            for (int i = 0; i < names.length; i ) {
                System.out.println(names);
            }

        } catch (Exception e) {
            e.printStackTrace();
        }
    }

    /**
     * 关闭连接
     */
    public static void closeConnect() {
        try {
            if (FtpClient != null) {
                FtpClient.logout();
                FtpClient.disconnect();
            }
        } catch (Exception e) {
            e.printStackTrace();
        }
    }

    /**
     * 设置配置文件
     *
     * @param configFile
     */
    public static void setConfigFile(String configFile) {
        Ftp.ConfigFile = configFile;
    }

    /**
     * 设置传输文件的类型[文本文件或者二进制文件]
     *
     * @param fileType--BINARY_FILE_TYPE、ASCII_FILE_TYPE
     */
    public static void setFileType(int fileType) {
        try {
            connectServer();
            FtpClient.setFileType(fileType);
        } catch (Exception e) {
            e.printStackTrace();
        }
    }

    /**
     * 扩展使用
     *
     * @return
     */
    protected static FTPClient getFtpClient() {
        connectServer();
        return FtpClient;
    }

    /**
     * 设置参数
     *
     * @param configFile
     *            --参数的配置文件
     */
    private static void setArg(String configFile) {
        Property = new Properties();
        BufferedInputStream inBuff = null;
        try {
            File file = new File(configFile);

            inBuff = new BufferedInputStream(new FileInputStream(file));

            Property.load(inBuff);

            UserName = Property.getProperty("username");
            Password = Property.getProperty("password");
            Ip = Property.getProperty("ip");
            Port = Integer.parseInt(Property.getProperty("port"));
        } catch (FileNotFoundException e1) {
            System.out.println("配置文件 【" configFile "】不存在!");
            e1.printStackTrace();
        } catch (IOException e) {
            System.out.println("配置文件 【" configFile "】无法读取!");
            e.printStackTrace();
        }

        /*
         * } catch (Exception e) { e.printStackTrace(); } finally { try { if
         * (inBuff != null) inBuff.close(); } catch (Exception e) {
         * e.printStackTrace(); } }
         */
    }

    /**
     * 连接到服务器
     *
     * @return true 连接服务器成功,false 连接服务器失败
     */
    public static boolean connectServer() {
        boolean flag = true;
        if (FtpClient == null) {
            int reply;
            try {
                setArg(ConfigFile);
                FtpClient = new FTPClient();
                FtpClient.setControlEncoding("GBK");
                FtpClient.setDefaultPort(Port);
                FtpClient.configure(getFtpConfig());
                FtpClient.connect(Ip);
                FtpClient.login(UserName, Password);
                FtpClient.setDefaultPort(Port);
                //System.out.print(FtpClient.getReplyString());
                reply = FtpClient.getReplyCode();
                FtpClient.setDataTimeout(120000);

                if (!FTPReply.isPositiveCompletion(reply)) {
                    FtpClient.disconnect();
                    System.err.println("FTP server refused connection.");
                    // logger.debug("FTP 服务拒绝连接!");
                    flag = false;
                }
                System.out.println(i);
                i ;
               
            } catch (SocketException e) {
                flag = false;
                e.printStackTrace();
                System.err.println("登录ftp服务器【" Ip "】失败,连接超时!");
                // logger.debug("登录ftp服务器【" Ip "】失败");
            } catch (IOException e) {
                flag = false;

                e.printStackTrace();
                System.err.println("登录ftp服务器【" Ip "】失败,FTP服务器无法打开!");
                // logger.debug("登录ftp服务器【" Ip "】失败");
            }

        }
        return flag;
    }

    /**
     * 进入到服务器的某个目录下
     *
     * @param directory
     */
    public static void changeWorkingDirectory(String directory) {
        try {
            connectServer();
            FtpClient.changeWorkingDirectory(directory);
        } catch (IOException ioe) {
            ioe.printStackTrace();
        }
    }

    /**
     * 返回到上一层目录
     */
    public static void changeToParentDirectory() {
        try {
            connectServer();
            FtpClient.changeToParentDirectory();
        } catch (IOException ioe) {
            ioe.printStackTrace();
        }
    }

    /**
     * 重命名文件
     *
     * @param oldFileName
     *            --原文件名
     * @param newFileName
     *            --新文件名
     */
    public static void renameFile(String oldFileName, String newFileName) {
        try {
            connectServer();
            FtpClient.rename(oldFileName, newFileName);
        } catch (IOException ioe) {
            ioe.printStackTrace();
        }
    }

    /**
     * 设置FTP客服端的配置--一般可以不设置
     *
     * @return
     */
    private static FTPClientConfig getFtpConfig() {
        FTPClientConfig ftpConfig = new FTPClientConfig(
                FTPClientConfig.SYST_UNIX);
        ftpConfig.setServerLanguageCode(FTP.DEFAULT_CONTROL_ENCODING);
        return ftpConfig;
    }

    /**
     * 转码[ISO-8859-1 -> GBK] 不同的平台需要不同的转码
     *
     * @param obj
     * @return
     */
    private static String iso8859togbk(Object obj) {
        try {
            if (obj == null)
                return "";
            else
                return new String(obj.toString().getBytes("iso-8859-1"), "GBK");
        } catch (Exception e) {
            return "";
        }
    }

    /**
     * 在服务器上创建一个文件夹
     *
     * @param dir
     *            文件夹名称,不能含有特殊字符,如 \ 、/ 、: 、* 、?、 "、 <、>...
     */
    public static boolean makeDirectory(String dir) {
        connectServer();
        boolean flag = true;
        try {
            // System.out.println("dir=======" dir);
            flag = FtpClient.makeDirectory(dir);
            if (flag) {
                System.out.println("make Directory " dir " succeed");

            } else {

                System.out.println("make Directory " dir " false");
            }
        } catch (Exception e) {
            e.printStackTrace();
        }
        return flag;
    }

    public LoggerAdapter getLogger() {
        return logger;
    }

    public void setLogger(LoggerAdapter logger) {
        this.logger = logger;
    }
}
一, 文件名中文乱码问题.
开始知道能用FTPClient的listNames方法得到当前目录下所有文件的列表. 但是发现中文文件名是乱码. 默认情况下FTPClient使用UTF-8字符集作为和服务器通讯的编码集. 而我们的ftp服务器是在中文windowsXP上装的ServU. 所有使用GBK做为通讯编码集. 经过查找api文档, 我看到了setControlEncoding方法, 试了一下,果然好使. 于是这个问题就解决了:
第8行: ftp.setControlEncoding("GBK")
至于conf.setServerLanguageCode("zh")对这个有什么影响,我还没有验证. 但是只有这句是不行的.

二, 传输binary文件, 由于FTPClient默认使用ASCII作为传输模式, 所有不能传输二进制文件. 通过
ftp.setFileType(FTP.BINARY_FILE_TYPE)个可以解决这个问题, 但是要在login以后执行. 因为这个方法要向服务器发送"TYPE I"命令.
开始的时候用的是setFileTransferMode, 不过不好使. 它会执行 MODE I命令, 服务器不接受.

三, 用被动模式传输: enterLocalPassiveMode()这个到不用在login之后执行, 因为它只改变FTPClient实例的内部属性.

四, 断点续传. 心想应该有支持吧, 于是查API结果找到了setRestartOffset()方法, 试了一下,果真好使. 用RandomAccessFile配合使用, 实现起来还是蛮简单的.

五, 只能传一个文件!!
不 知道大家有没有遇到这个问题, 传输第一个文件好使, 后面的的retrieveFileStream(name)都是返回null. 这个实在是令人头痛的问题, 难不成要传一个文件重新建立一次连接? 那样也太土了吧. 但是文档里也没有写, 来点狠的,debug它的源码, 看看它究竟做了什么事情. 首先看一下ftp服务器的日志, 发现日志没问题, 过来的命令和reply都是正确的, 但是发现第一个文件以后没有执行RETR命令. 于是跟踪PASV命令的reply代码,发现不是227,而服务器上的日志明明返回的是227. 难道是FTPClient解析Reply出问题了. 进一步跟踪发现了问题, 原来在一个文件传输过程中会产生两个Reply:
150 Opening BINARY mode data connection for a.sql (19890 Bytes).
226 Transfer complete.
而FTPClient 自动消费掉一个,于是解析Reply就发生了错位, 下一个命令的会解析266那条. 接下来的命令都不是解析自己的Reply而是前一次命令的. 所有在PASV命令的Reply码就不对了, FTPClient也就不会执行接下来本应该执行RETR命令.
他不消费,我们来消费吧. 于是在文件传输完成以后, 主动调用一次getReply()把接下来的226消费掉. 这样做是可以解决这个暂时的问题, 但不知道在其他的ftp操作上会不会也有类似的情况. FTPClient这点可做的不大好.

对于上面这个问题, 我本来想修改一下FTPClient这个类来彻底解决问题. 结果发现自己也想不出好办法. 最后还是放弃了.

今天才发现,原来FTPClient有个completePendingCommand()方法就是用来干这件事情的!

转载自:http://xiaoqiangg.bokee.com/viewdiary.32670371.html

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-228414-1-1.html 上篇帖子: 用JakartaCommon的net组建来做ftp文件传输【转载】 下篇帖子: Fckeditor修改文件上传方式为ftp方式
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表