Linux常用命令笔记-ftp/sed/awk

wsxdc

FTP   

        FTP （File TransferProtocol文件传输协议），就是专门用来传输文件的协议。

        FTP服务器，是互联网上提供存储空间的计算机，它们依照FTP协议提供服务。

        SFTP和FTP的语法几乎一样。只是SFTP(安全文件传送协议)作为SSH的一部份是Secure的，为传输文件提供一种安全的加密/解密方法，所以传输效率比普通的FTP要低得多。

所以SFTP和FTP是基于两个不同的软件，有时候一个连上另一个连不上也正常。

        Linux下实现FTP服务的软件很多，最常见有VSFTPD,WU-FTP和Proftp等。Red HatLinux中默认安装的是vsftpd. 通常，访问FTP服务器需要经过验证，只有经过了FTP服务器的相关验证，用户才能访问和传输文本。

        访问格式：$ ftp 主机名/IP           如$ ftp irisutg@swucca220u

如果没有给出主机名/IP，只是输入一个ftp，那么会显示“ftp >“等待用户输入命令。此时可以通过open来打开远程连接：ftp >openirisutg@swucca220u

        常用命令：

ls 列出远程机的当前目录

cd  在远程机上改变工作目录

lcd  在本地机上改变工作目录，能够双线操作，而不用切回shell

ascii 设置文件传输方式为ASCII模式

binary 设置文件传输方式为二进制模式

hash 每次传输完数据缓冲区中的数据后就显示一个#号

get（mget） 从远程机传送指定文件到本地机，括号内的命令是操作多个

put（mput） 从本地机传送指定文件到远程机

open 连接远程ftp站点

bye终止当前的ftp会话

? 显示本地帮助信息

!转到Shell中，例如在get的时候，要建一个新目录来保存，就可以：$!mkdir newDir

sed

        sed是一个很好的文件处理工具，本身是一个管道命令，主要是以行为单位进行处理，可以将数据行进行替换、删除、新增、选取等特定工作，下面先了解一下sed的用法

        sed命令行格式为：

sed [-nefri] ‘command‘ 输入文本      

        常规选项：

-n∶使用安静(silent)模式。在一般 sed 的用法中，所有来自STDIN的资料一般都会被列出到萤幕上。但如果加上 -n 参数后，则只有经过sed 特殊处理的那一行(或者动作)才会被列出来。

-e∶直接在指令列模式上进行sed 的动作编辑；

-f∶直接将 sed 的动作写在一个档案，-ffilename 则可以执行 filename 内的sed 动作；

-r∶sed 的动作支援的是延伸型正规表示法的语法。(预设是基础正规表示法语法)

-i∶直接修改读取的档案内容，而不是由萤幕输出。      

        常用命令：

a  ∶新增， a 的后面可以接字串，会自动另起一行

c  ∶取代， c 的后面可以接字串，这些字串可以取代 n1,n2 之间的行！

d  ∶删除，因为是删除啊，所以d 后面通常不接任何咚咚；

i   ∶插入， i 的后面可以接字串，会自动另起一行；

p  ∶列印，亦即将某个选择的资料印出。通常 p 会与参数 sed -n 一起运作～

s  ∶取代，可以直接进行取代的工作哩！通常这个s 的动作可以搭配正规表示法！例如 1,20s/old/new/g 就是啦！

删除某行：

            $ sed '1d' testFile              删除第一行

            $ sed '$d' testFile              删除最后一行

            $ sed '1,2d' testFile             删除第一行到第二行

            $ sed '2,$d'testFile             删除第二行到最后一行，最后一行用$表示。

显示某行：

            $ sed -n '1p' testFile             显示第一行

            $  sed -ni '1p' testFile              

如果加上i，就直接在文件生效，文件中就剩你显示的那一行。

　　使用模式进行查询

            $ sed -n '/Apple/p' testFile      查询并显示Apple所在所有行

            $  sed -n'/Apple/d' testFile      删除Apple所在所有行，同理加上i就直接生效了。

　　增加n行字符串，a和i效果很像，如果还要换行就加\n

             $ sed '1a addChars1Line' testFile       在第一行后面加，会自动另起一行。

            Apple

            addChars1Line

            Boy

            Cat

            Dog

            $ sed '1,3a addChars1Line' testFile      [1,3]，每行都加，这个看起来有点诡异

            Apple

            addChars1Line

            Boy

            addChars1Line

            Cat

            addChars1Line

            Dog

　　代替一行或多行

            $ sed '1,3c HelloWrold' testFile           第1到3行替换

            HelloWrold

            Dog

替换一行中的某部分，格式：sed 's/要替换的字符串/新的字符串/g'

            $  sed -n 's/App/CBA/gp' testFile           

            CBAle

awk

            awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是以行为单位（以\n分割），把文件逐行读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。概况来说，就是在文件或者字符串中基于指定规则浏览和抽取信息。

            基本语法为： awk '{pattern + action}'{filenames}

            其中 pattern 表示 AWK 在数据中查找的内容，而action 是在找到匹配内容时所执行的一系列命令。花括号（{}）不需要在程序中始终出现，但它们用于根据特定的模式对一系列指令进行分组。 pattern就是要表示的正则表达式，用斜杠括起来。

            打印可以使用print和printf，后者是带格式的，能使代码更加简洁。

            比较简单的应用，打印文件的权限 ： $ ls -l | awk '{print $1}

            也可以规定分割字符：$ cat/etc/passwd |awk-F ':' '{print$1”:”$7}'

            还可以在一前一后添加首尾行：   先执行BEGIN，读取输入，再执行END

            $ ls -l | awk 'BEGIN{print"size,name"} {print $5","$9} END{print"end,end"}'

            size,name

            4096,Desktop

            4096,Documents

            end,end

            也能直接对文件使用：

            $ awk '{print"filename:" FILENAME",linenumber:"NR",columns:"NF ",linecontent:"$0}' sortNew.txt

            filename:sortNew.txt,linenumber:1,columns:1,linecontent:Apple

            filename:sortNew.txt,linenumber:2,columns:1,linecontent:Boy

            filename:sortNew.txt,linenumber:3,columns:1,linecontent:Cat

            filename:sortNew.txt,linenumber:4,columns:1,linecontent:Dog

            搜索功能，类似grep，而且同时可以对搜索结果进行处理。下面两条指令的结果是一样的：

            $ awk -F ' ' '/Apple/{print $2}' sortNew.txt

            $ grep 'Apple' sortNew.txt| awk -F ' ' '{print $2}'