Linux 文本處理等指令

文本處理

cat file1 file2 ... | command

<> file1_in.txt_or_file1_out.txt general syntax for text manipulation

using pipe, stdin and stdout

cat file1 | command( sed,

grep, awk, grep, etc...) > result.txt    合并一個檔案的詳細說明文本，并将簡介寫入一個新檔案中

grep, awk, grep, etc...) >> result.txt   合并一個檔案的詳細說明文本，并将簡介寫入一個已有的檔案中

grep aug /var/log/messages          在檔案 '/var/log/messages'中查找關鍵詞"aug"

grep ^aug /var/log/messages            在檔案 '/var/log/messages'中查找以"aug"開始的詞彙

grep [0-9] /var/log/messages           選擇 '/var/log/messages' 檔案中所有包含數字的行

grep aug -r /var/log/*              在目錄 '/var/log' 及随後的目錄中搜尋字元串"aug"

sed 's/stringa1/stringa2/g'

example.txt       将example.txt檔案中的 "string1" 替換成 "string2"

sed '/^$/d' example.txt 從example.txt     檔案中删除所有空白行

sed '/ *#/d; /^$/d' example.txt

從example.txt    檔案中删除所有注釋和空白行

echo 'esempio' | tr

'[:lower:]' '[:upper:]'   合并上下單元格内容

sed -e '1d' result.txt             從檔案example.txt 中排除第一行

sed -n '/stringa1/p'               檢視隻包含詞彙 "string1"的行

sed -e 's/ *$//' example.txt           删除每一行最後的空白字元

sed -e 's/stringa1//g'

example.txt        從文檔中隻删除詞彙 "string1" 并保留剩餘全部

sed -n '1,5p;5q' example.txt           檢視從第一行到第5行内容

sed -n '5p;5q' example.txt         檢視第5行

sed -e 's/00*/0/g'

example.txt         用單個零替換多個零

cat -n file1                标示檔案的行數

cat example.txt | awk

'nr%2==1'        删除example.txt檔案中的所有偶數行

echo a b c | awk '{print $1}'

         檢視一行第一欄

echo a b c | awk '{print

$1,$3}'       檢視一行的第一和第三欄

paste file1 file2               合并兩個檔案或兩欄的内容

paste -d '+' file1 file2           合并兩個檔案或兩欄的内容，中間用"+"區分

sort file1 file2            排序兩個檔案的内容

sort file1 file2 | uniq         取出兩個檔案的并集(重複的行隻保留一份)

sort file1 file2 | uniq -u         删除交集，留下其他的行

sort file1 file2 | uniq -d         取出兩個檔案的交集(隻留下同時存在于兩個檔案中的檔案)

comm -1 file1 file2      比較兩個檔案的内容隻删除 'file1' 所包含的内容

comm -2 file1 file2      比較兩個檔案的内容隻删除 'file2' 所包含的内容

comm -3 file1 file2      比較兩個檔案的内容隻删除兩個檔案共有的部分

傳回頂部索引 ^

字元設定和檔案格式轉換

dos2unix filedos.txt

fileunix.txt 将一個文本檔案的格式從msdos轉換成unix

unix2dos fileunix.txt

filedos.txt 将一個文本檔案的格式從unix轉換成msdos

recode ..html < page.txt

> page.html   将一個文本檔案轉換成html

recode -l | more         顯示所有允許的轉換格式

檔案系統分析

badblocks -v /dev/hda1   檢查磁盤hda1上的壞磁塊

fsck /dev/hda1       修複/檢查hda1磁盤上linux檔案系統的完整性

fsck.ext2 /dev/hda1 修複/檢查hda1磁盤上ext2檔案系統的完整性

e2fsck /dev/hda1 修複/檢查hda1磁盤上ext2檔案系統的完整性

e2fsck -j /dev/hda1 修複/檢查hda1磁盤上ext3檔案系統的完整性

fsck.ext3 /dev/hda1 修複/檢查hda1磁盤上ext3檔案系統的完整性

fsck.vfat /dev/hda1 修複/檢查hda1磁盤上fat檔案系統的完整性

fsck.msdos /dev/hda1     修複/檢查hda1磁盤上dos檔案系統的完整性

dosfsck /dev/hda1    修複/檢查hda1磁盤上dos檔案系統的完整性

初始化一個檔案系統

mkfs /dev/hda1           在hda1分區建立一個檔案系統

mke2fs /dev/hda1     在hda1分區建立一個linux ext2的檔案系統

mke2fs -j /dev/hda1      在hda1分區建立一個linux ext3(日志型)的檔案系統

mkfs -t vfat 32 -f /dev/hda1    建立一個 fat32 檔案系統

fdformat -n /dev/fd0        格式化一個軟碟

mkswap /dev/hda3     建立一個swap檔案系統

swap檔案系統

swapon /dev/hda3     啟用一個新的swap檔案系統

swapon /dev/hda2 /dev/hdb3 啟用兩個swap分區

備份

dump -0aj -f /tmp/home0.bak

/home 制作一個 '/home' 目錄的完整備份

dump -1aj -f /tmp/home0.bak

/home 制作一個 '/home' 目錄的互動式備份

restore -if /tmp/home0.bak      還原一個互動式備份

rsync -rogpav --delete /home

/tmp 同步兩邊的目錄

rsync -rogpav -e ssh --delete

/home ip_address:/tmp     通過ssh通道rsync

rsync -az -e ssh --delete

ip_addr:/home/public /home/local 通過ssh和壓縮将一個遠端目錄同步到本地目錄

/home/local ip_addr:/home/public 通過ssh和壓縮将本地目錄同步到遠端目錄

dd bs=1m if=/dev/hda | gzip |

ssh user@ip_addr 'dd of=hda.gz' 通過ssh在遠端主機上執行一次備份本地磁盤的操作

dd if=/dev/sda of=/tmp/file1       備份磁盤内容到一個檔案

tar -puf backup.tar

/home/user     執行一次對 '/home/user' 目錄的互動式備份操作

( cd /tmp/local/ &&

tar c . ) | ssh -c user@ip_addr 'cd /home/share/ && tar x -p'       通過ssh在遠端目錄中複制一個目錄内容

( tar c /home ) | ssh -c

user@ip_addr 'cd /home/backup-home && tar x -p'         通過ssh在遠端目錄中複制一個本地目錄

tar cf - . | (cd /tmp/backup

; tar xf - )                          本地将一個目錄複制到另一個地方，保留原有權限及連結

find /home/user1 -name

'*.txt' | xargs cp -av --target-directory=/home/backup/ --parents   從一個目錄查找并複制所有以 '.txt' 結尾的檔案到另一個目錄

find /var/log -name '*.log' |

tar cv --files-from=- | bzip2 > log.tar.bz2           查找所有以 '.log' 結尾的檔案并做成一個bzip包

dd if=/dev/hda of=/dev/fd0

bs=512 count=1     做一個将 mbr (master boot record)内容複制到軟碟的動作

dd if=/dev/fd0 of=/dev/hda bs=512

count=1     從已經儲存到軟碟的備份中恢複mbr内容

CD光牒

cdrecord -v gracetime=2

dev=/dev/cdrom -eject blank=fast -force           清空一個可複寫的CD光牒内容

mkisofs /dev/cdrom >

cd.iso                             在磁盤上建立一個CD光牒的iso鏡像檔案

mkisofs /dev/cdrom | gzip

> cd_iso.gz                       在磁盤上建立一個壓縮了的CD光牒iso鏡像檔案

mkisofs -j

-allow-leading-dots -r -v "label cd" -iso-level 4 -o ./cd.iso data_cd

   建立一個目錄的iso鏡像檔案

cdrecord -v dev=/dev/cdrom

cd.iso         刻錄一個iso鏡像檔案

gzip -dc cd_iso.gz | cdrecord

dev=/dev/cdrom -       刻錄一個壓縮了的iso鏡像檔案

mount -o loop cd.iso /mnt/iso

            挂載一個iso鏡像檔案

cd-paranoia -b                     從一個cdCD光牒轉錄音軌到 wav 檔案中

cd-paranoia -- "-3"

               從一個cdCD光牒轉錄音軌到 wav 檔案中（參數-3）

cdrecord --scanbus                 掃描總線以識别scsi通道

dd if=/dev/hdc | md5sum            校驗一個裝置的md5sum編碼，例如一張 cd

網絡 - （以太網和wifi無線）

ifconfig eth0               顯示一個以太網卡的配置

ifup eth0            啟用一個 'eth0' 網絡裝置

ifdown eth0 禁用一個 'eth0'        網絡裝置

ifconfig eth0 192.168.1.1

netmask 255.255.255.0 控制ip位址

ifconfig eth0 promisc              設定 'eth0' 成混雜模式以嗅探資料包 (sniffing)

dhclient eth0                   以dhcp模式啟用 'eth0'

route -n show routing table

route add -net 0/0 gw ip_gateway

configura default gateway

route add -net 192.168.0.0

netmask 255.255.0.0 gw 192.168.1.1 configure static route to reach network

'192.168.0.0/16'

route del 0/0 gw ip_gateway

remove static route

echo "1" >

/proc/sys/net/ipv4/ip_forward activate ip routing

hostname show hostname of

system

host www.example.com lookup

hostname to resolve name to ip address and viceversa(1)

nslookup www.example.com

lookup hostname to resolve name to ip address and viceversa(2)

ip link show show link status

of all interfaces

mii-tool eth0 show link

status of 'eth0'

ethtool eth0 show statistics

of network card 'eth0'

netstat -tup show all active

network connections and their pid

netstat -tupl show all

network services listening on the system and their pid

tcpdump tcp port 80 show all

http traffic

iwlist scan show wireless

networks

iwconfig eth1 show

configuration of a wireless network card

hostname show hostname

hostname to resolve name to ip address and viceversa

lookup hostname to resolve name to ip address and viceversa

whois www.example.com lookup

on whois database

go top index ^

microsoft windows networks

(samba)

nbtscan ip_addr netbios name

resolution

nmblookup -a ip_addr netbios

name resolution

smbclient -l ip_addr/hostname

show remote shares of a windows host

smbget -rr

smb://ip_addr/share like wget can download files from a host windows via smb

mount -t smbfs -o

username=user,password=pass //winclient/share /mnt/share mount a windows

network share