天天看点

服务器数据下载和数据传输

我所用的校内服务器不接受wget命令(用来从指定URL下载数据),一般用其他校外服务器用csh脚本(包含有wget命令)下载好数据,然后打包通过scp命令跨服务器传输数据。速度都比下载到本地,再上传服务器快得多,下载速度10M/s,传输速度30M/s(我所处的网络环境不出意外的情况下)。

具体的命令:

(这里假设下载数据所用的csh脚本为download.csh;如果指定URL需要输入密码,则将密码加在后面即可,这里假设账号密码为xxx123456;假设需要传输的数据为download的文件夹,目标服务器用户名为mint,ip地址为192.167.3.24,目标路径为/home/work/data。)

./download.csh 
./download.csh xxx123456
scp -r download [email protected]:/home/work/data/
           

很简单的命令,但是深刻体会到批处理方式的快乐和linux数据传输的高效性。欢迎交流讨论~

继续阅读