linux定時上傳

Ⅰ linux設置定時任務

《使用PSSH批量管理Linux》 一文中，已經學習了使用pssh批量管理linux的技巧。而很多時候，我們需要定時執行一些任務，或者需要定時執行一些批量任務。因此，本文就來研究一下linux設置定時任務的方法。

主要參考 Linux Crontab 定時任務 、 Linux定時任務Crontab命令詳解 和 Linux 定時任務詳解 。

cron（crond）是linux下用來周期性的執行某種任務或等待處理某些事件的一個守護進程。linux系統上面原本就有非常多的計劃性工作，因此這個系統服務是默認啟動的。crond進程每分鍾會定期檢查是否有要執行的任務，如果有要執行的任務，則自動執行該任務。另外，由於使用者自己也可以設置計劃任務，所以，linux系統也提供了使用者控制計劃任務的命令：crontab命令。

crontab命令是cron table的簡寫，它是cron的配置文件，也可以叫它作業列表，我們可以在以下文件夾內找到相關配置文件。

linux下的任務調度分為兩類，系統任務調度和用戶任務調度。

系統任務調度：系統周期性所要執行的工作，比如寫緩存數據到硬碟、日誌清理等。 /etc/crontab 文件就是系統任務調度的配置文件。

用戶任務調度：用戶定期要執行的工作，比如用戶數據備份、定時郵件提醒等。用戶可以使用 crontab 工具來定製自己的計劃任務。所有用戶定義的crontab文件都被保存在 /var/spool/cron/crontabs/ 目錄中，其文件名與用戶名一致。

假設我們使用的是Ubuntu14.04.5 Server版，查看 /etc/crontab ，內容為：

第一行SHELL變數指定了系統要使用哪個shell；第二行PATH變數指定了系統執行 命令的路徑。
接下來的命令格式為：
m h dom mon dow user command
英文全拼為：
minute hour day month week user commond

注意， /var/spool/cron 目錄中的用戶調度任務，沒有user一項，因為文件名已經代表了user。

在以上各個欄位中，還可以使用以下特殊字元：

crontab命令格式為：
crontab [-u username] [file] [ -e | -l | -r ]

設置定時任務和時間緊密相關，如果伺服器的時區時間設置和本地不同，就不能保證計劃任務的正確執行。所以使用crontab的第一步，是調節好伺服器的時間。

下面參考 Ubuntu 16.04將系統時間寫入到硬體時間BIOS ，對伺服器時間進行調節。

時間是有時區的，無論硬體時間還是操作系統時間。hwclock的時區在/etc/default/rcS文件中設置，裡面有一個參數UTC，默認值為yes，表示使用UTC時區，如果設置為no，那表示使用osclock的時區。建議hwclock與osclock設置相同的時區，也就是no。

1、查看伺服器硬體時間
sudo hwclock -r ，看到的時間格式為： Wed 23 May 2018 11:02:17 AM HKT -0.031663 seconds

2、查看伺服器系統時間
date ，看到的時間格式為： Wed May 23 11:02:41 HKT 2018

3、設置hwclock和osclock時區相同
sudo vim /etc/default/rcS ，找到：

修改為：

4、將系統時間寫入硬體時間
sudo hwclock -w

5、修改系統時區
osclock的時區配置文件為/etc/timezone，不建議直接修改配置文件。

如果你想修改為CST時間，那麼執行 sudo tzselect 命令時，選擇Asia->China->Beijing Time即可，這時會提示使用Asia/Shanghai時區。（ubuntu和centos通用）

6、設置即刻生效
執行 date ，發現時區沒有變化，依然是HKT。

sudo cp /usr/share/zoneinfo/Asia/Shanghai /etc/localtime
sudo ntpdate time.windows.com

如果執行ntpdate報錯：ntpdate[18409]: no server suitable for synchronization found ，那麼就換一個時間同步工具。
sudo apt-get install rdate
sudo rdate -s time-b.nist.gov

再次執行 date ，發現時區已經變成了CST。

7、硬體時間同步
sudo hwclock -r ，發現硬體時間落後。
sudo hwclock -w ，再次把系統時間寫入硬體時間，同步完成。

實例1：每分鍾、每小時、每天、每周、每月、每年執行

實例2：每小時的第3和第15分鍾執行
3,15 * * * * myCommand

實例3：在上午8點到11點的第3和第15分鍾執行
3,15 8-11 * * * myCommand

實例4：每隔兩天的上午8點到11點的第3和第15分鍾執行
3,15 8-11 */2 * * myCommand

實例5：每周一上午8點到11點的第3和第15分鍾執行
3,15 8-11 * * 1 myCommand

實例6：每晚的21:30重啟smb
30 21 * * * /etc/init.d/smb restart

實例7：每月1、10、22日的4 : 45重啟smb
45 4 1,10,22 * * /etc/init.d/smb restart

實例8：每周六、周日的1 : 10重啟smb
10 1 * * 6,0 /etc/init.d/smb restart

實例9：每天18 : 00至23 : 00之間每隔30分鍾重啟smb
0,30 18-23 * * * /etc/init.d/smb restart

實例10：每星期六的晚上11 : 00 pm重啟smb
0 23 * * 6 /etc/init.d/smb restart

實例11：每一小時重啟smb
0 * * * * /etc/init.d/smb restart

實例12：晚上11點到早上7點之間，每隔一小時重啟smb
0 23-7/1 * * * /etc/init.d/smb restart

實例13：每月的4號與每周一到周三的11點重啟smb
0 11 4 * mon-wed /etc/init.d/smb restart

實例14：一月一號的4點重啟smb
0 4 1 jan * /etc/init.d/smb restart

實例15：每小時執行/etc/cron.hourly目錄內的腳本
01 * * * * root run-parts /etc/cron.hourly
run-parts這個參數了，如果去掉這個參數的話，後面就可以寫要運行的某個腳本名，而不是目錄名了。

目標：每分鍾查看一下ganglia的狀態，並保存到/tmp/log/ganglia目錄。

1、創建/tmp/log/ganglia目錄
sudo mkdir -p /tmp/log/ganglia

sudo chmod a+w /tmp/log/ganglia

2、編輯crontab
crontab -e ，選擇編輯器為vim

3、在crontab文件中添加一行

4、查看crontab任務
crontab -l ，看到任務已經添加成功。

5、等待了五分鍾，發現/tmp/log/ganglia目錄下啥也沒有。
sudo service cron status ，狀態正常。
sudo /etc/init.d/cron restart ，重啟cron試試。
又等待了五分鍾，發現/tmp/log/ganglia目錄下依然空空。

莫非是因為pssh沒有使用絕對路徑？ whereis pssh ，找到pssh路徑為 /usr/lib/pssh ，修改crontab為：

然而，並沒有用。
還是查看下crontab日誌吧！

以下主要參考 Ubuntu下用crontab 部署定時任務 。

1、編輯50-default.conf
sudo vim /etc/rsyslog.d/50-default.conf

2、把cron前的井號去掉，也就是修改為：

3、重啟rsyslog服務
sudo service rsyslog restart

4、重啟crontab服務
sudo service cron restart

5、查看crontab日誌
less /var/log/cron.log

果然發現了問題：

也就是說，命令確實按時執行了，只不過沒有執行完，被百分號截斷了，導致log文件沒有正常生成！

修改crontab為：

終於，log文件成功生成，nice！但是，文件內容是空的！因為， /usr/lib/pssh 是一個目錄，不是pssh命令！真正的pssh命令是parallel-ssh，找到它的位置為 /usr/bin/parallel-ssh ，修改crontab：

至此，問題圓滿解決。
實際使用的時候，一天獲取一次ganglia的狀態就夠了，所以crontab改成：

以上，每天執行一次定時任務，抓取ganglia的運行狀態保存到日誌文件中。緊接著，我們的目標是使用腳本檢查當天的日誌文件，如果發現ganglia運行異常，則產生一個錯誤日誌。

1、假設日誌文件ganglia-20180524.log的內容為：

2、參考 grep命令最經常使用的功能總結 ，編寫腳本checkganglia.sh

3、執行
chmod a+x checkganglia.sh

./checkganglia.sh

如果所有客戶機的ganglia運行正常，就會輸出All services are runing!。如果有的客戶機ganglia進程不存在，則會在/tmp/log/ganglia/目錄下生成當天的錯誤日誌。

4、設置定時運行
因為日誌的檢查工作要在日誌生成之後，所以時間上延後十分鍾。

上面的腳本，還有很多要改進的地方。比如有的客戶機宕機了，上面的腳本檢查不出來。比如有的客戶機ganglia服務沒有啟動，那麼具體是哪幾台？針對這兩個問題，下面進行改進。假設已經知道客戶機的數量為10。

參考 csplit命令 ，checkganglia.sh腳本修改為：

以上腳本，實現了當客戶機數量不為10的時候，進行報錯；當客戶機ganglia服務沒有啟動時，進行報錯，並且篩選出所有沒有啟動ganglia的客戶機。

本文中，我們先學習了crontab的基礎知識和基本用法。然後通過監控ganglia這一個應用場景來具體學習crontab的詳細使用方法，包括查看cron日誌的方法，crontab中命令轉義的方法，定時執行腳本的方法，以及審閱日誌腳本的編寫和進階。

至此，還不夠完美，因為我們需要每天登錄管理機查看有沒有錯誤日誌。下一篇 Linux設置郵件提醒 中，我們將會研究linux設置郵件提醒的方法。審閱完日誌後，如果腳本能夠給我們發送一封郵件，告知我們審閱的結果，那麼我們就不必再每天查看錯誤日誌。

Ⅱ 怎麼將文件自動從windows上傳到linux

1. 網上下載pscp工具，網站為https://www.chiark.greenend.org.uk/~sgtatham/putty/latest.html

   

Ⅲ linux自動備份網站及自動上傳FTP腳本的方法

對於我們個人站長來說，數據的重要不用再談，而很多站長經常忘記備份數據，也有無良的JS跑路，硬碟損壞，數據丟了，其中DS就丟失過好幾次數據，如果沒有備份，肯定悲劇，本文介紹一種自動備份數據的方法！
本腳本特色：
1.純zip壓縮，1-9可自行調整壓縮率
2.整台VPS備份，還原方便，非常適合站群
3.加入壓縮密碼，可以自己設置
4.加入綁米信息偽靜態壓縮，防止偽靜態弄丟
5.請確保在home目錄下有backup目錄，如果沒有請執行
mkdir
/home/backup
6.還原資料庫請參考：導入資料庫方法
最後更新時間：2012年8月25日
centos安裝zip
yum
install
zip
debian安裝zip
apt-get
install
zip
下載編輯
wget
-c
http://www.***.com/soft/beifen.sh
vi
beifen.sh
只編輯註解為需要修改的地方
【腳本開始】
#!/bin/bash
#下面的參數是你要修改的
MYSQL_USER=root
#mysql用戶名
MYSQL_PASS=mysql密碼
#mysql密碼
FTP_USER=FTP用戶名
#ftp用戶名
FTP_PASS=FTP密碼
#ftp密碼
FTP_IP=FTP地址
#ftp地址
FTP_backup=FTP目錄
#ftp上存放備份文件的目錄,這個要自己得ftp上面建的
WEB_DATA=/home/wwwroot/
#要備份的網站數據
WEB_BANGMI=/usr/local/nginx/conf/
#要備份的綁米信息
WEB_MULU=/home/backup
#備份文件存放目錄
WEB_MIMA=zhujima
#備份時候的密碼
WEB_YASUOLV=1
#壓縮率
1-9
如果VPS沒有zip，請安裝zip
#上面是你要修改的地方

#刪除淘寶客緩存，屬於自定義設置。可自行操作
#rm
-rf
/home/wwwroot/1.com/Apicache/*

#定義資料庫的名字和舊資料庫的名字
DataBakName=Data_$(date
+"%Y%m%d").zip
#定義資料庫名字
WebBakName=Web_$(date
+%Y%m%d).zip
#定義備份網站名字
BANGMI=BANGMI_$(date
+%Y%m%d).zip
#定義綁米備份名字

OldData=Data_$(date
-d
-5day
+"%Y%m%d").zip
#定義5天前資料庫名字
OldWeb=Web_$(date
-d
-5day
+"%Y%m%d").zip
#定義5天前網站名字
BANGMIshan=BANGMI_$(date
-d
-5day
+"%Y%m%d").zip
#定義5天前綁米名字

#刪除本地3天前的數據
rm
-rf
$WEB_MULU/Data_$(date
-d
-3day
+"%Y%m%d").zip
$WEB_MULU/Web_$(date
-d
-3day
+"%Y%m%d").zip
$WEB_MULU/BANGMI_$(date
-d
-3day
+"%Y%m%d").zip

#導出全部資料庫
cd
$WEB_MULU
/usr/local/mysql/bin/mysqlmp
-u$MYSQL_USER
-p$MYSQL_PASS
--all-databases
>
$(date
+"%Y%m%d").sql

#壓縮資料庫文件為一個文件
zip
-r
-$WEB_YASUOLV
-P
$WEB_MIMA
$DataBakName
$WEB_MULU/*.sql
rm
-rf
$WEB_MULU/*.sql

#壓縮網站數據
cd
$WEB_DATA
zip
-r
-$WEB_YASUOLV
-P
$WEB_MIMA
$WebBakName
./*
mv
$WebBakName
$WEB_MULU/$WebBakName
cd
$WEB_MULU

#壓縮綁米信息
cd
$WEB_BANGMI
#進入綁米目錄
zip
-r
-$WEB_YASUOLV
-P
$WEB_MIMA
$BANGMI
./*
mv
$BANGMI
$WEB_MULU/$BANGMI

#上傳到FTP空間,刪除FTP空間5天前的數據
cd
$WEB_MULU
#進入備份目錄
ftp
-v
-n
$FTP_IP
<<
END
user
$FTP_USER
$FTP_PASS
type
binary
cd
$FTP_backup
delete
$BANGMIshan
delete
$OldData
delete
$OldWeb
put
$DataBakName
put
$WebBakName
put
$BANGMI
bye
END
加入許可權，寫入定時執行
chmod
777
/root/beifen.sh
crontab
-e
30
21
*
*
*
/root/beifen.sh
註：每天21：30開始備份並且上傳FTP
本文地址：http://www.zhujima.com/139.html

Ⅳ linux定時通過shell腳本利用sftp命令上傳文件。需要手動輸入密碼，用openSSH-clients這個插件可以解決么

Linux系統提供多種不同的Shell以供選擇。

常用的有Bourne Shell（簡稱sh）、C-Shelll（簡稱csh）、Korn Shell（簡稱ksh）和Bourne Again Shell (簡稱bash)。
Bourne Shell是AT&T Bell實驗室的 Steven Bourne為AT&T的Unix開發的，它是Unix的默認Shell，也是其它Shell的開發基礎。Bourne Shell在編程方面相當優秀，但在處理與用戶的交互方面不如其它幾種Shell。
C Shell是加州伯克利大學的Bill Joy為BSD Unix開發的，與sh不同，它的語法與C語言很相似。它提供了Bourne Shell所不能處理的用戶交互特徵，如命令補全、命令別名、歷史命令替換等。但是，C Shell與BourneShell並不兼容。
Korn Shell是AT&T Bell實驗室的David Korn開發的，它集合了C Shell和Bourne Shell的優點，並且與Bourne Shell向下完全兼容。Korn Shell的效率很高，其命令交互界面和編程交互界面都很好。
Bourne Again Shell (即bash)是自由軟體基金會(GNU)開發的一個Shell，它是Linux系統中一個默認的Shell。Bash不但與Bourne Shell兼容，還繼承了C Shell、Korn Shell等優點

Ⅳ Linux自動通過FTP上傳到WINDOWS下的FTP SERVER上

寫 bash shell 腳本吧，Linux 下面定時運行。 很簡單的，shell 內容就是執行你所輸入的命令。你可以先在 Linux 下面直接輸入命令看看效果，之後寫入 shell 腳本就行了。 另外問個問題，你不會 Linux ，為什麼還要用 Linux ？而且還是串口遠程登錄，這台伺服器應該是很老的…… 具體 shell 腳本怎麼寫，我建議你 google 搜索，很簡單的。 因為是工作需要，所以我不打算直接寫給你，讓你有個自學的機會吧。

Ⅵ linux文件 自動 定時 發送到我外網郵箱中去。

首先是你要安裝了MTA，隨便哪個都行，像exim、postfix、sendmail等等，安裝後啟動它。直接安裝，配置也不用動的。
然後是在crontab里加一行，表明是定時發送郵件
0 1 * * * 「命令」(表示每天1：00零分的時候發送郵件)
命令如下：
1、如果你的文件是文本的話，可以直接用 cat a.text | mail [email protected] 發送就行了
2、如果你的文件不是文本的話，可以用 cat hello | nail -a a.text [email protected]也就行了。註：nail為一種文本模式下的mail客戶端，和mail命令是一樣的，不過功能比它強大而已，它存在於mailx中，其實mail、nail、mailx都是同一個命令，mail、nail只是mailx的連接而已（fedora13），相信ubuntu也是一樣的，如果實在沒有，就安個mailx吧；hello為郵件內容，隨便寫的。

Ⅶ Linux制定定時備份文件到FTP伺服器的問題

crontab -u 用戶名（root）
* * * * * 每個星號表示 每分 每小時 每天 每月 每星期 如果是每天15：30廣播一次，就是
30 15 * * * wall 「hello world」

至於你自己的命令，自己看著辦吧。

Ⅷ 想將ubuntu下某個文件夾下的文件定時上傳至FTP或者共享文件夾，也可以直接傳至另一台LINUX上使用。

寫的一個簡單腳本.
linux1 = A (不定時生成文件)
linux2 = B (需隔一天後使用文件)
B 主機必須提供FTP服務,建立相應的FTP用戶,具備相應的上傳許可權和容量等.
/home/backup :文件備份臨時目錄
/home/bak :本地文件備份目錄
注意:如果伺服器語言為英文,請將腳本內中文注釋改為英文或刪除.

A 主機
-----------------------------------------------------------------------
mkdir /home/backup
mkdir /home/bak
vi /home/backup.sh
vi /etc/crontab
30 2 * * * root /home/backup.sh
#建立目錄,設置每天2:30定時執行備份腳本

backup.sh內容

#!/bin/bash
#
# 說明:
# 自動備份本機文件到遠程FTP
#
PATH=/bin:/usr/bin:/sbin:/usr/sbin
LANG=C
LC_ALL=C
# 設置A路徑
date='date +%Y-%m-%d'
bakdir=/home/backup
home=/home
# A主機 "/etc/目錄下的文件"
cp -a /etc/* $bakdir
# 延遲20S,等文件拷貝結束
sleep 20s
sync;sync
# 在本機壓縮與打包
cd $bakdir
tar -zcf "$date".tar.gz *
sleep 20s
sync;sync
# 備份到B主機
id="username"
pw="yourpassword"
cd= $bakdir
# 利用FTP備份到192.168.1.200
ftp -n 192.168.1.200 > $home/ftp.log 2>&1 <<EOC
user $id $pw
binary
cd $bakdir
put "$date".tar.gz
bye EOC
sync;sync
# 移動到本機備份
mv $bakdir/"$date".tar.gz $bakdir/bak
sleep 20s
sync;sync

Ⅸ 如何在linux伺服器中定時將文件發送至本機

可以通過cron job實現
先寫一個腳本，命令是通過mail將文件發送給用戶的郵箱，類似
mail -s "title" [email protected] < filename
然後設置cron job，定時運行即可

Ⅹ Linux自動通過FTP上傳到WINDOWS下的FTP SERVER上

寫 bash shell 腳本吧，Linux 下面定時運行。

很簡單的，shell 內容就是執行你所輸入的命令。你可以先在 Linux 下面直接輸入命令看看效果，之後寫入 shell 腳本就行了。

另外問個問題，你不會 Linux ，為什麼還要用 Linux ？而且還是串口遠程登錄，這台伺服器應該是很老的……

具體 shell 腳本怎麼寫，我建議你 google 搜索，很簡單的。
因為是工作需要，所以我不打算直接寫給你，讓你有個自學的機會吧。