以前 systemd の実習を兼ねて、立上げ時に１度だけ実行させるサービスを組込んでいますが、その備忘録の整理と一部の拡張が必要なために修正と補足を追加してまとめます。
バックアップ先の選択が必要になり修正
普段使いのノートPC がデュアルブートで、時々裏の Windows10 を利用することがあります。普段は Linux の Ubuntu が立上がったまま稼働し利用しています。
そこで Linux が立上がった時に、Windows システム側の ntfs ファイルシステムの作業領域として更新される一部を自動的にバックアップしようと考えて、すでに組み込んで運用しています。
今回は、UPS バッテリーが追加された NET共有サーバーとしてラズパイ1B+を立上げていますが、これを主となるマスターとして位置付けて、今までのサーバーをシステムバックアップ用のスレーブとして共存することにしました。
ラズパイも接続される HDD が内部バスで高速なら、戸惑いなく RAID2 のミラーで利用するのですが、さすがに USB2.0 のインターフェース HDD でミラーを組むのは無理があると思い、２台のラズパイをマスターとスレーブで利用して、マスターが故障した場合にはスレーブに接続を切り替えることにしました。
データの同期については、夜中から明方にかけて毎日コピーすることで同期させます。
そのため、決め打ちだったバックアップ先のサーバーアドレスを柔軟に切り替えられる必要に迫られました。
以前まとめた内容を修正しながらシンプルに整理
実際に Windows を利用していたかは問題外として、Linux が起動した後に１度だけ ntfs の一部とサーバーのバックアップエリアの同期を取ります。その時に、バックアップを実行したタイムスタンプをバックアップエリア内に残しておくこととします。
パッケージ名: NoteStartUpRun で、指定する場所に実際の実行モジュール等を配置します。
ユニットファイル名: note-startup-1st.service が、サービスの性格を定義する仕様書の位置付けです。このサービス名をキーにして、実行結果のログ確認や動作状況の確認ができます。
サービス(ユニットファイル)の登録は、 /etc/systemd/system/note-startup-1st.service です。
サービスとして実際に実行するモジュールは、パッケージ名で指定するディレクトリ /opt/NoteStartUpRun/bin に集めます。
まずサービスの仕様書となるユニットファイルの作成ですが、一般ユーザーのホームで作成して、systemd のシステム領域にコピーします。
$ vi note-startup-1st.service [Unit] Description = Note Private AutoRun After=network-online.target remote-fs.target nss-lookup.target ConditionPathExists=/opt/NoteStartUpRun/bin [Service] ExecStart=/opt/NoteStartUpRun/bin/note-stup-1st.sh Restart=no Type=simple [Install] WantedBy=multi-user.target
作成したサービスを systemd 領域にコピーして、所有者とアクセス権の変更をします。
$ sudo cp note-startup-1st.service /etc/systemd/system $ sudo chown root:root /etc/systemd/system/note-startup-1st.service $ sudo chmod 644 /etc/systemd/system/note-startup-1st.service
サービスから起動するモジュールをシェルスクリプトで作成します。
これは単純にバックアップするスクリプトに制御を移しているだけです。後から引数の追加・変更等のカスタマイズが容易になると思われます。今回は、バックアップ先サーバーのIPアドレスを与えています。
$ vi note-stup-1st.sh #!/bin/sh exec /opt/NoteStartUpRun/bin/sunao-note_Windows-Documents-bkup "192.168.11.23"
パッケージをまとめるディレクトリを作成して、所有権とアクセス権の設定を行い、起動するスプリクトを配置します。
$ sudo mkdir -p /opt/NoteStartUpRun/bin $ sudo chmod 755 /opt/NoteStartUpRun/bin $ sudo cp note-stup-1st.sh /opt/NoteStartUpRun/bin $ sudo chown root:root /opt/NoteStartUpRun/bin/note-stup-1st.sh $ sudo chmod 755 /opt/NoteStartUpRun/bin/note-stup-1st.sh
実際にバックアップを実行するスクリプトを作成します。
$ vi sunao-note_Windows-Documents-bkup
#!/bin/bash
server='192.168.11.23' # バックアップ先サーバー
test -z "$1" || server="$1"
echo "-- bkup to $server"
bkup_D="$server:/home/bkup/sunao-sp/sunao-Win-Doc/" # バックアップ先位置
mntS='/mnt/ntfs'
bkup_S="$mntS/Users/sunao/Documents/" # バックアップ元のベース
sleep 300 # 安定するように 5分待つ
/bin/mount $mntS
echo "実行タイムスタンプ `date`" > $bkup_S/TimeStamp.txt
/usr/bin/rsync -av --delete $bkup_S $bkup_D
/bin/umount $mntS
バックアップを実行するスクリプトを配置して、所有権とアクセス権を設定します。
$ sudo cp sunao-note_Windows-Documents-bkup /opt/NoteStartUpRun/bin $ sudo chown root:root /opt/NoteStartUpRun/bin/sunao-note_Windows-Documents-bkup $ sudo chmod 755 /opt/NoteStartUpRun/bin/sunao-note_Windows-Documents-bkup
処理の流れとしては、サービスとして定義している note-startup-1st.service により note-stup-1st.sh が起動されます。その中で単純にバックアップ実行スクリプトの sunao-note_Windows-Documents-bkup を起動しています。
ユニットファイルを systemd に登録
ここからは、systemd へのサービス(ユニットファイル)の登録と検証作業です。
ユニットファイル等を追加や変更した後には、必ず次のコマンド sudo systemctl daemon-reload を実行します。systemd への登録や登録内容の更新作業が必要になるようです。
そして一緒にステータスも確認しておきます。
$ sudo systemctl daemon-reload $ sudo systemctl status note-startup-1st.service ● note-startup-1st.service - Note Private AutoRun Loaded: loaded (/etc/systemd/system/note-startup-1st.service; disabled; vendor preset: enabled) Active: inactive (dead)
ステータスで表示される Loaded: 行のカッコ内の１つ目と２つ目のセミコロンの間の disabled となっているのは、自動起動が無効になっているということのようで、自動起動できるように設定します。
自動起動が行われるように設定
$ sudo systemctl enable note-startup-1st.service Created symlink from /etc/systemd/system/multi-user.target.wants/note-startup-1st.service to /etc/systemd/system/note-startup-1st.service. $ sudo systemctl status note-startup-1st.service ● note-startup-1st.service - Note Private AutoRun Loaded: loaded (/etc/systemd/system/note-startup-1st.service; enabled; vendor preset: enabled) Active: inactive (dead)
ユニットファイルの定義内に、[ Install ] の WantedBy= で定義しているユニットにリンクが張られ、先ほどの /etc/systemd/system/note-startup-1st.service; の後の disabled が enabled に変わっています。
これで再立ち上げで自動実行されるようになっているはずですが、その前にコマンドで起動して確認します。
systemd の手動起動の確認
ユニットファイル名を指定したコマンド sudo systemctl start note-startup-1st.service で起動できます。
$ sudo systemctl start note-startup-1st.service $ sudo systemctl status note-startup-1st.service ● note-startup-1st.service - Note Private AutoRun Loaded: loaded (/etc/systemd/system/note-startup-1st.service; enabled; vendor preset: enabl Active: active (running) since Sat 2019-02-09 20:40:50 JST; 19s ago Main PID: 15710 (sunao-note_Wind) Tasks: 2 (limit: 3787) CGroup: /system.slice/note-startup-1st.service ├─15710 /bin/bash /opt/NoteStartUpRun/bin/sunao-note_Windows-Documents-bkup 192.168 └─15711 sleep 300 2月 09 20:40:50 MITA-NY40S systemd[1]: Started Note Private AutoRun. 2月 09 20:40:50 MITA-NY40S note-stup-1st.sh[15710]: -- bkup to 192.168.11.23 lines 1-11/11 (END)
起動されて ‘– bkup to 192.168.11.23′ のメッセージまでが書きだされて、’Active: active (running) since ….’ と表示して実行中なのがわかり、’└─15711 sleep 300′ で止まっているのが確認できます。
待ち時間の５分が経過したので、再び確認してみます。
$ sudo systemctl status note-startup-1st.service
● note-startup-1st.service - Note Private AutoRun
Loaded: loaded (/etc/systemd/system/note-startup-1st.service; enabled; vendor preset: enabl
Active: inactive (dead) since Sat 2019-02-09 20:45:57 JST; 24min ago
Process: 15710 ExecStart=/opt/NoteStartUpRun/bin/note-stup-1st.sh (code=exited, status=0/SUC
Main PID: 15710 (code=exited, status=0/SUCCESS)
2月 09 20:45:51 MITA-NY40S ntfs-3g[15727]: Version 2017.3.23 integrated FUSE 28
2月 09 20:45:51 MITA-NY40S ntfs-3g[15727]: Mounted /dev/sda4 (Read-Write, label "Windows", NT
2月 09 20:45:51 MITA-NY40S ntfs-3g[15727]: Cmdline options: rw,noexec,nosuid,nodev,uid=1000,g
2月 09 20:45:51 MITA-NY40S ntfs-3g[15727]: Mount options: rw,noexec,nosuid,nodev,user,allow_o
2月 09 20:45:51 MITA-NY40S ntfs-3g[15727]: Global ownership and permissions enforced, configu
2月 09 20:45:55 MITA-NY40S note-stup-1st.sh[15710]: sending incremental file list
2月 09 20:45:56 MITA-NY40S note-stup-1st.sh[15710]: TimeStamp.txt
2月 09 20:45:57 MITA-NY40S note-stup-1st.sh[15710]: sent 4,207 bytes received 61 bytes 948.
2月 09 20:45:57 MITA-NY40S note-stup-1st.sh[15710]: total size is 37,355,511 speedup is 8,75
2月 09 20:45:57 MITA-NY40S ntfs-3g[15727]: Unmounting /dev/sda4 (Windows)
lines 1-16/16 (END)
コマンドによる起動では問題なく実行されて、正常終了しているようです。
ログに書き出されている内容から、最初の status では sleep 300 で停止しているので、その時点までの echo メッセージが確認でき、次の status では、その後の ntfs ファイルのマウントや rsync コマンドによる転送や ntfs ファイルのアンマウントが記録されています。
もし更新ファイルのバックアップで、更新されていれば、ここにファイル名がリストされていると思います。
この処理は、起動されてバックアップ動作が終わると、毎回終了するので ‘Active: inactive (dead)’ と表示して、その後に終了した日時が記録されています。
一般ユーザーでジャーナルを確認
次にプログラムの出力ログを確認できる journalctl コマンドがあるので確認してみます。
$ journalctl -u note-startup-1st.service
2月 09 20:40:50 MITA-NY40S systemd[1]: Started Note Private AutoRun.
2月 09 20:40:50 MITA-NY40S note-stup-1st.sh[15710]: -- bkup to 192.168.11.23
2月 09 20:45:51 MITA-NY40S ntfs-3g[15727]: Version 2017.3.23 integrated FUSE 28
2月 09 20:45:51 MITA-NY40S ntfs-3g[15727]: Mounted /dev/sda4 (Read-Write, label "Windows", NT
2月 09 20:45:51 MITA-NY40S ntfs-3g[15727]: Cmdline options: rw,noexec,nosuid,nodev,uid=1000,g
2月 09 20:45:51 MITA-NY40S ntfs-3g[15727]: Mount options: rw,noexec,nosuid,nodev,user,allow_o
2月 09 20:45:51 MITA-NY40S ntfs-3g[15727]: Global ownership and permissions enforced, configu
2月 09 20:45:55 MITA-NY40S note-stup-1st.sh[15710]: sending incremental file list
2月 09 20:45:56 MITA-NY40S note-stup-1st.sh[15710]: TimeStamp.txt
2月 09 20:45:57 MITA-NY40S note-stup-1st.sh[15710]: sent 4,207 bytes received 61 bytes 948.
2月 09 20:45:57 MITA-NY40S note-stup-1st.sh[15710]: total size is 37,355,511 speedup is 8,75
2月 09 20:45:57 MITA-NY40S ntfs-3g[15727]: Unmounting /dev/sda4 (Windows)
lines 285-306/306 (END)
ジャーナルの表示では、status で分割されていたログ内容が続けて表示され、 20:40 で処理が始まり、時間が飛んで 20:45 から ntfs のマウントが始まっているので、５分待っているのが確認できます。
システム再起動による自動起動の確認
いよいよ待望の Linux の立上げによる自動起動の確認になります。ノートPCを再起動してジャーナルを確認します。
$ journalctl -u note-startup-1st.service
2月 09 20:45:57 MITA-NY40S note-stup-1st.sh[15710]: sent 4,207 bytes received 61 bytes 948.44 bytes/s
2月 09 20:45:57 MITA-NY40S note-stup-1st.sh[15710]: total size is 37,355,511 speedup is 8,752.46
2月 09 20:45:57 MITA-NY40S ntfs-3g[15727]: Unmounting /dev/sda4 (Windows)
-- Reboot --
2月 09 22:00:30 MITA-NY40S systemd[1]: Started Note Private AutoRun.
2月 09 22:00:30 MITA-NY40S note-stup-1st.sh[1281]: -- bkup to 192.168.11.23
2月 09 22:05:31 MITA-NY40S ntfs-3g[3854]: Version 2017.3.23 integrated FUSE 28
2月 09 22:05:31 MITA-NY40S ntfs-3g[3854]: Mounted /dev/sda4 (Read-Write, label "Windows", NTFS 3.1)
2月 09 22:05:31 MITA-NY40S ntfs-3g[3854]: Cmdline options: rw,noexec,nosuid,nodev,uid=1000,gid=1000,use
2月 09 22:05:31 MITA-NY40S ntfs-3g[3854]: Mount options: rw,noexec,nosuid,nodev,user,allow_other,nonemp
2月 09 22:05:31 MITA-NY40S ntfs-3g[3854]: Global ownership and permissions enforced, configuration type
2月 09 22:05:34 MITA-NY40S note-stup-1st.sh[1281]: sending incremental file list
2月 09 22:05:35 MITA-NY40S note-stup-1st.sh[1281]: TimeStamp.txt
2月 09 22:05:35 MITA-NY40S note-stup-1st.sh[1281]: sent 4,207 bytes received 61 bytes 948.44 bytes/se
2月 09 22:05:35 MITA-NY40S note-stup-1st.sh[1281]: total size is 37,355,511 speedup is 8,752.46
2月 09 22:05:35 MITA-NY40S ntfs-3g[3854]: Unmounting /dev/sda4 (Windows)
lines 295-319/319 (END)
‘– Reboot –‘ の記録以降が新しく追加されたログですので、問題なく起動されて正常終了しているようです。
実際の立上げによるバックアップの注意点
順調にバックアップ動作が機能したわけではなく、色々な試行錯誤の結果として問題の解決ができています。
立上げ直後は、ネットワークの安定に問題があるらしくエラーになっていました。対策としては起動されてから ５分の待ち時間の追加で問題が解決しました。
次は ‘sleep 300’ の待ち時間が追加される前に出ていたエラーのジャーナル内容です。
$ journalctl -u note-startup-1st.service -- Logs begin at 火 2018-01-09 16:24:34 JST, end at 火 2018-01-09 16:27:17 JST. -- 1月 09 16:25:12 MITA-NY40S systemd[1]: Started Note Private AutoRun. 1月 09 16:25:14 MITA-NY40S ntfs-3g[1071]: Version 2015.3.14AR.1 integrated FUSE 28 1月 09 16:25:14 MITA-NY40S ntfs-3g[1071]: Mounted /dev/sda4 (Read-Write, label "Windows", NTFS 3.1) 1月 09 16:25:14 MITA-NY40S ntfs-3g[1071]: Cmdline options: rw,noexec,nosuid,nodev,uid=1000,gid=1000,user 1月 09 16:25:14 MITA-NY40S ntfs-3g[1071]: Mount options: rw,noexec,nosuid,nodev,user,allow_other,nonempty,relatime,default_permissi 1月 09 16:25:14 MITA-NY40S ntfs-3g[1071]: Global ownership and permissions enforced, configuration type 7 1月 09 16:25:16 MITA-NY40S note-stup-1st.sh[1039]: ssh: connect to host 192.168.11.21 port 22: Network is unreachable 1月 09 16:25:16 MITA-NY40S note-stup-1st.sh[1039]: rsync: connection unexpectedly closed (0 bytes received so far) [sender] 1月 09 16:25:16 MITA-NY40S note-stup-1st.sh[1039]: rsync error: unexplained error (code 255) at io.c(226) [sender=3.1.1] 1月 09 16:25:16 MITA-NY40S ntfs-3g[1071]: Unmounting /dev/sda4 (Windows)
それ以外のエラーとして、バックアップ先のサーバーを変更したらエラーになりました。
理由は root ユーザーで接続し転送していますが、 root から root での ssh での接続実績がなく、確認キー待ちになってエラーしていたようです。事前にサーバーへの接続確認をしておく必要があるようです。
-- Reboot -- 2月 07 23:09:20 MITA-NY40S systemd[1]: Started Note Private AutoRun. 2月 07 23:09:20 MITA-NY40S note-stup-1st.sh[1330]: -- bkup to 192.168.11.23 2月 07 23:14:21 MITA-NY40S ntfs-3g[2633]: Version 2017.3.23 integrated FUSE 28 2月 07 23:14:21 MITA-NY40S ntfs-3g[2633]: Mounted /dev/sda4 (Read-Write, label "Windows", NTFS 3.1) 2月 07 23:14:21 MITA-NY40S ntfs-3g[2633]: Cmdline options: rw,noexec,nosuid,nodev,uid=1000,gid=1000,use 2月 07 23:14:21 MITA-NY40S ntfs-3g[2633]: Mount options: rw,noexec,nosuid,nodev,user,allow_other,nonemp 2月 07 23:14:21 MITA-NY40S ntfs-3g[2633]: Global ownership and permissions enforced, configuration type 2月 07 23:14:21 MITA-NY40S note-stup-1st.sh[1330]: Host key verification failed. 2月 07 23:14:21 MITA-NY40S note-stup-1st.sh[1330]: rsync: connection unexpectedly closed (0 bytes recei 2月 07 23:14:21 MITA-NY40S note-stup-1st.sh[1330]: rsync error: error in rsync protocol data stream (co 2月 07 23:14:21 MITA-NY40S ntfs-3g[2633]: Unmounting /dev/sda4 (Windows)