Lotus Notes/Domino (R) をこよなく愛して。。。。 -60ページ目

Domino AdministratorでのMail監視 -8-

<話題の履歴>


Domino AdministratorでのMail監視 -1-

Domino AdministratorでのMail監視 -2-

Domino AdministratorでのMail監視 -3-

Domino AdministratorでのMail監視 -4-

Domino AdministratorでのMail監視 -5-

Domino AdministratorでのMail監視 -6-

Domino AdministratorでのMail監視 -7-



前回は、Remote Console Commandを使って、Router Taskの状態を把握する方法を模索してみました。

今回は、別の方法を考えてみたいと思います。



前回試したように、LotusScriptのSendConsoleCommandでの処理ではRouter Taskの状態を適切に取得できるかどうかわからない状態でした。

SendConsoleCommandでの方法は別途調査することにします。


となると、やはりOSに頼るしかないのでしょうか?

Domino側でRouterの稼働状態がどのようになっているかは別にして、OS側からDominoのTask(Process)の稼働状態を把握することが可能なことは周知のことです。

Windowsだと"tasklist"で取得できますし、Unixだと"ps"で取得することができます。

Windowsの場合、以下のように表示されます。


c:\IBM\Domino>tasklist

イメージ名              PID     セッション名     セッション#
========================= ======== ================ ===========
System Idle Process           0   Services             0
System                    4   Services             0

・・・・・・・


これでは全てのTaskが表示されてしまいますので、DominoのRouterだけ表示してみます。


c:\IBM\Domino>tasklist /fi "imagename eq nrouter.exe"

イメージ名             PID     セッション名      セッション#
========================= ======== ================ ===========
nrouter.exe               4072  Console              1


Linuxなら、"ps -e | grep router"の結果を変数に入れて簡単にprocessにrouterが存在するかをCheckできますが、Windowsの場合はちょっと面倒ですが、以下で出来ます。


c:\IBM\Domino>for /F %a in ('tasklist /nh /fi "imagename eq nrouter.exe"') do set r_status=%a


これで、Routerが稼働していれば環境変数r_statusにnrouter.exeが設定され、Router TaskがOSから見て稼働しているかどうかを把握できますが、これだと単なるOSでのTask監視になりますので、ちょっと詰まらないです。

OSから見たTask監視であれば、市販のToolで容易に実現できますし、既に行われているでしょう。


さて、話を元に戻して、前回試したRemote Console CommandによるRouter Task稼働状態のCheckをOS側から行ってみることにします。


皆さんご存知のように、DominoはServer Console CommandをOS側から投入することが可能です。

書くまでもないと思いますが、以下をDomino Program Directoryから発行すると、Domino ConsoleにCommandが投入されます。


c:\IBM\Domino>nserver -c "show tasks only"


しかし、この状態ではOS側からDomino Console Commandの実行結果が得られませんので、Remote Consle Commandと同様に実行結果をFileに書き出してCheckするしかありません。


c:\IBM\Domino>nserver -c "show tasks only >tasklist.lst"


これでDominoのData Directoryに"tasklist.txt"というFileが作成され、実行結果が格納されます。


後は、OS側でこのFileの中身を解析して、Router Taskが稼働しているかどうかをCheckすれば良い訳です。


では、早速少し試してみることにします。


今回は、Partitioned Serverで稼働していることも考慮して、Routerの稼働状態のCheck/ReloadのBatch FileはDominoのData Directoryに配置することにしました。

これで、ServerごとにCheckするかどうかを決められます。

Codeは以下の通りですが、機能検証なのでError Handlingなどが不十分な面もあるかも知れませんが、お許しください。


@echo off
setlocal
set res=
if exist tasklist.lst (
 del tasklist.lst
)

..\nserver -c "show tasks only >tasklist.lst"
:tasklst
if exist tasklist.lst (
 goto taskchk
) else (
 timeout 1 >nul
goto tasklst
)

:taskchk
for /f "delims=" %%a in ('findstr /M Router tasklist.lst') do @set res=%%a
if "%res%"=="tasklist.lst" (
 ..\nserver -c "restart task router"
) else (
 ..\nserver -c "load router"
)

timetout 1>nul
del tasklist.lst

..\nserver -c "show tasks only >tasklist.lst"
:taskrechk
if exist tasklist.lst (
 goto taskrechk
) else (
 timeout 1 >nul
 goto reloadchk
)

:reloadchk
timeout 2 >nul
..\nserver -c "show tasks only >tasklist.lst"
for /f "delims=" %%a in ('findstr /M Router tasklist.lst') do @set res=%%a
if "%res%"=="tasklist.lst" (
 goto endreload
) else (
 goto reloadchk
)

:endreload

timeout 1 >nul
del tasklist.lst

endlocal



Show Tasksの結果を入れているWork Fileの削除時に1秒待たせてから削除していますが、即時に行うとFileをまだ掴んでいるようで削除が出来なかったからです。

削除できなかった場合を考えると、待ち時間を入れるのではなく、適切に処理した方が良いと思います

。


実行すると、Domino Consoleには以下のように表示されます。


> show tasks only >tasklist.lst
> restart task router
[09B8:0002-0408] 2015/05/06 06:36:00 Router: Shutdown is in progress
[09B8:0002-0408] 2015/05/06 06:36:02 Router: Mail Router shutdown
> show tasks only >tasklist.lst
[074C:0002-0FA4] 2015/05/06 06:36:04 Router: Mail Router started for domain LOTUS
[074C:0002-0FA4] 2015/05/06 06:36:04 Router: Internet SMTP host domsvr in domain lotus.com
> show tasks only >tasklist.lst
>


勿論、Routerが停止している場合は、"restart task router"の代わりに"load router"が発行されます。


今回は、Task Statusを判断してTaskをReloadするWindows Batchを作成してみました。

次回は、このWindows Batchを使って、Mail滞留時の対応を行ってみます。


<続く>

 

Unix環境でのDominoの上書きInstall(Clean Install)

Windows環境なら、何も気にせず、上書きでDominoを移行している場合が多いと思いますが、Unix環境では少し注意が必要なようです。


Domino Partitioned Serverの場合、DominoのInstall時に、PartitionのData Foleder、User,Groupを指定して導入することは皆さんもご存知の通りです。


この導入を行うと、標準では、/opt/ibm/domino(Release及び導入時の設定によってPathは異なります)にProgramが導入され、その下にnotes、binのFolderが作成され、そこにDominoのModuleが導入されます。


 [siwama@localhost domino]$ ls -l
 合計 4
 drwxr-xr-x 3 root root 4096 5月 7 21:36 bin
 drwxr-xr-x 3 root root 31 5月 7 21:35 notes



皆さん、ご存知のように、Unix環境ではWindowsと異なり、DominoのUninstallerは利用できず、DominoをCleanに再Installする為には、IBM Technoteに紹介されている方法 で行う必要があります。


IBM Technoteでは、Program導入Pathの全てのFileを削除するように紹介されていますが、Program導入Pathの下に、User独自のFolderを作成して別のProgramを導入している場合もたまにはあるかと思いますが、このような環境では、全てのFileやFolderを削除してしまうことは出来ません。


実は、このProgram Folderには、隠しFileとしてDominoの導入時に生成されるInstall Dataが収められています。


 [siwama@localhost domino]$ ls -la
 合計 8
 drwxr-xr-x 4 root root 47 5月 7 21:36 .
 drwxr-xr-x 3 root root 19 5月 7 21:20 ..
 -rw-r--r-- 1 root root 898 5月 7 21:36 .install.dat
 drwxr-xr-x 3 root root 4096 5月 7 21:36 bin
 drwxr-xr-x 3 root root 31 5月 7 21:35 notes


この.install.dat Fileに導入情報が記録されています。


 [siwama@localhost domino]$ cat .install.dat
 add_data_directories_only = 0
  asp_install_option = 0
  components = ("License","Program Files","Data Files","Domino Enterprise Connection Services","Domino Offline Services","IBM iNotes","Domino Directory Sync Services","Domino As A Windows Service","Performance Monitoring","Resource Modeling Engine","Help","OS Integration","OS Integration Linux","IBM HTTP Server")
  data_directories {
  "/local/notesdata1" {
  data_UNIX_gid = 1003
  data_UNIX_group = notes1
  data_UNIX_uid = 1003
  data_UNIX_user = notes1
  }
  "/local/notesdata0" {
  data_UNIX_gid = 1002
  data_UNIX_group = notes0
  data_UNIX_uid = 1002
  data_UNIX_user = notes0
  }
  }
  installation_type = 2
  isLocal = 1
  kitArch = linux64
  opt_domino_softlink = 0
  pPath = /opt/ibm/domino/notes/90010/linux
  program_directory = /opt/ibm/domino
  ptPath = /opt/ibm/domino
  rev = 90010
  start_server_setup = 0
  targetHost = "localhost"



この情報は何に使われるかと言うと、FixPackやHotfixを導入する際に参照され、Install先のData Folder NameとUnix User/Groupが自動的に設定されるようになっています。

FixPackやHotfixの種類によっては、Data Folderも更新しますので、このようになっている訳です。


話を元に戻すと、DominoのProgram FolderにUserのDataを格納している場合は、完全に全てのFileやFolderを削除することはできませんので、IBM Technoteに記載されているrm -rf *というCommand(全てのFileとFolderを削除)は実行出来ないので、以下を実行する必要があります。


 su -

 cd /opt/ibm/domino

 rm -rf notes

 rm -rf bin

 rm .install.dat



これで、DominoのInstall情報も含めて削除され、Clean Installの準備ができます。


この後は、IBM Technoteに従い、Install Moduleを準備して、./installで導入を行えば問題ありません。


なぜ、こんな記事を書いているのかと思う方もいらっしゃるかと思いますが、Partitioned Serverの場合、その構成を変更したいことがあるかと思います。


Partitionを複数個作成していたが、不要なServerを削除して新しいServerに入れ替えたいということもあるでしょうし、Data Folder構成を変更したいということもあるでしょう。

その場合、Data FolderのOwner情報も変更しなければなりませんし、Data Folder自体を削除する必要があります。

これをUnixで勝手に変更すると、DominoのInstall情報との不一致が発生し、今後のFP/HF適用時に問題が発生してしまいます。


この手順で、再導入を行えば、再度DominoのData Folder名、Unix User/Groupの指定を行って再導入できますので、Data Folderの名前を変えたり、実行するUnix User/Groupを変更したりしても、新しい設定で導入できるのです。


 


Domino AdministratorでのMail監視 -7-

<話題の履歴>


Domino AdministratorでのMail監視 -1-

Domino AdministratorでのMail監視 -2-

Domino AdministratorでのMail監視 -3-

Domino AdministratorでのMail監視 -4-

Domino AdministratorでのMail監視 -5-

Domino AdministratorでのMail監視 -6-



前回は、Error Messageを最初の1回だけ発行するようにしてみました。

今回は、もう少し改善が出来ないか考えてみることにします。



そもそも、Mail滞留を監視してRouterの状態を把握し、RestartすることによりMail滞留を回避したいというのが今回の目的です。


以前記事にしたように、Events4のTask MonitorにはProbe間隔の2分以内に同じErrorが起こってしまうと、Task Status変更感知が行えず、連続Errorには対応できないという問題があります。

また、Router TaskがMail.boxの参照Tableが参照できずにAccess出来ないErrorの場合は、Messageが複数回出てしまい、Event Handlerで処理すると複数回RouterのRestartが行われてしまい、回復は出来るものの、気持ち悪い状態になる問題があります。

更に、Router TaskがConsisitency Checkの終了を待ち切れず終了してしまった場合は、Event Task Monitorで検出は可能ですが、連続Errorには対応できないのです。


こうなると、発想を変えて、Monitoring Configuration(Events4.nsf)自体に頼らない方法を考えるのも一つの方法です。


Mailの滞留を検知することは前回までのAgentで実装しました。

なら、Mail滞留を検知して、Agentから直接Routerの再起動を行ってしまったらどうでしょうか?


DominoではR6の頃からだったと思いますが、Remote Console CommandをLotusScriptで発行することが可能となっています。

勿論、Agentから発行する場合、AgentをSignしたUserIDにRemote Console Commandを発行する権限がServer文書のSecurity Tabで与えられている必要はありますが、通常の管理者IDであればこの権限は与えられているハズです。


まず、Router Taskが正常に動作しているかどうかを確認するにはどうすればよいでしょうか?


これは、当たり前ですが、show tasksを発行すればTask一覧が取得できます。

情報が多くならないようにするには、以下のように"only"を付けて発行します。

このOptionを付けることで、Database ServerへのUser Sessionなどを省いた形式でTaskが表示されます。


> show tasks only

[06D4:0007-04AC] Task Description

[06D4:0007-04AC] Admin Process Idle
[06D4:0007-04AC] Agent Manager Executive '2': Idle
[06D4:0007-04AC] Router    Utility: Idle


また、別の方法も考えられます。

Router Taskの状態を確認する方法で、"tell router status"を発行することで確認が出来ます。


> tell router status
>
[0FE8:0002-0BF0] Msgs State Via Destination

[0FE8:0002-0BF0] Transfer Threads: Max = 25; Total = 0; Inactive = 0; Max Concurrent = 12
[0FE8:0002-0BF0] Delivery Threads: Max = 25; Total = 0; Inactive = 0
[0FE8:0002-0BF0] Dispatch Threads: Max = 4; Total = 2; Inactive = 2
[0FE8:0002-0BF0] Sweep Threads: Max = 4; Total = 2; Inactive = 2


Server Console Commandを手動で発行する場合は、これらのCommandでRouterの状態が確認できるのです。


しかし、ここで1点だけ注目して欲しい点があります。

"show tasks only"の場合は、Commandの後に直ぐに応答がPrintされていますが、"tell router status"の場合は一行の改行が行われてから応答がPrintされていることです。


この違いがどういう結果を産むのかは今から見て行きたいと思います。


では、早速、DBに新しいAgentを作成して、Remote Console Commandの発行を行ってみます。

まず、上記に書いたようにResponseが特殊だったRouterのStatusを取得するCommand発行を行ってみます。

Codeは非常に単純で、以下のようなCodeです。


 Sub Initialize
 Dim ss As New NotesSession
 Dim cons_res As String
 cons_res = ss.Sendconsolecommand("", "tell router status")
 Print cons_res
 End Sub


実行結果は以下です。


> tell amgr run "Test\MBCheck.nsf" 'ConsCmd'
[0EA4:0002-0718] 2015/05/05 07:26:54 JVM: Java Virtual Machine initialized.
[0EA4:0006-0BDC] 2015/05/05 07:26:54 AMgr: Start executing agent 'ConsCmd' in'Test\MBCheck.nsf'
> tell router status >C:\Users\ADMINI~1\AppData\Local\Temp\notes048967\rem46231.con
>
[0FE8:0002-0BF0] Msgs State Via Destination

[0FE8:0002-0BF0] Transfer Threads: Max = 25; Total = 0; Inactive = 0; Max Concurrent = 12
[0FE8:0002-0BF0] Delivery Threads: Max = 25; Total = 0; Inactive = 0
[0FE8:0002-0BF0] Dispatch Threads: Max = 4; Total = 2; Inactive = 2
[0FE8:0002-0BF0] Sweep Threads: Max = 4; Total = 2; Inactive = 2
[0EA4:0006-0BDC] 2015/05/05 07:26:54 Agent Manager: Agent printing: Command has been executed on remote server. Use 'Live' console option, in future, to view response from server.
[0EA4:0006-0BDC] 2015/05/05 07:26:54 AMgr: Agent 'ConsCmd' in 'Test\MBCheck.nsf' completed execution


ここでお分かりのように、"tell router status"はRemote Console Commandとして実行すると、Commandが実行されたということしか分からず、Commandの実際の実行結果はConsoleに遅れて表示されるようになっているため、SendConsoleCommandで内容の詳細をCheckすることは出来ないようです。


では、"show tasks only"だとどうなるでしょうか?


> tell amgr run "Test\MBCheck.nsf" 'ConsCmd'
[0EA4:000B-0BCC] 2015/05/05 09:31:30 AMgr: Start executing agent 'ConsCmd' in'Test\MBCheck.nsf'
> show tasks only >C:\Users\ADMINI~1\AppData\Local\Temp\notes048967\rem49336.con

SMTP Server Listen for connect requesager: Agent printing:
[0EA4:000B-0BCC] 2015/05/05 09:31:30 AMgr: Agent 'ConsCmd' in 'Test\MBCheck.nsf' completed execution


何やら、訳の分からないResponseが返って来ました。

ConsoleからCommandを実行した場合の結果の一部がAgent ManagerがPrintしたMessageに上書きされたように表示されています。

Remote Console Commmandの場合、Temp Fileに戻り値が格納されて、それを利用した後にTemp Fileは削除されてしまうので、実際にどのような内容がTemp Fileに書き込まれていたかは確認できませんが、Printした内容を確認する限り利用しない方が安全かも知れません。


正常に戻り値が取得できるなら、InStrで"Router"が含まれているかどうかを判断してやれば、Router Taskの稼働状態を確認できると考えていたのですが、今回はSendConsoleCommandでのCheckは完全ではないかも知れません。

皆さんの中には、何故、Router Taskの稼働状態をCheckする必要があるのか?と思われる方もいらっしゃると思います。


実は、Domino 8.5.3 の環境でRouterが停止している際に"restart task router"が利用できなかった経験があるからです。
Routerの起動はご存知のように"load router"ですが、再起動は"restart task router"で可能です。

Domino 8.5.3 の環境で、Routerが停止している際にEvent Handlerで"restart task router"を実行してもRouterはLoadされず、"load router"を実行する必要があるのです。

Windows Domino 9.0.1 FP3の環境で、Routerを停止した状態でConsoleから"restart task router"を実行すると、正常にRouterがLoadされることは確認していますので、8.5.x以前と9.0.xで動きが異なるようなのですが、このような違いがあるのであれば、汎用的にするためにはRouterの稼働状態を把握して"restart task router"、"load router"を使い分ける必要があると判断しています。


今回は、Remote Console Commandを使って、Router Taskの状態を把握する方法を模索してみました。

次回は、別の方法を考えてみたいと思います。


<続く>