膨大な容量に膨れあがるMail DBへの対処方法? -3-
<話題の履歴>
膨大な容量に膨れあがるMail DBへの対処方法? -1-
膨大な容量に膨れあがるMail DBへの対処方法? -2-
前回は、ServerのMail DBの容量を削減する方法を検討してみましたが、どれもUser頼りでIT部門の運用としては実現困難なものでした。
今回は、もう少しIT部門の運用として出来ることが無いかと考えてみます。
Userの要件として考えられることは、以下のような要件が考えられます。
1) Mailを削除するのではなく、別のDBでも良いから残しておくこと
2) 残した別DBのMailは容易にAccessできて参照できること
3) Userが受信時点では要らないと判断したMailなどを退避できること
一方、IT部門としては、以下を考えるでしょう。
1) 不要なMailと判断されるものや古いMailは別のDBに退避する
2) 退避Mailを保存するDBは安価なNASなどに配置する
3) 退避Mail DBのBackupは最低限とする
こんな要件を実現する方法があるかどうかですが、最近使われているのか分かりませんが、CSLD(Common Store for Lotus Domino)というDB2 Baseの製品があったことが思い出されます。
あの製品は、Notes/DominoのMailから本文や添付Fileなどを抜き出してDB2に保存するというものでした。
今でもあるのかどうかは知りませんが、仕組みが複雑なので、今回は検討の対象外として、Notes/Dominoの基本的な機能で考えてみたいと思います。
前回、少し書きましたが、Notes/DominoにはArchiveという機能があり、通常はNotes ClientやDOLSを使ってUserのPC LocalでArchiveを保存しますが、Server側でArchiveすることも可能です。
Domino ServerのCommandで、以下を発行することにより、Archiveが行われます。
load compact -a : Archiveを実施してCompactも実施
load compact -A : Archiveのみを実施
これであれば、別のDBに対象となるMailをArchiveできる訳です。
この機能を使って、UserのMail DBのArchiveが行われると要件が実現できるのではないでしょうか?
Userの要件を見てみると、実現可能と判断できます。
1) Mailを削除するのではなく、別のDBでも良いから残しておくこと=> Archive DBに保存
2) 残した別DBのMailは容易にAccessできて参照できること => NotesのArchiveからAccess可能
3) Userが受信時点では要らないと判断したMailなどを退避できること => Archive条件で設定可能
では、実際にこの機能を実装するには、どんな作業が必要でしょうか?
【Archiveの実装】
これは、非常に簡単で、以下の設定を行えば、Dominoの基本機能で実現できます。
1) Domino DirectoryにArchive Criteria/Settings/Policyを作成
2) Policyを適用するGroupを生成(DJXであれば一定以上の役職のGroupの生成が可能)
3) Policyの対象Groupへの適用
4) 夜間にArchiveするProgram文書を作成
これで、Criteriaに一致した文書がArchiveされます。
【Archive条件の設定】
これはUserの要望によりますが、以下の方法が考えられます。
1) Mail DBに作したMail受信前Agentで決められた条件に一致した場合にFlagを設定
2) Flagが設定された文書のみを表示するViewをMail DBに作成
3) Archive Criteria文書でArchive対象文書をView/Folder指定
これでViewに分類された文書だけが夜間にArchiveされるようになります。
この考え方では、Archive対象文書はInboxにも条件に一致したViewにも表示されます。
もし、Inboxには表示させたくないということであればAgentでInbox FolderからRemoveしてしまうことが考えられます。
また、皆さんは何故FolderではなくViewを作成するのか?と思われる方もいらっしゃることでしょう。
FolderにすればFlagなど設定することもなく、Folderに分類すれば良いだけです。
Userが設定できるMail Ruleと同じ方法です。
しかし、FolderにするとSystem Folderでもない訳なので、Notes ClientやiNotesではFolder部分に表示され、Userが作成したFolderと同様に右クリックで削除ができてしまうからなのです。
Viewであれば、削除することは出来ないので、Archive Criteriaで指定する対象が無くなってしまうことはありません。
※試していて一つ気が付いたのですが、Notes Clientの場合、Viewも右クリックでFolderと同様に削除が出来てしまうようで、これはBugと思われます。Mail DB設計で追加されたViewをUserに勝手に削除されては困ります。
これで、実現方法が固まりました。
今回は、IT部門として出来る方法を考えてみました。
次回は、実際に設定を行い、目的が実現できることを確認してみます。
<続く>
膨大な容量に膨れあがるMail DBへの対処方法? -1-
膨大な容量に膨れあがるMail DBへの対処方法? -2-
前回は、ServerのMail DBの容量を削減する方法を検討してみましたが、どれもUser頼りでIT部門の運用としては実現困難なものでした。
今回は、もう少しIT部門の運用として出来ることが無いかと考えてみます。
Userの要件として考えられることは、以下のような要件が考えられます。
1) Mailを削除するのではなく、別のDBでも良いから残しておくこと
2) 残した別DBのMailは容易にAccessできて参照できること
3) Userが受信時点では要らないと判断したMailなどを退避できること
一方、IT部門としては、以下を考えるでしょう。
1) 不要なMailと判断されるものや古いMailは別のDBに退避する
2) 退避Mailを保存するDBは安価なNASなどに配置する
3) 退避Mail DBのBackupは最低限とする
こんな要件を実現する方法があるかどうかですが、最近使われているのか分かりませんが、CSLD(Common Store for Lotus Domino)というDB2 Baseの製品があったことが思い出されます。
あの製品は、Notes/DominoのMailから本文や添付Fileなどを抜き出してDB2に保存するというものでした。
今でもあるのかどうかは知りませんが、仕組みが複雑なので、今回は検討の対象外として、Notes/Dominoの基本的な機能で考えてみたいと思います。
前回、少し書きましたが、Notes/DominoにはArchiveという機能があり、通常はNotes ClientやDOLSを使ってUserのPC LocalでArchiveを保存しますが、Server側でArchiveすることも可能です。
Domino ServerのCommandで、以下を発行することにより、Archiveが行われます。
load compact -a
load compact -A
これであれば、別のDBに対象となるMailをArchiveできる訳です。
この機能を使って、UserのMail DBのArchiveが行われると要件が実現できるのではないでしょうか?
Userの要件を見てみると、実現可能と判断できます。
1) Mailを削除するのではなく、別のDBでも良いから残しておくこと=> Archive DBに保存
2) 残した別DBのMailは容易にAccessできて参照できること => NotesのArchiveからAccess可能
3) Userが受信時点では要らないと判断したMailなどを退避できること => Archive条件で設定可能
では、実際にこの機能を実装するには、どんな作業が必要でしょうか?
【Archiveの実装】
これは、非常に簡単で、以下の設定を行えば、Dominoの基本機能で実現できます。
1) Domino DirectoryにArchive Criteria/Settings/Policyを作成
2) Policyを適用するGroupを生成(DJXであれば一定以上の役職のGroupの生成が可能)
3) Policyの対象Groupへの適用
4) 夜間にArchiveするProgram文書を作成
これで、Criteriaに一致した文書がArchiveされます。
【Archive条件の設定】
これはUserの要望によりますが、以下の方法が考えられます。
1) Mail DBに作したMail受信前Agentで決められた条件に一致した場合にFlagを設定
2) Flagが設定された文書のみを表示するViewをMail DBに作成
3) Archive Criteria文書でArchive対象文書をView/Folder指定
これでViewに分類された文書だけが夜間にArchiveされるようになります。
この考え方では、Archive対象文書はInboxにも条件に一致したViewにも表示されます。
もし、Inboxには表示させたくないということであればAgentでInbox FolderからRemoveしてしまうことが考えられます。
また、皆さんは何故FolderではなくViewを作成するのか?と思われる方もいらっしゃることでしょう。
FolderにすればFlagなど設定することもなく、Folderに分類すれば良いだけです。
Userが設定できるMail Ruleと同じ方法です。
しかし、FolderにするとSystem Folderでもない訳なので、Notes ClientやiNotesではFolder部分に表示され、Userが作成したFolderと同様に右クリックで削除ができてしまうからなのです。
Viewであれば、削除することは出来ないので、Archive Criteriaで指定する対象が無くなってしまうことはありません。
※試していて一つ気が付いたのですが、Notes Clientの場合、Viewも右クリックでFolderと同様に削除が出来てしまうようで、これはBugと思われます。Mail DB設計で追加されたViewをUserに勝手に削除されては困ります。
これで、実現方法が固まりました。
今回は、IT部門として出来る方法を考えてみました。
次回は、実際に設定を行い、目的が実現できることを確認してみます。
<続く>
膨大な容量に膨れあがるMail DBへの対処方法? -2-
<話題の履歴>
膨大な容量に膨れあがるMail DBへの対処方法? -1-
前回は、少し訳の分からない内容になってしまいました。
今回は、「膨大な容量に膨れあがるMail DB」への対応方法について考えてみたいと思います。
そもそも、何故、Mailの容量は膨大になってしまうのか?を考えてみましょう。
1) Internetでの情報交換の機会が増加した
2) 会話や会議ではなく、メールでのやりとりが増加した
3) 何でもMailでやり取りする文化が根付いてしまった
4) 内容から判断して必要な人にMailを送るのではなく、関係者と思われるGroup全員に送付してしまっている
5) 返信も履歴付き返信を多用している
6) Imageや写真、図面など添付Fileの容量が増えた
7) Security Checkの観点から、上司にe-MailのCopyが自動送付されるような仕組みがある
8) 掲示板などの新着情報をPush配信している
などといったことが考えられるのではないかと思います。
Notes/Dominoが上陸して切り開いた、様々な情報をDatabaseで共有するというCollaborationの世界とはかけ離れた状態になっているのが現状ではないでしょうか?
皆さんも同じだと思いますが、私の朝一番の仕事はMailを削除することです。
関係ないと思われるMailはRule機能を使ってFolderに分類していますが、それでも、分類し切れないMailが多々到着します。
朝一番に、InboxにあるMailをSubjectと内容をCheckして削除する、Folderに分類された不要と思われるMailはSubjectだけで判断して削除する、という作業に10分程度掛けている訳です。
これが、管理職ともなるともっとMailが増えて判断も出来ない状態になり、MailのCheckは放棄して削除もしないのではないでしょうか?
そもそもRuleで分類しているかさえ、疑わしいと思います。
このような状態になると、Mail DBは膨れ上がるばかりです。
では、こんな状態に対処するために、ITとして何をすれば良いのでしょうか?
1) Mail文化を改革してDB文化に変える
これは、Notes/Dominoに関わって20年程の私も成し遂げられなかった課題で、もう実現不可能ではないかと思い始めています。
2) 効率的なMail分類方法をUserに教育してMailの削除を行わせる
これも、経験から教育したとしても実行するUserは少ないですし、「削除する」という行為を行うUserは更に少ないのです。
3) DAOSを活用してDisk容量を削減する
DAOSは、同一Mail Server上の添付Fileを共有することで削減効果はありますが、Transaction Loggingを有効にする必要がありますし、DAOSのStorageが障害になると、全ての添付Fileが参照出来なくなる可能性があります。
詰まり、Single Failure Pointを作っていることになりますし、Notes/Dominoの内部処理からするとPerformanceを悪化させることになります。
ただ、同報MailをGroupなどに送る文化の会社には効果があると思います。
また、Mail DBに制限値を設けている場合は、Mail DBの制限値はDAOSに格納された容量を含めた論理Sizeで判断されますので、制限値を超えてMailが送受信できなくなるという事態(設定によります)を避けることはできません。
4) Local Archive機能を利用してMailをPC Localに退避する
Notes Client Userの場合良く使われる手法ですが、PCの入れ替えなどの場合、Data移行を行わなければならなくなりす。
iNotesの場合はDOLSを導入しなければならず、これもPCの入れ替えなどの際にData移行が必要になります。
機能的には、Mail DBとArchive DBの同時検索も可能になっていますので、活用できる機能なのですが、どのPCやDeviceでも利用できることに利点を見出し、iNotesやTravelerを採用しているUserにとっては解決策にならないと思います。
こうやって考えて行くと、Mailだけで情報交換する文化になってしまった会社の場合、解決策は無いのではないかと思えてきます。
しかし、そんな状況でもIT部門として解決策を提示しなければ、運用が破たんしてしまう訳です。
今回は、どのような解決策があるのかを少し考えてみましたが、なかなか手強い課題です。
次回は、この課題をどうやって解決出来るかをもう少し考えてみます。
<続く>
膨大な容量に膨れあがるMail DBへの対処方法? -1-
前回は、少し訳の分からない内容になってしまいました。
今回は、「膨大な容量に膨れあがるMail DB」への対応方法について考えてみたいと思います。
そもそも、何故、Mailの容量は膨大になってしまうのか?を考えてみましょう。
1) Internetでの情報交換の機会が増加した
2) 会話や会議ではなく、メールでのやりとりが増加した
3) 何でもMailでやり取りする文化が根付いてしまった
4) 内容から判断して必要な人にMailを送るのではなく、関係者と思われるGroup全員に送付してしまっている
5) 返信も履歴付き返信を多用している
6) Imageや写真、図面など添付Fileの容量が増えた
7) Security Checkの観点から、上司にe-MailのCopyが自動送付されるような仕組みがある
8) 掲示板などの新着情報をPush配信している
などといったことが考えられるのではないかと思います。
Notes/Dominoが上陸して切り開いた、様々な情報をDatabaseで共有するというCollaborationの世界とはかけ離れた状態になっているのが現状ではないでしょうか?
皆さんも同じだと思いますが、私の朝一番の仕事はMailを削除することです。
関係ないと思われるMailはRule機能を使ってFolderに分類していますが、それでも、分類し切れないMailが多々到着します。
朝一番に、InboxにあるMailをSubjectと内容をCheckして削除する、Folderに分類された不要と思われるMailはSubjectだけで判断して削除する、という作業に10分程度掛けている訳です。
これが、管理職ともなるともっとMailが増えて判断も出来ない状態になり、MailのCheckは放棄して削除もしないのではないでしょうか?
そもそもRuleで分類しているかさえ、疑わしいと思います。
このような状態になると、Mail DBは膨れ上がるばかりです。
では、こんな状態に対処するために、ITとして何をすれば良いのでしょうか?
1) Mail文化を改革してDB文化に変える
これは、Notes/Dominoに関わって20年程の私も成し遂げられなかった課題で、もう実現不可能ではないかと思い始めています。
2) 効率的なMail分類方法をUserに教育してMailの削除を行わせる
これも、経験から教育したとしても実行するUserは少ないですし、「削除する」という行為を行うUserは更に少ないのです。
3) DAOSを活用してDisk容量を削減する
DAOSは、同一Mail Server上の添付Fileを共有することで削減効果はありますが、Transaction Loggingを有効にする必要がありますし、DAOSのStorageが障害になると、全ての添付Fileが参照出来なくなる可能性があります。
詰まり、Single Failure Pointを作っていることになりますし、Notes/Dominoの内部処理からするとPerformanceを悪化させることになります。
ただ、同報MailをGroupなどに送る文化の会社には効果があると思います。
また、Mail DBに制限値を設けている場合は、Mail DBの制限値はDAOSに格納された容量を含めた論理Sizeで判断されますので、制限値を超えてMailが送受信できなくなるという事態(設定によります)を避けることはできません。
4) Local Archive機能を利用してMailをPC Localに退避する
Notes Client Userの場合良く使われる手法ですが、PCの入れ替えなどの場合、Data移行を行わなければならなくなりす。
iNotesの場合はDOLSを導入しなければならず、これもPCの入れ替えなどの際にData移行が必要になります。
機能的には、Mail DBとArchive DBの同時検索も可能になっていますので、活用できる機能なのですが、どのPCやDeviceでも利用できることに利点を見出し、iNotesやTravelerを採用しているUserにとっては解決策にならないと思います。
こうやって考えて行くと、Mailだけで情報交換する文化になってしまった会社の場合、解決策は無いのではないかと思えてきます。
しかし、そんな状況でもIT部門として解決策を提示しなければ、運用が破たんしてしまう訳です。
今回は、どのような解決策があるのかを少し考えてみましたが、なかなか手強い課題です。
次回は、この課題をどうやって解決出来るかをもう少し考えてみます。
<続く>
膨大な容量に膨れあがるMail DBへの対処方法? -1-
最近ではMailで様々な情報が飛び交い、Mail DBの容量は膨れ上がる一方です。
しかしながら、企業のIT部門はCostの観点から、Mailの容量制限を設け、Userに自主的にMail DBの容量を管理するように仕向けているのが現状ではないでしょうか?
所が、世の中のCloud環境や無料Mailの環境は、容量の制限は無いに等しいくらいまでになっています。
GoogleのGMailは個人Userとして使っていても、Mailを消さなくても良いくらいになっていますし、IBMのSmart Cloud Notesでも30GBとかの容量制限に拡張され、UserがMail DB容量を気にすることも無い世界が実現されている訳です。
しかし、このような状態では、Userは一般の無料Serviceと比較して、社内のMail Systemが如何に低Levelかを力説するかも知れませんし、実際にそんなことが起こっているのではないかと思われます。
社内には社内の事情があり、Costや運用も含めこういう状態になっていることは、社内Systemを運用する人間には分かっていることですが、少しでもUser部門とIT部門の間の理解が深まれば、こんな認識の違いも無くなるかも知れません。
今回のシリーズでは、今の世の中の無料ServiceやCloudなどのMailの現状を見ながら、In Houseで企業独自の運用をする場合についいて考慮したいと思います。
読者の皆さんは、どちらかというとIT部門で運用やITの企画など予算を管理されている方が多いのではないかと思います。
私もITの世界に居る人間ですので、立場的には皆さんと同じです。
そういう立場で「Mail DBの肥大化」という観点で考えてみると、
1) ServerのDisk容量が増加し、H/W投資Costが増加する
2) DB容量増大により、Performanceが悪化する
3) 限られたH/W資源で運用するためにH/W Resorce監視を含めた運用Costが増加する
などと言った意見が出てくるのではないでしょうか?
逆にUserの視点に立つと、無料Mail ServiceやCloudで提供されているServiceとの比較になる訳で
1) Mail容量の提供は一般Serviceと比べ遜色ない状態で自社運用環境でも行われるべきである
2) PerformaceやResponse Timeは一般Serviceと比べ遜色ない状態で自社運用であれば当然達成すべきである
3) 一般Serviceと比べ同様なService提供であれば、Costは一般Serviceと同等であるべきである
というような意見が出ることでしょう。
これでは、お互いWin-Winの関係になることもなく、Service Levelの合意に達することはありません。
自社運用(In House)の場合、様々な利点もあるのですが、ここではそういうことは考えないことにします。
IT部門として、User部門の意見を聞き、それを実現する方法を考えてみるのも良いのではないでしょうか?
それがUser部門からの信頼を得て、無料Mail ServiceやCloudとの差を感じて頂ければ、自社運用(In House)の価値も認められるかも知れません。
では、自社運用(In House)しているIT/運用部門の立場で考えてみましょう。
まず、Mail DBが膨大になることの運用上の弊害を考えてみます。
Notes Mail DBが肥大化すると、Notes/Dominoとしてどのようなことが弊害として考えられるのでしょうか?
1) Disk増設など設備投資が増える
2) DBの破損確率が上がる(Notes/Domino固有の問題かもしれませんが・・・)
3) View Index/FT Index更新Processの負荷が高くなる
4) Unread TableのReplica用のJournal更新の負荷が高くなる
5) DBの制限値を設定している場合、制限越えUserへの対応が増える
などと言った意見もあることでしょう。
まあ、IT/運用部門の立場で考えると、様々な意見があるのではないかと思います。
ここは、IT/運用部門の立場としては50歩も100歩引いてでも、まずUser部門の意見を聞いて考えてみてはどうかと思うのです。
IT/運用部門の人であれ、自宅に帰り、無料Mail ServiceやCloudで提供されているServiceを使っているでしょうし、使い方がUser部門よりも深いため、一番自社運用のSystemとのかい離を感じているのはIT/運用部門の人かも知れません。
話が少し逸れてしまいましたが、User部門とIT部門をWin-Winの関係に導くのであれば、Costが安く、Responseなどを含めたServiceも実現できることが重要なのではないかと思います。
今回は、何だかわからない内容になってしまいました。
次回は、「膨大な容量に膨れあがるMail DBへの対処」を限られたResourceの中でどうやって実現するかを考えてみたいと思います。
<続く>
しかしながら、企業のIT部門はCostの観点から、Mailの容量制限を設け、Userに自主的にMail DBの容量を管理するように仕向けているのが現状ではないでしょうか?
所が、世の中のCloud環境や無料Mailの環境は、容量の制限は無いに等しいくらいまでになっています。
GoogleのGMailは個人Userとして使っていても、Mailを消さなくても良いくらいになっていますし、IBMのSmart Cloud Notesでも30GBとかの容量制限に拡張され、UserがMail DB容量を気にすることも無い世界が実現されている訳です。
しかし、このような状態では、Userは一般の無料Serviceと比較して、社内のMail Systemが如何に低Levelかを力説するかも知れませんし、実際にそんなことが起こっているのではないかと思われます。
社内には社内の事情があり、Costや運用も含めこういう状態になっていることは、社内Systemを運用する人間には分かっていることですが、少しでもUser部門とIT部門の間の理解が深まれば、こんな認識の違いも無くなるかも知れません。
今回のシリーズでは、今の世の中の無料ServiceやCloudなどのMailの現状を見ながら、In Houseで企業独自の運用をする場合についいて考慮したいと思います。
読者の皆さんは、どちらかというとIT部門で運用やITの企画など予算を管理されている方が多いのではないかと思います。
私もITの世界に居る人間ですので、立場的には皆さんと同じです。
そういう立場で「Mail DBの肥大化」という観点で考えてみると、
1) ServerのDisk容量が増加し、H/W投資Costが増加する
2) DB容量増大により、Performanceが悪化する
3) 限られたH/W資源で運用するためにH/W Resorce監視を含めた運用Costが増加する
などと言った意見が出てくるのではないでしょうか?
逆にUserの視点に立つと、無料Mail ServiceやCloudで提供されているServiceとの比較になる訳で
1) Mail容量の提供は一般Serviceと比べ遜色ない状態で自社運用環境でも行われるべきである
2) PerformaceやResponse Timeは一般Serviceと比べ遜色ない状態で自社運用であれば当然達成すべきである
3) 一般Serviceと比べ同様なService提供であれば、Costは一般Serviceと同等であるべきである
というような意見が出ることでしょう。
これでは、お互いWin-Winの関係になることもなく、Service Levelの合意に達することはありません。
自社運用(In House)の場合、様々な利点もあるのですが、ここではそういうことは考えないことにします。
IT部門として、User部門の意見を聞き、それを実現する方法を考えてみるのも良いのではないでしょうか?
それがUser部門からの信頼を得て、無料Mail ServiceやCloudとの差を感じて頂ければ、自社運用(In House)の価値も認められるかも知れません。
では、自社運用(In House)しているIT/運用部門の立場で考えてみましょう。
まず、Mail DBが膨大になることの運用上の弊害を考えてみます。
Notes Mail DBが肥大化すると、Notes/Dominoとしてどのようなことが弊害として考えられるのでしょうか?
1) Disk増設など設備投資が増える
2) DBの破損確率が上がる(Notes/Domino固有の問題かもしれませんが・・・)
3) View Index/FT Index更新Processの負荷が高くなる
4) Unread TableのReplica用のJournal更新の負荷が高くなる
5) DBの制限値を設定している場合、制限越えUserへの対応が増える
などと言った意見もあることでしょう。
まあ、IT/運用部門の立場で考えると、様々な意見があるのではないかと思います。
ここは、IT/運用部門の立場としては50歩も100歩引いてでも、まずUser部門の意見を聞いて考えてみてはどうかと思うのです。
IT/運用部門の人であれ、自宅に帰り、無料Mail ServiceやCloudで提供されているServiceを使っているでしょうし、使い方がUser部門よりも深いため、一番自社運用のSystemとのかい離を感じているのはIT/運用部門の人かも知れません。
話が少し逸れてしまいましたが、User部門とIT部門をWin-Winの関係に導くのであれば、Costが安く、Responseなどを含めたServiceも実現できることが重要なのではないかと思います。
今回は、何だかわからない内容になってしまいました。
次回は、「膨大な容量に膨れあがるMail DBへの対処」を限られたResourceの中でどうやって実現するかを考えてみたいと思います。
<続く>