まず結論から。稼働後にWMSが遅くなる場合、サーバーが問題であることはめったにありません。データ、クエリ、タスク、連携が稼働後に誰にも手入れされずに積み上がり、その重みがやがてシステムを引きずり落とします。サーバーを追加することから始めないでください。以下の順番で確認し、問題が現れたステップで止まり、そこで直してから次に進んでください。私はこのまったく同じ障害を三回見てきました。倉庫は毎回変わりますが、筋書きは同じです。

私は30件を超える稼働プロジェクトに携わってきましたが、あるパターンが何度も現れます。一週目、誰もがシステムは速いと言います。二か月目、誰かがスキャンに一瞬かかると言い出します。三か月目、ピッカーはピックフェイスでページが回るのを待っています。ピークシーズンになると、倉庫全体がシステムを呪っています。システムそのものは変わっていません。データ量が変わり、タスク量が変わり、連携の呼び出し量が変わったのです。遅さが一日にして訪れることはほとんどありません。少しずつ毎日やって来て、ある日耐えられなくなるのです。

WMSが遅くなる五つの原因:まず自分の原因を見つける

一つ目の原因は、アーカイブなしのデータ増加です。入荷伝票、出荷伝票、棚卸伝票、調整伝票は稼働後に増える一方です。数年後、一つのテーブルが数百万行の履歴を抱えることになります。すべてのクエリは新しい伝票を見つけるために古い伝票を掘り起こさなければならず、ページが遅くなります。さらに悪いことに、多くのレポートはデフォルトでテーブル全体をスキャンするため、一回のレポート実行がデータベース全体に負担をかけます。

二つ目の原因は、インデックスとクエリの劣化です。稼働時に作られたインデックスは、その時点のクエリ向けに設計されていました。業務が変わり、新しいクエリ条件が現れ、古いインデックスが合わなくなります。典型的な姿はこうです。誰かがステータスフィルターを追加したり、時間の降順で並べ替えたりすると、インデックスが使われなくなり、システムはフルテーブルスキャンに落ち、一つのクエリが大量の処理を一緒に引きずり落とします。

三つ目の原因は、波(ウェーブ)とタスクの滞留です。波が多すぎる、波が小さく切りすぎている、あるいは割り当てルールが硬直しすぎていると、タスクプールは期限切れ、キャンセル済み、割り当て不能のタスクでいっぱいになります。システムが作業を割り当てるたびに、まずそれらの死んだタスクをかき分けなければなりません。プールが大きいほど割り当ては遅くなり、タスクがキューに並んだままピッカーは待たされます。

四つ目の原因は、連携のポーリングです。ECプラットフォーム、運送会社、財務システムがすべてスケジュールに従ってデータを引き取ります。数分おきにポーリングするものもあれば、失敗後にリトライを続けるものもあります。一つひとつの呼び出しは小さく見えます。合わさると絶え間ない圧力になります。最悪の形はリトライの嵐です。片側に問題が起き、もう片側が必死にリトライし、システムは自らのリトライに倒されます。

五つ目の原因は、ハードウェアと同時実行数が上限に達することです。サーバーは稼働時の量に合わせてサイジングされましたが、その後ビジネスが成長し、注文量が倍になり、同時ユーザーも倍になりました。この原因を最後に置いたのは意図的です。最初の四つを直さなければ、ハードウェアを追加してもクラッシュを先延ばしするだけです。防ぐことはできません。

遅いWMSはこの順番で確認し、見つけたら止まる

これは私がプロジェクトで使う確認の順番です。一つずつ進め、飛ばさないでください。

症状 最も可能性の高い原因 まず確認すること
すべてのページが遅く、午後はさらに悪化 データ増加、アーカイブなし 履歴伝票の量、アーカイブ方針、レポートの範囲
一つのクエリだけが遅く、他のページは問題なし インデックスとクエリの劣化 そのクエリの実行計画、インデックスを使っているか
プールが大きく見えるのにピッカーがタスクを待つ 波とタスクの滞留 期限切れ・キャンセル済みタスク、波のルール
断続的に固まる、ある瞬間は良く次の瞬間は悪い 連携のポーリング 呼び出し量、失敗したリトライ
ピークシーズンにすべてが遅くなり、過ぎると回復する ハードウェアと同時実行数の上限 サーバーの負荷、同時ユーザー

ステップ一、データを見る。履歴伝票の量と、アーカイブ方針が実際に一度でも実行されたかを確認してください。多くの倉庫では、方針は文書の中に存在するだけで、一度も実行されていません。アーカイブはデータを削除することではありません。冷えた履歴伝票を脇に移し、ライブクエリがホットデータだけに向き合えるようにすることです。アーカイブの前に、保持期間を財務とオペレーションに確認してから実行してください。一人で決めないでください。

ステップ二、クエリを見る。最も遅いクエリを取り、実行計画を読んでください。インデックスが効かなくなる理由は、たいてい些細なものです。フィールドの型が変わった、並べ替えの向きが反転した、新しい条件にインデックスがない。インデックスの修正は、まずテスト環境で検証してください。本番データベースに直接変更してはいけません。私の稼働夜チェックリストにはいつも同じ一行があります。稼働前に遅いクエリを列挙すること。

ステップ三、タスクを片付ける。プール内の期限切れ、キャンセル済み、死んだタスクを数え、一括で片付けてください。波のルールも見直してください。波が小さく切りすぎていないか、一つの注文が複数の波に分かれていないか。割り当てルールを変更する前に、小さな範囲で変更を試し、ピッキング効率が本当に改善することを確認してから、倉庫全体に展開してください。

ステップ四、連携を見る。時間ごとの呼び出し量を引き出し、異常なピークを探し、失敗したリトライを数えてください。ポーリング間隔を広げられませんか。リトライに上限を設けられませんか。失敗したら永遠にリトライする代わりにアラートを上げられませんか。このステップではしばしば意外な発見があります。誰も使わなくなった連携が、毎日スケジュール通りにデータを引き取り続け、何の役にも立たずにリソースを消費しているのです。

ステップ五、ここで初めてハードウェアを見る。最初の四つのステップがきれいで、それでもシステムが遅いなら、サーバーの負荷と同時実行数を確認してください。この時点でハードウェアを追加するのは妥当です。追加する前に、数字を出してください。量がどれだけ増えたか、同時実行数がどれだけ増えたか、ボトルネックはプロセッサか、メモリか、ディスクか。言えなければ、追加しないでください。間違った場所に容量を追加するのはお金の無駄です。

繰り返し見かける三つの失敗

一つ目の失敗は、データ増加の予測なしに稼働することです。多くのプロジェクトは稼働日の量しかテストせず、一年後の量をテストしません。システムは初日に飛ぶように動き、受け入れは通り、一年後にはデータが何倍にも増えて、遅さは避けられなくなります。稼働夜チェックリストには必ず一行入れてください。一年後に予想される量で負荷テストを行うこと。

二つ目の失敗は、レポートを本番データベースに直接実行することです。オペレーションはレポートを求め、財務はレポートを求め、オーナーはレポートを求め、それらのレポートクエリが日中のピーク時に本番を叩くため、業務オペレーションも一緒に遅くなります。レポートは読み取りレプリカか別のレポート経路で実行すべきで、ライブオペレーションとリソースを奪い合ってはいけません。

三つ目の失敗は、誰も見ていない連携です。誰もが稼働時には連携を見ていますが、順調に動き出すと、誰も二度と見ません。呼び出し量はじわじわ増え、リトライはじわじわ増え、システムが引きずり落とされる頃には、連携ログはずっと前から失敗でいっぱいになっています。連携にも週次のルーチンが必要です。呼び出し量、失敗率、リトライ回数を週に一度見直すのです。

ピッカーが毎朝、システムが目覚めるのを待つことから一日を始める倉庫を見たことがあります。スキャン一回あたり二秒が、毎日積み重なって、数百回分のピッキングを失わせていました。修正後、ピッカーが最初に言ったのは、システムがようやく自分の手の速さについていけるようになったということでした。遅いシステムは、決して技術だけの問題ではありません。現場の人々の時間と忍耐を直接食いつぶすのです。

だから、サーバーを追加するかどうかを問うのはやめましょう。順番に確認し、問題が現れたステップを直してから、月次ルーチンに四つのことを書き入れてください。アーカイブ、遅いクエリの見直し、タスクの片付け、連携の確認です。次の遅延が来るまで待って、また直し始めるようなことはしないでください。

Lin Xiao(WMS導入コンサルタント)著

英語版からの翻訳。内容に相違がある場合は英語版を優先します。