新しい販売管理の仕組みが、来月から動き始める予定になった。開発会社のテストも、現場の担当者による受け入れテストも終わり、あとは切り替えるだけだと思っていたところ、「運用テストはいつやりますか」と聞かれた。受け入れテストとの違いがわからず、何を確かめればよいのか、誰がやるものなのかも決まっていない。本番の稼働を目前にした担当者の多くが、ここで慌てます。

先に結論を書くと、運用テストでは、機能が動くことだけでなく、本番を想定した担当者と手順で、日々の業務や障害への対応を回せるかを確かめることが大切です。名前や担当の範囲は案件によって違うため、受け入れテストとどう分担するか、何をもって合格とするか、残った課題をどう扱うかを先に合意しましょう。運用の手順や復旧の体制に不安があるなら、稼働の日を決める前に、開発会社と確認の計画を整えるべきです。この記事では、運用テストとは何か、受け入れテストとの違い、確認することと進め方を解説します。

この記事のポイント

  1. 運用テストは、本番を想定した担当者と手順で、業務と障害対応を回せるかを確かめる
  2. 受け入れテストが「使えるか」なら、運用テストは「回し続けられるか」を見る
  3. 名前や範囲は案件で違うため、分担・合格条件・残った課題を先に合意する
  4. 手順や復旧の体制に不安があれば、稼働の日を決める前に確認の計画を整える
目次
  1. 運用テストとは?受け入れテストとの違い
  2. 運用テストとは
  3. 受け入れテストとの違い
  4. 総合テストとの違い
  5. 名前と範囲は案件で違う
  6. 運用テストで確認することと進め方
  7. 運用テストで確認する主な項目
  8. 先に合意しておく3つのこと
  9. 本番の担当者と手順で行う
  10. 障害を想定した訓練を入れる
  11. 運用の手順書に書いておくこと
  12. 運用を外部に任せる場合
  13. 運用テストでよくある失敗
  14. 運用テストの進め方
  15. 稼働の日を決める前に確認の計画を整える
  16. 小さなシステムで最低限確かめること
  17. 運用テストについてよくある質問
  18. 総括:運用テストは本番の担当者と手順で回す

運用テストとは?受け入れテストとの違い

開発・テスト・受け入れ・運用テスト・本番稼働の5つの段階が階段のように並び、運用テストの段に手順書と時計とベルのアイコンが添えられているイラスト
運用テストは、本番稼働の直前に、回し続けられるかを確かめる段階です

まず、運用テストがどんなテストで、ほかのテストとどう違うのかを整理します。

運用テストとは

運用テストは、システムを本番で使い始める前の最後の段階で行うテストです。本番に近い環境で、実際に運用を担う人が、決めた手順どおりにシステムを動かし、日々の業務を回せるか、トラブルが起きたときに対応できるかを確かめます。

開発の途中のテストが「作ったものが正しく動くか」を確かめるのに対して、運用テストは「使い始めたあとも、人と手順で安定して回し続けられるか」を確かめるのが特徴です。

受け入れテストとの違い

運用テストとよく比べられるのが、受け入れテストです。違いは、確かめる観点にあります。

比べる点受け入れテスト運用テスト
確かめること業務に使えるか、要件を満たしているか日々の運用と障害への対応を回し続けられるか
主に行う人業務の担当者(発注側)運用の担当者、情報システムの担当者、開発会社
使う材料業務のシナリオ、実際の伝票運用の手順書、障害のときの手順、切り替えの計画
結果の使い道検収の合否稼働してよいかの判断

受け入れテストで「使える」とわかっても、夜間の処理が止まったときに誰も気づかない、バックアップから戻す手順を誰も知らない、といった状態では、安心して稼働できません。その部分を確かめるのが運用テストです。受け入れテストの進め方は、システム開発のUATの進め方で詳しく解説しています。

総合テストとの違い

総合テスト(システムテスト)は、開発会社がシステム全体を通して、要件どおりに動くかを確かめるテストです。性能や、ほかのシステムとのつなぎなども含めて確かめますが、主に作る側の目線で行います。

運用テストは、その結果を受けて、使う側・回す側の目線で確かめる点が違います。なお、案件によっては、運用テストを総合テストの一部として行ったり、受け入れテストと一緒に行ったりすることもあります。テストの種類と、発注側が受け取る記録の見方は、システム開発テストの種類と証跡の見方で整理しています。

名前と範囲は案件で違う

運用テストという名前や、どこまでを含めるかは、会社や案件によって違います。運用テストを行わず、受け入れテストの中で運用の確認まで済ませる案件もあれば、移行のリハーサルまで含めて運用テストと呼ぶ案件もあります。

大切なのは名前ではなく、運用の確認が、どのテストの中で、誰によって行われるかが決まっていることです。どのテストにも入っておらず、誰も確かめていないという状態が、いちばん危険です。

運用テストで確認することと進め方

情報システムの担当者が運用の手順書を片手に、夜間の処理が止まった想定で連絡の手順を同僚と確かめ、開発会社の担当者がそばで見守っている様子
トラブルを想定して、手順どおりに対応できるかを確かめます

ここからは、運用テストで確認する項目と、進め方を見ていきます。

運用テストで確認する主な項目

運用テストでは、主に次のような項目を確かめます。

項目確かめること
日々の運用朝の起動、日次の処理、締めの処理を、手順書どおりに担当者が行えるか
定期の処理月末・年度末などの処理が、決めた日に正しく動くか
バックアップと戻しバックアップが取れているか、実際に戻せるか、どのくらい時間がかかるか
監視と知らせ異常が起きたときに、決めた人に知らせが届くか
障害のときの対応止まったときに、誰が何をし、どこに連絡し、どう再開するか
利用者の管理人の入れ替わりのときに、利用者の追加・停止・権限の変更ができるか
問い合わせの流れ利用者からの問い合わせを、誰が受けてどこにつなぐか

すべてを細かく確かめる必要はありません。止まったときの影響が大きい業務と、起きる頻度の高いトラブルから優先して確かめましょう。優先順位は、業務の担当者と情報システムの担当者が一緒に決めると、抜けが少なくなります。

先に合意しておく3つのこと

運用テストを始める前に、開発会社と次の3つを合意しておきます。

  • 分担:受け入れテストで確かめることと、運用テストで確かめることの境目
  • 合格条件:何ができれば稼働してよいとするか(例:バックアップから2時間以内に戻せる)
  • 残った課題の扱い:見つかった問題のうち、稼働の前に直すものと、稼働後に直すもの

合格条件があいまいなまま進めると、テストが終わっても「稼働してよいのか」が決められません。数字や具体的な状態で決めておくと、判断がぶれにくくなります。

本番の担当者と手順で行う

運用テストは、開発会社の担当者だけで行っても意味が薄くなります。実際に運用を担う社内の担当者や、運用を委託する会社の担当者が、本番で使う手順書を見ながら、自分の手で行うことが大切です。

手順書を読みながら操作すると、書かれていない手順や、わかりにくい表現が見つかります。見つかった点は、その場で手順書に書き足しておきましょう。運用テストは、手順書を仕上げる場でもあります。

障害を想定した訓練を入れる

いつもの運用だけでなく、トラブルが起きた想定での訓練も入れましょう。たとえば、夜間の処理が途中で止まった、ほかのシステムとのつなぎが失敗した、サーバーが止まった、といった場面を想定し、知らせが届くか、誰が気づいて、誰に連絡し、どの手順で再開するかを、実際に通してみます。

訓練をしてみると、連絡先が古い、夜間に連絡がつく人がいない、戻す手順に時間がかかりすぎるといった問題が見つかることがあります。本番で初めて気づくより、ずっと安全です。訓練の結果は、手順書にそのまま反映しましょう。

運用の手順書に書いておくこと

運用テストで使う手順書には、少なくとも次のことを書いておきましょう。開発会社が作る場合も、発注側が中身を確かめる必要があります。

  • 毎日・毎週・毎月に行う作業と、その手順
  • 作業がうまくいったかを確かめる方法(画面の表示、届く知らせなど)
  • バックアップの取り方と、戻すときの手順
  • 止まったときの連絡先と、連絡する順番(夜間・休日も含めて)
  • 利用者の追加や停止、権限の変更の手順
  • 開発会社や運用の委託先に頼む作業と、自社で行う作業の分担

手順書は、作った人でなくても読んで同じ作業ができることを目指します。運用テストで担当者に実際に使ってもらうと、その目標に届いているかがわかります。

運用を外部に任せる場合

運用を開発会社や別の会社に任せる場合も、運用テストは必要です。この場合は、委託先の担当者が手順どおりに作業できるかに加えて、自社と委託先の間の受け渡しを確かめます。

たとえば、障害が起きたときに委託先から誰に連絡が来るのか、自社で判断が必要なことは何か、委託先の対応時間の外に起きたらどうするのかといった点です。契約で決めた対応の範囲と、実際の手順が食い違っていないかも、運用テストで確かめておきましょう。時間外の障害連絡や、委託範囲と実際の手順の食い違いなど、委託先との受け渡しの取り決めは、ベンダーコントロールパーフェクトガイドの契約・体制の押さえどころも参考になります。

運用テストでよくある失敗

運用テストで、よく見られる失敗があります。

  • 開発会社の担当者だけで行い、運用を担う社内の担当者が手順を知らないまま稼働する
  • いつもの運用だけを確かめ、障害のときの訓練をしない
  • バックアップが「取れている」ことだけを確かめ、実際に戻せるかを試さない
  • 月末など決まった日にしか動かない処理を確かめないまま稼働する
  • 見つかった問題の扱いを決めず、稼働後に誰が直すのかがあいまいになる

どれも、運用テストの計画の段階で、確かめる項目と担当、合格条件を決めておくことで防ぎやすくなります。

運用テストの進め方

運用テストは、一般的に次の順で進めます。

  • 確かめる項目と合格条件を決め、運用テストの計画を作る
  • 本番に近い環境と、運用の手順書を用意する
  • 担当者が手順書どおりに、日々の運用と定期の処理を行う
  • 障害を想定した訓練を行う
  • 見つかった問題を記録し、稼働の前に直すか、稼働後に直すかを決める
  • 合格条件を満たしたかを確かめ、稼働してよいかを判断する

稼働の日を決める前に確認の計画を整える

運用テストは、本番の稼働の直前に行うため、日程に追われがちです。稼働の日が先に決まっていると、問題が見つかっても「とりあえず稼働してから直す」という判断になりやすくなります。

運用の手順や、復旧の体制に不安があるなら、稼働の日を決める前に、運用テストの期間と合格条件を開発会社と決めておきましょう。運用を始めたあとの保守の体制の考え方は、システムの運用保守の進め方で解説しています。テストの結果と納品物を検収の前に点検するなら、検収・受入テスト確認シートで、残っている不具合や引き渡しの項目も含めて確かめられます。

小さなシステムで最低限確かめること

使う人が少ない小さなシステムでは、大がかりな運用テストを行う余裕がないこともあります。その場合でも、次の3つだけは稼働の前に確かめておきましょう。

  • バックアップから、実際にデータを戻せるか
  • 止まったときに、誰に連絡し、誰が対応するか
  • 担当者が休んだときに、ほかの人が日々の作業を代われるか

この3つが決まっていれば、トラブルが起きても業務への影響を小さく抑えられます。規模が小さいほど一人の担当者に頼りがちになるため、代わりの人に一度作業を通してもらうだけでも、手順の抜けに気づけます。

運用テストについてよくある質問

Q. 運用テストは誰がやるのですか。
実際に運用を担う社内の担当者や、運用を委託する会社の担当者が中心になって行います。開発会社は、手順の説明や、問題が見つかったときの対応で支えます。誰が行うかは、運用テストの計画を作る段階で決めておきましょう。
Q. 運用テストをしないとどうなりますか。
機能は使えても、トラブルが起きたときに誰も対応の仕方を知らない、バックアップから戻せないといった問題が、本番で初めて見つかるおそれがあります。小さな仕組みでも、バックアップの戻しと、止まったときの連絡の流れだけは確かめておきましょう。
Q. 運用テストにはどのくらいの期間が必要ですか。
システムの規模と、確かめる項目の数によって変わります。月末の処理など、決まった日にしか動かない処理がある場合は、その日を含められるように期間を取るか、日付を進めて確かめる方法を開発会社と決めておきましょう。