ワークフロー自動化とオーケストレーション
ワークフロー自動化は、ルールに従って人とシステムの間で仕事を動かします。オーケストレーションは、承認、再試行、状態の記録を伴って、ツールをまたぐ多くのそうしたステップを調整します。ワークフローが単純で、冪等で、観察可能で、介入しなければならない人のために設計されているときに機能します。
なぜ重要か
サービスの仕事の大半はリレーです。リクエストはポータルで始まり、承認のために管理者に行き、あるシステムでアカウントを作成し、別のシステムでメールボックスを、三つ目でライセンスを、施設向けにチケットを、依頼者にメッセージを作ります。バトンを渡すたびに、待つ、情報が失われる、忘れられる機会があります。人がメールと記憶で受け渡しを行うとき、遅延と誤りは最初から組み込まれています。
ワークフロー自動化は、受け渡しを、定義されたフローに置き換えます。システムは、ステップ、それぞれを誰または何が行うか、ステップが失敗したときに何をするか、ここまでに何が起きたかを知っています。オーケストレーションは、同じ考え方をより大きな規模にしたものです。多くのシステムを正しい順序で呼び出し、結果を待ち、厄介なケースを扱う調整役です。Wikipediaは、そうしたフローを定義し実行する方法として、ワークフロー、ワークフロー管理システム、コンピューティングにおけるオーケストレーションを説明しています。
約束は、目に見える記録を伴う、より速く一貫した仕事です。リスクは他の自動化と同じです。欠陥のあるプロセスがコードに固定される、途中の失敗が整合性のない状態を残す、つながったシステムの一つの変更がフローを無言で壊す。優れた設計はこれらを見越します。このトピックは、主な構成要素、ワークフローを信頼できるものに保つパターン、その中での人の位置づけを説明します。トピック 6.1 — 自動化戦略を土台とし、サービス要求(トピック 3.6 — サービス要求管理)と関連し、セルフサービス(トピック 6.5 — セルフサービスと自動化されたフルフィルメント)とパイプライン(トピック 6.4 — パイプラインと自動化された変更)につながります。
中核となる概念
ワークフロー。 各ステップを誰または何が、どの順序で、どんな条件で行うかというルールを伴う、ステップの連なりです。Wikipediaは、ワークフローを、調整された再現可能な活動のパターンと説明しています。ワークフローは、「チケットが解決済みに設定されたら、依頼者に通知する」のように単純なものから、新入社員の旅路を端から端まで扱うような複雑なものまでありえます。
ワークフローエンジン。 ワークフローを動かすソフトウェアです。各インスタンスの状態を追跡し、ステップを実行し、イベントを待ち、何が起きたかを記録します。Wikipediaがワークフローエンジンとワークフロー管理システムを説明しています。多くのチケットプラットフォームがひとつを含み、システムをまたぐフローのための独立したプラットフォームもあります。
オーケストレーション。 複数の自動化されたタスクとサービスをひとつのプロセスに調整することで、通常は、それぞれを順に呼び出す中央のコントローラーから行います。Wikipediaがコンピューティングにおけるオーケストレーションを説明しています。サービスが中央のコントローラーなしにイベントに反応する、コレオグラフィーとは対照的です。オーケストレーションは見やすくデバッグしやすく、コレオグラフィーはより回復力があり、スケールしやすいことがあります。多くの組織が両方を使います。
モデル化。 フローは、Wikipediaが説明するビジネスプロセスモデルと表記法(BPMN)のような表記で描き、それから実行できます。図は、事業側と技術側の人々がフローに合意する助けになります。読みやすく保ち、モデルと稼働中のワークフローを揃えておきます。
状態。 ワークフローのあるインスタンスで、ここまでに行われたことです。状態を知っていれば、システムは失敗の後に再開し、進捗を示し、報告できます。Wikipediaが説明する有限状態機械は、「提出済み」「承認済み」「履行済み」「完了」であるリクエストについて考える有用な方法です。
トリガーとイベント。 ワークフローは、フォーム、メッセージ、スケジュール、システムの変化といったトリガーから始まります。Wikipediaがイベント駆動アーキテクチャとして説明するイベント駆動のアプローチは、システムが何が起きたかを知らせ、他がそれに反応できるようにします。同じく説明されるウェブフックは、あるシステムが別のシステムに通知する一般的な方法です。
連携。 ワークフローは、アプリケーションプログラミングインターフェース(API)、コネクター、連携プラットフォームを通じて他のシステムを呼び出します。Wikipediaが、APIとエンタープライズアプリケーション統合を説明しています。システムがインターフェース、レート制限、認証情報を変えるため、多くのワークフローが壊れるのは連携のところです。
冪等性と再試行。 ある操作を二度行っても一度行ったのと同じ効果なら、冪等です。Wikipediaが冪等性を説明しています。ステップが失敗したりタイムアウトしたりしたとき、安全な対応はしばしば再試行ですが、ステップが冪等な場合にのみ安全です。再試行は、Wikipediaが指数バックオフとして説明する技法で、毎回待ち時間を長くし、上限で止めるべきです。
失敗の扱い。 七ステップのうち四つ目が失敗したら、どうなるか。選択肢は、再試行する、飛ばす、前のステップを元に戻して補償する、止めて人に尋ねる、です。システムをまたぐ長時間のワークフローは、単一のトランザクションに頼れません。Wikipediaはサガのアプローチを説明しており、各ステップに補償の行動があります。自動では扱えない失敗は、消えるのではなく、明確なオーナーのいるキューに行くべきです。Wikipediaは、処理できないメッセージのためのデッドレターキューを説明しています。
人のタスクと承認。 多くのワークフローは、承認する、決める、自動化できないことをするために、人を必要とします。Wikipediaがヒューマン・イン・ザ・ループのシステムを説明しています。これらのタスクを慎重に設計します。誰に求めるか、どうリマインドするか、応答がなければどうなるか、どんな情報を見るか。無期限に待つ承認は、フローを止めます。
オブザーバビリティと監査。 あらゆるインスタンスは追跡可能であるべきです。何がそれを引き起こし、各ステップが何をし、結果はどうだったか、誰が承認したか。Wikipediaが監査証跡を説明しています。これは、サポートの問い(「私のリクエストはどこか」)、トラブルシューティング、コンプライアンスを支えます。トピック 7.4 — オブザーバビリティとテレメトリを参照してください。
ローコードとロボティック・プロセス・オートメーション。 ローコードのプラットフォームとロボティック・プロセス・オートメーション(RPA)は、プログラマーでない人々がワークフローを構築したり、ユーザーインターフェース上の操作を自動化したりできるようにします。Wikipediaが両方を説明しています。単純なケースを速めますが、大規模には、もろく、オーナーのいない自動化を生みえます。コードに対するのと同じオーナーシップ、テスト、レビューを適用してください。
バージョニングと変更。 ワークフローの定義は、インスタンスがまだ動いている間にも時間とともに変わります。定義を変えるとき、進行中のインスタンスをどう扱うかを決めます。定義をバージョン管理に保ち、展開前に変更をテストします。トピック 3.4 — 変更実現を参照してください。
セキュリティ。 ワークフローは認証情報を持ち、力のあるシステムを呼び出します。最小限の許可を持つ独自のアイデンティティを与え、秘密を安全に保管し、誰がワークフローを変更できるかをレビューします。トピック 3.13 — 情報セキュリティ管理を参照してください。
レンズはどう当てはまるか。 ワークフローのツールは、自動化のレンズの配管です。アジャイルのプラクティスは、利用者とともに小さな歩みでワークフローを築くことを示唆します。AIは、人のレビューのもとで、フロー内でリクエストの分類、内容の下書き、提案ができます。アナリティクスは、状態とタイミングのデータを使って遅延を見つけます。
ベストプラクティス
- 構築する前にマッピングして単純にする。 プロセスを現状のまま描き、価値を加えないステップを取り除き、関わる人々と将来のフローに合意します。トピック 6.1 — 自動化戦略を参照してください。
- ワークフローを小さく明確に保つ。 ひとつの巨大なものより、定義された引き継ぎを持つ複数の短いものを好みます。サポートスタッフが追えるよう、ステップに平易な言葉で名前を付けます。
- 各ステップを繰り返しても安全に設計する。 可能な限りステップを冪等にし、再試行が無害になるようにします。できない場合は、ステップがすでに起きたことを検知するチェックを加えます。
- 失敗に備える。 各ステップについて、失敗時に何が起きるかを決めます。バックオフと上限を伴う再試行、補償、人への引き渡し。未解決の失敗は、オーナーのいる見えるキューに送ります。
- 人のタスクを第一級として扱う。 誰が、何を見て、どれくらいの時間があり、リマインダーは何で、タイムアウトや不在のときに何が起きるかを定めます。代理を用意します。
- 利用者にステータスを示す。 依頼者が自分のリクエストの位置と次に期待されることを見られるようにします。すべてのステップではなく、意味のある時点で通知を送ります。
- すべてのインスタンスを記録し追跡する。 トリガー、入力、出力、判断、承認者を記録します。参照番号で、ひとつのインスタンスを簡単に調べられるようにします。
- ワークフローへの変更を統制する。 定義をバージョン管理に置き、変更をレビューし、安全な環境でテストし、動いているインスタンスの扱いを決めます。
- 接続を管理する。 各システムのオーナー、認証情報、連絡先を持つ連携の登録簿を保ちます。失敗を監視し、インターフェースの変更の告知に注意を払います。
- 成績をレビューする。 ステップごとの時間、待ち、失敗、例外を見ます。データを、ボトルネックの除去と、誰も使わないワークフローの廃止に使います。
チームで話し合うための問い
私たちのプロセスのうち、人とシステムの間で最も多く仕事を受け渡すものはどれで、仕事が失われるのはどこか。 実際の例をひとつ追跡してください。どこかでメールやチャットの引き継ぎが予想されます。さらに掘り下げるために、自動化する引き継ぎをひとつ選びます。
プロセスの途中でステップが失敗したら、今日は何が起き、誰がそれを知るか。 あるシステムでは成功し、別のシステムでは失敗したアカウント作成を考えます。不整合が予想されます。さらに掘り下げるために、ひとつのワークフローの失敗の経路を設計します。
私たちの承認のうち、止まるものはどれで、承認者が応答しなければ何が起きるべきか。 最も古い待機中の項目を見ます。長い遅延が予想されます。さらに掘り下げるために、リマインダー、代理、タイムアウトのルールを合意します。
私たちのワークフローが依存する各連携を誰が所有していて、壊れたことをどうやって知るか。 連携を一覧にします。孤立したものが予想されます。さらに掘り下げるために、オーナーを指名し、失敗のアラートを加えます。
ローコードのツールでひとりが構築し、他の誰も理解していないかもしれないワークフローはどれか。 周りに尋ねます。いくつか予想されます。さらに掘り下げるために、上位三つを文書化し、バージョン管理か共有の登録簿に置きます。
AIはワークフローの中でどこで役立ち、人が決めなければならないのはどこか。 AIは分類し、下書きし、提案できます。アクセスとお金については、人が決めるべきです。さらに掘り下げるために、レビューを伴って試すステップをひとつと、正しい振り分けの指標を選びます。
実践:サービスマネジメントの例
ある地方銀行の人事部門とIT部門は、「入社、異動、退社」のイベントをメールで管理しています。新入社員には、アカウント、ノートPC、入館許可、給与記録、研修登録が必要で、五つのチームが扱います。各チームは人事からメールを受け取り、自分の分を行い、ときどき返信します。新入社員の約五人に一人が、初日に何かが足りません。
サービスマネージャーは、ワークフローエンジンとコネクターを持つ、銀行のチケットプラットフォーム上の単一のワークフローを提案します。彼女はまず、五つのチームとプロセスをマッピングし、三つの承認が一度も拒否されていないことを見つけます。新しい設計は二つを取り除き、新入社員の管理者による承認を一つ残します。人事による新入社員の記録がワークフローを引き起こします。それは、一つの親ケースと、可能なところでは並行して走る、それぞれ適切なチームのキューに割り当てられた五つの子タスクを作ります。アカウントの作成は、アイデンティティシステムのコネクターで自動化されます。ノートPCのタスクは技術者に、入館許可は開始日とともに施設に行きます。
チームは失敗を前提に設計します。アカウントの作成は冪等で、コネクターは作成の前にアカウントが存在するかを確認します。コネクターがバックオフを伴って二回失敗すると、タスクは誤りを添付して技術者のキューに行き、アラートがワークフローのオーナーに行きます。人のタスクは一日後にリマインダーが出て、三日後にチームリードにエスカレーションされます。各ケースは、そのステータスを人事と新入社員の管理者に示します。
三か月後、初日に何かが足りない新入社員の割合は約4パーセントに下がります。監査証跡により、サービスデスクは「あれはどこか」に一分で答えられます。何がまだ難しいか。給与のコネクターはベンダーのインターフェースに依存しており、それが一度、予告なしに変わって、アラートが加えられるまで二日間誰も気づかない失敗した実行を生みました。施設チームは依然としてスプレッドシートで作業し、ケースのデータを手でコピーします。異動と退社のイベントには例外がより多く、まだ含まれていません。マネージャーは次に異動イベントを計画し、ベンダーに変更の告知を求めています。
四つの視点
プロダクトとデリバリーのチーム
ワークフローが使える、安定して文書化されたAPIとイベントを、明確なエラーメッセージとともに公開しましょう。変更はワークフローのオーナーに事前に伝えます。自分たちのリリースのワークフローにも同じ考え方を使ってください。
サービスと運用のチーム
運用しているワークフローと連携、つまりログ、アラート、失敗のキュー、ドキュメントを所有しましょう。例外を速やかに扱い、パターンをワークフローのオーナーに持ち込んでください。
リーダーシップとガバナンス
部門横断のワークフローごとにオーナーがいる、旅路の見方を求めましょう。連携の維持に資金を出します。ワークフローの数ではなく、より速く信頼できるフローの証拠を探してください。
顧客とユーザー
自分のリクエストのステータスを見て、追いかけずに依頼したものを得られるべきです。ステップが自分の入力を必要とするとき、何がいつまでに必要かが明確であるべきです。
アジャイル、AI、自動化、アナリティクス
アジャイル
使う人々とともに、一度にひとつの旅路でワークフローを築き、小さな改善をリリースし、結果をレビューします。注意:すべてのプロセスを一度に移行するプラットフォームの展開は、リスクを増やします。ひとつの旅路から始めてください。
AI
AIは、フロー内で、受信したリクエストの分類、自由形式のテキストからの詳細の抽出、メッセージの下書き、振り分けの提案ができ、行動の前に人またはルールが確認します。オーナーを指名し、訂正を追跡してください。注意:ワークフロー内のAIのステップは、仕事を大規模に誤った場所へ送りえます。結果をサンプリングし、フォールバックのキューを保ってください。トピック 5.1 — サービスマネジメントにおけるAIを参照してください。
自動化
ワークフローは、このレンズの中核です。冪等なステップ、制限、ログで構築し、各連携にオーナーと監視を置きます。注意:多くのシステムに触れるワークフローは、誤りを広く広げえます。レート制限と停止スイッチを加えてください。トピック 6.1 — 自動化戦略を参照してください。
アナリティクス
ワークフローのデータを、ステップごとの時間、承認待ち、失敗率、例外、種類ごとの量に使います。注意:タイミングのデータはステップの定義の仕方を反映し、タスクの分割や再分類で操作されえます。サンプルのケースで確認してください。トピック 7.6 — プロセスとバリューストリームの分析と『サービスマネジメント指標』を参照してください。
よくある失敗パターン
- 悪いプロセスの自動化。 無駄が保存されます。まず単純にして、フローに合意しましょう。
- 失敗の設計がない。 ステップが失敗してインスタンスが止まります。再試行、補償、キューを定義しましょう。
- 冪等でない再試行。 重複が作られます。ステップを繰り返しても安全にするか、先に確認しましょう。
- 止まる承認。 不在の人を仕事が待ちます。リマインダー、代理、タイムアウトを加えましょう。
- 無言の連携の失敗。 コネクターが壊れても誰も知りません。監視してアラートを出しましょう。
- オーナーのいないローコードのフロー。 誰も理解していません。登録し、文書化し、レビューしましょう。
- 定義を不注意に変える。 動いているインスタンスが壊れます。変更をバージョン管理し、テストしましょう。
成熟度モデル
| 観点 | 開始 | 発展 | 標準化 | 管理 | オーケストレーション |
|---|---|---|---|---|---|
| 設計 | メールによる引き継ぎ | 少数の単純なワークフロー | オーナーのいる、マッピングされ単純化された旅路 | ワークフローがデータから改善される | 旅路がシステムとパートナーをまたいでオーケストレーションされる |
| 信頼性 | 気づかれずに壊れる | 基本的なアラート | 定義された再試行、失敗のキュー、冪等なステップ | 失敗が測定され、減らされる | 人へのエスカレーションを伴う自己確認型のフロー |
| 人のタスク | 場当たり的 | メールによる承認 | リマインダーと代理を伴う定義されたタスク | タスクの遅延が測定される | 人のタスクがリスクに応じて均衡し、自動化される |
| 統制 | 記録なし | 一部にログがある | バージョン管理、監査証跡、登録簿がある | 変更がレビューされ、監査される | ガバナンスがプラットフォームに統合される |
チェックリスト
- 自動化する前に、各プロセスをマッピングして単純にした。
- ワークフローが小さく、平易な言葉で名付けられ、オーナーがいる。
- ステップが冪等であるか、重複から保護されている。
- 失敗の経路とキューが定義され、アラートがある。
- 人のタスクに、リマインダー、代理、タイムアウトがある。
- あらゆるインスタンスが記録され、追跡可能である。
- 定義がバージョン管理にあり、変更がテストされる。
- 連携にオーナーと監視がある。
AIプロンプト
手順をワークフローの概要に変える。
Here is a description of how we handle [type of request] today: [paste steps and who does each].
Draft a workflow outline with: trigger, steps (marking each as automated, human, or approval), data passed between steps, and for each step what should happen on failure or no response. Mark every assumption. Do not invent systems or rules.
List what you are unsure of.
フローの失敗点を見つける。
Here is our workflow definition in plain text: [paste].
List each step that calls another system, what could go wrong, whether it appears to be safe to retry, and what information a support person would need to fix it. Do not rewrite the workflow.
List what you are unsure of.
ワークフローのデータから遅延を分析する。
Here is an export of workflow instances with step names, start and end times, and outcome, with identifiers removed: [paste].
Compute median and 90th percentile time for each step, list the three longest waits, count failures by step, and list questions to investigate. Do not infer causes.
List what you are unsure of.
AIスキル
- workflow-analysis: ステップ、待ち、引き継ぎを分析するときに使います。
- value-stream-map: チームをまたぐ旅路全体を見るときに使います。
- mermaid-diagram: レビューのために、ワークフローをテキストで描くときに使います。
- raci-matrix: 各ステップを誰が行い、誰が承認するかを割り当てるときに使います。
- change-request: ワークフローの定義への変更を記述するときに使います。
主要な情報源
- OMG, Business Process Model and Notation (BPMN) specification: プロセス図の標準的な表記。
- Gregor Hohpe and Bobby Woolf, Enterprise Integration Patterns (2003): システムを接続するためのパターンのカタログ。
- Wikipedia, "Workflow" and "Orchestration (computing)": 考え方の概観。
- Wikipedia, "Idempotence": 再試行を安全にする性質。
参考文献
- Workflow — Wikipedia — https://en.wikipedia.org/wiki/Workflow
- Workflow engine — Wikipedia — https://en.wikipedia.org/wiki/Workflow_engine
- Workflow management system — Wikipedia — https://en.wikipedia.org/wiki/Workflow_management_system
- Orchestration (computing) — Wikipedia — https://en.wikipedia.org/wiki/Orchestration_(computing)
- Business Process Model and Notation — Wikipedia — https://en.wikipedia.org/wiki/Business_Process_Model_and_Notation
- Finite-state machine — Wikipedia — https://en.wikipedia.org/wiki/Finite-state_machine
- Event-driven architecture — Wikipedia — https://en.wikipedia.org/wiki/Event-driven_architecture
- Idempotence — Wikipedia — https://en.wikipedia.org/wiki/Idempotence
- Exponential backoff — Wikipedia — https://en.wikipedia.org/wiki/Exponential_backoff
- Dead letter queue — Wikipedia — https://en.wikipedia.org/wiki/Dead_letter_queue
- Human-in-the-loop — Wikipedia — https://en.wikipedia.org/wiki/Human-in-the-loop
- Audit trail — Wikipedia — https://en.wikipedia.org/wiki/Audit_trail