لماذا يهم هذا

رأى كل من في إدارة الخدمات تقريرًا دقيقًا وعديم الفائدة. صفحات من الأرقام، وملخص بإشارات المرور، وملاحظة بأن كل الأهداف تحققت. ثم شكوى عميل عن أسبوع من الخدمة السيئة، ومدير يسأل كيف أمكن ذلك. قاس التقرير ما يسهل عدّه، وصار الهدف يقوم مقام النتيجة.

والإخفاق المعاكس حقيقي بالقدر نفسه. فريق يشك في الأرقام لأنها استُخدمت للحكم على الناس بغير إنصاف، فيرفض القياس أصلًا. فيعتمد التحسين على الرأي، ويقرر أعلى الأصوات.

والمخرج أن يُعامَل القياس حرفةً بغاية: أن نتعلم هل تسلّم الخدمات نتائج وأين نحسّن. تُختار المقاييس من الأهداف، وتُعرَّف بحيث يحسبها شخصان بالطريقة نفسها، وتُقرأ توزيعات واتجاهات، وتُفحص مقابل الطرق التي قد تضلل بها. يصف هذا الموضوع تلك الحرفة بعبارات عامة. وهو لا يعرّف مقاييس منفردة: فالكتاب المرافق Service Management Metrics يعطي لكل منها تعريفًا ومسلك تلاعب وضابطًا، وهو المكان الذي تذهب إليه للأرقام نفسها. ويتصل هذا الموضوع بالتحليلات (الموضوع 7.1 — التحليلات لإدارة الخدمات) وأسس البيانات (الموضوع 7.2 — أسس البيانات وحوكمتها) ومستويات الخدمة (الموضوع 3.7 — إدارة مستوى الخدمة) والتحسين المستمر (الموضوع 3.15 — التحسين المستمر).

المفاهيم الأساسية

القياس والمقياس والمؤشر. القياس كمية تستطيع ملاحظتها، مثل عدد الحوادث. والمقياس (metric) قياس معرَّف لغرض، بحساب ومصدر وفترة. والمؤشر يشير إلى حالة شيء يصعب ملاحظته مباشرة. وتصف ويكيبيديا مؤشرات الأداء عمومًا، وكثيرًا ما تُختصر KPI لمؤشرات الأداء الرئيسة. وتُستخدم المصطلحات بتساهل؛ فعرّف ما تعنيه.

الأهداف أولًا. لا يفيد المقياس إلا بالنسبة إلى هدف. اكتب الهدف بكلمات بسيطة («يستطيع العملاء الحصول على مساعدة سريعة حين ينكسر شيء»)، ثم اسأل أي دليل سيُظهر هل يتحقق. وتصف ويكيبيديا مقاربات مثل بطاقة الأداء المتوازن، التي تربط المقاييس بأهداف من عدة منظورات، والأهداف والنتائج الرئيسة (OKR)، التي تقرن هدفًا بنتائج قابلة للقياس. وأيًّا استخدمت، عاملها أدوات للحوار.

النتائج والمخرجات والنشاط. النتائج تغييرات للعملاء والمؤسسة؛ والمخرجات ما تنتجه الخدمة؛ والنشاط جهد. وقياس النشاط وحده، مثل التذاكر المغلقة، يقول القليل عن هل صار أحد أفضل حالًا. ضمّن مقاييس النتائج والتجربة. انظر الموضوع 1.1 — إدارة الخدمات.

المؤشرات القائدة والتابعة. تبلّغ المؤشرات التابعة عن النتائج بعد الواقعة، مثل رضا العملاء. وتشير المؤشرات القائدة إلى ما يرجح أن يأتي، مثل نمو عمر الرصيد. وتصف ويكيبيديا كليهما تحت المؤشرات الاقتصادية. والمجموعة المتوازنة تشمل الاثنين.

التعريفات الدقيقة. يجب أن يستطيع شخصان حساب المقياس والحصول على الجواب نفسه. عرّف المجتمع وحدثي البدء والانتهاء وما يُستثنى والفترة ومصدر البيانات. و«زمن الحل» يحتاج تعريفًا لمتى تبدأ الساعة وتتوقف وتُوقف مؤقتًا. سجّل تغييرات التعريف بتواريخها. انظر الموضوع 7.2 — أسس البيانات وحوكمتها.

المتوسطات والوسيطات والمئينات. تتشوه المتوسطات بسهولة بقيم متطرفة قليلة. وتُظهر الوسيطات والمئينات، التي تصفها ويكيبيديا، الحالة المعتادة والذيل الذي يختبره المستخدمون سيئو الحظ. ولأزمنة الاستجابة والحل، أبلغ بالمئينات، مثل الوسيط والمئين التسعين.

التوزيعات والاتجاهات. رقم واحد لشهر يخفي التباين. أظهر التوزيع والاتجاه عبر عدة فترات ونطاق التباين العادي. وتصف ويكيبيديا مخططات الضبط والضبط الإحصائي للعمليات، التي تفصل التباين العادي عن إشارات أن شيئًا تغيّر. ولا تتفاعل مع كل ارتعاشة.

الأهداف والعتبات. الهدف مستوى تسعى إليه؛ والعتبة مستوى يطلق إجراءً. ينبغي أن تأتي الأهداف من الحاجة ودليل ما هو قابل للتحقيق. والهدف المضبوط بلا دليل يدعو إلى التلاعب أو اليأس.

قانون غودهارت والتلاعب. حين يصبح المقياس هدفًا، يتوقف عن أن يكون مقياسًا جيدًا. وتصف ويكيبيديا قانون غودهارت، والملاحظة المرتبطة به من عالم الاجتماع دونالد كامبل. يتكيف الناس مع الحافز. تُغلق التذاكر مبكرًا، وتُوقف الساعات، وتُغيَّر الفئات، وتُتجنب الحالات الصعبة. وتعطي مقالة ويكيبيديا عن الحوافز الضارة أمثلة على آثار غير مقصودة، تسمى أحيانًا أثر الكوبرا. ولكل مقياس مسلك تلاعب، ويسميه كتاب Service Management Metrics مع ضابط.

الضوابط. مقياس ثانٍ أو فحص يحرس من التلاعب بالأول. فمثلًا اقرن السرعة بالجودة (زمن الحل مع معدل إعادة الفتح)، والحجم بالنتيجة (التذاكر المغلقة مع رضا المستخدمين)، والمقاييس الآلية بمراجعة بعينات من حالات حقيقية. وبدون ضوابط، ينجرف المقياس.

قياس الناس. مقاييس الأداء الفردي، مثل التذاكر لكل موظف، عرضة خاصة للتلاعب وعدم الإنصاف، لأن العمل يختلف بين الناس والنظام يشكل ما يستطيع أي شخص تحقيقه. يوصي هذا الدليل والكتاب المرافق بعدم ترتيب الأفراد. استخدم مقاييس مستوى الفريق لفهم النظام.

المقارنة المرجعية. المقارنة بالآخرين، كما تصف ويكيبيديا، قد تساعد في ضبط التوقعات. والمقارنات صالحة فقط حيث تتطابق التعريفات ومزيج العمل والسياق. كن متشككًا في المقارنات التي تتجاهل الفروق.

التقارير. توجد التقارير لإعلام القرارات. اعرف الجمهور والقرار. التقارير الجيدة تذكر الهدف والمقاييس والاتجاه والتفسير والإجراء. واستخدم تصميمًا بصريًا يوضح الرسالة. وتصف ويكيبيديا تصوير البيانات والمعلومات واللوحات. وخير من الكثير نظرات قليلة أوضح.

مقاييس التسليم. تستخدم برامج بحثية عن تسليم البرمجيات، مثل برنامج DORA، أربعة مقاييس تسمى غالبًا المقاييس الرئيسة الأربعة: تكرار النشر، وزمن إنجاز التغيير، ومعدل فشل التغيير، وزمن استعادة الخدمة. وهي أسئلة مفيدة عن نظام تسليم. وليست درجات لترتيب الفرق. انظر الموضوع 2.2 — التسليم المستمر.

مقاييس التجربة. الاستبيانات ودرجات الرضا ومؤشر صافي المروّج، التي تصفها ويكيبيديا، تسأل المستخدمين عن رأيهم. ولها حدودها، مثل من يجيب وكيف تُصاغ الأسئلة. انظر الموضوع 7.7 — تحليلات التجربة والمشاعر.

الشفافية والثقة. يثق الناس بالمقاييس التي يفهمونها ويساعدون في تعريفها ويرونها تُستخدم بإنصاف. شارك التعريفات والبيانات وكيف تُستخدم النتائج. وقل بوضوح إن المقاييس للتعلم.

كيف تتلاءم العدسات. القياس حيث تلتقي التحليلات بالحوكمة والتحسين. وتستخدم الممارسة الرشيقة بضعة مقاييس لفحص هل أفاد تغيير. ويستطيع الذكاء الاصطناعي المساعدة في الحساب والصياغة، تحت المراجعة، وهو نفسه يحتاج مقاييس للجودة. وتنتج الأتمتة القياسات من الأدوات.

أفضل الممارسات

  1. ابدأ من الأهداف. اكتب لماذا الخدمة وكيف يبدو النجاح، ثم اختر مقاييس تُظهر هل تصل. وأسقط المقاييس التي لا تخدم هدفًا.
  2. أبقِ المجموعة صغيرة. اختر حفنة مقاييس لكل خدمة، تغطي النتائج والتدفق والجودة والتجربة. وراجع المجموعة سنويًا على الأقل.
  3. عرّف كل مقياس بدقة. اكتب التعريف والمصدر والحساب والفترة والاستثناءات والمالك والحدود المعروفة. واستخدم تعريفات كتاب Service Management Metrics نقطة انطلاق.
  4. سمِّ مسلك التلاعب وأضف ضابطًا. لكل مقياس، اسأل كيف يمكن تحسينه دون تحسين الخدمة، واقرنه بفحص. وخذ عينات من حالات حقيقية بانتظام.
  5. أظهر التوزيعات والاتجاهات. أبلغ بالوسيطات والمئينات ونطاق التباين العادي وعدة فترات. وفسّر التغييرات، وميّز الإشارة من الضجيج.
  6. ضع الأهداف من الأدلة. ابنها على التاريخ والحاجة والسعة، واتفق عليها مع من يجب أن يحققوها. وراجعها حين تتغير الظروف.
  7. قِس الأنظمة لا الأفراد. استخدم مقاييس مستوى الفريق والخدمة لفهم النظام. ولا ترتب الناس بها.
  8. بلّغ لتقرر. لكل تقرير، سمِّ الجمهور والقرار. اذكر النتيجة والثقة والإجراء المقترح. وأحِل إلى التقاعد التقارير التي لا يستخدمها أحد.
  9. كن منفتحًا. انشر التعريفات والنتائج لمن يُقاسون، وادعُ إلى الطعن. وأخبر الناس كيف ستُستخدم البيانات وكيف لن تُستخدم.
  10. راجع وأحِل إلى التقاعد. افحص هل غيّر كل مقياس قرارًا. وأزل ما لم يفعل، وأصلح ما تُلاعب به.

أسئلة للنقاش مع فريقك

أي مقاييسنا يمكن تحقيقها دون أن يصبح أي عميل أفضل حالًا؟ يجد هذا مسالك التلاعب. توقّع بضعة أمثلة سهلة. وتابع باختيار واحد والاتفاق على ضابط.

أي هدف يخدمه كل من مقاييسنا المنتظمة، ومن يقرر شيئًا بسببه؟ مرّ على التقرير. توقّع عدة مقاييس بلا هدف ولا قرار. وتابع بإسقاط واحد.

كيف نعرّف «محلول» و«زمن الاستجابة»، وهل غيّر أحد التعريف؟ اطلب التعريفات المكتوبة. توقّع خلافًا. وتابع بكتابة تعريف واحد وتسجيل تاريخه.

ماذا تقول مئيناتنا مما تخفيه متوسطاتنا؟ احسب الاثنين لمقياس واحد. توقّع ذيلًا طويلًا. وتابع بالاتفاق على الإبلاغ بالمئينات له.

كيف تُستخدم المقاييس للحكم على الأفراد أو الفرق هنا، وماذا يفعل ذلك بالسلوك؟ ناقش علنًا. توقّع قصص تلاعب وخوف. وتابع بالاتفاق على أن مقياسًا معينًا سيُستخدم للتعلم، وقول ذلك كتابة.

كيف يستطيع الذكاء الاصطناعي مساعدتنا في حساب المقاييس أو شرحها، وكيف سنفحصه؟ يستطيع الذكاء الاصطناعي الحساب وصياغة التعليق. وقد يفسر أيضًا اتجاهًا بسبب مختلق. اسأل من يفحص. وتابع بتكرار حساب يدويًا والمقارنة.

في الممارسة: مثال على إدارة الخدمات

ترفع إدارة تقنية المعلومات في خدمة إسعاف إقليمية تقريرًا شهريًا إلى مجلس إدارتها عن 24 مقياسًا. يسأل المجلس لماذا التقرير أخضر بينما يشتكي المرسلون من أن نظام الإرسال بمساعدة الحاسوب بطيء عند بدء النوبة. ويقرر رئيس تقنية المعلومات إعادة بناء مجموعة القياس مع من يستخدمونها.

تبدأ بالأهداف، المتفق عليها مع قادة الإرسال: يستطيع المرسلون فتح مكالمة وتحديثها دون تأخير؛ وتُصلح الأعطال سريعًا؛ ولا تعطّل التغييرات العمليات. وتختار ثمانية مقاييس، كل منها معرَّف في مدخل من صفحة مبني على الكتاب المرافق Service Management Metrics. وفي «زمن معاملة المرسل»، يبيّن التعريف ما الذي يُوقَّت، ومن أين، وأن المئين الخامس والتسعين يُبلَّغ عنه بحسب ساعة اليوم. ويُحتفظ بمقياس التوافر القديم، المقاس بنبضة من مركز البيانات على فواصل خمس دقائق، لكنه لا يُعرض على المجلس وحده.

ولكل مقياس يكتب الفريق مسلك التلاعب وضابطًا. «الحوادث المحلولة ضمن الهدف» مقرونة بمعدل إعادة الفتح وعينة شهرية من 30 حادثًا يقرؤها محلل كبير؛ ويدرك الفريق أن إغلاق الحوادث سريعًا وإعادة فتحها لاحقًا سيجمّل المقياس الأول. ويُظهر تقرير المجلس الوسيطات والمئين الخامس والتسعين على 12 شهرًا مع نطاق التباين العادي، وملاحظة قصيرة عما تغيّر وما سيفعله الفريق.

يُظهر التقرير الأول أن المئين الخامس والتسعين لزمن المعاملة يتضاعف بين 06:30 و07:30، ويموّل المجلس دراسة سعة. ويضيف سؤال رضا، يُطرح شهريًا على 40 مرسلًا، نظرة على التجربة. ويصرّح رئيس تقنية المعلومات كتابة بأن لا مقياس سيُستخدم لترتيب المحللين الأفراد.

ما الذي يتغير: يناقش المجلس مشكلة حقيقية، ويتوقف الفريق عن الجدال حول التعريفات. وما يظل صعبًا: يعتمد مقياس المعاملة الجديد على حقل سجل يسجله موردان بصورة مختلفة، فالبيانات تقريبية؛ ومعدل الاستجابة للاستبيان منخفض في النوبات الليلية؛ ولا يزال مدير كبير يريد درجة واحدة للمجلس. ويبقي رئيس تقنية المعلومات المقاييس الثمانية ويريه كيف ستخفي درجة واحدة مشكلة الصباح.

أربع زوايا نظر

فرق المنتج والتسليم

ابنوا القياس في المنتج: أحداث وتوقيتات ومؤشرات يراها المستخدم. استخدموا مقاييس التسليم لإيجاد القيود لا لمقارنة الفرق. وشاركوا التعريفات مع العمليات.

فرق الخدمة والعمليات

اعرفوا ما يُقاس وكيف، وافحصوه مقابل إحساسكم بالخدمة. أبلغوا عن التلاعب والتعريفات السيئة بصدق. واستخدموا المقاييس لترَوا أين تحسّنون.

القيادة والحوكمة

اطلبوا الأهداف والتعريفات والتوزيعات والضوابط، لا ملخصًا أخضر. ولا تستخدموا المقاييس لترتيب الناس. وموّلوا عمل البيانات وكونوا مستعدين لسماع الأخبار السيئة.

العملاء والمستخدمون

ينبغي أن تُسألوا عما يهم، وترَوا مقاييس تعكس تجربتكم، وتسمعوا ما يتغير بسببها. أخبروا المزود حين لا تطابق الأرقام ما ترونه.

الرشاقة والذكاء الاصطناعي والأتمتة والتحليلات

الرشاقة

استخدم بضعة مقاييس لفحص كل تغيير، بتوقع وموعد، وراجع مع أصحاب المصلحة. وأحِل المقاييس التي لم تعد تُعلِم إلى التقاعد. تنبيه: لا تدع المقاييس تصبح مستهدفات للفرق؛ فستحسّن الرقم.

الذكاء الاصطناعي

يستطيع الذكاء الاصطناعي المساعدة في الحساب والرسم وصياغة التعليق، وأنظمة الذكاء الاصطناعي نفسها تحتاج مقاييس للدقة والأخطاء والكلفة. تنبيه: قد يكون تفسير الذكاء الاصطناعي لسبب تغير رقم مختلقًا؛ فاشترط عليه الإشارة إلى البيانات وافحص. انظر الموضوع 5.1 — الذكاء الاصطناعي في إدارة الخدمات.

الأتمتة

أتمت الجمع والحساب، بتعريفات موثقة وسجل تغييرات. تنبيه: قد يعمل تقرير آلي سنوات بعد أن انكسر تعريفه بصمت؛ فتحقق مقابل البيانات الخام بانتظام. انظر الموضوع 6.1 — استراتيجية الأتمتة.

التحليلات

استخدم التوزيعات وأساليب الاتجاه والتباين وأخذ عينات من حالات حقيقية لفحص المقاييس. تنبيه: يمكن التلاعب بأي مقياس حين يهم؛ فاقرن المقاييس وواصل قراءة الحالات. انظر كتاب Service Management Metrics والموضوع 7.1 — التحليلات لإدارة الخدمات.

أنماط الإخفاق الشائعة

  • تقارير خضراء وعملاء غير راضين. تفوّت المقاييس النتائج. أضف مقاييس النتائج والتجربة والعينات.
  • مقاييس كثيرة جدًا. لا يستطيع أحد استخدامها. أبقِ قليلًا مرتبطًا بالأهداف.
  • تعريفات مبهمة. لا يمكن مقارنة الأرقام. عرّف بدقة وسجّل التغييرات.
  • المتوسطات. يُخفى الذيل. أبلغ بالمئينات والتوزيعات.
  • أهداف بلا دليل. يتبعها تلاعب أو يأس. ابنِ الأهداف على البيانات واتفق عليها.
  • ترتيب الأفراد. تنهار الثقة وتُتلاعب الأرقام. قِس الأنظمة والفرق.
  • لا ضوابط. تنجرف المقاييس. اقرن كلًّا بفحص وخذ عينات من الحالات.

نموذج النضج

البُعد البدء التطوير التوحيد الإدارة التنسيق
الأهداف والاختيار ما يسهل عدّه بعض مقاييس مرتبطة بالأهداف مجموعة صغيرة مرتبطة بالأهداف لكل خدمة تُراجع المجموعة مقابل القرارات مقاييس متواءمة عبر الخدمات والشركاء
التعريف والجودة غير رسمي بعض التعريفات تعريفات دقيقة بمالكين وتاريخ تغيير تُتحقق التعريفات مقابل البيانات الخام تعريفات مشتركة ومؤتمتة عبر الفرق
دفاعات التلاعب لا شيء وعي مسلك تلاعب وضابط لكل مقياس تُراجع عينات من حالات حقيقية دفاعات مبنية في التقارير والثقافة
التقارير والاستخدام تقارير ثابتة لوحات تقارير لقرارات مسماة باتجاهات وتوزيعات يُتتبَّع الاستخدام والأثر تقارير مدمجة مع التخطيط والتحسين

قائمة التحقق

  • كل مقياس يخدم هدفًا مكتوبًا.
  • لكل مقياس تعريف دقيق ومالك ومصدر وتاريخ تغيير.
  • نبلّغ بالوسيطات والمئينات مع الاتجاهات.
  • لكل مقياس مسلك تلاعب مسمّى وضابط.
  • نضمّن مقاييس النتائج والتجربة.
  • لا نرتب الأفراد بالمقاييس.
  • يذكر كل تقرير جمهوره والقرار الذي يدعمه.
  • نراجع ونحيل إلى التقاعد المقاييس التي لم تعد تغيّر القرارات.

موجّهات الذكاء الاصطناعي

اكتب تعريف مقياس للمراجعة.

Metric name: [name]. What we want to know: [goal in plain words]. Data we have: [fields and source].
Draft a definition with: purpose, population, start and end events, exclusions, calculation, period, source, owner (leave blank), and known limits. Then list two ways the metric could be gamed and one guardrail for each. Mark any assumption.
List what you are unsure of.

افحص تقريرًا بحثًا عن المشكلات الشائعة.

Here is a monthly report with its measures and a short commentary: [paste].
List measures without a stated goal, uses of averages where percentiles would help, claims of cause not supported by the data, comparisons that may not be like for like, and anything that could be gamed. Quote the text for each. Do not rewrite the report.
List what you are unsure of.

فسّر تغيّرًا في مقياس.

The measure [name] changed from [value] to [value]. Here are other facts from the same period: [paste, such as changes in tools, staffing, volumes, definitions].
List possible explanations as hypotheses, what data would test each, and which are not supported by the facts given. Do not state a cause as fact.
List what you are unsure of.

مهارات الذكاء الاصطناعي

المصادر الرئيسة

  • The companion Service Management Metrics book: تعريفات المقاييس ومسالك التلاعب والضوابط، التي يشير إليها هذا الموضوع طوال الوقت.
  • Nicole Forsgren, Jez Humble, and Gene Kim, Accelerate (2018), and DORA (dora.dev): بحوث عن مقاييس التسليم.
  • Donald J. Wheeler, Understanding Variation (1993): عرض واضح للإشارة والضجيج في المقاييس.
  • Wikipedia, "Goodhart's law" and "Performance indicator": نظرات عامة على الأفكار الرئيسة.

المراجع

  1. Performance indicator — Wikipedia — https://en.wikipedia.org/wiki/Performance_indicator
  2. Balanced scorecard — Wikipedia — https://en.wikipedia.org/wiki/Balanced_scorecard
  3. Objectives and key results — Wikipedia — https://en.wikipedia.org/wiki/Objectives_and_key_results
  4. Goodhart's law — Wikipedia — https://en.wikipedia.org/wiki/Goodhart%27s_law
  5. Campbell's law — Wikipedia — https://en.wikipedia.org/wiki/Campbell%27s_law
  6. Perverse incentive — Wikipedia — https://en.wikipedia.org/wiki/Perverse_incentive
  7. Economic indicator — Wikipedia — https://en.wikipedia.org/wiki/Economic_indicator
  8. Control chart — Wikipedia — https://en.wikipedia.org/wiki/Control_chart
  9. Percentile — Wikipedia — https://en.wikipedia.org/wiki/Percentile
  10. Benchmarking — Wikipedia — https://en.wikipedia.org/wiki/Benchmarking
  11. Data and information visualization — Wikipedia — https://en.wikipedia.org/wiki/Data_and_information_visualization
  12. Net promoter score — Wikipedia — https://en.wikipedia.org/wiki/Net_promoter_score