प्रोडक्ट और ऑपरेशंस डैशबोर्ड: फ़ीचर अपनाना और सिस्टम की सेहत

प्रोडक्ट मैनेजर एक फ़ीचर लॉन्च करता है। फ़ीचर से ग्राहक की समस्या सुलझनी चाहिए और रिटेंशन बढ़ना चाहिए।

लॉन्च के दो हफ़्ते बाद: क्या फ़ीचर चर्न घटाता है। क्या ज़्यादा ग्राहक फ़ीचर इस्तेमाल करते हैं। क्या ग्राहक फ़ीचर में ज़्यादा समय बिता रहे हैं।

प्रोडक्ट डैशबोर्ड के बिना, प्रोडक्ट मैनेजर फ़ीचर का असर देखने के लिए छह हफ़्ते मासिक रिपोर्ट का इंतज़ार करता है। तब तक ग्राहकों का फ़ीडबैक ठंडा पड़ चुका होता है। सुधार नहीं हो पाता।

प्रोडक्ट डैशबोर्ड के साथ, प्रोडक्ट मैनेजर दो हफ़्ते बाद देखता है: फ़ीचर अपनाने की दर 5% है (दूसरे हफ़्ते तक लक्ष्य 20% था)। समस्या तुरंत दिख जाती है। प्रोडक्ट मैनेजर जाँच करता है। पता चलता है कि फ़ीचर ढूँढना मुश्किल है। वह ऑनबोर्डिंग मैसेज जोड़ता है। चौथे हफ़्ते तक अपनाने की दर 15% हो जाती है।

प्रोडक्ट डैशबोर्ड: फ़ीचर अपनाना और एंगेजमेंट

फ़ीचर अपनाने की दर

फ़ीचर दो हफ़्ते पहले लॉन्च हुआ। पात्र यूज़र: 10,000। फ़ीचर इस्तेमाल करने वाले यूज़र: 500। अपनाने की दर: 5%। लक्ष्य चौथे हफ़्ते तक 20% था। अभी पीछे। जाँच चाहिए।

फ़ीचर एंगेजमेंट

फ़ीचर आज़माने वाले 500 यूज़र में से कितने इसे रोज़ इस्तेमाल करते हैं। 200। कितने हर हफ़्ते करते हैं। 300। कितनों ने फ़ीचर छोड़ दिया। 200। एंगेजमेंट रेट: 40% रोज़, 60% हर हफ़्ते, 40% छोड़ चुके। छोड़ना बहुत ज़्यादा है। फ़ीचर लोगों को बाँध नहीं रहा।

फ़ीचर में बिताया समय

फ़ीचर में औसत सेशन दो मिनट का है। फ़ीचर से पहले साइट पर औसत सेशन समय दस मिनट था। फ़ीचर यूज़र को दूसरे फ़ीचर से दूर खींच रहा है। क्या यह जानबूझकर है। क्या फ़ीचर ने किसी पुराने फ़ीचर की जगह ली या वह उसके ऊपर जुड़ा है।

रिटेंशन पर असर

जिन ग्राहकों ने फ़ीचर अपनाया: 8% मासिक चर्न। जिन ग्राहकों ने फ़ीचर नहीं अपनाया: 12% मासिक चर्न। फ़ीचर काम कर रहा है। चर्न में चार प्रतिशत अंक का सुधार। हज़ार ग्राहकों के आधार पर, यह हर महीने चालीस कम ग्राहक हैं। चालीस गुणा पचास (औसत ग्राहक मूल्य) यानी हर महीने 2,000 की कमाई बची।

ऑपरेशंस डैशबोर्ड: सिस्टम की सेहत और प्रदर्शन

सिस्टम अपटाइम

पिछले हफ़्ते वेबसाइट 99.95% समय चालू रही। लक्ष्य 99.99% है। हम लक्ष्य से नीचे हैं। दो आउटेज: एक दस मिनट का, एक पंद्रह मिनट का। कुल मिलाकर पच्चीस मिनट का डाउनटाइम। आउटेज की वजह क्या थी। क्या उन्हें रोका जा सकता है।

रिस्पॉन्स टाइम

औसत API रिस्पॉन्स टाइम दो सौ मिलीसेकंड है। P95 रिस्पॉन्स टाइम पाँच सौ मिलीसेकंड है (95% रिक्वेस्ट इससे तेज़ हैं, 5% धीमी हैं)। P99 एक सेकंड है। धीमे रिस्पॉन्स टाइम कभी-कभी होते हैं। क्या वे स्वीकार्य हैं।

एरर रेट

1% API रिक्वेस्ट ने एरर दिया। पिछले हफ़्ते 0.5% था। एरर रेट दोगुना हो गया। क्या बदला। डेटाबेस क्वेरी धीमी है। रिस्पॉन्स टाइम बढ़ा। ग्राहक टाइमआउट हो रहे हैं और दोबारा कोशिश कर रहे हैं। जाँच चाहिए।

डेटाबेस कनेक्शन पूल

पूल में सौ कनेक्शन हैं। अभी सौ खुले हैं (पूरे इस्तेमाल में)। और कनेक्शन उपलब्ध नहीं। अगर एक और रिक्वेस्ट आए, तो वह कतार में लगती है। यूज़र को इंतज़ार करना पड़ता है। पूल अपनी सीमा पर है। पूल बढ़ाना होगा या इस्तेमाल घटाना होगा।

कैश हिट रेट

कैश 50% समय हिट होता है। 50% ट्रैफ़िक को डेटाबेस क्वेरी की ज़रूरत नहीं पड़ती। 50% कैश मिस रेट ज़्यादातर साइट के लिए स्वीकार्य है। 40% से नीचे जाने पर डेटाबेस पर बोझ बढ़ जाता है। 70% से ऊपर जाने पर आप ज़रूरत से ज़्यादा कैश कर रहे हैं।

असली उदाहरण: SaaS प्रोडक्ट और ऑपरेशंस डैशबोर्ड

प्रोडक्ट मेट्रिक

नया डैशबोर्ड फ़ीचर: पहले महीने लॉन्च हुआ। पात्र यूज़र: 5,000 (दस से ज़्यादा डेटा पॉइंट वाले ग्राहक)। डैशबोर्ड बनाने वाले यूज़र: 1,000। अपनाने की दर: 20%। लक्ष्य पर।

डैशबोर्ड बनाने वाले 1,000 में से: रोज़ सक्रिय: छह सौ। अच्छा एंगेजमेंट। हर हफ़्ते सक्रिय: नौ सौ। ज़्यादातर कम से कम हर हफ़्ते इस्तेमाल करते हैं। छोड़ गए: सौ। दस प्रतिशत चर्न।

रिटेंशन पर असर: जिन ग्राहकों के डैशबोर्ड सक्रिय हैं उनका मासिक चर्न 2% है। जिनके डैशबोर्ड नहीं हैं उनका मासिक चर्न 4% है। डैशबोर्ड चर्न को दो अंक घटाता है। हज़ार ग्राहकों के आधार पर, यह बीस ग्राहक हैं। हर ग्राहक के 100 डॉलर मासिक मूल्य पर, यह हर महीने 2,000 की कमाई बचाता है। साल में 24,000।

ऑपरेशंस मेट्रिक

पिछले महीने का अपटाइम: 99.92%। लक्ष्य: 99.95%। हम लक्ष्य चूक गए।

आउटेज: एक घटना: दस मिनट, पेमेंट प्रोसेसिंग बंद। वजह: डेटाबेस फ़ेलओवर में बहुत समय लगा। एक घटना: पंद्रह मिनट, API टाइमआउट में उछाल। वजह: ट्रैफ़िक का उछाल और धीमी डेटाबेस क्वेरी।

रिस्पॉन्स टाइम: औसत: एक सौ पचास मिलीसेकंड। अच्छा। P95: तीन सौ मिलीसेकंड। स्वीकार्य। P99: एक सेकंड। यह बहुत ज़्यादा है। 1% ग्राहकों को एक सेकंड इंतज़ार करना पड़ता है। ऑप्टिमाइज़ेशन चाहिए।

एरर रेट: 0.8%। दो हफ़्ते पहले 0.4% था। जाँच से पता चलता है: पेमेंट प्रोसेसिंग एरर बढ़े क्योंकि पेमेंट प्रोवाइडर में पिछले हफ़्ते आउटेज था (हमारी गलती नहीं), API एरर बढ़े क्योंकि हमने कोड बदलाव डाला जिसने एक एंडपॉइंट तोड़ दिया (हमारी गलती)।

डेटाबेस: क्वेरी का औसत समय: तीस मिलीसेकंड। कनेक्शन पूल का इस्तेमाल: अस्सी प्रतिशत। स्वस्थ। धीमी क्वेरी की दर: 0.2%। स्वीकार्य।

कैश हिट रेट: पैंसठ प्रतिशत। स्वस्थ।

प्रोडक्ट और ऑपरेशनल डैशबोर्ड को जोड़ना

फ़ीचर अपनाना सिस्टम के प्रदर्शन पर निर्भर करता है। अगर सिस्टम धीमा है, तो फ़ीचर अपनाना कम हो जाता है। नए डैशबोर्ड फ़ीचर को कम अपनाया गया है। ऑपरेशंस डैशबोर्ड देखें। रिस्पॉन्स टाइम P99 एक सेकंड है। डैशबोर्ड खोलते समय यूज़र को सुस्ती महसूस होती है। जाँच में जोड़ें: क्या सुस्त प्रदर्शन की वजह से कम अपनाया जा रहा है। अगर हाँ, तो पहले सिस्टम का प्रदर्शन सुधारें। फिर अपनाने की दर दोबारा नापें।

सिस्टम का प्रदर्शन अपटाइम के लिए नापा जाता है, फ़ीचर के असर के लिए नहीं। लेकिन फ़ीचर का असर अपटाइम पर निर्भर करता है। दोनों डैशबोर्ड को जोड़ें। जब ऑपरेशंस मेट्रिक बिगड़ते हैं, तो प्रोडक्ट मेट्रिक भी बिगड़ते हैं।

अक्सर पूछे जाने वाले सवाल