डुओलिंगो इंजीनियरिंग के निदेशक करिन त्साई ने विकास पर बातचीत की – News Reort

Posted on

करिन त्साई 2012 में डुओलिंगो में शामिल हुए और अब इंजीनियरिंग के निदेशक हैं। कल, News Reort्स सिटी स्पॉटलाइट: पिट्सबर्ग में, उन्होंने कंपनी की व्यापक विकास प्रक्रिया और अनूठी संस्कृति पर बात की।

यह साक्षात्कार पूर्व-रिकॉर्ड किया गया था और कंपनी द्वारा अपनी प्रारंभिक सार्वजनिक पेशकश से पहले एसईसी फॉर्म एस-1 दाखिल करने के एक दिन बाद प्रसारित किया गया था। एसईसी नियमों के अनुसार, कंपनी अब एक शांत अवधि में है और यह कहना उचित होगा कि त्साई ने कंपनी का अंतिम साक्षात्कार काफी समय के लिए दिया था।

पिट्सबर्ग के डुओलिंगो में News Reort के गहरे गोता में यह साक्षात्कार नवीनतम है। पिछले महीने, हमने कंपनी पर चार-भाग श्रृंखला प्रकाशित की जिसमें डुओलिंगो की मूल कहानी, यह उत्पाद-आधारित विकास रणनीति, मुद्रीकरण योजना, और नई पहलों और विशेषताओं को कैसे विकसित और कार्यान्वित करता है।

और यह सब एक ए/बी परीक्षण के साथ शुरू होता है

त्साई डुओलिंगो में लगभग 170 इंजीनियरों के साथ काम करता है, जो कंपनी का विशाल बहुमत बनाते हैं। उस रचना ने ए/बी परीक्षण को डुओलिंगो की रणनीति के एक महत्वपूर्ण हिस्से में बदल दिया है, क्योंकि यह एक ऐसा ऐप बनाने के लिए काम करता है जिसमें प्रभावी अभी तक समावेशी गैमिफिकेशन है। किसी भी समय, 100 अलग-अलग A/B परीक्षण चल सकते हैं, जिसके कारण डुओलिंगो की विश्लेषण टीम ने प्रयोगों के प्रभाव को ट्रैक करने के लिए एक डैशबोर्ड भी बनाया। त्साई ने हमें नीचे दिए गए सामान्य परीक्षण के प्रारंभिक अहसास के माध्यम से चलाया:

[A/B testing] एक कंपनी के रूप में हमारी सफलता में इतना महत्वपूर्ण लीवर रहा है। मुझे लगता है कि हमारे लिए महत्वपूर्ण चीजों में से एक यह था कि असफल होने वाले परीक्षणों के लिए खुले दिमाग रखें। इसलिए मुझे लगता है कि हमारे पास एक प्रलोभन यह है कि हम इस पूर्वकल्पित धारणा के साथ आएं कि जब हम परीक्षा में भाग लें तो क्या जीतना चाहिए। अगर यह नहीं जीतता है, तो हम मान लेते हैं [that] कुछ बग या कुछ त्रुटि थी, और वास्तव में सोचने के लिए रुकना नहीं था क्यूं कर क्या वह प्रयोग हार गया। इसलिए, मैं किसी भी स्टार्टअप को अपने निर्णय लेने के ताने-बाने में वास्तव में ए / बी परीक्षण को एकीकृत करने की सलाह दूंगा: इस बारे में खुला दिमाग रखें कि आपके उपयोगकर्ता डेटा के माध्यम से आपको क्या बता रहे हैं। इसके अलावा, जो आप वास्तव में मापते हैं उसे सुधारने के लिए हमेशा खुले रहें। शुरुआत में, हम सिर्फ एक तरह से सपाट रूप से मापा गया लर्नर रिटेंशन [and] हमारे पास कितने दैनिक सक्रिय उपयोगकर्ता थे। लेकिन थोड़ी देर बाद, हमने जो मापा, उसके बारे में थोड़ा और बारीक होने का फैसला किया। इसलिए हम नए उपयोगकर्ता प्रतिधारण बनाम मौजूदा उपयोगकर्ता प्रतिधारण को मापते हैं ताकि यह देखने के लिए कि हमारे नए उपयोगकर्ता डुओलिंगो को कैसे समझ रहे हैं, आदि। और समय के साथ, आप इनमें से अधिक से अधिक मीट्रिक जोड़ते हैं, आप एक पूर्ण तस्वीर प्राप्त कर सकते हैं कि आपका क्या है वास्तव में परिवर्तन कर रहा है। (टाइमस्टैम्प: 2:53)

डुओलिंगो ईसी-1 के दौरान एक विचित्र बात सामने आई यह है कि डुओलिंगो की उत्पाद टीम आमतौर पर अंग्रेजी बोलने वालों के लिए फ्रेंच पाठ्यक्रम में नई सुविधाओं का परीक्षण करती है। यह किसी गुप्त वरीयता के कारण नहीं है, बल्कि इसलिए कि पाठ्यक्रम इतना लोकप्रिय है कि अन्य भाषाओं में इसे शुरू करने से पहले इस पाठ्यक्रम में इसका परीक्षण करने के लिए अधिक सांख्यिकीय समझ में आता है। इसके विपरीत, यदि किसी टीम ने अंग्रेजी बोलने वालों के लिए हिंदी पाठ्यक्रम में एक विशेषता का परीक्षण किया, तो उपयोगी परिणाम प्राप्त करने में अधिक समय लगेगा।

एक ए/बी प्रयोग जो त्साई के दिमाग में सबसे अलग है, उसका सब्सक्रिप्शन पेज से लेना-देना है, और नीचे की रेखा को बढ़ाने के लिए ना कहना है।

हमारे सदस्यता पृष्ठ पर, हम सदस्यता का निःशुल्क परीक्षण प्रदान करते हैं। पहले, बटन कहता था ‘अपना सात दिन का निःशुल्क परीक्षण प्रारंभ करें’। हमने इसे केवल कॉपी के साथ खेलने के लिए ‘एक सप्ताह के लिए डुओलिंगो का मुफ्त में उपयोग करना शुरू करें’ में बदल दिया। और हम वास्तव में उससे बहुत अधिक उम्मीद नहीं करते थे, हम केवल पाठ को छोटा करना चाहते थे।

यह पता चला है कि इससे हमें प्रति दिन बहुत अधिक राजस्व प्राप्त हुआ। हालांकि, शिक्षार्थी प्रतिधारण एक हिट, और विशेष रूप से नए उपयोगकर्ता प्रतिधारण को प्रभावित किया। हमारी परिकल्पना यह थी कि वास्तव में ‘स्टार्ट माई फ्री ट्रायल’ से ‘स्टार्ट माई फ्री वीक’ में बदलने से लोगों को लगा कि डुओलिंगो का उपयोग करने के लिए उन्हें भुगतान करना होगा। इसलिए, बहुत अधिक लोगों ने वास्तव में सदस्यता ली क्योंकि उन्हें लगा कि उन्हें भुगतान करने की आवश्यकता है। लेकिन हमने कुछ शिक्षार्थियों को खो दिया, क्योंकि उन्हें लगा कि यह अनुभव मुफ्त नहीं है। इसलिए हमने वास्तव में उस बदलाव को वापस कर दिया, भले ही इससे हमें कुछ पैसे मिले। हमने इस बारे में बहुत कुछ सीखा कि अर्थ संप्रेषित करने के लिए वास्तव में कितनी सटीक प्रतिलिपि की आवश्यकता होती है। इसलिए, यह जानना वास्तव में एक बहुत अच्छी सीख थी कि वास्तव में आप कैसे मुद्रीकरण के साथ अधिक पारदर्शी हैं, वास्तव में अधिक आधुनिक सफल मुद्रीकरण का कारण बना। (टाइमस्टैम्प: 5:47)

मुद्रीकरण को प्राथमिकता देने पर

डुओलिंगो ने एक साहसिक वादे के साथ कुख्यात रूप से लॉन्च किया: कोई विज्ञापन, सदस्यता या इन-ऐप खरीदारी नहीं – ऐसे दृष्टिकोण जो अब सभी प्लेटफॉर्म पर मौजूद हैं। जबकि कंपनी ऐसा करती दिख रही है अभी आर्थिक रूप से ठीक है, चार्ज करना शुरू करने का विकल्प आसान नहीं था, और मुफ्त शिक्षा प्रदान करने के डुओलिंगो के मिशन के साथ सीधे तौर पर विरोध महसूस किया।

त्साई, जिन्होंने कंपनी को 15 लोगों से 400 से अधिक लोगों तक बढ़ते हुए देखा, ने बताया कि कैसे उन्होंने व्यक्तिगत रूप से महसूस किया कि कंपनी ने उस तनाव को हल किया और अंततः अपने कुछ उपयोगकर्ताओं से लगभग 5%, पैसे वसूलने का कदम उठाया।

मुझे लगता है कि जिस तरह से हम इस तक पहुंचते हैं वह शायद आदर्शवादी है। मैं सिर्फ अपने लिए बोल सकता हूं: कई बार, कंपनियों के लिए यह आकर्षक होता है कि वे या तो बुराई कर लें या ऐसा महसूस करें कि वे मुद्रीकरण शुरू करने के बाद बुराई कर रहे हैं, है ना? लेकिन हकीकत यह है कि होस्टिंग की लागत, वेतन आदि में बहुत पैसा खर्च होता है। यदि आप शीर्ष प्रतिभाओं को काम पर रखना जारी रखना चाहते हैं, तो आपको राजस्व अर्जित करने और उसका समर्थन करने में सक्षम होने की आवश्यकता है। और जिस तरह से हम डुओलिंगो में उससे संपर्क करते हैं, वह यह है कि हम जानते हैं कि हम एक स्थायी कंपनी के बिना भी वास्तव में अपने मिशन को पूरा नहीं कर सकते हैं। अगर डुओलिंगो पूरे समय वीसी फंडिंग पर बना रहा, तो हम लंबी अवधि में टिकाऊ नहीं होंगे। अगर हम इतना अधिक खरीदते हैं, और अपने उत्पादों से इतना प्यार करते हैं कि हम चाहते हैं कि यह सैकड़ों वर्षों तक चले। और ऐसा करने के लिए, हमें यह सुनिश्चित करने की ज़रूरत है कि हम एक स्थायी तरीके से मुद्रीकरण कर रहे हैं। इसलिए मुझे लगता है कि जिस तरह से हम कंपनी में तनाव को दूर करते हैं, वह यह है कि आप जिस भी क्षेत्र में काम कर रहे हैं, उस अंत तक सभी का एक समान उद्देश्य है।

इस संदेह का बहुत लाभ है कि एक मजबूत संस्कृति होने से आपको मुफ्त में मिलता है। (टाइमस्टैम्प: 8:21)

एक स्टार्टअप के भीतर वाद-विवाद सद्भावपूर्वक कैसे जी सकता है

त्साई जिस मजबूत संस्कृति के बारे में बात कर रहे हैं, वह महामारी के दौरान फिर से खोजी गई थी, जब डुओलिंगो ने कई तकनीकी कंपनियों के साथ वितरित कार्य की ओर रुख किया। मुझे आश्चर्य हुआ कि क्या दूरस्थ कार्य बहस और असहमति पैदा कर सकता है, ए/बी परीक्षण जैसी छोटी चीज़ पर या मुद्रीकरण के अवसर जितना बड़ा, उतना ही कठिन। त्साई ने सह-संस्थापक लुइस वॉन आह से एक साप्ताहिक ई-मेल का उल्लेख किया, जिसने सभी अंतर, साथ ही साथ विफलता पर कुछ पारदर्शिता बनाई।

हमारे सीईओ लुइस ने हमें हर सोमवार सुबह एक साप्ताहिक कंपनी अपडेट भेजना शुरू कर दिया। उनके द्वारा दिए गए पहले अपडेट में से एक केवल आपके साथी के लिए सहानुभूति रखने का एक अनुस्मारक था जिसे हम डुओ या साथी डुओलिंगो कर्मचारी कहते हैं। वह बार-बार रिमाइंडर भेजता था। मुझे लगता है कि सहानुभूति और निरंतर अनुस्मारक की यह संस्कृति कहती है कि एक दूरस्थ दुनिया में, सामाजिक संकेतों, शरीर के संकेतों को पढ़ना कठिन होता है और सामान्य रूप से शायद आप जितना काम करते हैं उससे अधिक काम करना आसान होता है। मुझे लगता है कि उस समय के दौरान जहां शायद बहस होती थी, हमें हमेशा सहानुभूति रखने के लिए याद दिलाया जाता था, यह महसूस करने के लिए कि इस समय हर किसी के जीवन में बहुत कुछ चल रहा है, और जो संचार किया जा रहा है वह किसी की पूरी तस्वीर नहीं हो सकता है से गुज़र रहा है। (टाइमस्टैम्प: 11:45)

एक और पहलू जो वास्तव में बहुत मदद करता है वह यह है कि हम हर एक प्रयोग परिणाम भेजते हैं जो लॉन्च या समाप्त हो जाता है। इसलिए पूरी कंपनी यह जानती रहती है कि हम कैसे निर्णय लेते हैं और किस दिशा में जाते हैं। इसलिए जब तक कोई अपने स्वयं के प्रयोग चला रहा होता है और ये निर्णय लेता है, तब तक उन्होंने हमारे द्वारा पूर्व में किए गए कॉल के सैकड़ों उदाहरण देखे होंगे। और हम अधिक विवादास्पद लोगों पर भी जोर देते हैं, ताकि पूरी कंपनी इस बात के अनुरूप हो सके कि हम कैसे निर्णय लेते हैं। (टाइमस्टैम्प: 13:11)

हमने राय के बारे में बातचीत समाप्त की। छलांग से, डुओलिंगो एक राय वाली कंपनी रही है – जहां से इसका आधार यह कितना बढ़ा है कि वह कैसे मुद्रीकरण करना चाहता है (और प्रतिस्पर्धियों से अलग)। लेकिन ऐसा करना आसान है, खासकर ध्रुवीकृत दुनिया में।

मुझे लगता है कि आप जिस पर विश्वास करते हैं, उसके बारे में मजबूत होना महत्वपूर्ण है। मुझे लगता है कि जरूरी नहीं कि यह एक बुरी बात है, लेकिन मुझे लगता है कि खुले दिमाग का होना भी महत्वपूर्ण है कि हर कोई उन पदों का सम्मान करने के लिए सहमत नहीं होगा। एक कंपनी के रूप में, [your opinions] वास्तव में होना चाहिए [clear] शुरुआत से ही क्योंकि इसे जोड़ना हमेशा कठिन होता है। अचानक, अचानक राय इसके विपरीत होती है जो एक कंपनी ने अपने कार्यों के माध्यम से प्रदर्शित की है। इसलिए मुझे लगता है कि जब आप मजबूत राय रखते हैं तो पाखंड से बचना सबसे महत्वपूर्ण बात है, और डुओलिंगो कई चीजों के बारे में मजबूत राय रखता है। मैं सोच [our opinions] सभी संगत हैं कि कंपनी ने शुरू से कैसे काम किया है। और इसने वास्तव में हमारी मदद की है। और हम उन प्रतिभाओं को आकर्षित करते हैं जो उन मिशनों में विश्वास करती हैं। हमने उन ऑपरेटिंग सिद्धांतों को एन्कोड किया है और वास्तव में उन्हें लिखा है। और किसी के लिए इस दृष्टिकोण से असहमत होना ठीक और उचित है, लेकिन कम से कम हमने इसे डुओलिंगो में कैसे करने का फैसला किया है। और इससे लोगों को यह स्पष्ट हो जाता है कि हमने जानबूझकर इन चीजों पर किसी न किसी तरह से जाने का निर्णय लिया है। तो इससे वास्तव में मदद मिली है, मुझे लगता है, सभी को एकजुट करने और यह समझने में कि कंपनी कैसे काम करती है। (टाइमस्टैम्प: 19:46)

Leave a Reply

Your email address will not be published. Required fields are marked *