डोमेन ज्ञान त्वरित तरकीबों को मात देता है: एक असुविधाजनक प्रयोग
मैंने एक त्वरित-इंजीनियरिंग मित्र और एक डोमेन विशेषज्ञ को समान समस्या पर वही AI टूलकिट दिया। परिणाम ने मेरा शीघ्र-शिकार का शौक ख़त्म कर दिया।
पिछली तिमाही में मैंने एक असुविधाजनक प्रयोग किया था: एक मित्र जो त्वरित तकनीकें एकत्र करता है और एक सहकर्मी जो हमारे डोमेन को गहराई से जानता है, उन्हें समान एआई उपकरण और समान समस्या दी गई थी। त्वरित संग्राहक ने और अधिक सुंदर संकेत तैयार किए। डोमेन विशेषज्ञ ने उपयोगी उत्तर प्रस्तुत किया। उन दो तथ्यों के बीच के अंतर ने एआई कौशल के बारे में मेरे सोचने के तरीके को पुनर्व्यवस्थित कर दिया।
आउटपुट में तंत्र दिखाई दे रहा था। सुरुचिपूर्ण संकेत सामान्य रूप से अच्छी तरह से संरचित थे: भूमिका, संदर्भ, बाधाएं, प्रारूप। वे इस बात का ज्ञान नहीं रख सके कि हमारे क्षेत्र में वास्तव में कौन सी बाधाएँ मायने रखती हैं, कौन से विफलता मोड सामान्य हैं, और 'सही' उत्तर का कौन सा हिस्सा वास्तव में व्यवहार में गलत है। डोमेन विशेषज्ञ के अव्यवस्थित संकेतों ने वह सब ले लिया।
यह उस पैटर्न की व्याख्या करता है जिसे मैं जंगल में देखता रहा: आकस्मिक एआई आदतों वाले विशेषज्ञ विस्तृत प्रणालियों के साथ उत्साही लोगों से बेहतर प्रदर्शन करते हैं। यह कभी भी संकेत देने के बारे में नहीं था। विशेषज्ञ के चार-वाक्य संकेत में बीस साल की अंतर्निहित विशिष्टता शामिल है, और विशिष्टता हमेशा कठिन हिस्सा थी। प्रॉम्प्ट तकनीक आसान 20 प्रतिशत को अनुकूलित करती है।
शीघ्र-इंजीनियरिंग उद्योग के लिए असुविधाजनक निहितार्थ: इसका अधिकांश भाग लोगों को उस हिस्से को अनुकूलित करना सिखा रहा है जो कभी बाधा नहीं था। वास्तविक तकनीकें हैं (संरचित आउटपुट, कुछ-शॉट उदाहरण, पुनरावृत्ति अनुशासन), लेकिन वे अंतिम 10 प्रतिशत हैं, और वे उस डोमेन ज्ञान के बिना बेकार हैं जो आपको बताता है कि क्या मांगना है।
मेरा अपना अभ्यास तदनुसार बदल गया: मैंने त्वरित युक्तियों का शिकार करना बंद कर दिया और डोमेन नोट्स लिखना शुरू कर दिया, 'क्या मायने रखता है और आम तौर पर क्या गलत होता है' दस्तावेज़ जो मेरे संकेत प्रदान करते हैं। संकेत छोटे हो गए और आउटपुट बेहतर हो गए, जो एक वाक्य में प्रयोग का परिणाम है: ज्ञान हमेशा संकेत था।