संगठन AI का उपयोग कैसे करते हैं: ChatGPT से प्रमाण [pdf]

OpenAI का नया पेपर, जो संगठनों द्वारा ChatGPT के उपयोग पर है, मिश्रित प्रतिक्रियाएँ उत्पन्न कर रहा है; कई लोग इसकी संरचना, चित्रों की स्थिति, और सीमित विश्लेषणात्मक गहराई की आलोचना कर रहे हैं, जबकि उपयोग संबंधी डेटा को रोचक मान रहे हैं। टिप्पणीकार सवाल उठाते हैं कि क्या यह शोध से अधिक मार्केटिंग जैसा काम करता है, enterprises के लिए स्पष्ट, मापने योग्य ROI की कमी की ओर इशारा करते हैं, और शीर्ष-स्तरीय कॉर्पोरेट adoption तथा शिक्षकों जैसे व्यक्तिगत पेशेवरों के grassroots उपयोग के बीच अंतर को रेखांकित करते हैं। अन्य लोग methodological concerns नोट करते हैं और चेतावनी देते हैं कि संदेशों की मात्रा या “intensity of use” को मापना वास्तविक आर्थिक प्रभाव का खराब proxy हो सकता है।

पेपर की लंबाई, प्रारूप, और विधा

  • PDF 69 पृष्ठों का है, लेकिन मुख्य पाठ लगभग 23 डबल-स्पेस्ड पृष्ठों का है; बाकी भाग चित्रों, तालिकाओं, संदर्भों का है।
  • कुछ लोगों का कहना है कि यह “इतना लंबा नहीं” है, जबकि अन्य को लगता है कि सहायक सामग्री का खास उपयोग नहीं है।
  • फ़ॉर्मैटिंग पर बहस: सिंगल-कॉलम, बड़े लाइन-स्पेसिंग, चित्र अंत में एकत्रित।
  • कई पोस्टर बताते हैं कि यह इकॉन / सामाजिक विज्ञान के वर्किंग पेपर्स के लिए मानक है, कोई परिष्कृत “व्हाइट पेपर” नहीं।

अध्ययन की perceived गुणवत्ता और rigor

  • आलोचना कि यह सीमित सार्थक विश्लेषण के साथ एक “डेटा डंप” जैसा लगता है।
  • शिकायत कि मुख्य चित्र जहाँ संदर्भित हैं वहाँ से बहुत दूर हैं, जिससे पढ़ना और दावों की जाँच करना कठिन हो जाता है।
  • कुछ इसे सामान्य preprint गुणवत्ता जैसा बताते हैं; अन्य कहते हैं कि यह “sucks” करता है, खासकर चित्र।

मार्केटिंग, hype, और प्रेरणाएँ

  • संदेह कि frontier AI labs ऐसे पेपर्स का उपयोग शुद्ध शोध के बजाय stakeholder marketing के रूप में करते हैं।
  • crypto/NFT-शैली के whitepapers से तुलना: यह एक विज्ञापन जैसा पढ़ता है जो अपनाने के लिए प्रेरित करता है ताकि “पता चले कि यह किस काम का है।”
  • विरोध कि कुछ शब्द (जैसे, “general purpose technology”) मानक economics jargon हैं, pure hype नहीं।

संगठनों और स्कूलों में वास्तविक-विश्व AI उपयोग

  • यह देखा गया कि बड़े फर्मों में compliance controls के कारण अधिक औपचारिक adoption हो सकता है।
  • कई किस्से ऐसे शिक्षकों के हैं जो ChatGPT का निजी तौर पर उपयोग करके lesson plans, slides, games बनाते हैं और test data का विश्लेषण करते हैं, तथा कक्षा पर सकारात्मक प्रभाव बताते हैं।
  • अन्य लोग बताते हैं कि कुछ शिक्षक classroom AI को बेईमानी या plagiarism जैसा मानते हैं और इसका उपयोग करने से इनकार करते हैं।

शिक्षा, असमानता, और technology

  • एक लंबा subthread इस पर कि public schools में tech (AI सहित) analytical skills को कमज़ोर कर सकती है, जबकि elite private schools पारंपरिक, low-tech, rigorous शिक्षा पर ज़ोर देती हैं।
  • ऐसे counterexamples जहाँ public immersion programs, tech-heavy private programs से बेहतर प्रदर्शन करते हैं।
  • बहस कि अंतर funding, parental background, peers, या administration quality में से किससे अधिक आते हैं।

ROI और impact का मापन

  • कुछ लोग paper के निहित संदेश को इस तरह देखते हैं: enterprises के पास स्पष्ट, measurable ROI नहीं है; adoption शुरुआती चरण में है और metrics अपरिपक्व हैं।
  • सवाल उठते हैं कि vendors “intelligence” बेचते हुए ROI को बेहतर ढंग से क्यों नहीं स्पष्ट करते, बनाम यह दृष्टिकोण कि measurement customer का काम है।
  • एक commenter चेतावनी देता है कि usage intensity economic impact का कमजोर proxy है, खासकर जब juniors AI का उपयोग seniors से अधिक करते हैं।

Methodological concerns

  • आलोचना कि adopters को sample किया गया है लेकिन non-adopters के लिए पूरी Compustat population का उपयोग किया गया है, और sampling rate disclosed नहीं है।
  • चिंता कि यह सांख्यिकीय रूप से जोखिमपूर्ण है और छोटे pilot deployments को account में नहीं ले सकता।