हाल ही में, Reddit के CEO स्टीव हफमैन ने एक साक्षात्कार में कहा कि कंपनी विभिन्न तकनीकी कंपनियों के साथ डेटा उपयोग समझौतों की तलाश कर रही है, जिसमें उन कंपनियों को भुगतान करने की आवश्यकता होगी जो Reddit डेटा को खींचना चाहती हैं। यह कदम Reddit और गूगल तथा OpenAI के बीच पहले से हुए समझौते से प्रेरित है, और हफमैन आशा करते हैं कि अन्य कंपनियां भी इसका पालन करेंगी।
हफमैन ने विशेष रूप से माइक्रोसॉफ्ट, एंथ्रोपिक और पर्प्लेक्सिटी का नाम लिया, जिन्होंने डेटा उपयोग पर बातचीत करने से इनकार किया, और कहा "इन कंपनियों को ब्लॉक करना वाकई में बहुत परेशानी भरा है"। उन्होंने यह भी बताया कि यदि कोई संबंधित समझौता नहीं है, तो Reddit अपने डेटा के उपयोग के तरीके और उद्देश्यों को नियंत्रित या समझ नहीं सकता, जिससे कंपनी को उन व्यवसायों को ब्लॉक करने के लिए मजबूर होना पड़ता है जो शर्तें स्वीकार नहीं करते।
इस स्थिति का सामना करने के लिए, Reddit ने पिछले कुछ महीनों में वेब क्रॉलर्स पर प्रतिबंध बढ़ा दिया है। जुलाई की शुरुआत में, कंपनी ने अपने robots.txt फ़ाइल को अपडेट किया ताकि बिना समझौते वाले क्रॉलर्स को पहुँचने से रोका जा सके। इसके बाद, उपयोगकर्ताओं ने देखा कि Reddit सामग्री केवल उन गूगल खोज परिणामों में दिखाई देती है जिनके साथ समझौता किया गया है, जबकि बिंग जैसे अन्य खोज इंजनों में यह गायब हो गई।
हफमैन ने बिना अनुमति के Reddit डेटा का उपयोग करके AI को प्रशिक्षित करने के लिए माइक्रोसॉफ्ट की आलोचना की और बिंग API के माध्यम से सामग्री को अन्य खोज इंजनों को बेचने का आरोप लगाया। उन्होंने माइक्रोसॉफ्ट AI के CEO के बयान का उल्लेख किया, जिसमें कहा गया था कि इंटरनेट पर सार्वजनिक डेटा "फ्री सॉफ्टवेयर" है। हफमैन का मानना है कि यह दृष्टिकोण कुछ तकनीकी कंपनियों की इंटरनेट सामग्री के प्रति सोच को दर्शाता है।
Reddit सामग्री के बिंग से गायब होने पर, माइक्रोसॉफ्ट के सर्च प्रमुख जॉर्डी रिबास ने कहा कि यह Reddit द्वारा बिंग को अपनी वेबसाइट को क्रॉल करने से रोकने के कारण है। माइक्रोसॉफ्ट के प्रवक्ता ने जोर देकर कहा कि कंपनी सामग्री के उपयोग के लिए वेबसाइट प्रदाताओं के निर्देशों का सम्मान करती है।
हफमैन ने बताया कि पारंपरिक खोज इंजनों के मूल्य विनिमय मॉडल में बदलाव आया है। खोज, सारांश और AI प्रशिक्षण के एकीकरण के साथ, केवल ट्रैफ़िक के बदले सामग्री प्राप्त करने का मॉडल जटिल हो गया है। उन्होंने कहा कि Reddit पारंपरिक मीडिया प्रकाशकों के साथ मिलकर जनरेटिव AI के लिए जानकारी के भुगतान मॉडल की तलाश कर रहा है।
इस पर, एंथ्रोपिक ने कहा है कि उसने Reddit को क्रॉलर ब्लैकलिस्ट में डाल दिया है और इसके robots.txt सेटिंग का सम्मान करता है। माइक्रोसॉफ्ट ने इस मामले पर टिप्पणी करने से इनकार कर दिया, जबकि पर्प्लेक्सिटी ने टिप्पणी अनुरोध का उत्तर नहीं दिया।
यह विवाद डिजिटल युग में सामग्री के मूल्य और उपयोग के अधिकार की जटिलता को उजागर करता है, और यह दर्शाता है कि तकनीकी कंपनियों और सामग्री प्रदाताओं के बीच नए सहयोग मॉडल उभर सकते हैं।