گوگل کے انجینئر جان مولر نے کہا کہ فی الحال کوئی بھی AI نظام ویب سائٹ کے مواد کو پراسیس کرنے کے لیے llms.txt استعمال نہیں کرتا [1]۔
اس تجویز کردہ فائل پر مباحثہ ویب سائٹ مالکان اور AI ڈویلپرز کے مابین کشیدگی کو واضح کرتا ہے۔ جیسے جیسے بڑے زبان ماڈلز ویب کو زیادہ سے زیادہ اسکریپ کرتے ہیں، ناشر ایسے طریقے تلاش کر رہے ہیں جن کے ذریعے وہ اپنے مواد کے مقصد اور قدر کو AI‑مبنی سرچ آلات تک پہنچا سکیں۔
llms.txt فائل ایک سادہ‑متن دستاویز ہے جسے ویب سائٹ مالکان اپنے سرور پر رکھ کر یہ بیان کر سکتے ہیں کہ LLMs کو ان کے ڈیٹا کے ساتھ کیسے پیش آنا چاہیے [2]۔ robots.txt کے برعکس، جو کرالنگ کی روک تھام یا اجازت کے لیے ہدایات فراہم کرتا ہے، llms.txt کوئی کنٹرول فائل نہیں ہے [3]۔ اس کے بجائے، اسے AI ماڈلز کے لیے رہنمائی کے طور پر تصور کیا گیا ہے تاکہ وہ سائٹ پر سب سے موزوں معلومات تلاش کر سکیں [4]۔
صنعتی ردعمل اس تجویز پر منقسم رہتے ہیں۔ کچھ اس فائل کو "AI کے لیے خزانۂ نقشہ" تصور کرتے ہیں جو ماڈلز کو سائٹ کے سب سے قیمتی حصوں کی طرف رہنمائی کرتا ہے [4]۔ تاہم، دیگر ماہرین اس فائل کو صرف تخیلاتی ڈرامہ قرار دیتے ہیں اور اسے پرانی میٹا کی ورڈز ٹیگ کے ساتھ موازنہ کرتے ہیں [5]۔
حالیہ اعداد و شمار محدود اپنائیت اور افادیت کی نشاندہی کرتے ہیں۔ ایک تجزیے نے 10 سائٹس کی پیروی کی تاکہ معلوم ہو سکے کہ فائل کا کوئی اثر ہے یا نہیں، جبکہ اس فارمیٹ کو استعمال کرنے والے AI نظاموں کی موجودہ تعداد صفر ہی ہے [1, 6]۔
مولر کے تبصرے اس دلیل کو تقویت دیتے ہیں کہ فائل فی الحال غیر فعال ہے۔ بحث 2024 کے ابتدائی عرصے میں مزید شدت اختیار کر گئی جب SEO کمیونٹی نے AI دریافت پر اثرانداز ہونے کے نئے طریقے تلاش کرنے کی کوشش کی [1, 2, 3]۔ اس کوشش کے باوجود، بڑے AI ڈویلپرز کی جانب سے اپنائیت کی کمی کا مطلب ہے کہ اس وقت فائل سائٹ مالکان کے لیے کوئی عملی فائدہ نہیں رکھتی [1, 5]۔
“"فی الحال کوئی بھی AI نظام llms.txt استعمال نہیں کرتا"”
llms.txt کے لیے موجودہ عدم حمایت اس بات کی نشاندہی کرتی ہے کہ AI ڈویلپرز صارفین کی جانب سے فراہم کردہ اشاروں پر اپنی اسکریپنگ اور انڈیکسنگ کے طریقوں کو ترجیح دے رہے ہیں۔ جب تک کوئی بڑا LLM فراہم کنندہ اس معیار کو باقاعدہ اپنائے گا، یہ فائل نظریاتی مشق ہی رہے گی اور سرچ انجن کی اصلاح کے لیے عملی آلہ نہیں بنے گی۔
