Cloudflare 15 ستمبر 2026 سے پہلے سے طے شدہ طور پر اشتہار سے تعاون یافتہ صفحات سے روایتی تلاش، AI ایجنٹ کی سرگرمی اور ماڈل ٹریننگ کو یکجا کرنے والے ویب کرالر کو روکنا شروع کر دے گا۔

کمپنی چاہتی ہے کہ AI فراہم کنندگان تلاش، ایجنٹ کے استعمال اور تربیت کے لیے الگ الگ کرالر چلائیں تاکہ ویب سائٹ کے مالکان یہ فیصلہ کر سکیں کہ ہر قسم اپنے مواد تک کیسے رسائی حاصل کرتی ہے۔ جو کرالر ان مقاصد کو واضح طور پر الگ نہیں کرتے ہیں انہیں انتہائی پابندی والی قابل اطلاق ترتیب کا سامنا کرنا پڑے گا۔

Cloudflare پہلے سے طے شدہ طور پر تلاش کرنے والوں کو اجازت دیتا رہے گا کیونکہ وہ وزیٹر کو ویب سائٹس پر بھیج سکتے ہیں۔

تاہم، یہ ٹریننگ یا ایجنٹ کے طور پر درجہ بند کرالر کو اشتہارات دکھانے والے صفحات سے روک دے گا۔ ان مقاصد کو یکجا کرنے والے مخلوط استعمال کے کرالر کو بھی بلاک کر دیا جائے گا جب تک کہ ویب سائٹ کا مالک ترتیبات کو تبدیل نہ کرے۔

نئے ڈیفالٹس نئے Cloudflare صارفین پر لاگو ہوں گے، موجودہ صارفین کے ذریعے بنائے گئے نئے ڈومینز، اور موجودہ مفت درجے کے صارفین جنہوں نے 15 ستمبر سے پہلے اپنی ترتیبات کو تبدیل نہیں کیا ہے۔

ویب سائٹ کے مالکان اپنے Cloudflare ڈیش بورڈ کے ذریعے کنٹرولز کو ایڈجسٹ کرنے کے لیے آزاد رہیں گے۔

یہ تبدیلی محدود کر سکتی ہے کہ کس طرح AI کمپنیاں ٹریننگ ماڈلز اور آپریٹنگ AI ایجنٹوں کے لیے آن لائن مواد اکٹھا کرتی ہیں۔

Cloudflare نے کہا کہ بہت سے پبلشرز چاہتے ہیں کہ ان کا مواد روایتی اور AI سے چلنے والی تلاش میں نظر آتا رہے۔ تاہم، اشتہارات یا سبسکرپشنز کے ذریعے تعاون یافتہ کاروبار نہیں چاہیں گے کہ ان کا کام بغیر اجازت یا ادائیگی کے AI ٹریننگ کے لیے استعمال کیا جائے۔

کمپنی نے کہا کہ بوٹس کو واضح طور پر ظاہر کرنا چاہیے کہ وہ کسی ویب سائٹ پر کیوں جا رہے ہیں۔ سرچ انڈیکسنگ، AI ایجنٹس اور ماڈل ٹریننگ کے لیے مواد استعمال کرنے والے فراہم کنندہ کو ایک بوٹ کے تحت سرگرمیوں کو یکجا کرنے کے بجائے تین الگ الگ کرالر چلانا چاہیے۔

Cloudflare نے گوگل کا نام لیے بغیر "دنیا کے سب سے بڑے سرچ انجن" کا حوالہ دیا اور دعویٰ کیا کہ وہ مسابقتی AI کمپنیوں کے مقابلے میں تقریباً دو گنا زیادہ معلومات تک رسائی حاصل کر سکتا ہے۔

اس نے استدلال کیا کہ مخلوط استعمال کے نظام پبلشرز کو تلاش کے نتائج میں ظاہر ہونے اور ان کے مواد کو AI مصنوعات کی حمایت کرنے کی اجازت دینے کے درمیان انتخاب کرنے پر مجبور کر سکتے ہیں۔

گوگل نے پہلے اس دلیل کو چیلنج کیا ہے۔ یہ Google-Extended نامی ایک کنٹرول فراہم کرتا ہے جو ناشرین کو اپنے مواد کو مستقبل کے Gemini ماڈلز کو تربیت دینے یا کچھ Gemini اور Vertex AI سروسز کو گوگل سرچ میں شمولیت کو متاثر کیے بغیر استعمال ہونے سے روکنے کی اجازت دیتا ہے۔

تاہم، گوگل کے AI جائزہ اور AI موڈ گوگل سرچ کا حصہ ہیں اور مرکزی گوگل بوٹ کنٹرولز کا استعمال کرتے ہیں۔ گوگل بوٹ کو مسدود کرنے سے ویب سائٹ کی روایتی تلاش کے نتائج میں ظاہر ہونے کی صلاحیت بھی متاثر ہوگی۔

کلاؤڈ فلیئر کے سی ای او میتھیو پرنس نے کہا کہ خودکار نظام اور بوٹس اب زیادہ تر انٹرنیٹ ٹریفک کے لیے ذمہ دار ہیں، جو توقع سے پہلے اس مقام تک پہنچ جاتے ہیں۔

انہوں نے کہا کہ کمپنی کو ایک پائیدار آن لائن ماحولیاتی نظام کو سپورٹ کرنے کے لیے مزید تیزی سے کام کرنا چاہیے اور AI فراہم کنندگان کو واضح طور پر بتانے کی ترغیب دینا چاہیے کہ آیا ان کے بوٹس تلاش، تربیت یا ایجنٹ کے کام انجام دیتے ہیں۔

Cloudflare نے پہلے ہی کئی ٹولز متعارف کرائے ہیں جو پبلشرز کو AI رسائی پر زیادہ کنٹرول دیتے ہیں، بشمول AI کرالر بلاک کرنا اور Pay Per Crawl، جو ویب سائٹ کے مالکان کو کمپنیوں سے ان کے صفحات کو سکریپ کرنے کے لیے چارج کرنے کی اجازت دیتا ہے۔

ٹھیک ہے، یہ میری پیش گوئی سے زیادہ تیزی سے ہوا۔ سوچا کہ یہ 2027 کا اختتام ہوگا، پھر 2027 کے اوائل میں، لیکن ایجنٹ ٹریفک اتنی تیزی سے بڑھ رہی ہے کہ اب بوٹس نے انٹرنیٹ کی تاریخ میں پہلی بار انسانی ٹریفک کو آن لائن منتقل کیا ہے۔ https://t.co/2zX5bHdhsa

— میتھیو پرنس 🌥 (@eastdakota) 3 جون، 2026

Cloudflare اب Pay Per Crawl کو Pay per Use نامی سسٹم میں تیار کر رہا ہے۔

جب بھی کوئی کرالر کوئی صفحہ ڈاؤن لوڈ کرتا ہے تو ادائیگی کرنے کے بجائے، AI کمپنیاں پبلشرز کو معاوضہ دیں گی جب ان کا مواد قدر فراہم کرتا ہے، جیسے کہ AI سے تیار کردہ نتیجہ میں ظاہر ہونا یا کسی ایجنٹ کو پریمیم معلومات فراہم کرنا۔

Cloudflare ابتدائی طور پر Ceramic.ai اور You.com کے ساتھ سسٹم کی جانچ کر رہا ہے۔

سیرامک ​​کے نظام میں حصہ لینے والے پبلشرز اس وقت ادائیگی وصول کر سکتے ہیں جب ان کا مواد اس کے AI تلاش کے نتائج میں ظاہر ہوتا ہے۔ You.com پریمیم مواد کے انفرادی ٹکڑوں تک رسائی کے لیے ادائیگی کر سکتا ہے جب اس کے ایجنٹوں کو ان کی ضرورت ہو۔ دوسرے AI فراہم کنندگان ماڈل کو اپنی خدمات کے مطابق ڈھال سکیں گے۔

Cloudflare نے کہا کہ 50% سے زیادہ جائز بوٹ ٹریفک میں ایسے صفحات کو بار بار ڈاؤن لوڈ کرنا شامل ہے جو تبدیل نہیں ہوئے ہیں۔

ان غیر ضروری درخواستوں کو کم کرنے سے پبلشرز کی بینڈوتھ کی بچت ہو سکتی ہے اور AI کمپنیوں کو درپیش کمپیوٹنگ اخراجات کم ہو سکتے ہیں۔ Cloudflare اپنے نیٹ ورک کے ڈیٹا کو استعمال کرنے کا ارادہ رکھتا ہے تاکہ کرالرز کو یہ تعین کرنے میں مدد ملے کہ صفحہ کب تبدیل ہوا ہے اور اسے دوبارہ ڈاؤن لوڈ کرنے کی ضرورت ہے۔ کمپنی نے کہا کہ اس کے نئے قوانین کا مقصد پبلشرز کو AI سروسز میں خود بخود تربیت یا ایجنٹ کے استعمال کے لیے ان کا مواد دیے بغیر دکھائی دینا ہے۔

جہاں آپ چاہیں تازہ ترین ٹیک خبریں، ٹیلی کام کی بصیرتیں، اور پروڈکٹ لانچ حاصل کریں۔

ProPakistani کو ترجیحی ذرائع میں شامل کریں اور گوگل سرچ اور ٹاپ اسٹوریز میں ہماری مزید کہانیاں دیکھیں۔

شیئرز