میں تقسیم ہوگیا

پہلا آن لائن بینر

امتحان میں دھوکہ دینے کے لیے کلاس روم چھوڑ کر مصنوعی ذہانت: OpenAI-Hugging Face Case سے کیا پتہ چلتا ہے

اے آئی ماڈل ڈسٹری بیوشن پلیٹ فارم ہیگنگ فیس نے اپنے آئی ٹی سسٹمز میں مداخلت کا پتہ لگایا اور اس کا تدارک کیا۔ یہ ماضی کے کسی بھی واقعے کے برعکس تھا، لیکن یہ ایک "واقعہ" بھی تھا جس کی قیمت اشتہاری مہم سے زیادہ تھی: اس کی وجہ یہ ہے۔

امتحان میں دھوکہ دینے کے لیے کلاس روم چھوڑ کر مصنوعی ذہانت: OpenAI-Hugging Face Case سے کیا پتہ چلتا ہے

جب آپ کسی مصنوعی ذہانت سے ہیکر کی طرح برتاؤ کرنے کو کہتے ہیں تو کیا ہوتا ہے؟ یہ دل کا سوال ہے۔ ایکسپلائٹ جیمسائبرسیکیوریٹی کے میدان میں AI ماڈلز کی جارحانہ صلاحیتوں کی پیمائش کے لیے دنیا کے جدید ترین معیارات میں سے ایک ہے۔ بینچ مارک پروجیکٹ کو یونیورسٹیوں اور تحقیقی مراکز جیسے میکس پلانک انسٹی ٹیوٹ، یونیورسٹی آف ایریزونا، اور یونیورسٹی آف کیلیفورنیا (برکلے اور سانتا باربرا) کے محققین کے ایک بین الاقوامی گروپ نے اینتھروپک، گوگل اور اوپن اے آئی کے محققین کے تعاون سے تیار کیا تھا۔ مقصد اتنا ہی آسان ہے جتنا کہ یہ نازک ہے: اس حد تک جانچنا کہ ایک AI ایجنٹ کس حد تک ایک معروف سائبر خطرے کو حقیقی طور پر فعال حملے میں تبدیل کرنے کی صلاحیت رکھتا ہے۔

ExploitGym کوئی ویڈیو گیم یا ہیکنگ مقابلہ نہیں ہے۔ یہ ایک قسم ہے "آخری امتحان"نئے AIs کے لیے۔ ایجنٹوں کو پروگرام کوڈ اور عمل درآمد کے ماحول کے ساتھ سینکڑوں حقیقی کمزوریاں فراہم کی جاتی ہیں۔ ان کا کام آزادانہ طور پر ایک استحصال تیار کرنا ہے، یعنی نظام پر کنٹرول حاصل کرنے یا خفیہ معلومات تک رسائی حاصل کرنے کے لیے اس کمزوری سے فائدہ اٹھانے کے قابل ہدایات کا ایک سلسلہ۔ خاص طور پر اس لیے کہ یہ ممکنہ طور پر خطرناک ٹیسٹ کے اندر اندر انجام دینے والے ٹیسٹ ہیں۔ سینڈباکس، ایک ایسا ماحول جو انٹرنیٹ کے باقی حصوں سے مکمل طور پر الگ تھلگ ہے۔ بچوں کے سینڈ باکس کے ساتھ سینڈ باکس کی اصطلاح کی تشبیہ بدیہی ہے: بچے قلعے بنا سکتے ہیں، سوراخ کھود سکتے ہیں اور گندگی پیدا کر سکتے ہیں، لیکن تمام "گڑبڑ" ریت تک ہی محدود رہتی ہے، باغ کو گندا کیے بغیر یا باہر مسائل پیدا کیے بغیر۔ کمپیوٹر سائنس میں، اصول ایک ہی ہے: سافٹ ویئر سینڈ باکس کے اندر "آزادانہ طور پر حرکت" کرسکتا ہے، لیکن اسے اس ماحول کو چھوڑنے یا آپریٹنگ سسٹم، انٹرنیٹ، یا دیگر حساس ڈیٹا تک رسائی حاصل کرنے کے قابل نہیں ہونا چاہیے۔

یہ خاص طور پر ان اندرونی تشخیص میں سے ایک کے دوران ہے، جس کے مطابق اس کی تعمیر نو کی گئی ہے۔ اوپنائی e گلے لگانے والے چہرے سے تصدیق ہوئی۔، دو تازہ ترین اور جدید ترین OpenAI ماڈل: GPT-5.6 سول اور اس سے بھی زیادہ جدید ماڈل، جو ابھی تک عوام کے لیے جاری نہیں کیا گیا ہے - انہیں ایک کمزوری مل گئی ہوگی۔ صفر دن جانچ کے بنیادی ڈھانچے میں۔ اس قسم کی کمزوری ایک حفاظتی خامی ہے جو سافٹ ویئر ڈویلپرز کے لیے نامعلوم ہے اور اس لیے، بغیر کسی دستیاب حل کے۔ یہ نام اس حقیقت سے آیا ہے کہ صنعت کار کے پاس اس مسئلے کو دریافت کرنے یا اس کا استحصال کرنے سے پہلے اسے حل کرنے کے لیے "صفر دن" تھے۔

OpenAI کے دو AI ماڈلز مبینہ طور پر سینڈ باکس سے فرار ہونے، انٹرنیٹ تک رسائی حاصل کرنے، اور بالآخر پیداواری انفراسٹرکچر کے حصے سے سمجھوتہ کرنے میں کامیاب ہوئے۔ گلے لگانے والا چہرہ، جہاں انہیں یقین تھا (اچھی وجہ کے ساتھ) کہ بینچ مارک کو حل کرنے کے لیے مفید معلومات کو ذخیرہ کیا جا سکتا ہے۔ حتمی مقصد Hugging Face کو نقصان پہنچانا نہیں تھا، بلکہ بہتر اسکور حاصل کرنے کے لیے ٹیسٹ کے "جوابات" تلاش کرنا تھا۔ گلے لگانے والے چہرے نے سرگرمی کا پتہ لگایا اور اسے بلاک کر دیا، OpenAI کے ساتھ مل کر اس واقعے کی تکنیکی تحقیقات کا آغاز کیا۔

وہ طالب علم جو دروازہ کھلا اور AI "کنٹرول سے باہر" پاتا ہے

صحیح معنوں میں یہ سمجھنے کے لیے کہ کیا ہوا، ہم امتحان کے دوران ایک طالب علم کا تصور کر سکتے ہیں۔ ٹیچر اسے امتحانی پیپر کے ساتھ کلاس روم میں بند کر دیتا ہے اور اس سے کہتا ہے، "تم صرف اپنی میز پر موجود مواد استعمال کر سکتے ہو۔" تاہم، طالب علم کو احساس ہوتا ہے کہ دروازے کا تالا ناقص ہے۔ اس وقت، اس حقیقت کا فائدہ اٹھاتے ہوئے کہ باہر کوئی نگرانی نہیں ہے اور تمام نگرانی کے نظام کو غیر فعال کر دیا گیا ہے، وہ کلاس روم سے نکلتا ہے، لائبریری جاتا ہے، تالا لگا کر دروازہ کھولتا ہے، جوابی کتاب سے مشورہ کرتا ہے، بغیر کسی رکاوٹ کے واپس آتا ہے، اور ایک بہترین امتحان میں بدل جاتا ہے۔

اب، طالب علم کے ساتھ مشابہت میں ایک منظر نامہ کیوں استعمال کیا جاتا ہے۔ نگرانی کے نظام کو غیر فعال کر دیا گیا ہے۔ e کوئی بیرونی کنٹرول نہیں یہ طالب علم کو نامناسب رویے میں ملوث ہونے سے روکتا ہے؟ کیونکہ یہ بالکل وہی جگہ ہے جہاں پوری کہانی کو سائنس فکشن فلم کی ایک قسط کے طور پر دیکھا جانے کا خطرہ ہے۔ اس وضاحت کے بغیر، کوئی بھی حقیقت میں ایک پلاٹ تیار کر سکتا ہے جس میں مشینیں قبضہ کر لیتی ہیں۔ لیکن ایسا بالکل نہیں ہے۔

کوئی بھی جس نے ChatGPT، Claude یا Gemini کا استعمال کیا ہے وہ پہلے سے ہی نام نہاد کے وجود کے بارے میں جانتا ہے۔باڑ"، یعنی وہ حفاظتی طریقہ کار جو ماڈل کو ممکنہ طور پر خطرناک درخواستوں پر عمل کرنے سے روکتے ہیں۔ اگر کوئی صارف پوچھتا ہے کہ دھماکہ خیز آلہ کیسے بنایا جائے، کمپیوٹر سسٹم سے سمجھوتہ کیسے کیا جائے، یا لاگ ان کی اسناد کیسے چرائی جائیں، تو ماڈل عام طور پر جواب دینے سے انکار کر دیتا ہے یا صرف عام معلومات فراہم کرتا ہے (چند سال پہلے تک، تاہم، ان میں سے زیادہ تر AIs، خودکشی کے قابل ہدایات، حتیٰ کہ خودکشی کے لیے ہدایات بھی فراہم کی جاتی ہیں)۔

تاہم، اس کا مطلب یہ نہیں ہے کہ ماڈل تکنیکی طور پر ان مسائل کو حل کرنے سے قاصر ہے، بلکہ یہ کہ اسے ڈیزائن کیا گیا تھا کہ یہ صلاحیتیں صارفین کے لیے دستیاب نہ ہوں۔ ExploitGym بینچ مارک کے معاملے میں، ڈویلپر دراصل ماڈل کی جارحانہ سائبرسیکیوریٹی صلاحیتوں کی پیمائش کرنا چاہتے تھے۔ اس وجہ سے، ماڈل کو کمزوریوں سے فائدہ اٹھانے کی کوشش کرنے کی اجازت دی گئی تھی کیونکہ یہ ٹیسٹ کا مقصد تھا۔ اس وقت، کوئی گارڈریل نہیں تھے. کوئی پابندی نہیں، لیکن ایسی کوئی چیز نہیں ہے جو "قابو سے باہر" ہو.

دوسرے الفاظ میں، ٹیسٹ نے ایمانداری سے دوبارہ پیش نہیں کیا۔ حقیقی دنیا کے استعمال کا منظر کسی صارف کی نہیں، بلکہ ایک ریسرچ لیبارٹری کی جو سسٹم کی زیادہ سے زیادہ صلاحیت کی پیمائش کے لیے پرعزم ہے۔ یہ صورت حال ایپی سوڈ کو کم اہم نہیں بناتی، بلکہ ہمیں اس کی صحیح سیاق و سباق میں تشریح کرنے کی دعوت دیتی ہے: جو مشاہدہ کیا گیا وہ اس بات کی نمائندگی کرتا ہے کہ ایک ماڈل بینچ مارک کے تجرباتی حالات میں کیا کر سکتا ہے، یہ ضروری نہیں کہ عوام کے لیے جاری کیے گئے ورژن میں اس کا برتاؤ کیسا ہو۔

اس پہلو کو دوسرے سے ممتاز کیا جانا چاہیے: سینڈ باکس، الگ تھلگ ماحول جس میں ٹیسٹ ہوا تھا، مکمل طور پر محفوظ رہنا چاہیے تھا۔ اگر ماڈل صفر دن کی کمزوری کا فائدہ اٹھا کر فرار ہونے میں کامیاب ہو گیا، تو اس کی وجہ یہ نہیں تھی کہ منتظمین نے جان بوجھ کر "دروازہ کھلا چھوڑ دیا"، بلکہ اس لیے کہ اس نے ایک ایسی خامی کی نشاندہی کی جس سے ڈویلپرز خود لاعلم تھے۔ مختصراً، AI نے ماحول کا مشاہدہ کرنے، متبادل منصوبہ تیار کرنے اور اپنے مقصد کو حاصل کرنے کی اپنی صلاحیت کا مظاہرہ کیا۔ بغیر کسی نے اسے واضح طور پر تجویز کیا تھا۔ (اور یہ حیرت کی بات نہیں ہے اگر ہم جنریٹو ایجنٹ AI کے بنیادی کام کو سمجھتے ہیں)۔ AI ہمیشہ اور صرف a کی بنیاد پر حرکت کرتا ہے۔ کامیابی کا امکانی اندازہ تمام ممکنہ اختیارات میں سے (یہاں تک کہ جب اسے اپنی زبان کے الفاظ کا انتخاب کرنا پڑے)۔

ایک حادثہ جس کی قیمت اشتہاری مہم سے زیادہ ہے۔

لیکن ایک دوسری تشریح ہے، ریسرچ لیبز کے مقابلے مالیاتی منڈیوں کے قریب۔ OpenAI نے اپنی پریس ریلیز کا زیادہ تر حصہ اپنے ماڈلز کی اعلیٰ صلاحیتوں کی وضاحت کے لیے وقف کر دیا، اس واقعے پر توجہ مرکوز کرنے سے کہیں زیادہ۔ یہ ایک ہے مواصلات کا انتخاب جس پر کسی کا دھیان نہیں گیا۔ امریکی کمپنی کی آفیشل پریس ریلیز ماڈل کی ظاہر کردہ صلاحیتوں پر کافی زور دیتی ہے، اس حد تک کہ صرف شائع کردہ گراف اس کی کارکردگی سے متعلق ہے۔ OpenAI مستقبل میں اسٹاک مارکیٹ کی فہرست سازی کے لیے بنیاد تیار کر رہا ہے۔ 8 جون 2026 کو، اس نے خفیہ طور پر فائل کی۔ SEC کو S-1 کا مسودہ$122 بلین راؤنڈ کے بعد جس کی قیمت $852 بلین تھی۔ اس نقطہ نظر سے، تکنیکی قیادت کا ہر مظاہرہ سرمایہ کاروں، صنعت کے شراکت داروں اور مارکیٹ میں کمپنی کی سمجھی جانے والی قدر کو بڑھانے میں معاون ہے۔

اس بات کا کوئی ثبوت نہیں ہے کہ یہ حادثہ کس نے بنایا تھا۔ پروموشنل مقاصدتاہم، اس بات کو نظر انداز کرنا مشکل ہے کہ OpenAI کی طرف سے تیار کردہ بیانیہ ایک ممکنہ طور پر شرمناک واقعہ کو تبدیل کر دیتا ہے—ایک ماڈل جو آزمائشی ماحول سے بچ جاتا ہے—اس کے نظام کی تکنیکی برتری کے مظاہرے میں۔ یہ، دوسرے لفظوں میں، ایک مواصلات ہے جسے ایک نفیس مارکیٹنگ چال کے طور پر بھی پڑھا جا سکتا ہے۔ OpenAI کہنا چاہتا ہے: "ہمارے ماڈل وکر سے آگے ہیں۔" اس مقصد کو لیبارٹری کے طور پر سمجھا جانا ہے جو فی الحال مصنوعی ذہانت کے محاذ کی وضاحت کر رہی ہے۔ بڑی ٹیک کمپنیاں صرف مصنوعات فروخت نہیں کرتی ہیں: وہ مستقبل کی قیادت کی توقعات فروخت کرتی ہیں۔ اگر مارکیٹ کو یقین ہے کہ کمپنی کے پاس سب سے زیادہ جدید ماڈل ہے، تو وہ اسے تیزی سے زیادہ قیمتیں دینے کے لیے تیار ہوگی۔ اس کے علاوہ، امریکی AI کمپنیوں کی کارکردگی کے ساتھ مقابلہ کرنا پڑتا ہے چینی AI جس کا فائدہ اوسطاً 40% امریکیوں سے کم ہے۔ جرمن تجزیہ کار کم آئزنبرگمصنوعی ذہانت کے میگزین "Superintelligence" کے شریک بانی اور ایڈیٹر انچیف نے اتفاق سے پیش گوئی نہیں کی تھی - چند دن پہلے - کہ "کی ریلیز کا اعلان"Kimi K3"، چینی کمپنی کی طرف سے تیار کردہ نیا ماڈل مون شاٹ اے آئی، سمندر کے دوسری طرف ریڈ الرٹ کو متحرک کر دیتا…

کمنٹا