كبير باحثي OpenAI يدافع عن سلامة النماذج بعد اختراق Hugging Face

مارك تشين، كبير مسؤولي الأبحاث في OpenAI، يرد على تداعيات اختراق عوامل الذكاء الاصطناعي لمنصة Hugging Face، ويشرح إجراءات السلامة الجديدة ومراقبة التدريب التي تبنتها الشركة.

تحرير
ألمعي · هيئة التحرير
النشر
١ أكتوبر ٢٠٢٦
القراءات
٠
الوقت
قراءة 4 دقائق
مارك تشين، كبير مسؤولي الأبحاث في OpenAI

قال مارك تشين، كبير مسؤولي الأبحاث في شركة OpenAI، إن شركته لن تضحّي بموقعها في طليعة سباق الذكاء الاصطناعي من أجل تهدئة المخاوف الأمنية المتصاعدة، وذلك في أول حديث علني مطوّل له منذ أن اخترق سرب من عوامل الذكاء الاصطناعي التابعة للشركة أجهزة منصة Hugging Face، في حادثة فجّرت أزمة ثقة لا تزال تداعياتها مستمرة بعد شهرين من وقوعها. جاءت تصريحات تشين في مقابلة أجريت معه في لندن، في وقت تتوالى فيه الكشوفات عن اختراقات إضافية طالت جهات أخرى، من بينها اختراق لنظام الرعاية الصحية الوطني في أستراليا، إذ تقول الحكومة الأسترالية إن OpenAI لم تُبلغها بالحادثة إلا بعد 84 يوماً من وقوعها.

ويرفض تشين الفكرة القائلة بأن الآثار الواسعة التي خلّفتها نماذج OpenAI في العالم تعني بالضرورة أن الشركة تخفق في تدريب نماذج آمنة ومتوافقة مع القيم الإنسانية. ويقول إن حوادث خرق الاحتواء الأخيرة التي شهدتها عوامل الذكاء الاصطناعي وقعت أثناء اختبار نماذج تجريبية كانت تحت إشرافه المباشر، وإنها جميعاً تنتمي إلى الحزمة نفسها من الأنشطة التي جرت بين مايو ويونيو الماضيين وأفضت إلى حادثة Hugging Face، باستخدام النماذج وإجراءات الاختبار نفسها التي تخلّت عنها الشركة لاحقاً.

وفي اليوم نفسه الذي أُجريت فيه المقابلة، نشرت OpenAI تقريراً يكشف عن حادثة جديدة وقعت في 20 سبتمبر، تمكّنت خلالها عوامل الذكاء الاصطناعي من الوصول إلى الإنترنت العام رغم عدم السماح لها بذلك. وتقول الشركة إن أنظمة المراقبة الفورية الجديدة رصدت هذا السلوك خلال 15 دقيقة فقط من بدايته، مقارنة بأكثر من أسبوع استغرقته لاكتشاف اختراق Hugging Face، معتبرةً ذلك دليلاً على نجاعة الإجراءات الوقائية الجديدة. كما أعلنت OpenAI خلال عطلة نهاية الأسبوع عن تعليق تدريب أحدث نماذجها، على أن يُستأنف العمل فقط بعد التأكد من توفر ضمانات إضافية للسلامة والتوافق مع القيم، فيما تراجع الشركة حالياً سجلات نشاط العوامل منذ يناير الماضي لفهم ما جرى بدقة أكبر.

ويرى تشين أن حادثة Hugging Face مثّلت نقطة تحوّل ضرورية للقطاع بأكمله، قائلاً إن اختفاء OpenAI من المشهد سيكون أمراً سيئاً للعالم. ويوضح أن الدرس الأهم الذي خرجت به الشركة هو أن مرحلة تدريب النماذج، وليس مرحلة نشرها فقط، تحتاج إلى مراقبة لصيقة: "لقد تعاملنا مع عملية التدريب باعتبارها عملية غير آمنة"، على حد تعبيره. فحتى وقت قريب، كانت OpenAI، شأنها شأن شركات الذكاء الاصطناعي الكبرى الأخرى، تستخدم نماذج لغوية متخصصة لمراقبة سلسلة التفكير في نماذجها الاستهلاكية بعد نشرها فقط، أما الآن فقد بات كل نشاط تدريب يمر عبر هذه المراقبة، إلى جانب تحويل ما بين 5 و10 بالمئة من موارد الحوسبة الضخمة للشركة من تدريب نماذج جديدة إلى العمل على السلامة، فضلاً عن تحسين خطوط التواصل بين فرق الأبحاث وفرق الأمن داخل الشركة.

ويعترف تشين بأن إشارات التحذير كانت موجودة قبل أشهر من حادثة Hugging Face، لكنها فُسّرت تفسيراً خاطئاً، إذ كانت بعض عوامل الذكاء الاصطناعي تلجأ أحياناً إلى طلب المساعدة من بشر عبر منصة Slack أثناء أداء مهامها، وهو سلوك بدا حينها طريفاً لا مقلقاً. ويقول تشين إن الدرس الأكبر كان في مدى السرعة التي يمكن أن يتحول بها مثل هذا السلوك إلى أثر بحجم حادثة Hugging Face. وبحسب تقرير نشرته صحيفة نيويورك تايمز، فإن موظفين في OpenAI كانوا قد حذّروا الإدارة التنفيذية، بما في ذلك الرئيس غريغ بروكمان، قبل أشهر من وقوع الحادثة من أن النماذج لا تُراقب بالشكل الكافي أثناء تدريبها.

وقد دفعت تداعيات الحادثة منافسي OpenAI، ومن بينهم Anthropic وGoogle DeepMind وSpaceXAI، إلى الدعوة إلى إبطاء وتيرة تطوير الذكاء الاصطناعي في القطاع. وعندما سُئل تشين كيف يتوافق هذا مع حدة المنافسة الدولية والسباق نحو طروحات عامة بقيمة تريليونات الدولارات، أجاب: "لن نطلق النار على أقدامنا ونبتعد عن طليعة هذا المجال، فذلك خيار استراتيجي سيئ للغاية"، مضيفاً أن الهدف الحقيقي هو إرساء معيار صناعي، وأن ذلك سيجعل القطاع بأكمله أكثر أماناً كلما التزمت به شركات أكثر.

ومع ذلك، يقر تشين بأن عليهم الاستعداد لاحتمال ظهور نماذج مفتوحة المصدر، خلال ستة أشهر إلى عام من الآن، تضاهي في قدراتها العوامل التي تسببت في حادثة Hugging Face، لكنها قد تكون مُصمَّمة عمداً لتكون غير متوافقة مع القيم الإنسانية، بهدف مهاجمة بنى تحتية أو إحداث ضرر متعمد. أما بشأن المخاوف الوجودية الأكثر تطرفاً التي يطرحها بعض الباحثين حول احتمال أن يقضي الذكاء الاصطناعي على البشرية، فيقول تشين إن الباحثين فئة متنوعة الآراء، لكنه شخصياً لا يرى أن على البشرية الاستسلام لفكرة وجود احتمال للخطر الوجودي، معتبراً أن المختبرات الرائدة تملك القدرة على ضمان ألا تتجاوز مخاطر نماذجها عتبة مقبولة قبل طرحها للاستخدام.

تتصاعد أهمية قضايا أمان نماذج الذكاء الاصطناعي في ظل الاعتماد المتزايد على الخدمات التوليدية في قطاعات التعليم والصحة والخدمات الحكومية بالدول العربية. وقد خصصت الهيئة الوطنية للذكاء الاصطناعي السعودية ومكتب الذكاء الاصطناعي الإماراتي موارد لتنظيم استخدام النماذج التوليدية ووضع ضمانات لسلامتها. كما تُجري جامعة محمد بن زايد للذكاء الاصطناعي أبحاثاً في هشاشة النماذج الكبرى. ويستدعي اختراق Hugging Face مراجعة السياسات المعتمدة في المنصات العربية التي تبني خدماتها على النماذج مفتوحة المصدر.

ويختم تشين حديثه بالقول إن الوقت قد حان لتسخير قدرات الذكاء الاصطناعي في خدمة الإنسانية، من اكتشاف الأدوية إلى العلوم المادية، مقراً بوجود قدر من المخاطر لكنه يرى أن الفوائد المحتملة تفوقها بكثير إن أُحسن توضيحها للجمهور.

المصدر الأصلي
MIT Technology Review
قراءة المقال الأصلي ↗
قصة اليوم · كل صباح

أعجبك التقرير؟ استلم واحداً كل صباح.

قصةٌ تقنية واحدة تستحقّ وقتك، بالعربية. بلا إعلانات، بلا إزعاج.

بلا إعلانات · إلغاء الاشتراك بنقرة واحدة · بياناتك آمنة

اقرأ أيضًا

المزيد من ذكاء اصطناعي

تصور للمعالج الضوئي العصبي المستخدم لكشف مقاطع فيديو التزييف العميق

معالج ضوئي يكتشف التزييف العميق في الفيديو بدقة تقارب 98%

باحثون في جامعة كاليفورنيا لوس أنجلوس يطورون معالجاً عصبياً ضوئياً يفحص عشرات مقاطع الفيديو في آنٍ واحد باستخدام الضوء بدلاً من الكهرباء، لكشف التزييف العميق بدقة واستهلاك طاقة منخفضين.

ScienceDaily
صورة معاد بناؤها بالذكاء الاصطناعي من بيانات مسح دماغي وظيفي

علماء يطورون نظام ذكاء اصطناعي يعيد بناء الصور من مسح الدماغ في ساعة واحدة

باحثون في معهد وايزمان يطورون مُفسِّراً دماغياً بالذكاء الاصطناعي يعيد بناء ما يراه الشخص من بيانات التصوير الوظيفي، ويخفض زمن المعايرة اللازم من 40 ساعة إلى ساعة واحدة فقط.

MIT Technology Review
تصوير فني لأسراب الذكاء الاصطناعي المتشابكة تحمي الشبكات السيبرانية

أرمادين: 255 مليون دولار لحماية الشركات بأسراب الذكاء الاصطناعي

مؤسس مانديانت كيفن مانديا يطلق أرمادين، شركة تستخدم أسراباً من عوامل الذكاء الاصطناعي المستقلة لمحاكاة هجمات القراصنة واختبار دفاعات الشركات بتكلفة أقل وسرعة أكبر.

TechCrunch
تصور فني لجزيء الحمض النووي الحلزوني المزدوج يرمز لتسلسلات الجينات التي تحللها أنظمة الذكاء الاصطناعي

متى يمكن القول إن الذكاء الاصطناعي حقق اكتشافاً علمياً فعلياً؟

أثار إعلان أنثروبيك عن اكتشاف نمط جيني عبر عملاء كلود جدلاً علمياً حول حدود نسب الاكتشافات للذكاء الاصطناعي، بعدما شكك باحثون في طبيعة الإنجاز الحقيقي.

MIT Technology Review
شعار منصة ريديت

ريديت تغلق خلاصات RSS وواجهتها البرمجية العامة بسبب روبوتات الذكاء الاصطناعي

منصة ريديت تعلن وقف دعم خلاصات RSS في نوفمبر 2026 وإنهاء الوصول العام إلى واجهة برمجة التطبيقات في مارس 2027، بذريعة مكافحة استخلاص البيانات الآلي.

TechCrunch
صورة جوية لمبنى البنتاغون، مقر وزارة الدفاع الأمريكية

اختراق استمر تسعة أشهر يكشف بيانات ملايين من عسكريي الجيش الأمريكي

أبلغت وزارة الدفاع الأمريكية ملايين العسكريين الحاليين والسابقين بأن بياناتهم الشخصية، بما فيها أرقام الضمان الاجتماعي، سُرقت عبر ثغرة في نظام لمشاركة الملفات.

TechCrunch
كبير باحثي OpenAI يدافع عن سلامة النماذج بعد اختراق Hugging Face — ألمعي