يمثل إطلاق ميزة "Computer Use" في نموذج كلود 3.5 من شركة Anthropic نقلة نوعية في مجال الذكاء الاصطناعي والتفاعل مع الحواسيب. فلأول مرة، يمكن لنموذج ذكاء اصطناعي التحكم في واجهات المستخدم بطريقة تحاكي السلوك البشري بدقة متناهية.



يتميز النظام الجديد بقدرته على تحليل لقطات الشاشة في الوقت الفعلي والتحكم في مؤشر الماوس بدقة عالية، كما يمكنه النقر على الأزرار وكتابة النصوص والتنقل بين عناصر واجهة المستخدم المختلفة. يعتمد النظام على تقنية متطورة تحول التعليمات النصية إلى أوامر حاسوبية دقيقة، مع القدرة على تنفيذ مئات الإجراءات المتتالية وتصحيح الأخطاء ذاتياً.

تتعدد التطبيقات العملية لهذه التقنية الجديدة، حيث تبرز أهميتها في مجال تطوير البرمجيات واختبارها، وتحسين كفاءة خدمة العملاء من خلال التعامل مع واجهات المستخدم بشكل أكثر تعقيداً. كما تفتح آفاقاً جديدة في مجال التعليم من خلال توفير تجارب تعلم شخصية أكثر تطوراً.

ومع ذلك، لا تزال هناك بعض القيود التي تواجه هذه التقنية. فهي تواجه صعوبات في التعامل مع عمليات التمرير والسحب والإفلات والتكبير/التصغير. كما أن معدل نجاحها في المهام المعقدة مثل حجز رحلات الطيران يصل إلى 46% فقط، وحققت نتيجة 14.9% على منصة OSWorld مقارنة بـ 70-75% للأداء البشري.

وحرصاً على الأمان، اتخذت Anthropic عدة إجراءات وقائية مهمة، منها عدم تدريب النموذج على بيانات المستخدمين، وتوفير حماية ضد هجمات حقن التعليمات البرمجية، وتطوير أنظمة للتعرف على السلوكيات الضارة ومنعها.