تتطلع شركة Vals، المدعومة من أندريسن هورويتز، إلى أن تصبح المعيار الذهبي لقياس الذكاء الاصطناعي
أصبحت المقارنة المعيارية هي المعيار الصناعي لكيفية قيام شركات الذكاء الاصطناعي بالتحقق من قدرات نماذجها، وعندما تتأرجح المقاييس لصالحها، تبرز عن المنافسين وتعلن عن تفوقها. وبعبارة أخرى، فإن المعايير الجيدة تعني دائمًا علاقات عامة جيدة.
ولسوء الحظ، فقد توصلت الشركات أيضًا إلى كيفية التفوق على أنظمة قياس الأداء القديمة، والتي يعد الكثير منها أقدم، ولم يتم تصميمها لقياس قدرات النماذج الحديثة.
تقول شركة Vals، وهي شركة ناشئة تأسست عام 2024، إنها في مهمة لإصلاح هذا النظام المعيب للغاية. وفي غضون أقل من عامين، رسخت الشركة نفسها كحضور بارز في صناعة التكنولوجيا، وفي العام الماضي تمكنت من تأمين جولة أولية بقيادة 8VC وBloomberg Beta. ثم، في الشهر الماضي، وبعد فترة من النمو السريع، تمكنت من جمع 40 مليون دولار في الجولة الأولى بقيادة أندريسن هورويتز.
ريان كريشنان، المؤسس المشارك للشركة البالغ من العمر 25 عامًا، والذي تدرب سابقًا في شركة Palantir، وعمل كطالب جامعي في جامعة ستانفورد، في شركة Microsoft ومختبر الذكاء الاصطناعي في المدرسة الذي نال استحسانًا كبيرًا. يقول كريشنان إن فالس ولد من ملاحظاته الخاصة حول كيفية تخلف قياس الأداء عن التقدم الذي حققته الصناعة التي تم تصميمه لقياسها.
يقول كريشنان: “لقد شهدنا وصول مجموعة من النماذج الجديدة ذات الكفاءة العالية إلى السوق بسرعة، ولم تكن المعايير الأكاديمية تواكب هذا التقدم الحدودي”. وقال كريشنان إنه مع دمج الذكاء الاصطناعي في كل جزء من المجتمع، يجب أن تكون هناك معايير للتحقق من أن النماذج يمكنها القيام بما تعلن الشركات أنها تستطيع القيام به.
في الأسبوع الماضي، أخذني المؤسس الشاب في جولة حول مكتب شركته المكون من طابقين في شارع فولسوم في سان فرانسيسكو – وهو مبنى قديم من الطوب كان قبل قرن من الزمان بمثابة موقع لمصنع جعة كبير. بدلاً من الإنتاج الصناعي للبيرة، أصبح الهيكل التاريخي الآن موطنًا لعدد من الشركات الناشئة المختلفة التي تتطلع إلى شحن مستقبل صناعة التكنولوجيا.
قال لي كريشنان: “من الناحية التاريخية، أعتقد أنه تم إجراء التقييم لتقييم الذكاء بطريقة مجردة للغاية”. “مثل، هل تعرف العارضات المعلومات الكافية لتتمكن من أداء اختبار نوع امتحان المحاماة؟”
هنا يسعى فالس إلى تمييز نفسه. في حين أن العديد من أنظمة قياس الأداء تقدم اختبارات متاحة للجمهور (وهذا يمكن أن يسمح للشركة بتدريب نموذجها على تلك الاختبارات، وبالتالي يمكن القول إنها تغش في امتحانها)، فإن Vals لا تكشف علنًا عن مواد الاختبار المحددة الخاصة بها. بدلاً من قياس المعرفة العامة لنموذج الذكاء الاصطناعي، تقوم Vals أيضًا بتقييم النماذج بناءً على قدرتها على إكمال المهام المعقدة المرتبطة بصناعات محددة مثل القانون والتمويل والترميز.
وقال كريشنان: “ما نقوم به هو في الواقع النظر في التأثيرات الحقيقية للنماذج”. “هل يمكنهم القيام بعمل ينتج عنه منتج بنفس جودة الإنسان في كل مجال؟”
ويقول إن الفكرة هي التحقق ليس فقط من النتائج الإيجابية، بل أيضًا من النتائج السلبية. والأمل هو تحليل كيف “إذا انتشرت هذه النماذج في العالم، فما هي العواقب السلبية التي ستترتب على ذلك”.
القدرات التي يقيسها فالس آخذة في النمو. بالإضافة إلى المزيد من الصناعات التقليدية، تواصل الشركة الناشئة الاندفاع نحو مجالات أكثر فريدة من نوعها. “لدينا معيار للتحسين الذاتي العودي. إننا نقوم ببعض الأعمال في مجال الصحة العقلية، والأمن السيبراني، والأمن البيولوجي، وحتى قانون النزاعات المسلحة لوضع نماذج لفهم كيفية تطبيق اتفاقية جنيف،” يقول كريشنان.
تدفع الشركات لشركة Vals مقابل اختبار نماذجها، وهو ما قد يكون مفهومًا غريبًا قد يخطر على بالك. لماذا تدفع الشركة لتعلم أن نموذجها لا يعمل بشكل جيد؟ لكن وجود قياس فعال يساعد الشركات على استكشاف الأخطاء وإصلاحها وتحسينها بمرور الوقت. يقارن كريشنان نموذج إيراداته بالطريقة التي قد يدفع بها الطالب لمجلس الكلية مقابل أداء اختبار SAT.
وفي المقابل، أصبحت هذه التقييمات عوامل رئيسية في اتخاذ القرار بالنسبة للشركات التي تتطلع إلى الحصول على نماذج جديدة للذكاء الاصطناعي.
كشفت الشركة الناشئة مؤخرًا أن إيراداتها تبلغ حاليًا ثمانية أضعاف ما كانت عليه في العام الماضي. موظفيها ينمو أيضا. فالس، التي بدأت العام بثمانية أشخاص فقط، تضاعفت ثلاث مرات بالفعل إلى فريق مكون من 25 شخصًا. وقال كريشنان إنه مع نمو الشركة الناشئة، تتمثل الخطة في الانتقال إلى مكتب أكبر بكثير، بالإضافة إلى تعيين 10 إلى 15 شخصًا إضافيًا. كما أطلقت الشركة مؤخرًا برنامجًا يتمحور حول تقديم تقييمات نموذجية للوكالات الفيدرالية.
يرى كريشنان أن نظام المقارنة المرجعية الذي تتبعه شركته هو مستقبل كيفية تفكير شركات الذكاء الاصطناعي في تنمية أعمالها وبناء ثقة الجمهور.
وقال: “بدأت شركات الذكاء الاصطناعي في طرح أسهمها للاكتتاب العام. وطرحت شركة SpaceX أسهمها للاكتتاب العام. ومن المقرر أن يتم طرح شركة Anthropic في وقت لاحق من هذا العام. وأظن أن OpenAI سيتم طرحها للعامة قريبًا. وأعتقد أنه نظرًا لأن نماذج الذكاء الاصطناعي أصبحت جزءًا أساسيًا من الاقتصاد ومنتشرة على نطاق أوسع، فإن أنواع المعايير والتقييمات التي نقوم بها ستقود استخدامها وستكون جزءًا أساسيًا من كيفية تقديم هذه الشركات لإيداعاتها العامة أو التحدث عن الاستثمارات المحتملة التي ستفعلها في الذكاء الاصطناعي”.
عندما تقوم بالشراء من خلال الروابط الموجودة في مقالاتنا، قد نكسب عمولة صغيرة. هذا لا يؤثر على استقلالنا التحريري.
