اپل به‌تازگی اقدام به به‌روزرسانی مدل‌های هوش مصنوعی خود کرده است که مجموعه‌ای از ویژگی‌های هوش مصنوعی را در سیستم‌عامل‌های iOS، macOS و سایر محصولات خود پشتیبانی می‌کند. با این حال، طبق ارزیابی‌های خود شرکت، این مدل‌ها در مقایسه با مدل‌های قبلی رقبا مانند OpenAI عملکرد ضعیف‌تری دارند.
طبق اطلاعیه‌ای که اپل روز دوشنبه منتشر کرده است، آزمون‌کنندگان انسانی کیفیت متن تولید شده توسط جدیدترین مدل “Apple On-Device” که به صورت آفلاین بر روی محصولاتی مانند آیفون اجرا می‌شود، را به‌گونه‌ای ارزیابی کردند که کیفیت آن “مقایسه‌ای” با متن مدل‌های مشابه گوگل و علی‌بابا بود، اما از آنها بهتر نبود.
از سوی دیگر، همان آزمون‌کنندگان مدل جدید و قوی‌تر اپل به‌نام “Apple Server” که برای اجرا در مراکز داده شرکت طراحی شده است را نسبت به GPT-4 OpenAI، که یک سال پیش معرفی شده، در رده پایین‌تری قرار دادند. در آزمون جداگانه‌ای که توانایی مدل‌های اپل در تحلیل تصاویر را ارزیابی می‌کرد، داوران انسانی مدل “Llama 4 Scout” متا را بر مدل Apple Server ترجیح دادند. این موضوع احتمالاً تعجب‌آور است زیرا در برخی از آزمون‌ها، مدل Llama 4 Scout عملکرد ضعیف‌تری نسبت به مدل‌های پیشرفته آزمایشگاهی از جمله گوگل، Anthropic و OpenAI داشته است.
نتایج این بنچمارک‌ها به گزارش‌هایی که بیان‌گر مشکلات بخش تحقیقات هوش مصنوعی اپل در رقابت با دیگر رقبای سرسخت این صنعت هستند، اعتبار بیشتری می‌بخشد. قابلیت‌های هوش مصنوعی اپل در سال‌های اخیر ناکافی به نظر رسیده است و به‌روزرسانی وعده داده شده برای سیری نیز به‌طور نامحدود به تعویق افتاده است.
برخی از مشتریان اپل نیز به‌دلیل تبلیغات درباره ویژگی‌های هوش مصنوعی که هنوز ارائه نشده‌اند، ازاین‌شرکت شکایت کرده‌اند. مدل Apple On-Device که دارای حدود 3 میلیارد پارامتر است، علاوه بر تولید متن، قابلیت‌هایی مانند خلاصه‌سازی و تحلیل متن را نیز ارائه می‌دهد. (پارامترها به‌طور کلی به مهارت‌های مشکل‌گشایی یک مدل مرتبط می‌شوند و مدل‌های با پارامترهای بیشتر معمولاً عملکرد بهتری نسبت به مدل‌های با پارامترهای کمتر دارند.)
از روز دوشنبه، توسعه‌دهندگان شخص‌ثالث می‌توانند از طریق فریم‌ورک مدل‌های بنیادین اپل به این ابزارها دسترسی پیدا کنند. اپل ادعا می‌کند که هر دوی مدل‌های Apple On-Device و Apple Server دارای ابزارهای بهبود یافته و کارآیی بالاتری نسبت به نسخه‌های قبلی خود هستند و می‌توانند حدود 15 زبان را درک کنند. این پیشرفت بخشی از یک دیتاست آموزشی گسترده‌تر است که شامل داده‌های تصویری، PDFها، اسناد، دست‌نوشته‌ها، اینفوگرافی‌ها، جداول و نمودارها می‌شود.