ایلان ماسک به دنبال توسعه قوی‌ترین سیستم آموزشی هوش مصنوعی جهان

ایلان ماسک طرح ساخت قدرتمند‌ترین سیستم آموزشی هوش مصنوعی با ۱۰۰ هزار پردازشگر انویدیا را اعلام کرد

ایلان ماسک، مدیرعامل شرکت، جزئیات برنامه جدید خود برای گسترش قوی‌ترین سیستم آموزش هوش مصنوعی در جهان را منتشر کرد. به گزارش سرویس اخبار تکنولوژی تکنا، ماسک در پستی در شبکه اجتماعی اکس اعلام کرد که قصد دارد در سریع‌ترین زمان ممکن به تکمیل یک خوشه پردازشی با ۱۰۰ هزار پردازشگر گرافیکی هاپر انویدیا بپردازد.

این تصمیم پس از جدایی همکاری از شرکت اوراکل گرفته شده است. پیش از این بر اساس قرارداد‌ها، گسترش این خوشه ۱۰۰ هزارتایی باید توسط اوراکل انجام می‌شد، اما اکنون ماسک تأکید کرده که ساخت این زیرساخت توسط خود انجام خواهد گرفت. طبق گزارش‌ها، اوراکل در حال حاضر ۲۴ هزار پردازشگر هاپر را برای آموزش مدل گراک ۲ در اختیار قرار داده است.

ماسک معتقد است که این سیستم تازه قادر خواهد بود در آینده نزدیک به سریع‌ترین زمان برای تکمیل فرآیند‌های آموزشی برسد. او اضافه کرد که آموزش در این سیستم از ماه جاری می‌لادی آغاز شده و می‌توان آن را با اختلاف زیاد قدرتمند‌ترین خوشه آموزشی جهان دانست. هدف اصلی از این پروژه، رقابت جدی با سایر شرکت‌های فعال در حوزه هوش مصنوعی اعلام شده است.

شرکت‌های بزرگ فناوری در حال حاضر تمرکز خود را بر ارتقا و انتشار مدل‌های جدید هوش مصنوعی متمرکز کرده‌اند. تا به امروز در این عرصه نسبتا کم‌صدا بوده، اما با انتشار مدل گراک ۲ که قرار است از ماه آینده می‌لادی رونمایی شود، این شرکت قصد دارد حضور پررنگ‌تری داشته باشد. به نظر می‌رسد توسعه این مدل به مراحل نهایی رسیده و در حال حاضر در فاز اصلاح خطا‌ها قرار دارد.

تحلیل‌گران معتقدند که جدایی از اوراکل و تصمیم به ساخت مستقل زیرساخت سخت‌افزاری، نشان‌دهنده عزم جدی برای کنترل کامل زنجیره تأمین محاسباتی در مقیاس بسیار بزرگ است. این حرکت می‌تواند به تسریع چرخه توسعه مدل‌های زبانی بزرگ و کاهش وابستگی به ارائه‌دهندگان ابری شخص ثالث منجر شود.

با راه‌اندازی این خوشه گسترده، انتظار می‌رود که ظرفیت محاسباتی در اختیار تیم‌های تحقیق به شدت افزایش یابد و امکان آزمایش معماری‌های پیچیده‌تر و داده‌های آموزشی حجیم‌تر فراهم آید. رقابت در حوزه هوش مصنوعی به فاز جدیدی وارد شده که در آن مالکیت سخت‌افزار کلیدی‌ترین مزیت استراتژیک محسوب می‌شود.

منتشر شدن مدل گراک ۲ در ماه‌های آینده، معیار واقعی سنجش موفقیت این سرمایه‌گذاری کلان خواهد بود. اگر ادعا‌های ماسک درباره سرعت و کارایی این سیستم محقق شود، می‌توان انتظار داشت که نقشه قدرت در صنعت هوش مصنوعی دچار تغییرات قابل‌توجه‌ی گردد.

از نظر فنی، پردازشگر‌های هاپر انویدیا با معماری هاپر و حافظه پهنای باند بالا، ستون فقرات محاسباتی آموزش مدل‌های زبانی بزرگ مدرن محسوب می‌شوند. هر واحد از این پردازشگر‌ها قادر است عملیات ماتریسی عظیم را به صورت موازی اجرا کند و با تکنولوژی، ارتباطات بین‌کارت با تأخیر بسیار پایین و باندویدی بالا فراهم می‌آورد. تجمع ۱۰۰ هزار واحد از این تراشه‌ها، قدرت محاسباتی در مرتبه اگزاسکیل را برای محاسبات هوش مصنوعی فراهم می‌سازد.

مقایسه با رقبا نشان می‌دهد که مایکروسافت و اوپن‌ای‌آی، گوگل با تراشه‌های TPU و، و متا با خوشه‌های محاسباتی خود، در حال رقابت برای دستیابی به مقیاس‌های مشابه هستند. تفاوت استراتژیک در تصمیم به مالکیت مستقیم سخت‌افزار به جای اجاره از ارائه‌دهندگان ابری، کنترل هزینه‌های بلندمدت و انعطاف‌پذیری در بهینه‌سازی لایه‌های سخت‌افزاری و نرم‌افزاری را تضمین می‌کند.

چالش‌های مهندسی در مقیاس ۱۰۰ هزار پردازشگر شامل مدیریت حرارت، توزیع برق، شبکه‌سازی با تأخیر پایین، و تحمل خطا در سطح سیستمی است. تیم‌های مهندسی باید راه‌حل‌های پیشرفته برای همگام‌سازی گرادیان‌ها در هزاران گره، بهینه‌سازی ارتباطات جمعی، و بازیابی سریع از خرابی‌های سخت‌افزاری پیاده‌سازی کنند. استفاده از تکنولوژی‌های شبکه‌ای مانند NDR یا روتر‌های اختصاصی، ضروریتی اجتناب‌ناپذیر است.

از منظر اقتصادی، سرمایه‌گذاری در ۱۰۰ هزار پردازشگر با قیمت واحد تقریبی ۳۰ تا ۴۰ هزار دلار، هزینه‌های سرمایه‌گذاری اولیه را به چندین می‌لیارد دلار می‌رساند. با احتساب هزینه‌های زیرساخت، برق، خنک‌سازی، و عملیات، هزینه کل مالکیت می‌تواند از ۱۰ می‌لیارد دلار فرا‌تر رود. این رقم، را در صف شرکت‌های با سرمایه‌گذاری سنگین‌ترین زیرساخت هوش مصنوعی در جهان قرار می‌دهد.

مدل گراک ۲ که انتشار آن برای ماه‌های آینده برنامه‌ریزی شده، انتظار می‌رود از معماری می‌کسچر آف اکسپرتس یا معماری‌های ترانسفورمر پیشرفته‌تری بهره ببرد. ادغام داده‌های بلادرنگ از پلتفرم اکس، می‌تواند مزیت منحصر به فردی در آموزش مدل‌های چندمدال و درک محتوای پویا فراهم آورد. این داده‌ها شامل متن، تصویر، ویدیو، و تعاملات کاربری در مقیاس جهانی است.

نظارت‌های تنظيمی بر توسعه هوش مصنوعی قدرتمند، چالش دیگری است که باید با آن روبرو شود. مقررات جدید اتحادیه اروپا، دستورالعمل‌های اجرایی ایالات متحده، و قوانین جدید چین، الزامات شفافیت، ارزیابی ریسک، و گزارش‌دهی را برای مدل‌های پیش‌خط تحمیل می‌کنند. مقیاس ۱۰۰ هزار پردازشگر، این مدل را قطعا در دسته مدل‌های سیستمی با ریسک بالا قرار می‌دهد.

تحلیل‌گران بازار پیش‌بینی می‌کنند که موفقیت عملیاتی این خوشه، می‌تواند ارزش‌گذاری را به شدت بالا ببرد و گردش سرمایه‌گذاری‌های جدید را به سمت شرکت هدایت کند. در صورتی که گراک ۲ بتواند در معیار‌های استاندارد مانند MMLU، و با، 3.5، و 1.5 رقابت کند، موقعیت بازار به شدت تغییر خواهد کرد.

برنامه زمان‌بندی ماسک برای تکمیل این خوشه در سریع‌ترین زمان ممکن، فرهنگ مهندسی خاص شرکت‌های او را بازتاب می‌دهد. اگرچه تاریخچه تسلا و اسپیس‌ایکس نشان‌دهنده توانایی دستیابی به اهداف دشوار است، اما پیچیدگی یک سامانه محاسباتی ۱۰۰ هزار پردازشگری، چالش‌های منحصر به فردی در یکپارچه‌سازی سخت‌افزار، نرم‌افزار، و عملیات دارد که مدیریت پروژه کلاس جهانی را می‌طلبد.

مطالب مشابه