خبر یزد

آخرين مطالب

انقلاب انویدیا در هوش مصنوعی با پاسخ‌دهی 32 برابر سریع‌تر به کاربران علمي

انقلاب انویدیا در هوش مصنوعی با پاسخ‌دهی 32 برابر سریع‌تر به کاربران
  بزرگنمايي:

خبر یزد - ایسنا / انویدیا از اولین هوش مصنوعی «طولانی‌متن» (long-context AI) جهان رونمایی کرده است که می‌تواند همزمان به 32 برابر کاربران بیشتری خدمات در لحظه ارائه دهد.
این سیستم جدید به‌طور ویژه برای پردازنده گرافیکی بلک‌ول (Blackwell) طراحی شده و با استفاده از روشی نوآورانه به نام هلیکس (Helix)، بازنویسی و درک متن‌های خیلی طولانی را متحول می‌کند و استاندارد جدیدی برای تعامل سریع و هم‌زمان با کاربران متعدد ایجاد می‌کند. بلک‌ول جدیدترین پردازنده گرافیکی انویدیا با قدرت و سرعت بالا برای اجرای مدل‌های بزرگ هوش مصنوعی است.
بازار
قدرتی نو برای پردازش متن‌های عظیم
به نقل از آی‌ای، انویدیا یک روش جدید و قدرتمند به نام موازی‌سازی هلیکس (Helix Parallelism) ارائه کرده است که می‌تواند به‌طور چشمگیری عملکرد مدل‌های هوش مصنوعی را هنگام پردازش متن‌های بسیار طولانی بهبود بخشد.
این روش به مدل‌های هوش مصنوعی این امکان را می‌دهد که میلیون‌ها کلمه را به‌طور هم‌زمان پردازش کنند. برای مثال زمانی که یک چت‌بات یا دستیار هوش مصنوعی باید کل یک دایرهالمعارف یا مکالمه چندماهه را بررسی کند و درعین‌حال پاسخ‌هایی بسیار سریع بدهد.
هلیکس به‌طور ویژه برای هماهنگی با پردازنده‌های گرافیکی جدید انویدیا به نام بلک‌ول طراحی شده که پهنای باند حافظه بسیار بالا و قدرت محاسباتی فوق‌العاده‌ای دارند.
مشکل اصلی: پردازش حافظه زیاد و سنگین
وقتی مدل‌های هوش مصنوعی بزرگ می‌خواهند پاسخ جدید تولید کنند، باید تمام متن‌های قبلی را که به آن‌ها داده شده بررسی کنند این مجموعه‌ی قبلی «کانتکست» یا متن زمینه (context) نامیده می‌شود.
برای هر کلمه جدید، مدل باید بارها و بارها حافظه‌ای به نام KV cache را بخواند، که حاوی همه توکن‌ها یا کلمات قبلی است. این خواندن مکرر باعث فشار شدید به حافظه واحد پردازش گرافیکی (GPU) می‌شود. علاوه بر این، مدل باید در هر مرحله مقادیر عظیمی از داده‌ها را برای بخش شبکه تغذیه پیش ‌رو (FFN) دوباره از حافظه بارگیری کند، که باعث کندی شدید، مخصوصا در برنامه‌های زنده مانند چت‌بات‌ها می‌شود.
تاکنون، برنامه‌نویسان از روشی به نام موازی‌سازی تِنسوری (Tensor Parallelism) استفاده می‌کردند تا این فشار را بین چند واحد پردازش گرافیکی پخش کنند، اما بعد از یک حد خاص، واحدهای پردازش گرافیکی مجبور می‌شوند نسخه‌های تکراری از حافظه KV را نگه دارند، که باعث می‌شود فشار حافظه بیشتر هم بشود.
هلیکس چطور این مشکل را حل می‌کند؟
هلیکس با جدا کردن دو بخش اصلی مدل یعنی توجه یا attention و شبکه تغذیه پیش ‌رو آن‌ها را به‌طور مستقل اجرا می‌کند. در مرحله توجه (attention)، هلیکس با استفاده از روشی جدید به نام KV Parallelism (KVP) حافظه KV را بین واحدهای پردازش گرافیکی تقسیم می‌کند، بدون اینکه تکراری ایجاد شود.
به زبان ساده به‌جای اینکه هر واحد پردازش گرافیکی مجبور باشد کل حافظه قبلی را بخواند، فقط بخشی از آن را پردازش می‌کند. سپس، همین واحدها به حالت قبلی (TP) برمی‌گردند تا بخش شبکه تغذیه پیش ‌رو را اجرا کنند این یعنی استفاده‌ی هوشمندانه از منابع، بدون اینکه واحدهای پردازش بیکار بمانند.
هلیکس از اتصال‌های پرسرعت انویدیا مثل NVLink و NVL72 استفاده می‌کند تا داده‌ها را بین واحدهای پردازش گرافیکی به‌سرعت جابه‌جا کند. همچنین تکنیکی به نام HOP-B را معرفی می‌کند که محاسبات و انتقال اطلاعات را هم‌زمان انجام می‌دهد، تا تاخیرها باز هم کمتر شوند.
جهشی بزرگ در عملکرد
در شبیه‌سازی‌هایی که با یک مدل بسیار بزرگ به نام DeepSeek-R1 671B انجام شده که مدلی با ظرفیت پردازش یک میلیون توکن یا کلمه است، مشخص شد که هلیکس می‌تواند تا 32 برابر بیشتر از روش‌های قبلی به کاربران هم‌زمان پاسخ دهد و این بدون افزایش تاخیر انجام می‌شود.
در بارهای کاری سبک یعنی وقتی کاربران زیادی به‌طور هم‌زمان فعال نیستند، هلیکس می‌تواند زمان پاسخ‌دهی را تا 1.5 برابر کاهش دهد. حتی وقتی اندازه متن‌ها به میلیون‌ها کلمه برسد، هلیکس همچنان استفاده از حافظه را کنترل‌شده نگه می‌دارد و سرعت پردازش را ثابت نگه می‌دارد. این سیستم حافظه KV را به‌صورت چرخشی به‌روزرسانی می‌کند تا از فشار ناگهانی روی حافظه یا شلوغی بیش از حد واحدهای پردازش جلوگیری شود.
نتیجه نهایی
هلیکس به مدل‌های هوش مصنوعی امکان می‌دهد که در عین بزرگ شدن، سریع هم بمانند بدون اینکه عملکرد در لحظه(real-time) قربانی شود. این یعنی دستیارهای مجازی و ربات‌های حقوقی هوش مصنوعی اکنون می‌توانند با وجود بارهای عظیم، همچنان پاسخ‌گو، سریع و حاضر باقی بمانند.

لینک کوتاه:
https://www.khabareyazd.ir/Fa/News/734495/

نظرات شما

ارسال دیدگاه

Protected by FormShield
مخاطبان عزیز به اطلاع می رساند: از این پس با های لایت کردن هر واژه ای در متن خبر می توانید از امکان جستجوی آن عبارت یا واژه در ویکی پدیا و نیز آرشیو این پایگاه بهره مند شوید. این امکان برای اولین بار در پایگاه های خبری - تحلیلی گروه رسانه ای آریا برای مخاطبان عزیز ارائه می شود. امیدواریم این تحول نو در جهت دانش افزایی خوانندگان مفید باشد.

ساير مطالب

غیبت عجیب سلیمی در تمرین استقلال

انریکه: عثمان دمبله شایسته توپ طلا است

بازگشت مهاجم ناکام با پیراهن آبی

ژابی: پاریس پروژه دو ساله است، من تازه شروع کرده‌ام

خلاصه بازی پاری سن ژرمن 4 - رئال مادرید 0

همه‌‍‌چیز به نفع بازیکن خارجی استقلال

4 غول بزرگ WWE؛ چند بار قهرمان جهان شدند؟

خوشحالی گل به یاد دیوگو ژوتا؛ گل گونسالو راموس به رئال مادرید

پاری سن ژرمن 4-0 رئال مادرید؛ بزرگان زیر چکمه‌ی فاتحان نو، صدای له شدن تاریخ را شنیدی؟

خداحافظ لوکیتا؛ آخرین بازی مودریچ با پیراهن سفید

گل چهارم پاری سن ژرمن به رئال توسط راموس

استقبال هاشمیان و پیروانی از بازیکنان پرسپولیس

انرژی خاص به خرید مهم استقلال

لیگ ملت‌ها: آلمان فاتح یک ماراتن جذاب

شاید مهم‌ترین خرید این فصل استقلال!

درخشش اسکیت‌بازان ایران در کاپ جهانی ایتالیا

تلاش برای یافتن راه‌حل مسالمت‌آمیز در پرونده بیرانوند

حسین‌نژاد برای تیم روسی بازی کرد

لیگ ملت‌ها: آن‌ها جور مردان‌شان را می‌کشند

کشف ضربان‌های منظم در اعماق آفریقا از احتمال شکافت این قاره خبر می‌دهد

انقلاب انویدیا در هوش مصنوعی با پاسخ‌دهی 32 برابر سریع‌تر به کاربران

کاوشگر نیوهورایزنز ناسا اولین آزمایش ناوبری میان‌ستاره‌ای تاریخ را انجام داد

ماندن رناتو سانچز روی دست پاری سن ژرمن؛ او مشتری ندارد

گل اول پاری سن ژرمن به رئال توسط رویز

گل دوم پاری سن ژرمن به رئال توسط دمبله

دبل رویز؛ گل دوم پاری سن ژرمن به رئال

چرا آقایان حق ندارند برای دیدن بازی ما به سالن بیایند!

پیش بینی قیمت دلار، طلا و سکه پنجشنبه 19 تیر 1404

یافته‌های دانشمند ایرانی درباره توانایی «چت‌جی‌پی‌تی» در درک رنگ‌ها

مهسا کدخدا: علاقه داریم با تیم ملی مردان تمرین داشته باشیم

لیگ ملت‌ها: ولاسکو سریع صدر را پس گرفت

سعید معروف کراش خیلی از بازیکنان بود!

مهسا کدخدا ملی : اگر قد همسر آینده برای ما دو برابر اهمیت داره!

رقم قرارداد بانوان در برابر آقایان هیچ است!

شایعه بزرگ در ترکیه؛ مورینیو به دنبال طارمی

نان به نرخ دولتی به دست مردم نمی‌رسد

راهکاری طبیعی برای مبارزه با قارچ پژمرده‌کننده گوجه‌فرنگی

مهسا کدخدا : با دیدن سلام نظامی تیم ملی مردان بغض کردم!

حسینی: تمدید کردیم، خط گرفتند، زیرش زدند!

تیم ملی در گدانسک؛ رویا از اینجا آغاز می‌شود

تروریست فراری را شناسایی و معرفی کنید

اعمال مجازات‌های احتکار و گرانفروشی باید بازدارنده باشد

وزیر کار: با مدیریت سیاسی نمی توان اقتصاد را مدیریت کرد

مدیر روابط عمومی سازمان هواپیمایی کشوری: باید وجه مسافران بدون هیچ‌گونه کسری بازگردد

بازدهی بورس در هفته سوم تیر 1404

جغد کیهانی رصد شد

آیا بیوپلاستیک‌ها می‌توانند راه‌حلی برای زندگی فراتر از زمین باشند؟

اسم مهم در لیست ساپینتو؛ عارف غلامی

هاشمیان پرسپولیسی‌ها را سورپرایز کرد

عادت بد رئال با ژابی هم ترک نشد!