سرور هوش مصنوعی AMD برای مدل‌های بزرگ

کارت‌های Instinct شرکت AMD از پرحافظه‌ترین کارت‌های بازارند؛ MI355X روی هر کارت ۲۸۸ گیگابایت حافظه دارد، یعنی مدل بزرگ با کارت کمتری جا می‌شود. کنارش کارت‌های Radeon برای ورک‌استیشن و رایانه‌های کوچک Ryzen AI Max را هم فراهم و راه‌اندازی می‌کنیم.

چرا AMD

نرم‌افزار اجرای مدل روی AMD، ROCm است. نسخه 10.1 آن (مهر ۱۴۰۵) vLLM، SGLang و PyTorch را رسماً پشتیبانی می‌کند و Ollama هم روی کارت‌های Radeon و Instinct کار می‌کند. AMD برای مدل‌های بزرگی که حافظه زیاد می‌خواهند انتخاب خوبی است؛ ولی بعضی مدل‌های تازه و بهینه‌سازی‌ها دیرتر از انویدیا به آن می‌رسند، پس پیش از خرید، مدل مورد نظرتان را روی همان سخت‌افزار می‌آزماییم.

کدام رده برای چه کاری

۰۱

سرور هشت‌کارتی Instinct

هشت MI355X یعنی حدود ۲٫۳ ترابایت حافظه در یک سرور؛ برای مدل‌های تریلیونی و ده‌ها کاربر هم‌زمان.

۰۲

کارت PCIe در سرور معمولی

MI350P با ۱۴۴ گیگابایت حافظه HBM3E در سرورهای هواخنک معمولی جا می‌شود و سرور مخصوص لازم ندارد.

۰۳

ورک‌استیشن با کارت Radeon

Radeon AI PRO R9700 با ۳۲ گیگابایت یا Radeon PRO W7900 با ۴۸ گیگابایت؛ برای مدل‌های میان‌اندازه در یک واحد.

۰۴

رایانه کوچک Ryzen AI Max

Ryzen AI Max+ 395 با ۱۲۸ گیگابایت حافظه مشترک در رایانه‌ای به اندازه یک کتاب؛ AMD می‌گوید مدل تا ۲۰۰ میلیارد پارامتر را اجرا می‌کند. نسل تازه، Ryzen AI Max+ PRO 495، تا ۱۹۲ گیگابایت حافظه دارد.

کارت‌ها و سرورهای Instinct

مشخصات از صفحه‌های رسمی AMD، بازبینی‌شده در ۳۰ مهر ۱۴۰۵.

محصولحافظه هر کارتپهنای بانددر یک سرور هشت‌کارتیچه مدلی جا می‌شود
Instinct MI300X۱۹۲ گیگابایت HBM3۵٫۳ ترابایت بر ثانیه۱٫۵ ترابایتمدل حدود ۱۵۰ میلیاردی در ۸ بیت روی هر کارت
Instinct MI325X۲۵۶ گیگابایت HBM3E۶ ترابایت بر ثانیه۲ ترابایتمدل حدود ۲۰۰ میلیاردی در ۸ بیت روی هر کارت
Instinct MI350X و MI355X۲۸۸ گیگابایت HBM3E۸ ترابایت بر ثانیه۲٫۳ ترابایتمدل‌های یک‌تریلیونی در ۸ بیت در یک سرور
Instinct MI350P (کارت PCIe)۱۴۴ گیگابایت HBM3E۴ ترابایت بر ثانیهبسته به سرورمدل حدود ۱۲۰ میلیاردی در ۸ بیت روی هر کارت
Instinct MI455X و رک Helios۴۳۲ گیگابایت HBM4۲۳٫۳ ترابایت بر ثانیهرک ۷۲ کارتی با ۳۱ ترابایت حافظهمدل‌های چندتریلیونی؛ با خنک‌کاری مایع

ستون «چه مدلی جا می‌شود» برآورد ماست، نه ادعای سازنده: هر میلیارد پارامتر در ۸ بیت حدود ۱ گیگابایت و در ۴ بیت حدود نیم گیگابایت حافظه می‌گیرد و باید جا برای حافظه گفت‌وگو و کاربران هم‌زمان هم بماند. MI350P و MI455X تازه معرفی شده‌اند؛ زمان تحویل آن‌ها را در پیش‌فاکتور اعلام می‌کنیم.

ورک‌استیشن و رایانه‌های کوچک

مشخصات از صفحه‌های رسمی AMD، بازبینی‌شده در ۳۰ مهر ۱۴۰۵.

محصولحافظهپهنای باندتوانچه مدلی جا می‌شود
Radeon AI PRO R9700۳۲ گیگابایت GDDR6۶۴۰ گیگابایت بر ثانیه۳۰۰ واتمدل تا حدود ۳۰ میلیارد در ۴ بیت؛ چهار کارت با هم ۱۲۸ گیگابایت
Radeon PRO W7900 و W7800 48GB۴۸ گیگابایت GDDR6۸۶۴ گیگابایت بر ثانیه۲۶۰ تا ۲۹۵ واتمدل حدود ۳۰ میلیاردی در ۸ بیت
Ryzen AI Max+ 395تا ۱۲۸ گیگابایت حافظه مشترکحدود ۲۵۶ گیگابایت بر ثانیه (محاسبه ما)۴۵ تا ۱۲۰ واتبه گفته AMD تا ۲۰۰ میلیارد پارامتر؛ مناسب مدل‌های MoE
Ryzen AI Max+ PRO 495تا ۱۹۲ گیگابایت (تا ۱۶۰ گیگابایت برای پردازنده گرافیکی)حدود ۲۷۳ گیگابایت بر ثانیه (محاسبه ما)۴۵ تا ۱۲۰ واتبه گفته AMD بیش از ۳۰۰ میلیارد پارامتر در ۴ بیت

ستون «چه مدلی جا می‌شود» برآورد ماست، نه ادعای سازنده: هر میلیارد پارامتر در ۸ بیت حدود ۱ گیگابایت و در ۴ بیت حدود نیم گیگابایت حافظه می‌گیرد و باید جا برای حافظه گفت‌وگو و کاربران هم‌زمان هم بماند.

نرم‌افزاری که رویش راه می‌اندازیم

لایهآنچه نصب و تنظیم می‌کنیم
اجرای مدل برای چند کاربرvLLM یا SGLang؛ هر دو چند درخواست هم‌زمان را با هم پردازش می‌کنند
اجرای سبک و آزمایشیllama.cpp یا Ollama برای یک کاربر، آزمایش و مدل‌های کوچک
رابط برنامه‌نویسیAPI سازگار با OpenAI، تا برنامه‌هایی که امروز به سرویس خارجی وصل‌اند بدون بازنویسی به مدل لوکال وصل شوند
دستیار و اسناددستیار فارسی، جست‌وجو در اسناد داخلی با ذکر منبع (RAG) و گردش‌کارهای n8n
ورود و پایشورود با حساب سازمانی، ثبت پرسش و پاسخ، و پایش مصرف GPU، صف درخواست‌ها و زمان پاسخ

از اولین تماس تا سامانه‌ای که کار می‌کند

سخت‌افزار را بعد از سنجیدن مدل روی کار خود شما انتخاب می‌کنیم، نه از روی جدول. پیش‌فاکتور فقط وقتی صادر می‌شود که معلوم باشد چه مدلی، برای چند نفر و با چه سرعتی باید کار کند.

  1. ۰۱

    گفت‌وگوی اول

    کار، تعداد کاربران، داده، محل نصب و سخت‌افزاری را که از قبل دارید مرور می‌کنیم.

  2. ۰۲

    سنجش روی کار شما

    چند مدل باز را روی نمونه کار واقعی‌تان می‌سنجیم و حافظه و سرعت لازم را از روی همان نتیجه حساب می‌کنیم.

  3. ۰۳

    پیش‌فاکتور مکتوب

    پیکربندی دقیق، مدل پیشنهادی، زمان تحویل و شرایط پشتیبانی را مکتوب می‌دهیم. قیمت را فقط در پیش‌فاکتور اعلام می‌کنیم.

  4. ۰۴

    نصب و راه‌اندازی

    سخت‌افزار را نصب می‌کنیم، مدل را راه می‌اندازیم و دستیار را به سامانه‌هایتان وصل می‌کنیم. یک بار هم سامانه را با قطع اینترنت بین‌الملل می‌آزماییم.

  5. ۰۵

    تحویل و نگهداری

    مستندات و آموزش تیم شما را تحویل می‌دهیم و بعد، طبق قرارداد، نگهداری و به‌روزرسانی مدل‌ها را بر عهده می‌گیریم.

چطور با ما در تماس باشید

فرم را پر کنید یا در واتس‌اپ پیام بدهید. هرچه این‌ها روشن‌تر باشد، پیش‌فاکتور دقیق‌تر است:

  • کاری که مدل باید انجام دهد (پاسخ از اسناد، کدنویسی، خلاصه‌سازی، پردازش تصویر یا صدا)
  • تعداد کاربرانی که هم‌زمان با سامانه کار می‌کنند و زمان پاسخی که می‌پذیرید
  • مدل یا خانواده سخت‌افزاری که در نظر دارید، اگر از پیش می‌دانید
  • محل نصب: اتاق سرور سازمان، مرکز داده، یا سخت‌افزاری که از قبل دارید
  • حساسیت داده و اینکه سامانه باید کاملاً بدون اینترنت کار کند یا نه
ژرف

دستیار هوش مصنوعی ژرف را همین حالا امتحان کنید

درباره دستیار فارسی، اتوماسیون اسناد یا اینکه از کجا شروع کنید، بپرسید.

پرسش‌های متداول درباره سرور هوش مصنوعی AMD

ROCm چیست و آیا همه مدل‌ها روی AMD اجرا می‌شوند؟

ROCm نرم‌افزار AMD برای اجرای محاسبات هوش مصنوعی روی کارت‌هایش است؛ چیزی شبیه CUDA در انویدیا. vLLM، SGLang و PyTorch رسماً روی آن کار می‌کنند و بیشتر مدل‌های باز رایج اجرا می‌شوند. بعضی مدل‌های تازه یا بهینه‌سازی‌های خاص اول برای انویدیا منتشر می‌شوند؛ برای همین مدل شما را پیش از خرید روی همان سخت‌افزار می‌آزماییم.

MI355X یا B200؟

MI355X با ۲۸۸ گیگابایت حافظه روی هر کارت از B200 (۱۸۰ تا ۱۹۲ گیگابایت) حافظه بیشتری دارد و مدل بزرگ‌تری در یک سرور جا می‌دهد. B200 و B300 انویدیا پشتیبانی نرم‌افزاری گسترده‌تری دارند. انتخاب به مدل، تعداد کاربران و نرم‌افزاری که استفاده می‌کنید بستگی دارد و آن را با آزمایش روی کار واقعی تعیین می‌کنیم.

Ryzen AI Max برای چه کاری مناسب است؟

برای دستیار یک واحد، توسعه و آزمایش، در رایانه‌ای کوچک و کم‌مصرف. پهنای باند حافظه‌اش حدود ۲۵۶ گیگابایت بر ثانیه است، پس برای مدل‌های MoE که برای هر کلمه فقط بخشی از پارامترها را می‌خوانند (مثل gpt-oss-120b یا Qwen3.5-122B-A10B) مناسب‌تر است تا مدل‌های متراکم بزرگ.

اجاره ساعتی یا ماهانه سرور GPU هم دارید؟

خیر. ژرف GPU را ساعتی یا ماهانه اجاره نمی‌دهد. سه راه داریم: سخت‌افزار را تأمین و در محل شما نصب می‌کنیم، یک ماشین اختصاصی برایتان راه می‌اندازیم که خودمان نگهداری‌اش می‌کنیم، یا مدل را روی سخت‌افزاری که از قبل دارید راه می‌اندازیم. اگر فقط چند ساعت پردازش برای آزمایش لازم دارید، همین را در گفت‌وگوی اول بگویید تا راه مناسب را پیشنهاد کنیم.

قیمت چقدر است؟

قیمت را روی سایت اعلام نمی‌کنیم، چون به پیکربندی، تعداد، بازار روز و نوع تحویل بستگی دارد. بعد از گفت‌وگوی اول و سنجش روی کار شما، پیش‌فاکتور مکتوب می‌دهیم که مدل دقیق سخت‌افزار، زمان تحویل و شرایط پشتیبانی را هم دارد.

آیا بدون اینترنت بین‌الملل کار می‌کند؟

بله، اگر مدل، نرم‌افزار اجرا، دستیار، ورود کاربران و ابزار پایش همه داخل شبکه شما باشند. هر جزئی که به سرویس خارجی وابسته باشد، در قطعی از کار می‌افتد؛ برای همین پیش از تحویل، سامانه را با قطع عمدی اینترنت بین‌الملل می‌آزماییم.

مدل را پیش از خرید روی AMD بیازمایید

بگویید چه مدلی را با چند کاربر می‌خواهید اجرا کنید. اجرای آن را روی AMD می‌سنجیم و اگر انویدیا یا مک برای کارتان بهتر است، همین را صریح می‌گوییم.

درخواست پیش‌فاکتور