Еволюція PCIe від 4.0 до 7.0 у системах навчання LLM

Навчання сучасних LLM (на кшталт GPT-5 або нових ітерацій Gemini) вимагає безпрецедентної пропускної здатності. Коли терабайти ваг моделі передаються між оперативною пам’яттю, NVMe-накопичувачами та кластерами GPU (H100/H200/B200), вузьким місцем стає саме інтерфейс PCIe.

PCIe 4.0 та 5.0: Епоха становлення ШІ

• PCIe 4.0: Стала стандартом для перших масових ШІ-прискорювачів. Проте швидкості 32 ГБ/с (x16) виявилося замало для швидкого завантаження датасетів у пам’ять GPU, що створювало простій обчислювальних ядер.

• PCIe 5.0: Подвоїла пропускну здатність до 64 ГБ/с. Це дозволило повноцінно використовувати можливості 400G Ethernet-адаптерів та SSD з IOPS понад 2 млн.

PCIe 6.0: Перехід на PAM4

PCIe 6.0 стала революційною через зміну методу кодування з NRZ на PAM4 (Pulse Amplitude Modulation 4-level). Це дозволило передавати 2 біти за один такт, подвоївши швидкість до 128 ГБ/с без значного збільшення частоти, що критично для енергоефективності дата-центрів.

PCIe 7.0: Магістраль для інфраструктури 2028 року

Специфікації PCIe 7.0 передбачають приголомшливі 512 ГБ/с (двонаправлено для x16). Це дозволить:

• Використовувати 800G та 1.6T Ethernet без жодних затримок.

• Реалізувати технологію CXL 3.1 для пулінгу пам’яті, де GPU можуть звертатися до віддаленої пам’яті так само швидко, як до власної.

Порівняльна таблиця характеристик PCIe (x16)

Прогноз на 2028 рік: Інфраструктурний ландшафт

Станом на 2028 рік ми очікуємо наступні зміни в архітектурі навчання LLM:

1. IOPS-революція: Накопичувачі на базі PCIe 7.0 досягнуть показників у 10–15 млн IOPS на один пристрій. Це дозволить тренувати моделі на нестиснутих даних у реальному часі.

2. Занепад класичних RAID: Завдяки швидкостям PCIe 7.0 програмно-визначені сховища (Software-Defined Storage) зможуть працювати на швидкості «заліза», що зробить інфраструктуру гнучкішою.

3. Енергетичний бар’єр: Незважаючи на перехід на PAM4, підтримка цілісності сигналу на швидкості 128 GT/s вимагатиме нових матеріалів для материнських плат (Low-loss PCB). Це призведе до подорожчання серверного обладнання на 25–30%.

4. Оптична комутація: Очікується поява перших комерційних рішень PCIe over Fiber (оптичний PCIe), що дозволить розносити компоненти сервера на відстань до 100 метрів без втрати швидкості.

Редакційний висновок

Для України та світу PCIe 7.0 стане «хребтом» для систем загального штучного інтелекту (AGI). Якщо PCIe 5.0 дозволила нам запустити чат-ботів, то PCIe 7.0 дозволить цим ботам миттєво оперувати знаннями всієї людської цивілізації в реальному часі.