
Čipy pro umělou inteligenci, ilustrační obrázek FOTO: Image by Frank Rietsch from Pixabay
FOTO: Image by Frank Rietsch from Pixabay

Umělá inteligence (AI) mění svět kolem nás. Důležitou roli hraje i v prostředí sociálních sítí. Na vlastních jazykových modelech pracují všichni hlavní hráči. Investují do toho miliardy dolarů. Stranou nezůstala ani Meta, mateřská společnost sítě Facebook. Jazykové modely se nejčastěji trénují na grafických čipech. Náklady na ně jsou obrovské, stejně jako na energie. Není divu, že velcí hráči pracují i na vývoji vlastních čipů.
Mateřská společnost Facebooku, ale také WhatsUpu a Instagramu, Meta již zahájila první testy svého vlastního čipu. Ten si navrhla speciálně pro trénování jazykových modelů, které jsou dnes asi nejpopulárnější aplikací umělé inteligence. Známe je v podobě různých chatbotů. Meta letos do oblasti AI plánuje investovat necelých 120 miliard dolarů. Z toho by více než polovina měla směřovat právě do infrastruktury, kterou bude AI využívat.
Jak zjistila agentura Reuters ze dvou nezávislých zdrojů, Meta již začala s interním nasazováním čipu, a pokud test dopadne dobře, plánuje spustit výrobu v masovém měřítku. Čipů je totiž pro trénování neuronových sítí, které za jazykovými modely stojí, potřeba velké množství. „Je to klíčový milník,“ píše Reuters a dodává: „Metě to umožní začít navrhovat větší množství vlastních čipů pro různé aplikace. Tím se jí daří snižovat závislost na externích dodavatelích, jako je třeba NVIDIA.“
Z her do AI
Není to tak dávno, co navrhování čipů a jejich výrobu zvládalo jen několik málo firem. Nebylo výjimkou, že se konkrétní čip pro celý svět vyráběl v jedné jediné továrně. To už dnes neplatí, přesněji, továren není stále mnoho, ale díky digitalizaci jsou schopné pracovat pro mnohem více zákazníků. I proto se velké společnosti často pouštějí do návrhu vlastních čipů. Snaží se tak zbavit závislosti na výrobcích firem jako Intel či AMD. V tomto případě bude čip pro Metu vyrábět tchajwanská továrna TSMC.
Nástup umělé inteligence kartami zamíchal ještě více. Pro trénování jazykových modelů, které dnes používáme, se používají nejčastěji grafické čipy. Ty byly původně vyvinuty pro vytváření počítačové grafiky. Je to výpočetně extrémně složitý proces vyžadující zejména souběžné zpracování obrovského množství paralelních úloh. Trénink AI, zejména hlubokých neuronových sítí (deep learning), zahrnuje náročné výpočty s velkým množstvím dat, což činí GPU ideální volbou. GPU mají tisíce jader (na rozdíl od CPU, které mají jader méně, ale jsou zaměřeny na sériové výpočty). To umožňuje zpracovávat obrovské množství operací současně.
Neuronové sítě, AI, ilustrační obrázek FOTO: Image by Tony Melony from Pixabay
FOTO: Image by Tony Melony from Pixabay
Největším výrobcem těchto čipů je společnost NVIDIA. Jak důležití jsou výrobci čipů pro obor AI, se ukázalo na začátku roku, když čínský DeepSeek představil svůj jazykový model. Údajně ho totiž vytrénoval na mnohem menším počtu čipů než konkurence, akcie firmy NVIDIA se okamžitě propadly o desítky procent. Právě snížení závislosti na výrobcích grafických čipů je pro Metu (a nejen ji) jednou z hlavních motivací.
Současně by měl být ale čip vyvinutý speciálně pro trénování AI mnohem efektivnější, a především energeticky úspornější. Spotřeba energie je totiž u grafických čipů skutečně obrovská. Jak prozradil Reuters jeden z jejích zdrojů, nový tréninkový čip společnosti Meta je specializovaným akcelerátorem („zrychlovačem“). Je navržen tak, aby zpracovával pouze úkoly specifické pro umělou inteligenci. Díky tomu může být energeticky účinnější než integrované grafické procesory (GPU).
Na prahu nové éry
Nasazení v interním testování předcházelo dosažení důležitého milníku. Tak zvaný „tape-out“, tedy odeslání dokončeného návrhu čipu do výrobního závodu k fyzické produkci. Návrh tedy musí ve všech virtuálních testech prokázat funkčnost. Jak upozorňuje Reuters, typický tape-out stojí desítky milionů dolarů a jeho dokončení trvá zhruba tři až šest měsíců, bez záruky, že test uspěje. Kdyby návrh testy neprošel, musela by se Meta vrátit zpět na začátek a návrh přepracovat.
Se svými čipy má ale majitel Facebooku mnohem větší plány. Aktuální trénovací čip pro AI je nejnovějším přírůstkem v řadě Meta Training and Inference Accelerator (MTIA). Práce na tomto konkrétním čipu trvá již delší dobu a v určité fázi byl dokonce jeho vývoj pozastaven, píše Reuters. Již v loňském roce ale Meta vyvinula čip MTIA optimalizovaný k vykonávání interferencí. Tak se nazývá proces spojený s provozem systému umělé inteligence, kdy systém reaguje na chování uživatelů na sociální síti. Na základě toho určuje, jaký obsah se zobrazí ve zpravodajských kanálech Facebooku a Instagramu.
Jak Reuters potvrdil vysoce postavený manažer společnosti Meta, plánem je do budoucna využívat nejen interferenční, ale i tréninkový čip pro optimalizaci toho, co uživatel na sítích uvidí. „Později je v plánu na těchto čipech vybudovat své vlastní systémy generativní umělé inteligence, jako je chatbot Meta AI,“ řekl Reuters.