T-Technologie: Open Source strategie v AI/ML a LLM vývoji

Otevřené inovace v AI/ML: Strategie T-Technologií pro rozvoj LLM a nástrojů

Skupina T-Technologie aktivně rozvíjí oblast umělé inteligence a strojového učení, sází přitom na open source přístup. To umožňuje nejen zlepšovat interní produkty, ale také přispívat do globální inženýrské komunity. Základem strategie je hluboké pochopení důležitosti otevřených dat, modelů a nástrojů pro urychlený rozvoj AI technologií, zejména v oblasti velkých jazykových modelů (LLM).

Filozofie Open Source ve vývoji AI

Rozvoj otevřených technologií v oblasti umělé inteligence se stal klíčovým prvkem strategie T-Technologií. Společnost, po vzoru světových lídrů, se aktivně podílí na open source ekosystému, vydáváním vlastních LLM, knihoven a datových sad. Tento přístup je dán nejen touhou sdílet výsledky práce, ale také pragmatickými cíli, jako je posílení technologické značky a přilákání vysoce kvalifikovaných specialistů. Anatolij Potapov, vedoucí skupiny pro fundamentální technologie LLM, poznamenává, že iniciativy k publikování otevřených řešení vycházejí přímo od vývojových týmů a získávají plnou podporu top managementu.

V AI průmyslu je kultura otevřenosti obzvláště silná, protože pokrok do značné míry závisí na sdílení výzkumů, modelů a nástrojů. To umožňuje společnostem a výzkumníkům nevynalézat znovu kolo, ale stavět na základech již existujících řešení, čímž se urychlují inovace. Pro T-Technologie se open source stal způsobem validace vlastních základních řešení a potvrzení významu zvoleného směru. Podobné iniciativy jsou podle Daniila Gavrilova, který vede výzkum v AI, nezbytností, neboť výzkum by měl být ze své podstaty otevřený a reprodukovatelný.

Přínosy open source pro společnost jsou mnohostranné:

Posílení technické značky: Publikace vysoce kvalitních modelů a nástrojů zvyšuje povědomí o společnosti v IT komunitě.
Přilákání talentů: Otevřené projekty slouží jako silný magnet pro přední ML inženýry a výzkumníky, kteří chtějí pracovat s pokročilými technologiemi a přispívat do odvětví.
Optimalizace interních procesů: Řešení vyvinutá pro open source často nacházejí uplatnění uvnitř společnosti, čímž zvyšují efektivitu operačních úkolů.
Zpětná vazba od komunity: Interakce s externími vývojáři umožňuje získávat cenné ohlasy, zlepšovat produkty a identifikovat nové směry pro výzkum.
Investice do komunity: Podpora open source je vnímána jako příspěvek k rozvoji celého inženýrského odvětví, což je z dlouhodobého hlediska výhodné pro všechny účastníky trhu.

Klíčové Open Source Projekty a Nástroje

T-Technologie aktivně vyvíjí a publikuje různá AI/ML řešení, zahrnující jak samotné velké jazykové modely, tak nástroje pro jejich trénink a analýzu. Mezi nejznámější projekty patří jazykové modely T-Pro 2.0 a T-One, které představují třetí generaci vlastních LLM společnosti. Tyto modely, spolu s dříve vydanou T-lite, demonstrují schopnost společnosti vytvářet konkurenceschopná základní řešení.

Zvláštní pozornost je věnována nástrojům pro práci s LLM. Knihovna Turbo Alignment je jedním z klíčových projektů v této oblasti. Je určena pro jemné doladění (finetuning) velkých jazykových modelů pro konkrétní produktové úkoly. Tento nástroj, vyvinutý ve spolupráci výzkumných a produktových týmů, se stal žádaným jak uvnitř společnosti, tak i mimo ni, čímž prokázal svou efektivitu a univerzálnost. Takové nástroje se podle Anatolije Potapova stávají „opakovaně použitelným stavebním kamenem“, který přináší užitek v mnoha projektech.

Kromě modelů a nástrojů společnost sdílí také otevřené datové sady a benchmarky. Například byla publikována syntetická křížově doménová datová sada pro výzkum v oblasti doporučovacích systémů. To přispívá ke zvýšení reprodukovatelnosti vědeckých prací a urychluje pokrok v souvisejících oblastech AI. Zveřejněné materiály (jako ReBased, CORL, Headless-AD) podporují výzkum a poskytují komunitě užitečné zdrojové kódy a jádra pro trénink.

Výzkum a vývoj: Fundamentální a aplikovaný přístup

Struktura AI divize T-Technologií zahrnuje jak laboratoř fundamentálního výzkumu, tak centrum aplikovaného RnD (Research & Development). Tento duální přístup umožňuje společnosti současně se věnovat dlouhodobým vědeckým projektům a řešit aktuální obchodní úkoly.

Fundamentální výzkum, vedený Daniilem Gavrilovem, se zaměřuje na vytváření pokročilých technologií s dlouhodobou vizí. Výsledky těchto výzkumů jsou často publikovány ve vědeckých článcích na konferencích kategorie A*, což slouží jako forma validace pokroku a demonstrace expertní úrovně. Cílem takových publikací je nejen sdílet znalosti, ale také učinit výzkum reprodukovatelným, což je základní kámen vědecké metody.

Aplikované RnD projekty jsou zaměřeny na vytváření řešení pro konkrétní obchodní linie společnosti. Tyto týmy sestavují produkty z již existujících nebo rychle vyvíjených technologií. Během těchto vývojových prací se mohou objevit i nové výzkumy, pokud tým získá přesvědčivé výsledky, které stojí za publikaci. Taková interakce mezi fundamentálními a aplikovanými směry přispívá k formování silné interní AI komunity, kde dochází k výměně znalostí a zkušeností.

Tento přístup umožňuje společnosti:

Vytvářet pokročilé technologie: Fundamentální výzkum pokládá základy pro budoucí inovativní produkty.
Rychle reagovat na potřeby byznysu: Aplikované týmy operativně implementují AI řešení do stávajících produktů.
Rozvíjet interní expertízu: Interakce mezi různými typy výzkumů obohacuje zkušenosti specialistů a stimuluje jejich profesní růst.
Formovat inovativní kulturu: Neustálé hledání nových řešení a ochota sdílet znalosti se stávají součástí firemní DNA.

Příspěvek komunitě a vzdělávání

Kromě publikace otevřených modelů a nástrojů T-Technologie aktivně investuje do rozvoje AI komunity a vzdělávání. To zahrnuje pořádání vzdělávacích akcí, přednášení kurzů na univerzitách a spolupráci se vzdělávacími centry, jako je „Sirius“. Cílem těchto iniciativ je nejen popularizace vlastních řešení, ale také zvýšení celkové úrovně AI kompetencí v odvětví.

Anatolij Potapov poznamenává, že používání vlastních modelů a nástrojů ve vzdělávacích programech, například v „Siriusu“, umožňuje připravovat stážisty, kteří jsou již obeznámeni s technologickým stackem společnosti. To zjednodušuje proces náboru a integrace nových specialistů. Navíc aktivní šíření řešení v komunitě vede k tomu, že do společnosti přicházejí pracovat lidé, kteří již mají zkušenosti s jejich nástroji.

Daniil Gavrilov zdůrazňuje, že vzdělávací aktivity, jako je přednášení kurzů pro studenty, jsou vnímány jako investice do budoucnosti. Cílem není jen najít zaměstnance, ale rozvíjet oblast AI jako celek, přispívat k růstu expertízy a inovací. Publikace vědeckých prací, i když nejsou přímými návody, poskytují znalosti výzkumníkům a vývojářům, kteří je mohou využít k rozvoji svých projektů. Tímto způsobem společnost přispívá ke kolektivnímu pokroku celé AI sféry.

Je důležité poznamenat, že v situaci, kdy tréninkové zprávy velkých jazykových modelů od jiných společností často představují pouze deklarace bez podrobností, se T-Technologie snaží zveřejňovat dostatečně detailní materiály, které umožňují reprodukovat jejich výsledky. To odpovídá principům otevřené vědy a přispívá k transparentnosti v odvětví.

Co je důležité

Open Source jako strategie: T-Technologie aktivně využívá otevřený kód pro rozvoj AI/ML, posílení značky a přilákání talentů.
Klíčové projekty: Společnost vydává vlastní LLM (T-Pro 2.0, T-One), nástroje (Turbo Alignment) a datové sady, čímž přispívá k rozvoji globálního AI ekosystému.
Dvojí přístup k výzkumu: Kombinace fundamentálního a aplikovaného RnD umožňuje vytvářet pokročilé technologie a operativně je implementovat do produktů.
Příspěvek komunitě: Aktivní účast na vzdělávacích programech a publikace vědeckých prací přispívají ke zvýšení celkové úrovně AI kompetencí.
Reprodukovatelnost a transparentnost: Společnost se snaží poskytovat detailní materiály pro své open source projekty, čímž zajišťuje možnost jejich reprodukce a dalšího rozvoje.

— Editorial Team