Podle informací serveru The Information přináší nový model AI od OpenAI, kódově označený Orion, menší nárůst výkonu ve srovnání s jeho předchůdci.
Zaměstnanci, kteří Orion testovali, uvádějí, že dosáhl úrovně výkonu GPT-4 již po 20 % svého tréninku. Přechod z GPT-4 na očekávaný GPT-5 však údajně vykazuje menší kvalitativní zlepšení než skok z GPT-3 na GPT-4.
"Někteří výzkumníci ve společnosti se domnívají, že Orion není spolehlivě lepší než jeho předchůdce při zvládání určitých úkolů," uvedli zaměstnanci v The Information. "Orion si vede lépe v jazykových úkolech, ale nemusí překonat předchozí modely v úkolech, jako je kódování," dodal jeden ze zaměstnanců OpenAI.
Počáteční fáze trénování AI obvykle přinášejí nejvýznamnější zlepšení, zatímco následné fáze obvykle vedou k menším ziskům ve výkonu. V důsledku toho zbývajících 80 % tréninku pravděpodobně nepřinese pokrok srovnatelný s předchozími generačními vylepšeními.
Tato situace s nejnovějším modelem AI přichází v klíčovém okamžiku pro OpenAI, po nedávném kole financování, v němž společnost získala 6,6 miliardy dolarů. S touto finanční podporou přicházejí zvýšená očekávání investorů a také technické výzvy, které komplikují tradiční metody škálování ve vývoji AI.
Pokud tyto rané verze nesplní očekávání, budoucí vyhlídky OpenAI na získávání finančních prostředků nemusí přilákat stejnou úroveň zájmu.
Omezení zdůrazněná v The Information podtrhují významnou výzvu, před níž stojí celý průmysl AI: klesající dostupnost vysoce kvalitních trénovacích dat a nutnost udržet si relevanci ve stále konkurenčnějším prostředí.
Podle článku (PDF) zveřejněného v červnu vyčerpají firmy zabývající se AI zásobu veřejně dostupných textových dat generovaných lidmi mezi lety 2026 a 2032. The Information poznamenává, že vývojáři "z velké části vyždímali" data, která byla použita k umožnění rychlého pokroku v oblasti AI, jehož jsme byli svědky v posledních letech.
Aby OpenAI čelila těmto výzvám, zásadně přehodnocuje svou strategii vývoje AI.
"V reakci na nedávnou výzvu pro škálovací zákony založené na trénování, kterou představuje zpomalení zlepšování GPT, se zdá, že se průmysl přesouvá k vylepšování modelů po jejich počátečním trénování, což by mohlo vést k jinému typu škálovacího zákona," vysvětluje The Information.
Zatímco OpenAI řeší tyto problémy, musí společnost vyvažovat inovace s praktickým využitím a očekáváními investorů. Odchod předních osobností ze společnosti však situaci neulehčí.
Související články
Šéfové technologických firem chválí Trumpův projekt umělé inteligence
Umělá inteligence změní váš trénink: Novinky ze světa fitness technologií a AI
Otázky a odpovědi: Dopad generativní AI na klima
Sdílet na sociálních sítích:
Komentáře