Článek
Google investuje do umělé inteligence obrovské úsilí a Gemini postupně proměňuje v důležitou součást svých služeb. Jenže zatímco nové modely slibují stále pokročilejší schopnosti, zkušenosti části uživatelů naznačují opačný trend. Lidé si stěžují na nepochopené instrukce, povrchní odpovědi a situace, kdy musí stejný požadavek opakovat několikrát. Největším problémem přitom nemusí být samotný výkon umělé inteligence, ale ztráta důvěry v její spolehlivost.
Představme si běžnou situaci. Zadáte AI složitější otázku a očekáváte podrobné vysvětlení. Místo něj dostanete několik obecných vět, které vám příliš nepomohou. Po doplňujícím dotazu se odpověď sice rozšíří, ale stále postrádá požadované informace. V takovém případě uživatel neřeší, kolik parametrů model obsahuje nebo jak dopadl v odborných testech. Zajímá ho především to, proč úkol nedokázal vyřešit napoprvé.
AI chatbot
Právě podobné výhrady se objevují v diskusích kolem Gemini. Někteří lidé dokonce tvrdí, že jim služba před několika měsíci fungovala lépe než nyní. Nejde přitom jen o bezplatné používání. Nespokojenost vyjadřují také zákazníci, kteří za přístup k pokročilejším funkcím platí.
Zhoršilo se skutečně Gemini, nebo se změnilo to, co uživatel dostává?
Na zajímavý rozpor upozorňuje technologický magazín Android Authority. V anketě, která získala více než 1 200 hlasů, uvedlo přes 60 % respondentů, že podle jejich zkušeností kvalita Gemini v posledních měsících klesla. Pokud se započítají pouze lidé, kteří službu používají, dosahuje podíl negativních odpovědí téměř 65 %.
Výsledek je výrazný, ale vyžaduje správnou interpretaci. Nejde o reprezentativní průzkum všech zákazníků Googlu a už vůbec ne o technický důkaz, že se jazykové modely objektivně zhoršily. Ankety se dobrovolně účastní čtenáři technologického webu, mezi nimiž mohou být nadprůměrně zastoupeni lidé s negativní zkušeností.
Přesto nelze jejich připomínky jednoduše přehlédnout. Kritika se totiž opakovaně soustředí na konkrétní nedostatky. Uživatelé poukazují například na menší podrobnost odpovědí, problémy s porozuměním zadání a nedostatečné rozdíly mezi dostupnými modely. Někteří si pochvalují konkurenční služby, zatímco Gemini podle nich přestává přinášet dostatečnou hodnotu.
Existuje ale ještě jedna okolnost, která může výsledný dojem ovlivnit. Google dnes při používání Gemini pracuje s automatickým výběrem modelu. Podle oficiální dokumentace systém rozhoduje, jaký model a úroveň uvažování pro konkrétní požadavek použije. Jednodušší otázky tak mohou zpracovávat úspornější modely, zatímco náročnější úlohy dostávají výkonnější varianty.
Rozhodující mohou být také limity jednotlivých tarifů. Google potvrzuje, že po vyčerpání dostupné kapacity některého modelu může předplatitel pokračovat s Flash-Lite. Výsledkem pak nemusí být stejná úroveň odpovědí jako při použití pokročilejšího modelu.
To však neznamená, že automatické přepínání prokazatelně způsobilo problémy popisované v anketě. Jde o možné vysvětlení části rozdílů v uživatelských zkušenostech, nikoliv o potvrzenou příčinu obecného poklesu kvality.
Z pohledu zákazníka je ale podstatný samotný výsledek. Pokud si platí službu kvůli kvalitnějším odpovědím, bude případné zhoršení vnímat bez ohledu na to, zda vzniklo změnou modelu, omezením kapacity nebo jiným nastavením.
Pro Google může být největším problémem obyčejná nedůvěra
Výkon umělé inteligence se často hodnotí podle výsledků standardizovaných testů. Ty dokážou porovnat například schopnost modelů řešit matematické úlohy, programovat nebo analyzovat rozsáhlé texty. Každodenní používání je ovšem mnohem méně předvídatelné.
Člověk může být s Gemini spokojený při vyhledávání informací a zároveň narážet na chyby při práci s dokumenty. Jinému může vyhovovat jako pomocník při psaní, ale zklame ho jako hlasový asistent v telefonu. Takové rozdíly samy o sobě neznamenají, že je celý systém nekvalitní. Ukazují však, jak obtížné je vytvořit univerzální nástroj, na který se lze spolehnout při různých činnostech.
Znepokojivý je především okamžik, kdy uživatel začne předem očekávat chybu. Pokud musí každou odpověď opakovaně kontrolovat, doplňovat zadání a opravovat nesprávně pochopené požadavky, ztrácí umělá inteligence jednu ze svých největších předností. Místo úspory času může přinášet další práci.
Podle zveřejněných výsledků ankety přitom negativní pohled nesdílejí všichni. Necelá pětina respondentů zhoršení nezaznamenala a dalších 14,6 % si změnou není jistých. Gemini tedy rozhodně nelze na základě těchto dat označit za všeobecně nefunkční službu.
Pro uživatele, kteří mají pocit, že dostávají horší odpovědi než dříve, existuje jednoduchý způsob, jak alespoň část nejistoty odstranit. V aplikaci lze zkontrolovat použitý model, dostupné limity a úroveň uvažování. Předplatitelé mohou podle svého tarifu také ručně vybírat mezi dostupnými modely.
Smysl má porovnat stejné zadání v různých modelech a sledovat nejen délku odpovědi, ale hlavně její přesnost, úplnost a dodržení instrukcí. Takové srovnání sice samo nedokáže, že se Gemini historicky zhoršilo, může ale odhalit, proč se jednotlivé odpovědi liší.
Google nyní čelí důležité výzvě. Nestačí vyvíjet stále schopnější modely, pokud část zákazníků při běžném používání nepozná jejich přínos. Především u placených služeb rozhoduje také předvídatelnost, transparentnost a pocit, že zákazník skutečně dostává odpovídající hodnotu.
Zdroj: