Skúsení vývojári strávili pri úlohách s umelou inteligenciou o 19 % viac času, uvádza štúdia. Iba 44 % kódu vygenerovaného umelou inteligenciou akceptovali. Napriek tomu vývojári vnímajú prácu s AI ako ľahšiu.
Podľa nového výskumu nemusí byť umelá inteligencia pre skúsených vývojárov tak prospešná ako pre začiatočníkov alebo tých, ktorí ešte nezvládli potrebné zručnosti. Štúdia realizovaná organizáciou METR ukázala, že vývojári boli po skončení výskumu menej optimistickí, pričom reálne výsledky naznačujú, že umelá inteligencia im v konečnom dôsledku zabrala viac času.
Výskum zistil, že s umelou inteligenciou vývojári menej času trávili programovaním a vyhľadávaním, ale viac času formulovaním požiadaviek, čakaním na výstupy a najmä kontrolou výsledkov od AI. Približne 9 % času venovali kontrole a úprave kódu vygenerovaného umelou inteligenciou. Napriek tomu, že návrhy od AI smerovali správnym smerom, chýbali im často detaily.
Výskum sledoval 16 skúsených vývojárov pri 246 reálnych úlohách na známych open source projektoch. Analyzovala sa ich práca s populárnymi nástrojmi ako Cursor Pro a Claude 3.5/3.7. Pred štúdiou títo vývojári očakávali, že v kombinácii s umelou inteligenciou znížia čas potrebný na úlohy o 24 %. Po štúdii svoje očakávania upravili na 20 %, no analýza ukázala, že AI naopak zvýšila čas potrebný na dokončenie úloh o 19 %.
Menej ako 44 % návrhov od AI bolo akceptovaných. Medzi faktormi, ktoré spomalili vývojárov, boli identifikované nedostatok kontextových znalostí a rozsiahle, komplexné repozitáre. Štúdia tiež poukázala na to, že skúsení vývojári už mali vysokú znalosť kódu, čo umožňovalo len obmedzené využitie AI.
Napriek spomaleniu mnohí vývojári pokračovali v používaní nástrojov s umelou inteligenciou, pretože práca sa im zdala menej namáhavá, čo ju robilo príjemnejšou, aj keď nie rýchlejšou.
Schopnosti umelých inteligencií v reálnom svete môžu byť nižšie, ako naznačujú výsledky často používaných benchmarkov, uzatvára výskumná správa.
