Новая мадэль Anthropic Claude Fable 5.2 змагла выканаць 41,3% рэальных фрыланс-заданняў на прафесійным узроўні. Год таму найлепшыя ШІ-агенты спраўляліся толькі з 2,5% такой працы.
Новая мадэль Anthropic Claude Fable 5.2 змагла выканаць 41,3% рэальных фрыланс-заданняў на прафесійным узроўні. Год таму найлепшыя ШІ-агенты спраўляліся толькі з 2,5% такой працы.
Вынікі апублікаваныя ў рэйтынгу Remote Labor Index, які вядуць Scale AI і Center for AI Safety. Даследчыкі правяраюць, ці здольныя ШІ-агенты самастойна выконваць паўнавартасныя заказы, за якія звычайна плацяць фрылансерам.
Для тэсту сабралі 240 праектаў з платформы Upwork агульным коштам каля $144 тысяч. Сярод іх — стварэнне 3D-мадэляў, распрацоўка гульняў, архітэктурныя праекты, мантаж відэа, апрацоўка гуку і аналіз дадзеных. Для афіцыйнай ацэнкі выкарыстоўваюць 230 заданняў.
Сярэдняя замова каштавала $633, а чалавек выдаваў на яго выкананне амаль 29 гадзін. ШІ-агентам прадаставілі апісанні задач, зыходныя файлы і доступ да прафесійных праграм, у тым Blender, GIMP і Audacity.
Вынікі правяраюць эксперты. Яны параўноўваюць гатовыя працы ШІ з тым, што зрабілі сапраўдныя фрылансеры, і ацэньваюць, ці пагадзіўся б звычайны замоўшчык прыняць такі вынік.
Claude Fable 5.2 справілася з 41,3% праектаў — амаль удвая лепш за бліжэйшых канкурэнтаў. Claude Opus 5.5 атрымала 21,25%, GPT-6 Astra ад OpenAI — 20,83%, а папярэдняя Fable 5.1 — 17,92%.
Асабліва заўважна новая мадэль палепшыла вынікі ў стварэнні 3D-мадэляў, апрацоўцы аўдыё, архітэктуры і дызайне інтэр’ераў. Паводле дадзеных Scale AI, амаль 50 заданняў яна выканала ўпершыню сярод усіх пратэставаных ШІ-агентаў.
Аднак большасць праектаў нейрасеткам пакуль не пад сілу. Горш за ўсё яны спраўляюцца з прамысловым дызайнам і анімацыяй. Часта ШІ выдае працу аматарскай якасці, не завяршае праект або стварае файлы з памылкамі.
Пры гэтым вынікі не азначаюць, што нейрасеткі ўжо здольныя замяніць 41% фрылансераў. Тэст не ахоплівае задачы, якія патрабуюць доўгіх адносінаў з кліентамі або ацэнкі вынікаў праз месяцы.
Але прагрэс за год аказаўся значным. Калі даследаванне ўпершыню апублікавалі ў кастрычніку 2025 года, найлепшым быў агент Manus, які выканаў толькі 2,5% праектаў. Цяпер паказчык вырас больш чым у 16 разоў.
Релоцировались? Теперь вы можете комментировать без верификации аккаунта.
Пусть он выполнит мои фриланс-задания. 😁 "На нашем складе мы раньше тратили два миллиона евро на зарплату для пары сотен грузчиков, а сейчас - четыре. Оборот фирмы не менялся. Найди причину."
Вперёд, дорогой ИИ. Иди разговаривать с бригадирами, иди вручную пересчитывать "коробки в час" в условиях отсутствия цифровых следов последних лет, после работы иди пить пиво с грузчиками, чтобы они начали тебе доверять.
А меня позовёте, когда расходы на персонал дойдут до 6 миллионов.