Николай Чикишев world 21 красавіка 2026, 11:09

Codex навучыўся сачыць за экранам і запамінаць дзеянні распрацоўшчыка

Кампанія OpenAI прадставіла новую функцыю Chronicle для дадатку Codex, якая дазваляе ШІ «бачыць» экран карыстальніка і запамінаць ягоныя дзеянні.

Пакінуць каментарый

Codex навучыўся сачыць за экранам і запамінаць дзеянні распрацоўшчыка

Кампанія OpenAI прадставіла новую функцыю Chronicle для дадатку Codex, якая дазваляе ШІ «бачыць» экран карыстальніка і запамінаць ягоныя дзеянні.

Chronicle працуе ў фонавым рэжыме: сістэма перыядычна робіць здымкі экрана, аналізуе іх і ператварае ў тэкставыя зводкі. Гэтыя дадзеныя захоўваюцца ў выглядзе лакальных файлаў і выкарыстоўваюцца як кантэкст для будучых запытаў.

У выніку Codex можа разумець, над чым працуе карыстальнік, якія інструменты выкарыстоўвае і да якіх праектаў звяртаецца — без неабходнасці кожны раз тлумачыць гэта ўручную.

Паводле словаў прэзідэнта OpenAI Грэга Брокмана, функцыя дае асістэнту «магчымасць бачыць і памятаць нядаўні кантэкст таго, што вы робіце, аўтаматычна забяспечваючы поўны кантэкст працы» і «адчуваецца амаль магічна».

Архітэктура рашэння выклікала пытанні аб канфідэнцыяльнасці. Скрыншоты экрана адпраўляюцца на серверы OpenAI для апрацоўкі, пасля чаго выдаляюцца на працягу шасці гадзін. Самі ж «успаміны» захоўваюцца на прыладзе карыстальніка ў выглядзе нешыфраваных Markdown-файлаў, да якіх могуць атрымаць доступ іншыя дадаткі.

OpenAI наўпрост папярэджвае пра рызыкі: выкарыстанне Chronicle павялічвае верагоднасць атак праз промпт-ін’екцыі, а таксама можа прывесці да ўцечкі адчувальных дадзеных, якія адлюстроўваюцца на экране. Кампанія рэкамендуе ўручную прыпыняць функцыю падчас працы з канфідэнцыйнай інфармацыяй.

Функцыя таксама хутка расходуе ліміты запытаў, што можа абмяжоўваць выкарыстанне Codex у межах падпіскі. Chronicle ужо запушчана як эксперыментальнае прэв’ю і даступна падпісчыкам ChatGPT Pro на macOS.

Падобную функцыю раней прабавала ўкараніць і Microsoft у Windows — інструмент Recall аўтаматычна рабіў скрыншоты актыўнасці карыстальніка і захоўваў іх для працы ШІ. Аднак запуск выклікаў рэзкую крытыку праз рызыкі для прыватнасці. У выніку Microsoft адклала рэліз і зрабіла Recall апцыянальным.