OpenAI je napravio još jedan korak u integraciji umjetna inteligencija s svakodnevnom upotrebom računala potpunim preuređenjem Codexa, svog desktop kodnog agenta. Alat, prethodno poznat prvenstveno po svojoj pomoći u programiranju, sada postaje pomoćnik sposoban za gotovo besprijekorno rukovanje aplikacijama, pamćenje postavki i upravljanje projektima.
Ovim ažuriranjem, tvrtka koju vodi Sam Altman približava svoj plan stvaranja "Super aplikacija" za stolna računala koja objedinjuje ChatGPT, Codex i vaš Atlas preglednikCilj ovog poteza je pojednostaviti korisničko iskustvo, koncentrirati resurse u jednom radnom prostoru i konkurirati konkurentima poput Anthropica, posebno u okruženju za razvoj softvera i naprednoj automatizaciji.
Codex uči koristiti računalo kao i svaki drugi korisnik
Jedna od najupečatljivijih promjena je ta što Codex sada može upravljati računalom u pozadiniAgent može vidjeti što se nalazi na ekranu, pomicati vlastiti kursor, klikati, tipkati tekst i reagirati na ono što se događa u instaliranim aplikacijama, bez prekidanja onoga što korisnik radi mišem ili tipkovnicom.
Ova mogućnost omogućuje više Codex agenata da rade zajedno. paralelno u istoj ekipiTo uključuje izvođenje testova, promjenu konfiguracija ili izvršavanje repetitivnih zadataka dok osoba nastavlja sa svojim normalnim aktivnostima. To otvara vrata automatizaciji tijeka rada koji su prije zahtijevali stalni nadzor, poput testiranja aplikacije nakon svake promjene koda ili ponavljanja radnji na sučelju.
OpenAI predlaže ovu funkciju kao način na koji asistent može raditi s alati koji nemaju API ili izravne integracije, nešto uobičajeno u mnogim desktop programima. Codex, "videći" ekran i kontrolirajući kursor, može komunicirati s tim aplikacijama baš kao što bi to činio ljudski korisnik, iako za sada na kontroliran način i s posebnom pažnjom posvećenom sigurnosti.
Prema tvrtki, korištenje računala je u početku dostupno u macOS putem desktop aplikacije Codex, povezan s ChatGPT računom. Verzija za Windows stići će kasnije, nakon što se testiraju performanse i značajke prilagode Microsoftovom okruženju.
U slučaju Europe i Ujedinjenog Kraljevstva, OpenAI je potvrdio da je računalno upravljanje, napredna prilagodba, kontekstualni prijedlozi i memorija Bit će aktivirane kasnije. Razlog je potreba prilagodbe tih značajki propisima o zaštiti podataka, što je posebno zahtjevan zahtjev u Europskoj uniji i na britanskom tržištu.
Integrirani preglednik i izravan rad na web stranicama
Ažuriranje također jača Codexov odnos s webom zahvaljujući... preglednik integriran u samu aplikacijuUmjesto jednostavnog primanja generičkih tekstualnih uputa, agent može primati naredbe izravno na određenim elementima stranice.
U frontend razvoju, na primjer, korisnik može Odaberite web komponentu i opišite promjenu. Korisnik želi nešto učiniti (poput promjene boje, veličine teksta ili rasporeda bloka), a Codex razumije upute unutar tog specifičnog vizualnog konteksta. Time se izbjegava pisanje dugih uputa koje objašnjavaju koji dio stranice treba promijeniti.
Ovaj ugrađeni preglednik također omogućuje Codex Analizirajte sadržaj, prikupite informacije i koristite ih kao kontekst Za ostale zadatke, poput dokumentiranja koda, pregleda specifikacija proizvoda ili usporedbe tehničke dokumentacije, sve se obavlja unutar istog okruženja, bez potrebe za prebacivanjem između više prozora operativnih sustava.
Generiranje i uređivanje slika pomoću gpt-image-1.5
Još jedan stup nove verzije Codexa je integracija modela gpt-image-1.5 za stvaranje i uređivanje slika Iz same desktop aplikacije, agent može generirati grafikone, dijagrame, makete ili vizualne skice iz teksta ili kombiniranjem uputa sa snimkama zaslona i isječcima koda.
Ova je mogućnost izravno usmjerena na timove koji rade u dizajn proizvoda, korisnička sučelja ili prototipovi videoigaraNa primjer, programer može snimiti zaslon nedovršenog sučelja, zatražiti od Codexa da predloži redizajn izbornika ili novu shemu boja i dobiti generirane slike koje odgovaraju tom kontekstu, bez promjene alata.
S obzirom na to da je sve centralizirano u Codexu, agenti mogu povezivanje zadataka kodiranja i dizajniranjaNapišite logiku funkcionalnosti, ažurirajte odgovarajući frontend i generirajte vizualni mockup za prezentaciju timu, bez napuštanja tijeka rada ili otvaranja vanjskih aplikacija za uređivanje grafike.
Memorija, kontekst i automatizacija dugoročnih zadataka
Osim računalne kontrole i generiranja slika, OpenAI-jev glavni cilj s ovom verzijom je opremiti Codex s... trajna memorija i upravljanje mnogo širim kontekstomAlat može ponovno upotrijebiti prethodne razgovore, sačuvati važne informacije i dohvatiti ih kada je potrebno za nastavak projekta.
Funkcija memorije, koja se objavljuje u probnoj verziji, omogućuje Codexu pamte osobne preferencije, česte ispravke ili podatke koje je bilo teško prikupitiTo uključuje sve, od tipičnog tehnološkog paketa tima do načina organizacije mapa, najčešće korištenih formata izvješća i oznake koja se obično koristi na GitHubu za određene vrste problema.
S tim akumuliranim kontekstom, agent može proaktivno predlagati zadatkeOvo se može koristiti za predlaganje nastavka nedovršenog projekta, preporuku za refaktoriranje koje čeka na obradu ili obavještavanje korisnika o dugotrajnim zahtjevima za povlačenjem. Neke tvrtke ga već koriste za praćenje razgovora u Slacku, Gmailu ili Notionu i reagiranje kada se dogode određeni događaji.
Kodeks također može planirajte rad za budućnost i samostalno se reaktivirajte za dovršavanje dugoročnih zadataka. Na primjer, može upravljati redom pregleda koda danima ili tjednima, rješavati komentare i ažurirati dokumentaciju bez potrebe da programer to stalno prati.
Preko 90 dodataka i poboljšana podrška za razvojne programere
Kako bi dovršio promjenu, OpenAI je dodao gotovo 90 novih Codex dodatakaTo uključuje integracije s Microsoft Suiteom, GitLab Issues, Neon by Databricks, Render i Superpowers, kao i podršku za MCP (Model Context Protocol) poslužitelje. Cilj je agentu dati više izvora konteksta i veće operativne mogućnosti.
Zahvaljujući ovim dodacima, Codex može prikupljati informacije od različitih službi i djelovati na temelju njih Iz jednog radnog prostora možete pregledavati probleme u GitLabu, ispitivati podatke u Databricksu, ažurirati Office dokumente ili komunicirati s uslugama implementacije, bez prisiljavanja korisnika da prelazi s platforme na platformu.
Na čisto tehničkoj razini, ažuriranje jača tipični tijekovi rada programeraCodex vam sada pomaže u pregledu zahtjeva za povlačenjem, upravljanju više kartica terminala odjednom, povezivanju s udaljenim razvojnim okruženjima putem SSH-a i otvaranju datoteka s bogatim pregledima, bilo da se radi o PDF-ovima, proračunskim tablicama, prezentacijama ili dokumentima u drugim formatima.
Sve je to koncentrirano u objedinjenom iskustvu koje, prema samom OpenAI-u, omogućuje brži napredak. u svim fazama životnog ciklusa softveraOd pisanja početnog koda do testiranja, implementacije, dokumentiranja i održavanja, s AI agentima koji kontinuirano surađuju unutar istog desktop okruženja.
Dostupnost, fokus na developere i situacija u Europi
Nova verzija Codexa već se primjenjuje u desktop aplikacija za macOS Za one koji se prijavljuju s ChatGPT računom. Nisu sve značajke potrebne za istu vrstu pretplate, a neke napredne značajke mogu ovisiti o kupljenom planu, kao što je slučaj s drugim OpenAI alatima.
Thibault Sottiaux, direktor Codexa, objasnio je da je ovo ažuriranje Posebno je namijenjeno programerimaIako je namjera proširiti ga kasnije na širu publiku. Ideja je da će tehnički timovi prvi iskoristiti prednosti novih agenata i automatiziranih tijekova rada te s vremenom taj model prenijeti na uredske zadatke, upravljanje dokumentima ili osobnu produktivnost.
OpenAI naglašava da se korištenje računalne snage i memorije provodi s pristup sigurnosti i usklađenosti s propisimaTo je posebno važno u Europskoj uniji i Ujedinjenom Kraljevstvu. Zbog toga će napredne značajke prilagodbe, kontekstualni prijedlozi, trajna memorija i izravna kontrola operativnog sustava trebati malo više vremena da postanu dostupne na tim tržištima.
U svakom slučaju, tvrtka tvrdi da ova evolucija Codexa otvara vrata... super-desktop aplikacija usmjerena na inteligentnu automatizacijugdje AI agenti ne samo pomažu u pisanju koda, već i koordiniraju zadatke, prilagođavaju se korisnikovom stilu rada i održavaju složene projekte u radu dulje vrijeme. Za softverske programere u Europi poruka je jasna: dolaze nove mogućnosti, ali s potrebnim prilagodbama kako bi se uklopile u postojeći regulatorni okvir.