OpenAI on astunud integratsioonis järjekordse sammu. tehisintellekt koos igapäevase arvutikasutusega ...uuendades täielikult oma töölaua koodiagendi Codexi. Tööriist, mida varem tunti peamiselt programmeerimisabi poolest, on nüüd muutumas abiliseks, mis suudab rakendusi käsitseda, eelistusi meelde jätta ja projekte peaaegu sujuvalt hallata.
Selle värskendusega viib Sam Altmani juhitud ettevõte oma plaani lähemale luua Töölaua „superrakendus”, mis ühendab ChatGPT, Codexi ja teie Atlas brauseriSelle sammu eesmärk on lihtsustada kasutajakogemust, koondada ressursse ühte tööruumi ja astuda vastu konkurentidele nagu Anthropic, eriti tarkvaraarenduskeskkonnas ja täiustatud automatiseerimises.
Codex õpib arvutit kasutama nagu iga teine kasutaja
Üks silmatorkavamaid muudatusi on see, et Codex saab nüüd arvuti juhtimine taustalAgent näeb ekraanil olevat, liigutab oma kursorit, klõpsab, tippib teksti ja reageerib installitud rakendustes toimuvale, ilma et see segaks kasutaja tegevust hiire või klaviatuuriga.
See võimekus võimaldab mitmel Codexi agendil koos töötada paralleelselt samas meeskonnasSee hõlmab testide tegemist, konfiguratsioonide muutmist või korduvate ülesannete täitmist, samal ajal kui inimene jätkab oma tavapäraste tegevustega. See avab ukse töövoogude automatiseerimisele, mis varem nõudsid pidevat järelevalvet, näiteks rakenduse testimine pärast iga koodimuudatust või liidese toimingute kordamine.
OpenAI pakub seda funktsiooni abilise jaoks, et töötada tööriistad, millel pole API-t või otseintegratsioonid, mis on paljudes töölauaprogrammides tavaline. Codex saab ekraani "nähes" ja kursorit juhtides nende rakendustega suhelda täpselt nagu inimene, kuigi praegu kontrollitud viisil ja turvalisusele erilist tähelepanu pöörates.
Ettevõtte sõnul on arvutikasutus esialgu saadaval macOS Codexi töölauarakenduse kaudu, mis on lingitud ChatGPT kontoga. Windowsi versioon saabub hiljem, kui jõudlus on testitud ja funktsioonid Microsofti keskkonnale kohandatud.
Euroopa ja Ühendkuningriigi puhul on OpenAI kinnitanud, et arvuti juhtimine, täiustatud kohandamine, kontekstuaalsed soovitused ja mälu Need aktiveeritakse hiljem. Põhjuseks on vajadus kohandada neid funktsioone andmekaitse-eeskirjadega, mis on eriti nõudlik nõue Euroopa Liidus ja Suurbritannia turul.
Integreeritud brauser ja otsene töö veebilehtedel
See värskendus tugevdab ka Codexi suhet veebiga tänu a-le rakendusse integreeritud brauserÜldiste tekstijuhiste asemel saab agent käske vastu võtta otse lehe konkreetsete elementide kohta.
Näiteks esiotsa arenduses saab kasutaja Valige veebikomponent ja kirjeldage muudatust. Kasutaja soovib midagi teha (näiteks muuta ploki värvi, teksti suurust või paigutust) ja Codex saab juhisest aru just selles visuaalses kontekstis. See väldib pikkade juhiste kirjutamist, mis selgitavad, millist saidi osa tuleb muuta.
See sisseehitatud brauser lubab ka Codexi Analüüsige sisu, koguge teavet ja kasutage seda kontekstina Teiste ülesannete, näiteks koodi dokumenteerimise, tootespetsifikatsioonide ülevaatamise või tehnilise dokumentatsiooni võrdlemise puhul tehakse kõik samas keskkonnas, ilma et oleks vaja mitme operatsioonisüsteemi akna vahel vahetada.
Piltide genereerimine ja redigeerimine gpt-image-1.5 abil
Codexi uue versiooni teine sammas on mudeli integreerimine gpt-image-1.5 piltide loomiseks ja muutmiseks Töölauarakendusest endast saab agent genereerida tekstist diagramme, skeeme, makete või visuaalseid visandeid või kombineerida juhiseid ekraanipiltide ja koodijuppidega.
See võimekus on suunatud otse meeskondadele, kes töötavad tootekujundus, kasutajaliidesed või videomängude prototüübidNäiteks saab arendaja jäädvustada pooliku liidese ekraanipildi, paluda Codexil soovitada menüü ümberkujundamist või uut värvilahendust ning saada genereeritud pilte, mis sobivad selle kontekstiga, ilma tööriistu vahetamata.
Kuna kõik on koondatud Codexisse, saavad agendid ahelda kodeerimis- ja disainiülesanded: kirjutage funktsionaalsuse loogika, värskendage vastavat esiliidest ja genereerige meeskonnale esitlemiseks visuaalne makett ilma töövoogudest lahkumata või väliseid graafikatöötlusrakendusi avamata.
Mälu, kontekst ja pikaajaline ülesannete automatiseerimine
Lisaks arvuti juhtimisele ja piltide genereerimisele on OpenAI peamine eesmärk selle versiooniga varustada Codexi järgmisega: püsiv mälu ja palju laiem kontekstihaldusTööriist saab taaskasutada varasemaid vestlusi, säilitada olulist teavet ja seda vajadusel projekti jätkamiseks hankida.
Mälufunktsioon, mis avaldatakse eelvaateversioonis, võimaldab Codexil mäleta isiklikke eelistusi, sagedasi parandusi või andmeid, mida oli raske kogudaSee hõlmab kõike alates meeskonna tüüpilisest tehnoloogiapaketist kuni kaustade korraldamise, kõige sagedamini kasutatavate aruandevormingute ja GitHubis teatud tüüpi probleemide puhul tavaliselt kasutatava sildini.
Selle kogunenud konteksti abil saab agent pakkuda ülesandeid ennetavaltSeda saab kasutada lõpetamata projekti jätkamise soovitamiseks, ootel oleva refaktoreerimise soovitamiseks või kasutajate teavitamiseks pikaajalistest pull requestidest. Mõned ettevõtted kasutavad seda juba Slackis, Gmailis või Notionis vestluste jälgimiseks ja teatud sündmuste korral reageerimiseks.
Koodeks saab ka planeerida tööd tulevikuks ja taasaktiveerida ennast iseseisvalt pikaajaliste ülesannete täitmiseks. Näiteks saab see hallata koodiülevaadete järjekorda päevade või nädalate kaupa, käsitledes kommentaare ja ajakohastades dokumentatsiooni ilma, et arendaja peaks seda pidevalt jälgima.
Üle 90 lisandmooduli ja täiustatud arendajate tugi
Muudatuse lõpuleviimiseks on OpenAI lisanud peaaegu 90 uut Codexi pluginatNende hulka kuuluvad integratsioonid Microsoft Suite'i, GitLab Issues'i, Neon by Databricksi, Renderi ja Superpowersiga, samuti tugi MCP (Model Context Protocol) serveritele. Eesmärk on anda agendile rohkem kontekstiallikaid ja suuremad operatiivsed võimalused.
Tänu neile pluginatele saab Codex koguda teavet erinevatelt teenustelt ja tegutseda selle põhjal Ühest tööruumist saate GitLabis probleeme üle vaadata, Databricksi keskkonnas andmeid pärida, Office'i dokumente värskendada või juurutusteenustega suhelda, ilma et peaksite kasutajat platvormilt platvormile hüppama.
Puhttehnilisel tasandil tugevdab uuendus tüüpilised arendaja töövoodNüüd aitab Codex teil üle vaadata pull requeste, hallata korraga mitut terminali vahelehte, luua SSH kaudu ühenduse kaugarenduskeskkondadega ja avada faile rikkalike eelvaadetega, olgu need siis PDF-failid, arvutustabelid, esitlused või muudes vormingutes dokumendid.
Kõik see on koondatud ühtseks kogemuseks, mis OpenAI enda sõnul võimaldab kiiremat edasiminekut. tarkvara elutsükli kõigis etappidesAlates esialgse koodi kirjutamisest kuni testimise, juurutamise, dokumenteerimise ja hooldamiseni, tehisintellekti agentidega, kes teevad pidevalt koostööd samas töölaua keskkonnas.
Saadavus, keskendumine arendajatele ja olukord Euroopas
Codexi uut versiooni juba juurutatakse. macOS-i töölauarakendus Neile, kes logivad sisse ChatGPT kontoga. Kõik funktsioonid ei vaja sama tüüpi tellimust ja mõned lisafunktsioonid võivad sõltuda ostetud paketist, nagu ka teiste OpenAI tööriistade puhul.
Codexi direktor Thibault Sottiaux selgitas, et see uuendus See on suunatud eelkõige arendajateleKuigi kavatsus on seda hiljem laiemale publikule laiendada, on idee selles, et tehnilised meeskonnad on esimesed, kes uusi agente ja automatiseeritud töövooge ära kasutavad ning aja jooksul selle mudeli kontoritöödesse, dokumendihaldusse või isikliku tootlikkuse suurendamisse üle kannavad.
OpenAI rõhutab, et arvutusvõimsuse ja mälu kasutamine on rakendatud a turvalisuse ja regulatiivse vastavuse lähenemisviisSee on eriti oluline Euroopa Liidus ja Ühendkuningriigis. Sel põhjusel võtab täiustatud kohandamisfunktsioonide, kontekstuaalsete soovituste, püsiva mälu ja operatsioonisüsteemi otsese juhtimise kättesaadavaks muutumine nendes turgudes veidi kauem aega.
Igal juhul väidab ettevõte, et see Codexi areng avab ukse a-le intelligentsele automatiseerimisele keskendunud töölaua superrakenduskus tehisintellekti agendid mitte ainult ei aita koodi kirjutada, vaid koordineerivad ka ülesandeid, kohanevad kasutaja tööstiiliga ja hoiavad keerulisi projekte pikka aega töös. Euroopa tarkvaraarendajatele on sõnum selge: uued võimalused on tulemas, kuid vajalike kohandustega, et need sobiksid olemasoleva regulatiivse raamistikuga.