OpenAI је увео Агенте API у јавну бета верзију, дајући програмерима први начин да направе и покрећу клауд агенте користећи управљани појас Codex. Лансирање 10. септембра није још један модел. То је инфраструктурни потез: OpenAI пакује време извођења око рада агента, укључујући опруге, изборе окружења за извршавање и слој облака који је потребан за дуготрајније задатке.
За тимове који већ експериментишу са агентима за кодирање, агентима за истраживање, аутоматизацијом подршке или помоћницима интерног тока посла, промена је значајна. Уместо да спајају позиве модела, извршавање алата, стање датотеке, меморију задатака, сандбокинг и поновне покушаје, програмери могу да почну од API дизајнираног око сесија агента. OpenAI каже да бета омогућава програмерима да бирају између заштићеног окружења којим управља OpenAI, сопствене инфраструктуре или подржаних партнера у заштићеном окружењу. Такође каже да нема додатних накнада Агентима API осим коришћених токена и алата.
Тај детаљи о ценама су важни, али их не треба погрешити због једноставности. Агенти могу да троше токене током планирања, употребе алата, прегледа датотека, делегирања подзадатака и поновљених покушаја. Када се посао помери са обрасца брзог одговора на активни процес агента, компаније треба да мере трошкове на нивоу тока посла и сесије, а не само на нивоу појединачног захтева.
Шта се променило
Кључна промена је у томе што OpenAI нуди слој управљаног агента уместо да оставља клијентима да управљају сопственим пакетом. Codex је већ постао повезан са софтверски оријентисаним радним токовима агената. Агенти API чине тај појас доступним као јавну бета програмску површину за извршавање у облаку.
То значи да се јединица интеграције шири. Конвенционална интеграција предузећа ЛЛМ API обично прати захтеве, називе модела, обим токена, кашњење, грешке и кључеве. Интеграција агента такође мора да узме у обзир сесију, алате који су доступни, изабрано окружење за заштиту, одобрене дозволе и све укључене подагенте или позадинске задатке. Инфраструктурне опције
OpenAI указују на практичну поделу на тржишту. Неки тимови ће преферирати сандбок којим се управља OpenAI јер смањује оперативни терет. Други, посебно у регулисаним или безбедносно осетљивим окружењима, ће желети да агенти раде у својој сопственој инфраструктури или унутар заштићених окружења партнера где се приступ мрежи, резидентност података и контроле контроле могу строже регулисати.
Зашто предузећа треба да обрате пажњу
Покретање долази у тренутку када системи за ћаскање могу да преузму радњу са интерфејса вештачке интелигенције. Модел који одговара на питање је једна врста ризика. Агент који чита датотеке, позива алатке, уређује код, отвара тикете, испитује интерне системе или извршава команде љуске је другачији оперативни модел.
За програмере, управљани агент API може да смањи недиференцирани рад платформе. Изградња поузданог појаса захтева одлуке о стању, шемама алата, руковању грешкама, животном циклусу сандбок-а, видљивости и безбедносним проверама. Верзија којом управља продавац може да омогући тимовима производа да се крећу брже, посебно када желе да прототипирају агентске функције без одржавања читавог тог водовода.
За платформе и безбедносне тимове, иста апстракција ствара нова питања управљања. Који API кључеви могу да креирају агенте? Које сандбокове могу користити ти агенти? Који алати су подразумевано дозвољени? Може ли тим ограничити потрошњу за једну сесију агента или класу токова посла? Да ли евиденције могу да разликују одговор модела, позив алата, операцију датотеке и делегирани подзадатак?
Овде се конкретан утицај на пословање. Токове посла агената је теже буџетирати од обичних завршетака јер је количина посла мање предвидљива. Корисник може тражити једноставан одговор, али агент може прегледати контекст, покренути алате, направити план, ревидирати га и поново покушати неуспјешне радње.Чињеница да OpenAI не додаје посебну накнаду за агенте API не елиминише потребу за буџетима, упозорењима и аналитиком коришћења. То чини рачуноводство токена и алата површином финансијске контроле.
Ко је погођен
Најнепосреднија публика су инжењерски тимови који граде производе агента поврх OpenAI модела. Сада имају управљани пут који може заменити делове интерног појаса или убрзати нове пројекте. Почетници који граде алате за развој вештачке интелигенције, производе за интерну аутоматизацију, агенти за рад са клијентима или истраживачки асистенти могу да виде API као бржи пут до производње.
Велика предузећа ће га проценити другачије. Они могу ценити време извођења агента прве стране, али ће такође питати како се то уклапа са постојећом безбедношћу у облаку, прегледом ланца набавке софтвера, контролама идентитета, набавком и одговором на инциденте. Могућност избора партнера за инфраструктуру или заштићено окружење може бити важна за ове купце јер извршење агента може да дотакне осетљиве податке и привилеговане системе.
То утиче и на добављаче АИ мрежног пролаза и видљивости. Мрежни пролаз који види само необрађене позиве модела пропустиће много тога што је важно у току рада агента. Релевантна телеметрија сада укључује идентитет агента, трајање сесије, секвенцу алата, окружење заштићеног окружења, догађаје одобрења, понашање кеша, поновне покушаје и цену по завршеном задатку. B2B LLM-ова практична веза је у том контролном слоју: тимовима који користе више модела и АПИ-ја је потребно доследно API управљање кључем, управљање трошковима и аналитика коришћења чак и када слој апликације постане агентски.
Оно што остаје неизвесно
Бета ознака оставља неколико отворених питања. Публиц-бета АПИ-ји се често мењају како програмери откривају ивице случајева око дуготрајних послова, управљања стањем, дозвола алата и граница примене. OpenAI је описао инфраструктурне изборе и модел трошкова, али купци ће и даље морати да потврде оперативне детаље пре него што третирају API као основу за критичне токове посла.
Постоји и конкурентско питање. Инфраструктура агента постаје категорија производа, а не само карактеристика унутар АПИ-ја модела. Провајдери у облаку, компаније за развојне алате, СааС платформе и добављачи АИ гатеваи-а сви се крећу ка извршавању управљаних агената, спровођењу политике и видљивости. Предност OpenAI је у томе што може да усклади модел, Codex упртач и време рада агента у облаку под једним искуством програмера. Компромис је у томе што предузећа можда не желе да један добављач поседује сваки ниво приступа моделу, извршења и управљања.
Најјаснија краткорочна последица је да архитектура агента постаје све стандардизованија. Програмери ће све више очекивати да АПИ-ји управљају не само закључивањем, већ и окружењем у којем се обавља аутономни или полуаутономни рад. То подиже стандард за сваку платформу око модела: евиденција, одобрења, кључни обим, контрола трошкова и ревизијски трагови сада морају да прате агента, а не само захтев.