Cloudflare zapojilo AI do vymáhania interných technických štandardov

Cloudflare opísalo systém, v ktorom AI agenti kontrolujú kód, technické návrhy a hlásenia incidentov proti jednotnému súboru interných štandardov. Základom je Cloudflare Codex, spravovaná kolekcia technických pravidiel určená ľuďom aj strojom. Firma uvádza, že jej AI kontrola kódu za štyri mesiace označila takmer štvrť milióna odchýlok od štandardov a zablokovala 16-tisíc merge operácií.

Samostatný agent na kontrolu špecifikácií za rovnaké obdobie vyhodnotil približne 600 technických návrhov ešte pred začiatkom implementácie. Zmyslom je presunúť pripomienky čo najskôr v životnom cykle vývoja. Chyba v architektúre alebo bezpečnostnom predpoklade je lacnejšia na opravu v návrhu než po napísaní kódu, nasadení služby alebo produkčnom incidente.

Pred vytvorením Codexu boli odporúčania rozptýlené medzi formálnu dokumentáciu, súbory v repozitároch, chatové vlákna a skúsenosti jednotlivých inžinierov. Problémom nebolo iba nájsť odpoveď, ale zistiť, či je aktuálna, záväzná a relevantná. Pri raste firmy nemohol každý vývojár poznať všetky pravidlá a ľudskí recenzenti ich nedokázali kontrolovať konzistentne. Codex preto funguje ako spoločný zdroj pravdy, z ktorého čerpajú rôzne automatizácie.

Obsah je rozdelený do domén, napríklad frontend, control plane, bezpečnosť, spoľahlivosť, TypeScript alebo Rust. Každá doména má vlastníka zodpovedného za kvalitu a konzistentnosť. Pravidlá vznikajú vo formáte RFC a záväznosť vyjadrujú slovami SHOULD a MUST podľa RFC 2119. Návrh prechádza pripomienkovaním a po schválení sa publikuje na internom webe postavenom na Astro.

Cloudflare oddeľuje stav „approved“ od stavu „enforced“. Schválené pravidlo môžu agenti okamžite uvádzať ako nezáväzný nález, ale zlúčenie kódu blokuje až po osobitnom povýšení do vynucovaného stavu. Tím tak dostane čas prispôsobiť existujúce služby a overiť, či automatická kontrola nemá príliš veľa falošných zásahov. Blokovanie sa viaže najmä na porušenia požiadaviek označených ako MUST.

Viac než 60 RFC by nebolo efektívne vkladať celé do kontextu každého modelového volania. Účelový agent preto extrahuje vety SHOULD a MUST do kompaktnej štruktúry JSON a dopĺňa metadáta pre postupné vyhľadávanie. Každé tvrdenie dostáva stabilný identifikátor, ktorý sa nemení ani po úprave RFC. Vďaka tomu možno sledovať rovnaké pravidlo v kontrolách kódu, výnimkách, štatistikách aj neskorších verziách dokumentácie.

Tento prístup je dôležitým posunom oproti všeobecnému pokynu „skontroluj kvalitu kódu“. Model nedostáva neurčitú úlohu založenú na vlastných preferenciách, ale konkrétne, schválené a dohľadateľné pravidlá. Nález sa dá prepojiť s pôvodným RFC, vlastníkom a stavom vynucovania. Človek tak môže posúdiť nielen odporúčanie modelu, ale aj autoritu pravidla, o ktoré sa odporúčanie opiera.

Cloudflare plánuje Codex rozšíriť na ďalšie časti životného cyklu softvéru vrátane incidentov a prevádzky. Do systému začínajú pridávať štandardy aj produktové, bezpečnostné, compliance a trust-and-safety tímy. Dlhodobým cieľom je, aby agenti nielen nachádzali odchýlky, ale čoraz samostatnejšie navrhovali opravy. Schválenie zmien má naďalej zostať zodpovednosťou inžinierov.

Čísla z interného nasadenia nemožno automaticky zamieňať za počet unikátnych alebo závažných chýb. Jedna zmena môže vyvolať viac nálezov a blokovaný merge nemusí znamenať produkčný incident, ktorému sa podarilo zabrániť. Cloudflare nezverejnilo mieru falošne pozitívnych výsledkov, čas potrebný na ich preskúmanie ani porovnanie s čisto deterministickými lintermi. Ide preto o prevádzkové tvrdenia firmy, nie o nezávislý experiment.

Prípad napriek tomu ukazuje užitočný vzor pre podnikové AI: najprv vytvoriť kvalitný a spravovaný systém pravidiel, až potom nad ním postaviť agentov. Bez vlastníctva, verzií a jasnej záväznosti by model iba automatizoval chaos rozptýlenej dokumentácie. Codex robí z inštitucionálnych znalostí adresovateľné produkčné aktívum a AI používa ako mechanizmus, ktorý správne pravidlo doručí v okamihu návrhu, implementácie alebo kontroly.