Hvorfor AI-kodningsagenter fejler i stor skala: Erfaringer fra 1.281 rigtige tests

AI-værktøjer kan hjælpe udviklere med alt fra fejlretning til nye funktioner. Men når de møder store, komplekse kodebaser, går det ofte galt.

En gennemgang af 1.281 kørsler viser, hvorfor det sker – og hvad teams kan gøre ved det.

Skala skaber eksplosiv kompleksitet

En kodebase på 100.000 linjer er ikke bare ti gange sværere at arbejde med end en på 10.000. Den er eksponentielt mere kompleks.

Agenter, der er trænet på små eksempler, får problemer med at:

• Finde rundt i tusindvis af afhængige moduler
• Forstå sammenhænge mellem løst koblede tjenester
• Forudse konsekvenser på tværs af flere lag
• Huske kontekst gennem lange ræsonnementer

Jo større kodebasen er, desto vigtigere er det at give agenterne intelligent kontekst og en klar forståelse af arkitekturen.

Fem typiske fejlmønstre – og hvordan man undgår dem

1. Kontekstvinduet løber tør

Agenter får ofte kun en del af billedet. En funktion kan have ti afhængigheder, men agenten ser kun to.

Løsning:

• Brug smart indeksering, der prioriterer relevant kode
• Byg afhængighedskort på forhånd
• Lav dokumentation, der fungerer som oversigt
• Opdel agenterne i specialiserede dele, der hver især har ansvar for et område

2. Uklarhed i navne og betydning

I store kodebaser er det almindeligt med uensartede naming-konventioner og gammelt og nyt, der lever side om side.

Agenter bliver forvirrede, fordi:

• processOrder() betyder noget helt forskelligt i modul A og B
• Baggrunden for beslutningerne er gået tabt
• Type hints kan være ufuldstændige eller misvisende

Løsning:

• Opret en søgbar kontekstbase med modulbeskrivelser og beslutningsgrundlag
• Hold navne konsekvente og kontroller dem med linters
• Skriv og opdater ADRs
• Tilpas prompts til din kodebasens sprogbrug

3. Hallucinationer og blind tillid

Agenter foreslår ændringer med stor sikkerhed, men uden at se de skjulte begrænsninger.

Løsning:

• Brug automatiseret validering – syntax, type og sikkerhed
• Kør static analysis som løbende kontrol
• Tilføj trin, der tjekker,是否符合