AI bra på att åtgärda buggar – sämre på att hitta dem
Open AI har genomfört en undersökning som visar att AI-verktyg ofta är bra på att åtgärda buggar i mjukvara, men att de däremot är riktigt dåliga på hitta dem. Slutsatsen är därför att riktigt duktiga programmerare i dagsläget inte kan ersättas med AI-verktyg. Det rapporterar Computer Sweden.
Forskarna använde ett nytt mätverktyg kallad Swe-Lancer, och Anthropics Claude 3.5 Sonnet klarade sig en aning bättre än Open AI:s GPT-4o och o1 i mätningarna.
Forskarna kan också konstatera att AI-verktygen ofta inte förstår hur buggarna uppkommit, och att de därför gör samma misstag om och om igen.
