Gemini 4 Argon hallucinates on over 50% of claims in real codebase audits, developer says
A Polish developer says that in audits of T3 Code and a large Rust codebase, Gemini 4 Argon made false claims about how the systems work more than half the time, and also changed frontend code and file structure that were not requested.
Theo ma tu mocny case. Z testów na realnych codebase’ach wynika, że Gemini 4 Argon agresywnie halucynuje o tym, jak systemy działają. W audytach architektury i kodu (T3 Code, duży Rust codebase) regularnie wychodziło 50%+ fałszywych claimów. Moje obserwacje przy Gemini ogólnie: prosisz o zmianę na backendzie, a model przy okazji „poprawia” frontend, design, style, nazwy zmiennych, strukturę plików albo regeneruje większe fragmenty po swojemu. Czasem wygląda to jak losowe przepisywanie rzeczy, o które w ogóle nie prosiłeś. Tak się nie da pracować.
This post quotes another post: “Gemini 4 Argon is unusable for real code work, one user says”