
Adaptive Hierarchical Evaluation of LLMs and SAST tools for CWE Prediction in Python
๋ณธ ๋ ผ๋ฌธ์ LLM๊ณผ ์ ํต์ ์ธ ์ ์ ๋ถ์ ๋๊ตฌ(SAST)์ ์ทจ์ฝ์ ํ์ง ๋ฅ๋ ฅ์ ๋น๊ต ํ๊ฐํ๊ธฐ ์ํด ์๋ก์ด ๋ฒค์น๋งํฌ ํ๋ ์์ํฌ์ธ ALPHA๋ฅผ ์ค๊ณํ ์ ์์ ํ์ ์ ยท์ค๋ฌด์ ์์๊ฐ ํฌ๋ค. ๊ธฐ์กด์ ์ด์ง ๋ถ๋ฅ ๊ธฐ๋ฐ ๋ฒค์น๋งํฌ๋ โ์ทจ์ฝ์ ์กด์ฌ ์ฌ๋ถโ๋ง์ ํ๋จํ๋๋ก ์ ํ๋ผ, ๊ฐ๋ฐ์๊ฐ ์ค์ ์ฝ๋ ์์ ์ ํ์ฉํ ์ ์๋ ๊ตฌ์ฒด์ ์ธ CWE(CWEโCommon Weakness Enumeration) ์ ๋ณด๋ฅผ ์ ๊ณตํ์ง ๋ชปํ๋ค๋ ํ๊ณ๊ฐ ์์๋ค. ALPHA๋ ์ด๋ฌํ ํ๊ณ๋ฅผ ๊ทน๋ณตํ๊ธฐ ์ํด ํจ์ ์์ค์์ CWE ๋ ์ด๋ธ์ ๋ถ์ฌํ๊ณ , ์ค๋ฅ ์ ํ์ ์ธ ๊ฐ์ง ๊ณ์ธต์ ํจ๋ํฐ(







































