AI의 성능은 숫자로 증명될 수 있는가. 벤치마크 점수의 한계와 왜곡 구조를 분석하며, 신뢰할 수 있는 지능의 기준을 묻는다. 데이터 오염과 리더보드 경쟁 속에서 드러나는 평가의 문제를 짚고, AI 시대에 필요한 새로운 판단 기준을 제시한다. AI문고. aiseries.oopy.io에서 필요한 인공지능 지식을 찾을 수 있다.
목차
인류의 미래를 여는 열쇠, 신뢰할 수 있는 AI
01 AI 성능 평가의 역사와 기술의 공진화 02 최신 AI 평가 패러다임 03 언어 지능의 평가 04 사회적 지능의 평가 05 시각적 지능의 평가 06 신체적 지능의 평가 07 피지컬 AI의 평가 08 리더보드의 함정 09 AI 평가 방법의 오류 10 인간 정렬 평가
작가 소개
작가이영호
대구교육대학교 컴퓨터교육과 교수다. 서울교육대학교를 졸업하고 동대학원에서 박사학위를 받았다. 주요 저서로 《모두의 인공지능 with 파이썬개정2판》2025, 《IT 세계가 그렇게 어려운가요?》2025, 《인공지능은 선생님을 대신할까요?》2023, 《모두의 인공지능 with 스크래치》2020 등이 있다. 인공지능 모델 개발 및 성능 평가와 관련된 연구를 진행하고 있으며, 한국연구재단의 “교육용 LLM 성능평가 벤치마크 및 가이드라인 개발 연구”2025, “자연어처리 모델 기반 질의-응답 시스템 개발 및 적용 연구”2023 등을 수행하고 있다.
