1Gemini 4 Carbon
1위 — Gemini 4 Carbon. 10개 AI 중 8개의 목록에 포함; 그 안의 중간 순위: 1.5. 취약점을 찾고 고치는 능력에서 공개된 점수가 가장 높습니다. 다만 시험은 구글만 했고, 쓸 수 있는 사람은 거의 없습니다.
알고 계셨나요
페어윈드 신청자는 신원 조회를 받습니다. 승인된 팀은 내부 보안, 사고 대응, 침투 테스트 담당자여야 하고, 소속 기관은 모델을 어떻게 쓰는지 추적해야 합니다. 악성코드 분석처럼 공격에도 쓸 수 있는 작업은 방어나 학술 목적에서만 허용됩니다.
- 무엇인가
- 구글의 최고 보안 모델로, 검증된 페어윈드 방어자에게만 열려 있습니다.
- 강점
- 여기서 수정 성공률이 가장 높은 71%(CWE-bench)이고, 취약점 찾기는 88.2%입니다.
- 누구에게 맞나
- 검증된 페어윈드 보안팀에 맞습니다. 작은 회사와 일반인은 아직 쓸 수 없습니다.
- CWE-bench 취약점 수정CWE-bench 71.0%
여기 있는 이유
사이버 기능 제한을 푼 버전은 구글 자체 팀과 페어윈드 프로그램을 통과한 보안 단체에만 갑니다. 페어윈드 프로그램에는 출시 당시 650곳이 넘는 기관이 있었고, 일반인은 "가능한 한 빨리" 쓸 수 있게 되지만 날짜는 정해지지 않았습니다.
유의할 점
블룸버그는 접근 권한이 있는 구글 직원들이 실제 코딩 작업에서 이 모델이 시험 점수만큼 잘하지 못한다고 말했다고 보도했습니다. 구글은 블룸버그에 이것이 사실이 아니라고 밝혔습니다. 저는 독립적인 직접 시험 결과를 찾지 못했습니다.