DeepSeek V4 Flash 0731, AI 모델의 진화

DeepSeek V4 Flash 0731 - ARC-AGI 결과

개요

DeepSeek V4 Flash 0731은 2026년 7월 31일에 발표된 AI 모델로, ARC-AGI-1 및 ARC-AGI-2에서 각각 89.0%와 61.4%의 점수를 기록했습니다. 이 모델은 각 작업당 $0.02와 $0.04의 비용으로 성능을 발휘합니다.

성능 평가

• ARC-AGI-1: 최대 89.0%의 정확도를 기록했습니다.
• ARC-AGI-2: 최대 61.4%의 정확도를 기록했습니다.
• 각 변형의 성능은 다음과 같습니다:
  • 최대: ARC-AGI-1에서 89.0%, ARC-AGI-2에서 61.4%
  • 높음: ARC-AGI-1에서 87.0%, ARC-AGI-2에서 56.0%
  • 낮음: ARC-AGI-1에서 84.0%, ARC-AGI-2에서 46.0%

작업 및 환경

각 벤치마크에서의 추론 수준에 따른 통과/실패 여부는 다음과 같습니다.

ARC-AGI-2 공개 평가 (120개의 작업)

• 최대 성능: 여러 작업에서 성공과 실패를 반복했습니다.
• 높은 성능: 다양한 작업에서 안정적인 성능을 보였습니다.
• 낮은 성능: 일부 작업에서 실패가 두드러졌습니다.

작업 예시:

• 0934a4d8: 실패
• 135a2760: 성공
• 136b0064: 성공
• 13e47133: 실패

ARC-AGI-1 공개 평가 (400개의 작업)

• 최대 성능: 대부분의 작업에서 성공적인 결과를 보였습니다.
• 높은 성능: 높은 성공률을 기록했습니다.
• 낮은 성능: 일부 작업에서 실패가 발생했습니다.

작업 예시:

• 00576224: 성공
• 009d5c81: 성공
• 00dbd492: 성공
• 03560426: 성공

결론

DeepSeek V4 Flash 0731은 ARC-AGI 벤치마크에서 뛰어난 성능을 보였으며, 특히 ARC-AGI-1에서 높은 정확도를 기록했습니다. 이 모델은 다양한 작업 환경에서 안정적인 성능을 발휘하며, 비용 효율적인 솔루션을 제공합니다.