마음의 진화
마인드 에볼루션(Mind Evolution)은 구글 딥마인드가 대규모 언어 모델(LLM)의 추론 능력을 향상시키기 위해 제안한 진화적 검색 전략입니다.더욱 심화된 LLM 사고방식"는 추론 중 컴퓨팅 리소스 활용을 혁신적인 방식으로 확장하여 모델이 복잡한 문제를 보다 효과적으로 처리할 수 있도록 하는 것을 목표로 합니다.
마인드 에볼루션은 언어 모델을 사용하여 후보 솔루션을 생성, 재구성 및 최적화함으로써 다양한 솔루션 그룹을 발전시킵니다. 이 접근 방식은 기본 추론 문제를 공식화하지 않고 추론 중에 모델을 지속적으로 탐색하고 개선하도록 안내하는 솔루션 평가자만 필요로 합니다. 이는 문제 공식화의 복잡성을 피할 뿐만 아니라, 우수한 확장성과 병렬화 기능을 보여주며, 향후 복잡한 작업에 대규모 언어 모델(LLM)을 적용하기 위한 새로운 아이디어를 제공합니다.
실험 결과, 마인드 에볼루션은 자연어 계획 작업에서 Best-of-N 및 Sequential Revision과 같은 기존 추론 전략보다 훨씬 더 나은 성과를 보이는 것으로 나타났습니다. 예를 들어 TravelPlanner와 Natural Plan 벤치마크에서 Mind Evolution은 정식 솔버를 사용하지 않고도 98%보다 우수한 성능을 보였습니다.