ByteDance Seed 팀은 2025년 8월 스탠포드 대학교 및 기타 기관과 협력하여 Mixture of Contexts(MoC)를 제안했습니다. 관련 연구 결과는 논문 "긴 비디오 생성을 위한 컨텍스트 혼합".

MoC(Mixture of Contexts)는 장맥락 비디오 생성을 내부 정보 검색 작업으로 재구성한 간단하고 학습 가능한 희소 주의 라우팅 모듈입니다. MoC에서 각 쿼리는 주의에 필요한 몇 개의 정보 세그먼트와 필수 앵커를 동적으로 선택하여 인과 라우팅을 통한 루프 폐쇄를 방지합니다.