Tencent의 Gander, 작업을 처리하면서 동시에 대화도 수행
Tencent의 Gander 모델은 음성, 이미지, 텍스트를 동시에 처리하여 복잡한 작업을 수행하면서도 실시간 대화가 가능하지만, 작업 정확도에서는 뒤처집니다.
tencent의 gander 모델은 백그라운드에서 복잡한 작업을 처리하면서 실시간 대화를 수행하도록 설계되었습니다. 이 모델은 음성, 이미지, 텍스트를 동시에 처리하며, '소뇌'가 대화를 관리하고 교체 가능한 '뇌'가 에이전트 작업을 담당합니다. 테스트 결과, gander는 경쟁 모델들보다 사용자를 방해하는 빈도가 적었지만 작업 정확도와 비디오/오디오 이해 분야에서는 약점을 보였습니다. 연구팀은 모델 가중치와 학습 데이터를 공개할 계획입니다. gander의 설계는 대화 속도와 추론 능력 사이의 트레이드오프를 해결합니다.