Финансовый интеллект машин: новый взгляд на мультимодальный анализ

UniFinEval охватывает пять ключевых финансовых сценариев и формирует наборы данных, включающие текст, изображения, видео и их комбинации, причём данные отличаются высокой информативностью и созданы вручную, а также включают специальные механизмы для проверки кросс-модальной согласованности и многошагового рассуждения, обеспечивая всестороннюю оценку многомодальных больших языковых моделей в финансовой сфере.

Исследователи представили комплексный бенчмарк UniFinEval для оценки способности моделей понимать и анализировать финансовую информацию из текста, изображений и видео.