Dialogue Evaluation 2024

GenDocVQA

Описание и постановка задачи

В рамках соревнования необходимо построить вопросно-ответную систему над изображениями документов (задача Visual Question Answering).

Соревнование делает фокус на неэкстрактивных вопросах — ответы на вопросы GenDocVQA-2024 не содержатся в тексте документа в виде подстроки и должны быть самостоятельно сгенерированы вопросно-ответной системой. Кроме того, необходимо соблюдать требование к робастности вопросно-ответной системы — решение должно продемонстрировать устойчивость к различным вариантам формулировки и формы вопросов.

Документы и вопросы к ним представлены на английском языке.

График проведения

01.06.2024 — старт соревнования;

01.09.2024 — дедлайн подачи статей.