Задания
Новый релиз датасетов.
- RUSSE: новый тест + оценка людей
- DaNetQA: увеличила данные + новый тест + оценка людей
- RuCoS: увеличили данные + почистили мелкие неточности/опечатки
- RuCoS: увеличили данные + почистили мелкие неточности/опечатки
Название |
Тип задачи |
Идентификатор |
Скачать |
Инфо |
Метрика |
Размер (обуч/вал/тест) |
LiDiRus диагностика |
Диагностика |
LiDiRus |
|
Подробнее |
Кор, коэффициент Мэтью |
0/0/1104 |
Russian Commitment Bank |
Логический вывод |
RCB |
|
Подробнее |
Средняя F1/ Точность |
438/220/438 |
Choice of Plausible Alternatives for Russian language |
Здравый смысл |
PARus |
|
Подробнее |
Точность |
400/100/500 |
Russian Multi-Sentence Reading Comprehension |
Машинное чтение |
MuSeRC |
|
Подробнее |
F1a / EM |
500/100/322 |
Textual Entailment Recognition for Russian |
Логический вывод |
TERRa |
|
Подробнее |
Точность |
2616/307/3198 |
Russian Words in Context (based on RUSSE) |
Здравый смысл |
RUSSE |
|
Подробнее |
Точность |
19845/8508/18892 |
The Winograd Schema Challenge (Russian) |
Причинно-след. связь |
RWSD |
|
Подробнее |
Точность |
606/204/154 |
Yes/no Question Answering Dataset for the Russian |
Знание |
DaNetQA |
|
Подробнее |
Точность |
1749/821/805 |
Russian Reading Comprehension with Commonsense Reasoning |
Машинное чтение |
RuCoS |
|
Подробнее |
F1 / EM |
72193/7577/7257 |