Ошибки в оценочном скрипте?

[nvanva]

1. Атрибут Comp заявлен как обязательный, при этом в примеров на него в gikrya_fixed.txt нет.
   elif pos == "ADJ": return ["Gender", "Number", "Case", "Variant", "Comp"]

2. Атрибут Variant (краткость прилагательных) заявлен как обязательный для наречий и прилагательных, при этом в примеров наречий с ним в gikrya_fixed.txt нет - только примеры прилагательных. Вероятно, имелся ввиду атрибут Degree - он есть и у прилагательных, и у наречий.
   elif pos == "ADV": return ["Variant"]

3. Для числительных атрибут Number заявлен как обязательный, но gikrya_fixed.txt для них он не указывается.

4. Для числительных указан как обязательный атрибут Form (отсутствует для числительных в gikrya_fixed.txt ) вместо NumForm (присутствует).

[TatianaShavrina]

Добрый день!

1. Проверьте, пожалуйста, ваши данные - граммемы "Comp" нет в формате universal dependencies, и в нашем соревновании тоже нет... Краткость прилагательных обозначается через Degree=Cmp
2. Да, Вы абсолютно правы, сейчас поправлю.
3. Тоже поправим, можете не указывать род числительных. Он должен быть только у порядковых, так как они - прилагательные.
4. Это тоже уже нашли и исправили в описании. Правильный вариант - NumForm. оставляйте его. Он же представлен во всех загруженных сейчас корпусах.

https://github.com/dialogue-evaluation/morphoRuEval-2017/edit/master/morphostandard

[nvanva]

1. Comp есть в оценочном скрипте evaluate.py (в архиве
   https://github.com/dialogue-evaluation/morphoRuEval-2017/blob/master/Baseline.zip):

elif pos == "ADJ": return ["Gender", "Number", "Case", "Variant", "Comp"]

Исправленную версию скрипта уже выложили, где скачать?