Не работает предобученный скилл FAQ

Загружаю и тестирую пред. обученный cкилл FAQ.
fasttext_tfidf_autofaq
Ничего не обучаю, просто загружено все от deeppavlov

В чем может быть причина ?

@YuriiG модель предобучена на вопросах абитуриентов в Физтех-Лицей

Так я же и задаю вопросы из этого набора.
И у них почти такой же scor как у абракадабры
@Vasily

Установил англоязычную.
Тоже не понимаю. Вопросы беру только из таблицы.
image

@Vasily

@YuriiG из скрина английской версии, кажется, что модель отработала верно.

Для первого вопроса виден большой скор первого ответа, в остальных, думаю, со скорами тоже все ОК.

Как же ОК. Там же видно, что скор скачет.
Хотя модель беру готовую, а вопросы - копипаст из csv.

Или csv не соответствует модели?

@Vasily

@YuriiG

csv в полной мере соответсвует модели.

Cкоры в массиве показывают насколько Ваш запрос соответствует ответу в выборке.

Если скор большой, то ответ соответствуюет в большей мере.

@Vasily Так почему же тогда для некоторых вопросов (которые все - cуть копипасты из csv) скор отличный, а для некоторых нет.
Я бы еще грешил, что криво стали библиотеки, но для тогда все было бы плохо.

“Ваш запрос соответствует ответу в выборке” - это опечатка ? наверное вопросу в выборке.