Spaces:
Running
on
CPU Upgrade
Questions
Hello, I would like to ask.
Is this leaderboard and other leaderboards you have made alive or not at this point in time?
In addition to this, the question is, why not conduct, among other things, model testing in a fully deterministic mode, that is, without using random sampling, with top_k = 1 or min_p = 1?
Yes, this may result in models being less creative and starting to repeat themselves, but it will allow for tests whose results can be reproduced.
Здравствуйте, я хотел бы спросить.
Жива ли эта таблица лидеров или нет и другие таблицы лидеров сделанные вами, на данный момент времени?
В дополнении к этому, такой вопрос, почему не проводить, в том числе проверку моделей в полностью детерминированном режиме, то есть без использования случайного семплирования, с top_k = 1 или min_p = 1?
Да это может привести к тому, что модели будут менее креативными, и могут начать повторяться, но это позволит проводить тесты, результаты которых можно будет воспроизвести.