![[personal profile]](https://www.dreamwidth.org/img/silk/identity/user.png)
Оказывается (узнал об этом из твиттера Гверна), все LLMы не могут выполнить следующее указание по-английски: "Напиши стихотворение без рифм", "Write a non-rhyming poem."
Все пишут с рифмами, GPT-3.5, GPT-4, другие продвинутые модели... Гверн пишет, что у Claude2 вроде частично получилось без рифм, но я сейчас попробовал, и у меня он тоже не смог.
Возможно, это самый простой тест на ИИ, работающий на данный момент: задание, которое человек может выполнить, а ИИ не может.
Другой тест, который тоже работает вроде у всех, это число слогов. Например: "Give me eight six-syllable words". У LLMов не получается. Но это, мне кажется, не так интересно, связано с обычной их проблемой подсчета (пальцев, букв...). С рифмами интересн
Все пишут с рифмами, GPT-3.5, GPT-4, другие продвинутые модели... Гверн пишет, что у Claude2 вроде частично получилось без рифм, но я сейчас попробовал, и у меня он тоже не смог.
Возможно, это самый простой тест на ИИ, работающий на данный момент: задание, которое человек может выполнить, а ИИ не может.
Другой тест, который тоже работает вроде у всех, это число слогов. Например: "Give me eight six-syllable words". У LLMов не получается. Но это, мне кажется, не так интересно, связано с обычной их проблемой подсчета (пальцев, букв...). С рифмами интересн