GPT-4o mini vs YandexGPT vs Gemini vs GigaChat vs ..

22.9.2024 - 1360 просмотров ;)

Запрос: список из 50 крупнейших городов в которых говорят на якутский языке, ничего лишнего

GPT-4o mini галюционировал как надо и написал список городов более менее по смыслу подходящих..  остальные модели написали отмазки, да и еще кучу дополнительного текста написали зачем-то , ясно же указал что не надо.

Claude 3.5 Sonnet  тоже привел список, частично совпадающий с GPT 4o

Llama 3.1 405B — привела действительно похожий список городов и ничего лишнего не написала.. прямо идеально

Deepseek LLM 67B — идеально

Mixtral 8x22B — идеально

Вывод: Русские модели нифига не знают на якутский язык и города. ГПТ приблизился к Клаудям и Лламам.. ну Дипсик не свою модель имеет а солянку, Мистраль тоже маладец. Гмини опозорился конечно.

Ясен пень что разные запросы по разному отвечаются.. ну вот так вот .. я выбрал фаворитов для себя.

Статьи из раздела, Видеочат рулетка