Новая gemini-1.5-pro-002 действительно чуть-чуть лучше, и даже в ПингПонге.

А ещё я подвёз интервалы.



Пару слов о сложности интеграции Gemini. Я всей душой ненавижу Google Cloud. К счастью, у Гугла есть AI Studio, приличный фронтенд для этого хтонического монстра. Напрямую использовать питоновский клиент я не мог, потому что нужен был OpenAI-like интерфейс. Примерно полчаса я долбался с существующий проксей для OpenAI-like интерфейса на Go, но даже после дебага и ручного вправления моделей, нифига не работало из-за 400 пустых ошибок именно для 002.



В какой-то момент я плюнул и попросил Клода написать мне проксю. Он её написал. Она сразу заработала.