Пеликаны на велосипедах: как GPT-6 Astra выглядит на фоне GPT-5.6

Саймон Уиллисон, известный своим необычным способом оценивать языковые модели, получил доступ к GPT-6 Astra и сразу же применил привычный приём. Он попросил модель сгенерировать SVG-изображение пеликана, едущего на велосипеде, — и сделал это на всех доступных уровнях «рассуждения»: low, medium, high, xhigh и max (режима none у Astra нет).

Полученные картинки автор свёл в одну сравнительную таблицу вместе с результатами моделей предыдущего поколения — GPT-5.6 Sol, Terra и Luna. По его словам, затея оказалась не просто развлечением, но и вполне содержательным экспериментом.

Astra рисует заметно лучше

Главный вывод: пеликаны Astra ощутимо превосходят конкурентов. Лучший вариант у GPT-5.6 Sol (автору больше понравился xhigh, а не max) по-прежнему выглядит как набор абстрактных фигур, тогда как любой пеликан Astra — даже на минимальном уровне — смотрится убедительнее. Результат на уровне max Уиллисон называет действительно хорошим. Правда, ниже максимума модель всё ещё не всегда рисует лапы пеликана по обе стороны кадра.

Дороже, но экономнее

Astra примерно вдвое дороже Sol: 10 долларов за миллион входных токенов и 50 за миллион выходных против 5 и 30 у Sol. Однако новая модель тратит заметно меньше токенов на каждом уровне, поэтому итоговая разница в цене оказывается не такой драматичной. По подсчётам автора, Astra на уровне low выдаёт пеликана лучше, чем любая из моделей GPT-5.6 Sol на любом уровне, — и всего за 9,55 цента. Потратить те же десять центов на другую модель — значит получить куда более скромный результат.

Любопытная деталь

Отдельно Уиллисон обращает внимание на количество входных токенов при одинаковом запросе: Astra и Luna обе израсходовали по 16, а Sol и Terra — по 26. Из этого он строит осторожную гипотезу: возможно, Astra и Luna устроены ближе друг к другу, чем OpenAI даёт понять.

Источник: Simon Willison