Pelican benchmark
创建一个 HTML,内容是 SVG 绘制一个鹈鹕骑自行车的 2D 动画,你不需要任何测试
claude-opus-5-5
Anthropic · Сначала новые
claude-opus-5-5Завершено
Время 118,3 с
claude-opus-5-5Завершено
Время 133,1 с
claude-opus-5-5Завершено
Время 110,5 с
claude-opus-5-5Завершено
Время 99,3 с
claude-opus-5-5Завершено
Время 107,5 с
claude-opus-5-5Завершено
Время 130,4 с
claude-opus-5-5Завершено
Время 113,5 с
claude-opus-5-5Завершено
Время 84,0 с
claude-opus-5-5Завершено
Время 123,6 с
claude-opus-5-5Завершено
Время 109,4 с
claude-opus-5-5Завершено
Время 126,1 с
claude-opus-5-5Завершено
Время 118,7 с
claude-opus-5-5Завершено
Время 104,2 с
claude-opus-5-5Завершено
Время 117,1 с
claude-opus-5-5Завершено
Время 94,9 с
claude-opus-5-5Завершено
Время 107,7 с
claude-opus-5-5Завершено
Время 124,3 с
claude-opus-5-5Завершено
Время 104,1 с
claude-opus-5-5Завершено
Время 196,8 с
claude-opus-5-5Завершено
Время 110,4 с
claude-sonnet-5-5
Anthropic · Сначала новые
claude-sonnet-5-5Завершено
Время 107,2 с
claude-sonnet-5-5Завершено
Время 74,3 с
claude-sonnet-5-5Завершено
Время 53,3 с
claude-sonnet-5-5Завершено
Время 31,7 с
claude-sonnet-5-5Завершено
Время 56,1 с
claude-sonnet-5-5Завершено
Время 55,4 с
claude-sonnet-5-5Завершено
Время 45,3 с
claude-sonnet-5-5Завершено
Время 37,0 с
claude-sonnet-5-5Завершено
Время 44,6 с
claude-sonnet-5-5Завершено
Время 56,2 с
claude-sonnet-5-5Завершено
Время 67,6 с
claude-sonnet-5-5Завершено
Время 47,3 с
claude-sonnet-5-5Завершено
Время 66,2 с
claude-sonnet-5-5Завершено
Время 46,9 с
claude-sonnet-5-5Завершено
Время 55,0 с
claude-sonnet-5-5Завершено
Время 72,1 с
claude-sonnet-5-5Завершено
Время 55,4 с
claude-sonnet-5-5Завершено
Время 88,9 с
claude-sonnet-5-5Завершено
Время 48,8 с
claude-sonnet-5-5Завершено
Время 53,4 с
gpt-6-astra
OpenAI · Сначала новые
gpt-6-astraЗавершено
Время 105,7 с
gpt-6-astraЗавершено
Время 101,3 с
gpt-6-astraЗавершено
Время 109,4 с
gpt-6-astraЗавершено
Время 128,8 с
gpt-6-astraЗавершено
Время 106,3 с
gpt-6-astraЗавершено
Время 123,2 с
gpt-6-astraЗавершено
Время 135,3 с
gpt-6-astraЗавершено
Время 119,9 с
gpt-6-astraЗавершено
Время 148,4 с
gpt-6-astraЗавершено
Время 127,6 с
gpt-6-astraЗавершено
Время 78,1 с
gpt-6-astraЗавершено
Время 128,1 с
gpt-6-astraЗавершено
Время 134,7 с
gpt-6-astraЗавершено
Время 111,7 с
gpt-6-astraЗавершено
Время 120,4 с
gpt-6-astraЗавершено
Время 101,8 с
gpt-6-astraЗавершено
Время 94,8 с
gpt-6-astraЗавершено
Время 120,1 с
gpt-6-astraЗавершено
Время 94,1 с
gpt-6-astraЗавершено
Время 102,6 с
gpt-6.1-sol
OpenAI · Сначала новые
gpt-6.1-solЗавершено
Время 126,5 с
gpt-6.1-solЗавершено
Время 87,9 с
gpt-6.1-solЗавершено
Время 88,6 с
gpt-6.1-solЗавершено
Время 91,7 с
gpt-6.1-solЗавершено
Время 96,0 с
gpt-6.1-solЗавершено
Время 127,7 с
gpt-6.1-solЗавершено
Время 99,8 с
gpt-6.1-solЗавершено
Время 103,1 с
gpt-6.1-solЗавершено
Время 132,1 с
gpt-6.1-solЗавершено
Время 103,5 с
gpt-6.1-solЗавершено
Время 110,4 с
gpt-6.1-solЗавершено
Время 111,9 с
gpt-6.1-solЗавершено
Время 128,7 с
gpt-6.1-solЗавершено
Время 139,9 с
gpt-6.1-solЗавершено
Время 108,3 с
gpt-6.1-solЗавершено
Время 119,3 с
gpt-6.1-solЗавершено
Время 106,5 с
gpt-6.1-solЗавершено
Время 88,5 с
gpt-6.1-solЗавершено
Время 117,3 с
gpt-6.1-solЗавершено
Время 218,4 с
О бенчмарке с пеликаном
Каждые 30 минут модели получают одну задачу, а результаты показываются без отбора и редактирования, чтобы можно было сравнить код и рисунки.
Задача: 创建一个 HTML,内容是 SVG 绘制一个鹈鹕骑自行车的 2D 动画,你不需要任何测试
Пеликан на велосипеде стал неформальным тестом языковых моделей у разработчиков: задача помещается в одно предложение, результат легко оценить, а специально подстроить модель под неё сложно.
Внешние данные по ссылке на источник. Это не собственный бенчмарк Relay: teamorouter.com
Модели в бенчмарке
- claude-opus-5-5
- claude-sonnet-5-5
- gpt-6-astra
- gpt-6.1-sol