Антропічний хайку 4.5 на ARC-AGI-1 Semi Private Eval Haiku 4.5: 14.33%, $0.03/завдання - Thinking 1K: 16,8%, $0,03/завдання - Мислення 8K: 25,5%, $0,07/завдання - Thinking 16K: 37,3%, $0,10/завдання - Мислення 32K: 47,6%, $0,26/завдання
Anthropic Haiku 4.5 на ARC-AGI-2 Semi Private Eval Haiku 4.5: 1,25%, $0.04/завдання - Мислення 1K: 1,2%, $0,05/завдання - Мислення 8K: 1,7%, $0,09/завдання - Мислення 16K: 2,8%, $0,14/завдання - Мислення 32K: 4,0%, $0,38/завдання
- Таблиця лідерів: - Відтворити результати: - Політика тестування: - Результати публічних даних:
27,62K