OpenRouter представив інструмент оцінки AI моделей Ori Eval

OpenRouter представив інструмент оцінки "Ori Eval", який порівнює продуктивність, швидкість та витрати AI моделей. Цей інструмент допомагає розробникам знайти відповідну модель без необхідності тестувати кілька моделей. Ori Eval виконує реальні запити та перевіряє якість викликів інструментів і відповідей, надаючи обґрунтування для вибору моделі. Інструмент оцінює, яка модель працює краще в конкретному сервісі, враховуючи дані окремих продуктів та середовище виконання, що важко відобразити в загальних бенчмарках. У процесі оцінки фіксуються умови виконання та налаштування моделі, щоб уникнути спотворення результатів. Оцінка зберігається у форматі '.eval.ts' і виконується за допомогою методу 'bun test'. Також доступна функція перетворення проблем агентів підтримки клієнтів у тести, що може бути використано для регресійного тестування у зв'язці з GitHub Actions. Цей випуск демонструє розширення бізнес-діяльності OpenRouter з послуг посередництва моделей до управління розробкою та експлуатацією. OpenRouter підтримує не лише кредитні картки та Alipay, але й стейблкоїн USD Coin (USDC).

Цей контент надано лише для загальних інформаційних цілей і не є фінансовою, інвестиційною, юридичною чи податковою консультацією. Події, нагороди, онлайн-акцій або пов’язану інформацію, згадана тут, не слід розглядати як рекомендацію, прохання чи запрошення до купівлі, продажу, торгівлі чи інших операцій з криптоактивами. Криптоактиви є дуже волатильними та можуть призвести до збитків. Доступність послуг, продуктів WEEX та пов’язаних із ними подій може відрізнятися залежно від регіону. Ви несете відповідальність за забезпечення відповідності вашої участі чинному місцевому законодавству та нормативним актам.