Разработан QA-фреймворк для автоматического тестирования готовых ML-моделей
Разработчик представила QA-фреймворк для тестирования готовых ML-моделей. Инструмент собирает контракт модели и автоматически определяет, какие проверки запустить и как классифицировать результаты.
Читать в первоисточнике — Хабр ↗
Ещё в ленте
Как галлюцинации ИИ создают риски для посетителей ресторанов с аллергией
Ошибки и галлюцинации систем ИИ начали влиять на поведение клиентов общепита. По сообщениям персонала ресторанов, некоторые посетители с аллергией перестали уточнять состав блюд, полагаясь на непроверенные данные от искусственного интеллекта. Подобная слепая доверенность к ответам алгоритмов повышает риск опасных инцидентов со здоровьем.
Amazon призвала поддержать строительство дата-центров для ИИ
Глава AWS Мэтт Гарман призвал общественность поддержать проекты создания дата-центров для искусственного интеллекта. По его словам, блокировка таких строек может нанести непоправимый ущерб экономике и национальной безопасности США. Гарман также отверг опасения граждан относительно негативного влияния дата-центров на энергосети и рынок труда.
Как пользоваться LMArena и правильно выбирать нейросети под конкретные задачи
Платформа LMArena позволяет сравнивать ИИ-модели на основе пользовательских голосований по тексту, коду, изображениям и другим критериям. Материал объясняет устройство интерфейса площадки и логику категорий рейтинга. Это помогает оценивать сильные стороны моделей в прикладных сценариях вместо ориентации только на общий балл.
Дайджест ИИ за сентябрь: релизы новых моделей и главные события индустрии
В сентябре OpenAI, Anthropic и Google представили новые версии моделей, включая GPT-6 Astra и семейство Claude 5.5. Кроме того, заявление OpenAI о решении задачи Навье-Стокса вызвало споры в научном сообществе, а глава NVIDIA оформил сделку по покупке Hugging Face.