Релиз ttok 1.0: утилита перешла на токенизатор GPT-5 и GPT-6 по умолчанию
Саймон Уиллисон выпустил версию 1.0 утилиты ttok, изменив используемый по умолчанию токенизатор с GPT-4 на GPT-5/GPT-6. OpenAI еще не подтвердила официально использование единого токенизатора для GPT-6, однако сторонние тесты показали идентичный подсчет токенов для линеек GPT-5 и GPT-6.
Читать в первоисточнике — Simon Willison ↗
Ещё в ленте
Разработчик создал инструмент для цензуры промптов из-за новых правил Anthropic
8 октября компания Anthropic обновила правила пользования своими моделями, запретив систематическую жестокость по отношению к ним. В ответ на это пользователь разработал инструмент для автоматической цензуры ненормативной лексики при работе с Claude Code.
MIT Technology Review обсудит создание вирусов с помощью генеративного ИИ
Аспирант Стэнфордского университета Samuel King использовал генеративный ИИ для создания генетических чертежей микроскопических вирусов. Хотя полученные результаты пока не являются искусственной формой жизни, эта работа приближает ее создание. MIT Technology Review организует круглый стол с исследователем для обсуждения перспектив технологии.
Вышла версия 0.4 утилиты ttok для подсчета токенов
Саймон Уиллисон выпустил обновление ttok 0.4 — консольной утилиты для подсчета токенов на базе библиотеки tiktoken от OpenAI. В новой версии исправлено предупреждение Click, обновлен CI и добавлена команда --list-models для просмотра доступных моделей. Инструмент также поддерживает запуск через uvx для работы с текстовыми потоками.
Anthropic запустила бесплатное сканирование уязвимостей для open source-проектов
Anthropic представила сервис OSS Scanner для поиска уязвимостей в проектах с открытым исходным кодом. Подключившиеся проекты смогут бесплатно проходить периодические проверки с использованием самых мощных моделей компании. Это поможет разработчикам быстрее выявлять потенциальные проблемы безопасности.