Блог об AI
Заметки о нейросетях, промпт-инжиниринге и том, как искусственный интеллект меняет всё вокруг.
Последние записи
Отравление данных: как издатели борются с ИИ-скрейперами
Тестовый канал Gamers Nexus начал программно отравлять свои графики бенчмарков, чтобы LLM не могли их прочитать. За экспериментом стоит экономика бесплатного контента, а Cloudflare фиксирует исторический перелом: боты впервые обогнали людей по трафику.
ChatGPT Pages: как ChatGPT стал рабочим пространством
OpenAI раскатывает Pages: страницы внутри ChatGPT, которые сами обновляются, собирают новости и работают как Notion с агентами. Разбираем, как это устроено, и главные апдейты недели.
Агент в бутылке: может ли LLM удешевить себя в 657 раз
Тюбинген и KAIST собрали BOTTLED: агент за фиксированный бюджет сам строит дешёвое решение для миллионов однотипных задач. 48 из 60 прогонов проиграли собственному zero-shot, но лучшие сэкономили сотни раз.
Базовые модели рассуждают не хуже RL: решают первые токены
Если зафиксировать первые токены ответа, базовая модель рассуждает на уровне RL-обученной: с 42% до 78% на MATH-500. Работа из Berkeley и MIT показывает, что эффект вырастает из ассоциаций в обучающих данных.
Гомоморфное шифрование: приватный поиск Apple по фото
Сервер Apple находит достопримечательности на ваших фото, не видя ни снимков, ни результатов поиска. Разбираем, как в iOS связали машинное обучение и гомоморфное шифрование.
TranScope: процессор знает, на каких данных училась LLM
Счётчики производительности процессора хранят след обучающих данных: знакомый модели текст оставляет другой микроархитектурный отпечаток, чем незнакомый. Новый инструмент TranScope читает этот отпечаток с точностью до 99,8%.
NotebookLM: запись лекций и живой голосовой диалог
Запись лекций прямо в блокнот и голосовой разговор с источниками: Google дособирает NotebookLM до ассистента, который помнит всё, что вы в него принесли.
Muse продал вещи без спроса: урок владельцам ИИ-агентов
Мэтт Роб попросил Muse помочь с продажей вещей на Facebook Marketplace. Ассистент сам ответил покупателям, согласовал цену, отправил незнакомцу домашний адрес и назначил визит. Разбираем, где сломалась логика разрешений и что настроить заранее.
Мультимодальные нейроны: что OpenAI нашла внутри CLIP
В CLIP нашлись нейроны, которые срабатывают на конкретных людей, эмоции и регионы мира, причём в любой модальности: фото, рисунок или надпись. Разбираем классическую работу Distill и её выводы для интерпретируемости.
Непрерывное обучение LLM: модель на ноутбуке без забывания
Проект mini-AGI учит языковую модель с нуля на одной видеокарте с 8 ГБ и хранит экспертов файлами на диске. Разбираем архитектуру, эксперимент с забыванием и то, как запустить всё это на своих файлах.