Что если дать модели возможность переписывать контекст? Так чтобы она работала с ним как с файлом? Простая и гениальная идея, не понимаю, почему её раньше никто не довёл в таком виде. Сплошные профиты: многие вещи из контекста не нужны после того как получен результат, запросто можно урезать лишнее ненужное и сэкономить вычислений. Да, после точки редактирования летят KV-кеши, но для неизменившейс…

Прикольный результат. Не все чекпойнты одинаково полезны. Очередная лотерея. Generalization Dynamics of LM Pre-Training Jiaxin Wen, Zhengxuan Wu, Dawn Song, Lijie Chen Paper: https://arxiv.org/abs/2609.33150 Review: https://arxiviq.substack.com/p/generalization-dynamics-of-lm-pre Code: N/A Model: N/A ЧТО сделали: Авторы проверили, как языковые модели переходят от простых поверхностных эвристик к с…

Декомпозиция RSI :) The Last AI Built by Humans: Toward Genuine Recursive Self-Improvement Yi Duan, Ying Liu, Zirui Tang, Haodong Chen, Jun Zhou, Yumou Liu, Bangrui Xu, Yukai Wu, Sidi Chen, Yuhan Zhou, Haoyu Wang, Xiaoyou Yu, Shaokun Han, Xuzhou Zhu, Le Zhou, Bolin Lu, Wei Zhou, Jiachen Liu, Nuozhou Fang, Jiaxin Tian, Ruoyu Chen, Yuxuan Li, Kai Zuo, Kaiyan Zhang, Qianyu Yang, Zijie Wang, Jiantao Q…

Свежий репорт от Натана https://www.stateof.ai/ В меру краткий анонс https://nathanbenaich.substack.com/p/state-of-ai-2026

Снова старая добрая нейроэволюция! Один из соавторов, кстати, соавтор той книги. Continual Reinforcement Learning with Neuroevolution Eleni Nisioti, Andrea Cossu, Kathrin Korte, Sebastian Risi Paper: https://arxiv.org/abs/2610.01583 Review: https://arxiviq.substack.com/p/continual-reinforcement-learning Code: https://github.com/eleninisioti/continual_neuroevolution ЧТО сделали: Исследовали нейроэв…