8433
lingtra.in habr.com/ru/users/averkij/ hfday.ru
Кстати, свой экземпляр книги "ИИ 2041" Чэня Цюфаня и Кайфу Ли хочу вам подарить. Книга супер, пишите, кто хочет подарочек. Разыграем, как обычно.
Upd. Разыграем несколько книжек (есть на полке еще пара неплохих книг про ИИ)
Лю Цисинь Чэнь Цюфань будет выступать тут через час.
Кстати, смотрю на сурдопереводчика и восхищаюсь, столько времени держать концентрацию во время работы крайне сложно (проверять это мы, конечно, не станем).
Кстати, завтра на AIJ будет Чэнь Цюфань (陈楸帆), известный китайский писатель-фантаст. Кроме прочего, он в соавторстве с Кай-Фу Ли написал книгу "ИИ 2041. Десять образов будущего", в которой НФ рассказы чередуются с анализом технической стороны.
Книжку эту я читал, могу рекомендовать. Там и про анализ пользовательских данных есть, и про слежку, дипфейки, иммерсивные игры и кучу всего. Где-то напоминает пессимистичные сюжеты "Черного зеркала", подсвечивая проблемы, которые хорошо бы решить, чтобы в будущем в это самое зеркало не попасть.
Сходили тут на стендап Соболева. Все было построено на импровизации, поэтому шоу получилось средней смешливости, но в целом достойно.
Илья славится своими моментальными панч-фразами, часто с матом. Было бы круто такие фразы интегрировать в модели, чтобы какой-нибудь курсор тебя песочил за баги в коде, типа "вы абсолютно правы, но лучше бы вы шли работать по специальности, дворником" (он ведь и погуглить про тебя предварительно может, чтобы фактуру собрать).
Мне кажется, добавило бы новых красок в работу.
🔺 Генератор 3D-миров
Прикольная штука, можно генерировать обширные сцены по одной или нескольким картинкам, можно объединять разные сцены в одно пространство, редактировать их промптами и т.д.
Артефакты тоже дает, если присмотреться, но все равно выглядит круто. Можно экспортировать проект в стандартный формат. 3D-дизайнерам и разработчикам игр на заметку.
Бесплатно дают нагенерить какое-то количество сцен, так что можно поиграться, загрузив какой-нибудь кадр из фильма или фотку из детства.
👉 marble.worldlabs.ai
Claude Code раздает по $250 на тестирование своей веб-версии (https://claude.ai/code). После выполнения задачи в вебе можно волшебным образом вернуться в консольное приложение командой
claude --teleport <session_id>
Раздает только до 18 ноября для подписчиков, поэтому потратить столько будет не просто, если только не заставить его писать документацию по всем своим пет-проектам.
Ну и еще можно задействовать какие-то кастомные тяжелые скиллы (https://github.com/anthropics/skills), про которые надо отдельно написать, у них довольно любопытная реализация.
Друзья, день сегодня в целом соверешенно такой же, как и вчера, но небольшое отличие все же есть (за исключением того, что сегодня выходной) — у меня случился ДР.
Хотел бы сказать, что стал старше и мудрее, но уверен только в первом.
Рад, что в этом канале собралось такое замечательное сообщество таких классных людей, всем хороших выходных, всех обнимаю! 🤗
// На фото я пишу вам это сообщение
Ого, оказывается, ГЭБ переиздали на русском
... рекурсивный закон Хофштадтера: На любое дело требуется больше времени, чем казалось в начале, даже если вы учитывали при этом закон Хофштадтера.Читать полностью…
Маск предлагает дуэль Карпати vs. Grok 5, но я бы лучше посмотрел как Шмидхубер втащил бы какому-нибудь андроиду (или наоборот).
🔺 nanochat
У Андрея Карпати, кстати, на днях появился новый репозиторий — nanochat. Все это в рамках будущего курса LLM101n, который, видимо, скоро оформится.
В nanochat'е можно посмотреть на пример полного цикла обучения LLM, от подготовки данных (берется кусок FineWeb-Edu, чистого качественного датасета) до запуска обучения, замеров и инференса обученной модели.
Скрипты настроены на обучение на узле из 8 карточек. Можно сразу запустить скрипт speedrun.sh, сжечь $100 за 4 часа и обучить что-то, что ещё 5-6 лет назад выглядело как чудо.
👉 https://github.com/karpathy/nanochat
Оказывается, есть чемпионат России по мнемоспорту (запоминанию), будет проходить 25-26 октября. Напомните сходить на него.
Читать полностью…
В легендарном издательстве Питер выходят сразу несколько книг по нашей теме (две ещё в предзаказе, а две только-только из печи печати) от O'Reily и Manning.
Обсудили, что можно будет их почитать и разобрать, а я опять же буду раздаривать вам.
Цены у технических книг традиционно высокие, поэтому важно понять насколько они адекватные, как в плане содержания, так и в плане перевода.
По крайней мере выглядят книжки прикольно и красиво (кроме, разве что, про Copilot).
От жестов к фразам! 🎉 На нашем сайте — новый раздел!
Всем привет! Наша команда не стоит на месте, мы запустили то, о чем многие нас спрашивали — раздел с готовыми фразами и предложениями на РЖЯ! 🚀
Раньше наш словарь помогал учить отдельные жесты-слова. В новом разделе вы найдёте, как слова складываются в живые фразы и предложения.
Почему это круто?
1️⃣ Становится понятна настоящая грамматика и лексика РЖЯ.
2️⃣ Можно увидеть, как работает немануальный компонент (мимика и движения губ).
3️⃣ Учиться говорить целыми фразами стало гораздо проще!
Заглядывайте, изучайте и делитесь с друзьями, кто интересуется РЖЯ 👇
➡️ [https://signflow.ru/phrases]
Благодарим АНО ДПО «Центр образования и исследования жестового языка», а также команду Спецпроектов RnD за вклад в развитие сайта.
Ждём ваши отзывы! Пишите в комментариях названия тем, которые вы хотели бы изучить! ❤️
#РЖЯ #release
🔺 OpenAI DevDay 2025
🔸 Добавляйте в ваши приложения Apps SDK (расширение MCP) и их можно будет использовать в ChatGPT. Стараются делать так, чтобы релевантные приложения предлагались сами. Для разработчиков документация и гайдлайны. Скоро расскажут про монетизацию и поддержку Agentic Commerce Protocol, для автоматизации покупок.
🔸 Новые модели в API. Sora 2 (модели sora-2 и sora-2-pro). GPT-5 pro по $120 за миллион выходных токенов. gpt-image-1-mini — моделька для генерации картинок, на 80% дешевле чем текущая большая.
🔸 Запустили AgentKit. Можно вайб-делать мультиагентные системы. Немного это потыкал в это, выглядит прикольно. Сервисы, чтобы строить подобные цепочки агентов уже есть, но тут все выглядит покачественней.
После того, как накостыляли агента, можно встроить его в свой фронтенд — на сайт или еще куда-нибудь при помощи ChatKit. Есть демо и обучалки.
https://openai.com/devday/
Читал недавно книжку «В начале было кофе», хорошая вещь. Понравилась глава про лингвофриков, которые по разным причинам несут в массы некие «сакральные» знания про язык — буквицу, блины комам и прочий бред.
Еще прикольно пишет про систематические изменения ударений и родов в словах, таких изменений за сто лет набирается куча и широкие массы это никак не задевает (приводятся примеры). Но есть несколько слов типа «договор» и «кофе», за которые люди держатся, стараясь сохранить какую-то одну их форму использования.
«Я пил мелкими глотками огненное кофе».
В. Набоков, «Отчаяние», 1936 г.
«Кофе в чашке стояло на письменном столе».
М. А. Булгаков, «Записки покойника», 1936–1937 гг.
«Но кофе горячо и крепко, день наступает ясный, морозный».
И. А. Бунин, «Нобелевские дни», 1933 г.
Офигеть, переводчик прям на глазах выгорает
Читать полностью…
🔺 Antigravity
Так, пойдем-ка попробуем новую IDE, которая вчера вышла вместе с Gemini 3.
С виду привычный VS Code, те же панельки, то же планирование и агенты. Ищем киллер-фичи кроме того, что она "for individuals at no charge" (пока что).
В списке моделей можно выбрать Gemini 3 Pro и Sonnet 4.5.
Upd. После логина работает без VPN, что не характерно. Видимо, ходит не в родной Gemini API провайдер.
https://antigravity.google
🔺 Нарисуй предыдущие инструкции
Коротенький обзор/исследование возможностей Nano Banana, модели от Google для генерации и редактирования картинок, она же Gemini 2.5 Flash Image.
🟢 Контекст у модели 32k токенов и автор пробует разные странные идеи типа засунуть в промпт код html странички, чтобы она его нарисовала. Что еще интересней, так это то, что модель его отрисовывает.
🟢 Но самый забавный пример, это просьба нарисовать системный промпт в виде магнитов на холодильник (!). Так как текста много, можно потом просить нарисовать какую-то конкретную часть, чтобы нормально прочитать.
🟢 Попробовал воспроизвести, в виде магнитиков действительно рисует, а в виде обычного текста на листе или в виде татуировки почему-то не хочет.
👉 https://minimaxir.com/2025/11/nano-banana-prompts/
Слушал Kuji подкаст, ведущий приводит пример про связь математики с квантовыми системами: "Если взять группу SL(2), совсем простую, с тремя генераторами... Хотя тут лучше взять алгебру sl(2), она проще".
Второй ведущий не понимает о чем речь, но гость подкаста быстро нашелся и поясняет: "Алгебра проще, алгебра — это инфинитезимальный инвариант группы Ли". Хорошо еще, что простые вещи обсуждали, а то бы было непонятно.
Рекурсивные акронимы
Все мы с ними регулярно встречаемся. Это такие сокращения, первая буква которых расшифровывается как сам этот акроним, добавляя таким образом самореференцию.
🦬 Один из самых известных рекурсивных акронимов в IT — это проект по разработке свободного ПО GNU (GNU’s Not UNIX).
Впервые термин «рекурсивный акроним» появился не иначе как на страницах книги Дугласа Хофштадтера «Гёдель, Эшер, Бах» в 1979 году.
🧞♂️ Автор приводит пример самореференции, в котором Джин для исполнения мета-желания достает лампу поменьше и спрашивает одобрения у мета-джина, который достает лампу поменьше и спрашивает одобрения у мета-мета-джина, который достает лампу поменьше и 📝
🪟 Каждый следующий шаг делается в два раза быстрее и через несколько секунд «на конце» бесконечного ряда они доходят до GOD (GOD Over Djinn), получают одобрение и раскручиваются назад.
Пара неожиданных примеров:
PNG — PNG’s Not GIF
JACK (тот самый разъем) — JACK Audio Connection Kit
PHP — PHP: Hypertext Preprocessor 🖥
VISA — VISA International Service Association
WINE — WINE Is Not Emulator
YAML — YAML Ain't Markup Language
градиент обреченный
🔺 Почти новая LLM от Авито
Коллеги из Авито выложили в открытый доступ модель A-Vibe. Довольно интересно пишут про обучение вот тут.
🟢 Дообучили Qwen3-8B-Base. В токенизаторе улучшили русский язык, смержив свой и родной токенизаторы и дообучив новые эмбеддинги на русском куске FineWeb'а.
🟢 Сделали SFT на 800k инструкций. Улучшили в код и вызов функций, собрали safe и unsafe инструкции, на которых затем выровняли поведение. Можно было бы их ещё местами поменять и тоже выложить, я считаю.
🟢 В инференсе использовали спекулятивный декодинг (маленькая модель пытается угадать токены основной) для ускорения.
🟢 Заметил, что в замерах есть датасет averoo/baby_mmlu2, который мы собирали ручками. Рад, что он переиспользуется. В основном там школьные вопросы и ответы в формате продолжения предложения. Так можно замерять претрейн по перплексии корректного ответа (чтобы не учитывать инструктивный формат), в том числе у маленьких моделей.
OS — всегда хорошо, поэтому ребята молодцы, удачи им в экспах.
// Upd. Вот тут еще a-vision, vlm модель.
Друзья, классная новость. Нашему коллеге Сергею Маркову вручили Беляевскую премию за его просветительскую книгу «Охота на электроовец: большая книга искусственного интеллекта». Это очень круто, поздравляем!
Читать полностью…
🔺 nanochat на CPU
В репозитории nanochat Андрея Карпати есть хороший отладочный скриптик dev/run_cpu.sh для прогона небольшого количества шагов обучения на CPU.
Штука интересная, рекомендую посмотреть, кто хочет поразбираться в процессе обучения языковых моделей.
🟢 Если под виндой, то запустите через wsl. Убедитесь, что есть unzip, так как там подкачивается архив eval_bundle.zip с парой валидационных сетов. В остальном все зависимости ставятся сами.
🟢 После запуска в начале обучится токенизатор, похожий на GPT-4 (с той же регуляркой) скриптом rustbpe/src/lib.rs. Есть много других примеров обучения токенизатора библиотекой tokenizers, тут Андрей вынул минимальный код для этого.
🟢 После обучения токенизатора нарисуются красивые таблички 👆 со сравнением нашего токенизатора с GPT-2 и GPT-4, в символах на токен по доменам (новости, код, статьи, корейский (видимо, Карпати его знает)).
🟢 Выкачается пара шардов датасета fineweb-edu на английском, модель пройдет по ним 50 шагов и проведутся замеры на eval датасетах типа openbook_qa, arc_chalenge и т.д.
🟢 После окончания обучения можно будет сразу пообщаться с моделью запустив веб-страничку командой python -m scripts.chat_web.
👉 Само собой, после 10 минут обучения с нуля модель ничего адекватного написать не сможет, но пример полностью рабочий, так что можно его поковырять, — поменять данные на свои, поломать токенизатор, поучить подольше и посмотреть, что получится.
А сколько в курсоре по факту дают кредитов в месяц по обычной подписке?
Читать полностью…
«Апофеоз компьюта». 2025 г., смешанная техника, поступила в дар от AMD.
Читать полностью…
Какой-то новый режим появился в курсоре, что-то типа дипвайб-кодинга.
https://cursor.com/blog/plan-mode
Upd. Короче, просто уточнение того что ты хочешь сделать и более детальная проработка, более полезно для объемных задач
Бесполезные md'шники от Claude'а как добавочный налог на выходные токены
Читать полностью…
Друзья, когда-то давно ради прикола разучивал трюк для запоминания длинных чисел, до 100 знаков и более. Сам метод простой:
1️⃣ Каждой цифре сопоставляется буква:
0 → О (похожа по форме)
1 → А (первая буква алфавита)
2 → Д
3 → Т
4 → Г (четвертая буква алфавита, сначала брал Ч)
5 → П
6 → Е (шестая буква алфавита)
7 → С
8 → В
9 → Р (похожа по форме, остальные по первой букве названия цифры)
2️⃣ Последовательностям от 00 до 99 сопоставляются две буквы, которые считаем за инициалы. По этим инициалам подбираем известных людей — писателей, актеров, литературных героев, которые лично для вас наиболее легко всплывают в памяти.
Часть людей может быть вашими знакомыми, а части чисел можно назначить человека по какой-то личной ассоциации, типа 01 → Гагарин. Главное, чтобы образ всплывал в уме.
3️⃣ У каждого человека фиксируется какой-то предмет или действие, свойственное конкретно для него. Так можно будет сжимать 4-значные числа в одного персонажа (1501 → Пушкин летит в космос в ракете).
В общем, через 2-3 недели тренировок можно будет сопоставлять длинным числам ряд людей, расставлять их по воображаемому маршруту и т.д. Очень забавное занятие само по себе!
👉 С нуля так делать долго, хочу сделать универсальную базовую табличку, чтобы можно было ее взять и настроить под себя, оставив большинство и добавив своих ярких персонажей.
4️⃣ Давайте доработаем вместе, вписывайте в пустые клетки имена людей. Подойдут известные ученые, актеры, вообще любые широко известные люди и герои. Чем больше альтернативных вариантов будет, тем лучше.
https://docs.google.com/spreadsheets/d/1VMA7_7WRZez1pOLr8NLmSP7UL9f199F4uLfY4piUs2c/edit
👉 Upd. Ребят, очень круто получается
👉 Upd 2. Кто подключился ❤️. Попробую еще подобрать фамилии на Э для 06, 16, 26 и т.д., чтобы больше известных людей захватить