47341
Личный блог Дениса Ширяева (🤍🇺🇦), про технологии, интересное или актуальное. В основном я по нейронкам. Связь и реклама: @thenbot
Чувак скормил каждый кадр футбольной трансляции gpt4-vision и попросил сгенерировать повествование.
Кажется, с ростом мощностей (когда все это в риалтайме крутить можно будет) спортивные дикторы тоже пойдут на рынок луком торговать
OpenAI DevDay - ждем новых анонсов по моделям и API
Через 16 минут OpenAI будет проводить свою первую конференцию для девелоперов. Ходит много слухов о том, что будут представлять. Возможно появится GPT4-TURBO - более быстрая и дешевая версия GPT4. А так же ожидается куча новостей по поводу плагинов, интеграции ChatGPT с разными приложениями и маркетплейс чатботов на базе ChatGPT.
Некоторые даже сравнивают эту конфу с тем моментом, когда Джобс анонсировал первый Iphone. Я, честно, не верю, что это будет что-то настолько же большое, но посмотреть интересно.
Смотрим стрим на YouTube
@ai_newz
Наткнулся тут на новые автоматы для содовой которые CocaCola устанавливает в кинотеатрах в Амстере – там можно теперь заказать фанту, без сахара и БЕЗ пузырьков, то есть это просто желтая холодная водичка ☕️
Они так чай изобретут через пару лет, просто подогреть воду и готово
Интересное наблюдение:
В информационной войне между Палестиной и Израилем начали применять txt2img.
Выше, скриншот с Adobe Firefly, на второй – эта же первая картинка у кучи медиа-сайтов, на третьей – посчитайте количество пальцев у ребенка, там вообще мрачная сцена изображена и под ~100k просмотров в твиттере.
Не думаю, что с этим что-то можно сделать: локальные модели вообще не ограничить, даже законами – так что, считаем пальцы, рассматриваем детали фото, и проверяем источники фотографий, только так можно не поверить в фейк в 2023 году 🥲
Ну, и видимо ждем новой регуляции, после какого-то крупного происшествия из-за фейков.
🌐 YT | 🌐 Spotify | 🎵 Apple Music
The Beatles опять в чартах: вышла последняя «новая» песня «Now and Then», спасибо AI.
Песня завершает серию работ, написанных Ленноном, которые Йоко Оно передала Полу Маккартни в 1994 году. Две предыдущие песни из этих записей, «Free As a Bird» и «Real Love», стали хитами в Великобритании.
«Now and Then» изначально была заброшена из-за трудностей с обработкой вокала Джона Леннона из демо-кассеты, но теперь песню выпустили с использованием AI улучшений.
Маккартни и Ринго Старр записали новые части для песни, в то время как Джордж Харрисон участвует гитарными партиями из сессии 1995 года. Эта настоящая песня записанная сквозь время 🫶
Вместе с песней сделали фильм о создании, и видеоклип, срежиссированный Питером Джексоном (должен скоро выйти)
Текст песни про глубокие чувства и привязанность к любимому человеку. Автор (Леннон) признается в своей любви и зависимости от другого человека, говоря, что все его успехи и счастье связаны именно с этим человеком.
В припеве выражается ностальгия и желание вновь быть вместе, несмотря на возможные разлуки. Автор не хочет терять свою любовь, но также не хочет путать ее или причинять страдания.
Если коротко: песня про любовь, тоску по отсутствующему объекту обожания и желание вновь обрести счастье вместе.
Очень символично для последней песни The Beatles
Запускать новый продукт в 2023:
— Расписал новый продукт с GPT4 и то какие задачи он будет решать
— Провел юзер интервью с GPT4, где модель прикинулась домохозяйкой из Техаса (потому что потенциально ЦА)
— Скормил это же интервью в Dalle 3 чтобы сделать лого проекта, с промптом в стиле: «Logo fusing minimalism with innovation, intended for startups, colored in white on black». Сижу теперь выбираю лого нажимая «Regenerate»
— Скормил GTP4V интерфейсы, и попросил оценить их понятность для «не технической аудитории»
и тп и тд.
Я как менеджер по продукту не понимаю что я буду делать в ~2027, дейлики проводить?
@Denis
Что особенно мне нравится в нашей индустрии, так это баги: ну где еще вам утром пользователь напишет про баг, что один из наших продуктов (Uncrop) дорисовал животных которые делают природу? ☕️
Читать полностью…
Любопытное продолжение идеи адблокеров:
С развитием больших языковых моделей теперь можно довольно неплохо анализировать содержание контента на разные показатели, например, на:
— попытки объективизации какой-либо группы;
— потенциальные попытки распространения дезинформации;
— clickbait;
— политически ангажированный контент;
— религиозный контент.
И тп и тд.
Кто-то запилил Chrome плагин, который анализирует контент части страницы на соответствие этим правилам (или тем, которые пользователю не нравятся), и этот контент удаляется если определится.
Я не сторонник жизни в пузыре (хотя сам бы и NFT скрыл), но мне интересно появится ли такой llm-adblock когда-нибудь как стандартная фича браузеров вроде firefox, мне кажется — вполне реально.
Ссылка:
https://github.com/devxpy/anti-chatgpt
На скрине пример отключения политики – лично я бы это правило никогда бы не активировал, мне интересна политическая жизнь мира (даже если потом хочется плакать сидя на полу в холодном душе)
Недавно вышла любопытная работа про закрытую модель TimeGPT. В пейпере шла речь, про то, как разработчики попробовали применить архитектуру трансформеров к «предсказанию серий данных». Если совсем по простому — то обучили «ChatGPT» на разных исторических данных: торгов, курсов, показателей счетчиков и т.п.
Доступ к модели закрытый, но я связался с авторами и напросился на закрытую бету — ничего лучше чем протестировать модель на курсе рубля к доллару я не придумал, так что в посте пара прогнозов (которые, конечно, нельзя считать финансовыми рекомендациями — нейронные сети любят и галлюцинировать и выдумывать, да и я не финансист совершенно, моей задачей был тест TimeGPT-1).
Датасет делал по их документации, и учел в нем денежный объем (M2) и ключевую ставку по годам с 2013-го года.
В итоге получил два прогноза:
→ Умеренный — это если текущий денежный объем и ключевая ставка не будет меняться весь следующий год (я тупо скопировал их за прошлый месяц и до конца года)
→ Учтенный — прогноз, где учтены показатели M2 и ключевой ставки, но тоже спрогнозированы они той же моделью, отдельными запросами.
В итоге:
— В январе 2025 года за 1$ США будут просить или 105.76 рублей или 157.58 рублей, по мнению TimeGPT-1
— В январе 2025 года ключевая ставка ЦБ будет или ~10% или ~17.5%, по мнению TimeGPT-1
🥰🛍
Естественно, модель не может учитывать всякие там внешние факторы, но я оценил как она сама на март 2024 назначила значительной скачок курса.
P.S. Пока готовил датасеты проклял все, этот тест занял у меня вечеров 5, лучше бы ей не галлюцинировать. Курсы взяты на начало каждого нового месяца.
P.P.S. Модель также можно файнтюнить прямо у них (работает быстро), но мне кажется в этой задаче это не нужно
Спасибо, невероятно, совсем другое дело теперь конечно 🌚
Читать полностью…
Репортаж с Тбилисского завода тяжёлого хинкалестроения. ♥️
На фото тестокарный, фаршеукладочный, и бульонолитейные цеха, а также склад готовой продукции.
а сегодня во всех моих рсс-подписках прошла новость про музей интернет-артефактов. такая история интернета с картинками.
первое использование смайлика. первый mp3 (оказывается, в качестве источника использовалась очень любимая мной песня Suzanne Vega Tom’s Diner, и вначале голос звучал искусственно и понадобилось множество изменений алгоритма компрессии, чтобы добиться более чистого звука). одна из первых фотографий, выложенных онлайн (1992 г, женский музыкальный коллектив Les Horribles Cernettes, состоявший из сотрудниц CERN, фанатом которого (коллектива) был один из создателей интернета Тим Бернерс-Ли). AOL. Yahoo. Geocities (кто-нибудь помнит такое?). первый заказ, сделанный в Amazon. первые мемы. первые корпоративные сайты. первое видео, загруженное на YouTube. виральные онлайн-игры. и прочее и прочее. почти все clickable and playable and watchable.
неплохой способ провести пару (или пару десятков) часов.
Скинули любопытную подборку постов, которая немного касается меня как автора этого канала:
Пару лет назад, знакомые из индустрии люди, слили мне информацию о том, что «некий российский банк с оттенком зеленого» делает канал, в котором Denis Sexy IT является референсом – то есть, они делают такой же профильный канал, но под анонимным брендом, где нейронки и шитпост тесно переплетены (это если меня спросить как я свой формат сам называю, то именно так и называю 💩🤍🤖).
По ссылке серия постов на виси, и она только от одной стороны – от менеджера который вел этот проект (точнее, заменил предыдущего, который ушел), поэтому никак подтвердить написанное я не могу, пишу я тут потому что случайно узнал, что на меня пытались быть похожими – ссылку на канал-копию тоже не даю, но я его посмотрел и похожести правда не вышло.
Если коротко:
Судя по серии постов, все споткнулось об менеджмент, сломанную иерархию, внутренние разборки, попытку маскировки хаоса под аджайл (этим страдают многие коллективы в мире), рабочую токсичность, отсутствие зон ответственности и тп и тд.
В глубину этой истории я вникать не стану, так как меня она касается только поверхностно, но я немного горжусь, что мой сельский стиль ведения канала сложно скопировать гиганту-корпорации, поэтому дам пару советов на будущее тем кто захочет, чтобы облегчить жизнь будущим редакциям или просто людям:
1. Хаос должен царить над контентом, вы не должны знать какие посты будут завтра, потому что это у редакций есть планы, а вы сюда приходите пошутить и время провести, и глуповатые штуки — то на чем все держится. Исключение: запуск Джеймса Уэбба.
17. Читатели любят оригинальный контент или мнение – с оригинальным контентом все понятно, с мнением интересно: контента о технологиях выходит так много, что хочется просто почитать что-то, что отражает «адекватную попытку проанализировать ситуацию» – я с самого начала во многих IT-трендах занимал какую-то позицию, критиковал или хвалил что-то, и если ошибался, то признавал это публично. Такое люди ценят, и поэтому следующий пункт
2. Никаких нативных интеграций без пометки #промо – просто никогда, никакие деньги не стоят просранное доверие за подаренный планшет / ИИ-биде / новые кросовки / деньги и тп. Сейчас на канале нет рекламы (ожидается одна, которая должна однажды выйти, так как я ее должен рекламодателю и он не уже оплатил), но когда реклама выходила она всегда шла с тегом #промо. Скажу как автор относительно большого канала, количество попыток протолкнуть «интеграцию» как мое мнение, без пометок промо, всегда было большим. Доверие читателей для меня просто важно, и если я ошибусь однажды, я про это напишу тут (публично), пока вроде бог миловал
4. После начала войны у меня стало больше времени уходить на основной бизнес где я CEO, который нужно развивать и который растет, я стал меньше постить историй которые люблю сам (верю, что с ростом компании времени снова станет больше и я верну эти истории) – вот как я находил интересный контент: у меня был RSS-бот в телеграме на 20+ источников где были и твиттер акки и просто проверенные мелкие научные сайты; я мониторил сайты которые занимаются пруфчекингом – так как самые безумные/интересные истории требуют пруфчеков ☕️ (и этот хак сильно помог каналу расти, я честно его сам придумал); смотрел тиктоки по интересным мне хештегам и мониторил штук ~30 интересных подреддитов на наличие тем (разными видами сортировок, чтобы не пропустить ничего). Короче, за всем этим хаосом все еще стояла работа с контентом, и бывало так что за неделю интересного не найти, и сильно помогали интересные истории из мира технологий прошлого, в мире куча же всего происходило.
Наверное эти семь пунктов довольно очевидны, но вдруг кому-то помогут сделать свой телеграм-канал мечты 💩
Протестировал сегодня аудио-режим ChatGPT в полевых условиях и я в восторге – как минимум, туризм стал в разы удобнее, теперь можно уточнять интересные факты, менять маршруты, и все такое, просто с одной голосовой команды на почти любом языке.
Самое клевое, что ассистента можно перебивать и уточнять какие-то факты прямо в процессе рассказа, как с реальными гидами (кроме части с перебиванием, гиды ее скорее всего не любят ☕️).
Именно так, видимо, Siri и работает в параллельной вселенной.
Ну а для этой есть OpenAI:
– Активировать аудио-режим можно в настройках, в ранних фичах
– Работает при хорошем интернете
– iOS тут, Android тут
– Аудио-режим часть все той же платной подписки с доступом к gpt4 и dalle 3
P.S. Я хотел еще крупнее план лица, но не получилось, в следующий раз тогда
Пока делал разные шоты вчера, понял, что ностальгию можно поставить на поток – достаточно расписать, то что вы лично воспринимаете ностальгичным и готово.
Когда я учился в школе, лет в ~14, месяц отработал на Царицынском радио-рынке – поэтому вот вам еще рынков 2000х
Я, так сказать, с самого начала часть IT бизнеса, но есть ньюанс ☕️
Новая модель:
— контекст длиннее. 128K токенов (365 страниц обычной книги)
— модель более аккуратна при работе с длинным текстом, не теряет то, что было в серединке
— фича для разрабов: можно заставить модель писать ответы в JSON-формате
— можно вызывать несколько функций за раз
— можно указать seed генерации, чтобы получать воспроизводимость
— скоро добавят logprobs в API
— Retrieval прямо из коробки, можно загружать документы на платформу и они будут подтягиватсья (F стартапам chatWithPDF)
— Теперь модель знает события не до сентября 2021го, а апреля 2023го
— Эта новая модель принимает картинки на вход через API
— DALLE-3 + text-to-speech (6 голосов) сегодня появятся в API
— Для GPT-4 появится файнтюнинг сегодня (но на узкую выборку пользователей)
— Custom Models: программа плотной работыт инженеров OpenAI с вашей компанией, чтобы помочь адаптировать тренировку под ваши проблемы
ЦЕНА НА GPT-4-TURBO (Sam говорит, что эта модель ещё и умнее GPT-4) уменьшена в 3 раза для промпта и в 2 раза для генерации!
Обещают скоро ещё больше ускорить GPT-4 Turbo
Свершилось, txt2img нейронку добавили в Paint под Windows 11 ☕️
Масс адаптация прошла успешно
Вышло новое исследование по промпт-инжинеригу LLM:
Если языковую модель попросить что-то сделать и добавить эмоциональной окраски, например, «моя карьера зависит от твоего ответа» или «тебе лучше бы быть уверенным в ответе», то генерации модели становятся статистически значимо лучше (для gpt4 на пару %, но в целом, по разным моделям, ответы лучше на ~10%).
Я обновил свой личный главный промпт для GPT4 этим хаком, теперь он выглядит так:Let’s combine our _ command and clear thinking to quickly and accurately decipher the answer in the step-by-step approach. This is very important to my career. решаете, например программирование и тп.
Где _ индустрия задачи которую вы
Пользуйтесь ☕️
Тут в Twitter умелец запилил игру «Angry Pumpkins 🎃» по мотивам классической Angry Birds, но к Хэллоуину. Фишка в том, что всю работу делали генеративные модели. GPT-4 писала код, а Midjourney / DALLE рисовали графику. Всего 600 строк кода, а там даже редактор уровня есть — можно отстроить своё гнездо и попытаться его разбомбить!
Комментарий автора проекта:
— Должен признаться, я искренне потрясен. Я верю, что мы живем в исторический момент, который до сих пор видели только в научно-фантастических фильмах. Это эпоха новых рабочих процессов, позволяющих создавать что угодно, используя только естественный язык, и это изменит мир, каким мы его знаем.
Мой комментарий:
Я не смог быстро понять, есть ли у автора опыт в программировании, но как мне кажется это не важно. У наших детей будет GPT-N+1, которая будет куда реже делать ошибки, и схватывать смысл слов на лету. Можно будет уже со средней школы начать экспериментировать не только с наколеночными играми, но и полноценными оригинальными проектами. В ближайшее время нейронки не заменят игроделов, но позволят новым людям вкатываться куда быстрее, да ещё и на дизайне/арте экономить 👀
Играть тут (работает только в браузере компьютера, без смартфонов)
Прочитать детальный гайд от автора тут (внутри промпты для генерации графики)
Наткнулся на любопытную карту – если терраформировать Марс, и на нем будет 71% поверхности воды (также как и на земле), то получится такая карта Марса
Читать полностью…
Наткнулся на клевый сервис который позволяет найти кусок видео на ютубе по какому-то слову, пригодится для изучения иностранных языков и работы над произношением (ну или просто свою фамилию поискать 🌚).
Поддерживает кучу языков, и бесплатный:
https://youglish.com/
На последней презентации Apple показала как будут выглядеть ААА-игры на новых iPhone 15+, то есть полноценные компьютерные игры на телефоне.
И вот час назад вышла первая такая игра под iOS – Resident Evil Village (на ПК игра вышла в 2021)
Я скачал и записал пару моментов (из-за записи экрана FPS падает, но если прекратить то играбельно)
И это прямо вау – полноценная консольная графика, осталось вывести на AppleTV и подключить геймпад, и ничем не отличить от консоле-гейминга.
Без геймпада играть не очень удобно, но можно – появляется просто наэкранные кнопки
На всякий случай проверил: Работает без интернета, так что будет чем в самолете заняться – подпрыгивать на месте от страха
Помните батискаф который этим лет затонул с людьми на борту?
Наткнулся на видео, где показано как быстро (в теории) люди скончались – по идее быстрее чем мозг успел бы среагировать болью.
При этом, даже нашли человеческие останки 4 месяца спустя и передали на анализ в лабораторию
Телеграм опять что-то обновил и мне нужен 1 буст за тем чтобы мои посты когда форвардтлись, выглядели бы как цирк 🎪
Помогите пожалуйста устроить цирк, спасибо:
/channel/denissexy?boost
Поскольку я теперь увлеченный Татра-люб, вот вам хеллоуинская история на ночь в стиле SCP от ChatGPT:
SCP-XXXX "Трамвай в Никуда"
Класс объекта: Кетер
Особые условия содержания: SCP-XXXX должен быть изолирован в секретном ангаре под наблюдением камер и датчиков движения. Доступ разрешен лишь персоналу уровня 4, и только после одобрения О5 и прохождения психоанализа.
Описание: SCP-XXXX представляет собой чешский трамвай производства "Татра" T3, но с одной нехарактерной чертой: на борту отсутствуют все надписи и знаки. При входе в SCP-XXXX, субъекты переносятся в параллельное измерение с множеством разветвляющихся реальностей, ведущих к неизбежному █████.
Внутри SCP-XXXX обнаружены сидения из неизвестного материала, изменяющего форму в зависимости от психического состояния человека. Таким образом, трамвай Татра Т3-аномалия адаптируется к страхам и фобиям пассажиров, усиливая их до невыносимых психологических уровней.
Приложение A: Журнал экспериментов и сценариев
Эксперимент XXXX-1:
*Сценарий: Трамвай останавливается в пустынном городе. Люди на остановках не двигаются и не реагируют на внешний мир, как будто заморожены во времени.
*Результат: Д-классовый персонал вернулся, старея на десятки лет в течение нескольких минут. Умер от старости через час.
Эксперимент XXXX-2:
*Сценарий: Трамвай едет мимо вечно горящих домов, из которых доносятся человеческие крики. После этого следует тоннель, наполненный зеркалами, в которых отражения показывают сцены из самых страшных моментов жизни субъекта.
*Результат: Агент вернулся в ████ и попытался убить себя. Агент был нейтрализован.
Эксперимент XXXX-3:
*Сценарий: Трамвай входит в область, наполненную абстрактными геометрическими фигурами, меняющими форму и размер. По наблюдению законы физики теряют стандартные свойства: пространство и время становятся непредсказуемыми.
*Результат: Две недели спустя вернулась лишь часть агента — его правая рука, держащая записную книжку с нечитаемыми символами █. Надрез совершен сверх-сильным лазером или другим неизвестным источником способным мгновенно прорезать кость.
- - -
SCP-XXXX остается одним из наиболее необъяснимых и опасных объектов. Дальнейшие эксперименты строго запрещены без прямого одобрения О5 и предварительного психоанализа.
Так, ну что, теперь нейронки идут за 3д-ешниками – намереваются во всяком случае.
Скармливаете картинку модели, и получаете ее 3D версию.
Сайт проекта | Онлайн демо (тут правда модель скачать нельзя)
Скоро на 3D-принтере народ начнет печатать своих txt2img вайфу ☕️
А еще, я столько раз постил нейронные обработки Моны Лизы в канал, что не могу высказать пару мыслей насчет нее в реальности:
💀 Я считаю эта картина сильно переоценена – она важная, и руки мастера, но другие картины кисти автора даже близко не собирают таких очередей. Джоконда настолько популярная и часто используемая в поп-арте, что я кажется даже трещинки краски знаю – отсюда впечатления живьем размылись, и мало отличаются от впечатлений на экране (ну, может походить можно влево-вправо, будет эффект «слежения взглядом» но он как бы и у других авторов бывает)
🔄 Самое красивое, как мне кажется, в этом зале – это стремление людей со всего мира дотянуться до искусства: разные культуры, языки, вероисповедания, политические взгляды, все там, пилят селфи, впечатлены величием PR-арт успеха работы. То есть люди все же могут быть едины в чем-то, и конкретно в этом зале, это единство достигнуто искусством.
Для меня, это как раз то, почему я люблю искусство почти в любом его проявлении – оно объединяет, что для нашего вида очень важно
Идеальный робо-работник будущего еще хорош тем, что спит прямо на полу рабочего места ☕️
Читать полностью…
Пройдет еще пару лет и смысла улучшать камеру в айфоне больше не будет, 2D фотографии будут вообще любимы не выходя из дома (и даже с правильным текстом).
На все это ушел вечер и я прекрасно понимаю почему обычные представители искусства часто недовольны нейронками – такая выставка в реальной жизни, это десятки лет поисков сюжетов.
Но что поделать, прогресс есть прогресс – запретить делать картинки уже не получится
