С помощью новейших современных технологий мы можем показать подписчикам избранные полотна из нашего собрания и увидеть, как нейросетью трактуются известные. открыла доступ к нейросети, которая может восстановить старые фотографии. Русский музей к 125-летию со дня открытия запустил первый нейро-художественный проект в своем сообществе в социальной сети «ВКонтакте». Нарисовать картинку с помощью нейросети ruDALL-E можно в двух режимах: «Кандинский» — создание коллажа из 16 изображений, или «Малевич» — изображение одно, но в более.
Новые комментарии
- Нейросеть Mail.ru поможет отреставрировать фотографии
- MLVCH - бесплатно скачать онлайн приложение для обработки фото
- Как работают боты для рисования картинок в «Телеграме»
- Русский музей запустил собственную нейросеть в сообществе ВКонтакте - События - Русский музей
- Подписывайтесь, чтобы первыми узнавать о важном:
Примеры запросов и стилей генерации изображений
Если быть более точным, то для каждого элемента создаются векторы Query, Key и Value. Трансформер также характеризует наличие словаря. Каждый элемент словаря — это токен. В зависимости от модели размер словаря может меняться.
Таким образом, входные данные сначала превращаются в последовательность токенов, которая далее конвертируется в embedding с помощью энкодера. Для текста используется свой токенизатор, для изображения сначала вычисляются low-level-фичи, а затем в скользящем окне вычисляются визуальные токены. Применение механизма self-attention позволяет извлечь контекст из входной последовательности токенов в ходе обучения.
Следует отметить, что для обучения трансформера требуются большие объёмы желательно «чистых» данных, о которых мы расскажем ниже. Как устроен ruDALL-E Глобальная идея состоит в том, чтобы обучить трансформер а вернее только его декодер авторегрессивно моделировать токены текста и изображения как единый поток данных. Однако использование пикселей непосредственно в качестве признаков изображений потребует чрезмерного количества памяти, особенно для изображений с высоким разрешением.
Чтобы не учить только краткосрочные зависимости между пикселями и текстами, а делать это более высокоуровнево, обучение модели проходит в 2 этапа: Предварительно сжатые изображения с разрешением 256х256 поступают на вход автоэнкодера мы обучили свой SBER VQ-GAN, улучшив метрики для генерации по некоторым доменам, и об этом как раз рассказывали тут , причем также поделились кодом , который учится сжимать изображение в матрицу токенов 32х32. Фактор сжатия 8 позволяет восстанавливать изображение с небольшой потерей качества: см. Для токенизации текстов использовался токенизатор YTTM.
С помощью новейших современных технологий мы можем показать подписчикам избранные полотна из нашего собрания и увидеть, как нейросетью трактуются известные художественные образы. Изображение предоставлено пресс-службой Русского музея Изображение предоставлено пресс-службой Русского музея Изображение предоставлено пресс-службой Русского музея Изображение предоставлено пресс-службой Русского музея Изображение предоставлено пресс-службой Русского музея Чтобы опробовать нейросеть, нужно подписаться на сообщество Русского музея ВКонтакте, отправить фото арт-боту и обозначить пол. Сгенерированный портрет отправят в личные сообщения.
Цель проекта — обучение нейросети распознавать на снимках злокачественные новообразования, а также классифицировать рак легких. Инициативную разработку студенты ВоГУ собираются предложить Департаменту здравоохранения Вологодской области. Современный уровень машинной диагностики позволит более эффективно решать задачи региональной программы Вологодской области «Борьба с онкологическими заболеваниями» на 2019—2024 годы, в том числе разгрузить специалистов первичного звена», — отметил Георгий Рапаков. Одна из проблем, на решение которой направлено исследование, это позднее выявление рака легких.
Мы усердно трудимся каждый день и идем к намеченной цели уверенными шагами.
Malevich iamgpt — амбициозный проект. Чтобы так подробно создать нейросеть со своей библиотекой, которая содержит терабайты данных об индустрии красоты, потребовалось много усилий. Это всегда вызов. Результат клиента — абсолютный приоритет.
Липецк в стиле Малевича, Айвазовского и советской анимации создал ФКР в нейросети
Сотрудники ФКР прогнали реальное фото города через «фильтры» Малевича, Айвазовского и старых мультфильмов. По Кубизму Малевича нейросеть изобразила индустриальный пейзаж Липецка в перспективе в черных, красных, желтых, синих и голубых тонах. Липецк в советской мультяшной прорисовке отображает классику застройки СССР — оживленные улицы, где разнотипные многоэтажки в окружении зелени соседствуют с небольшими зданиями.
Здесь картины, которых в привычном смысле уже нет. Как они могли выглядеть, нарисовал искусственный интеллект. В годы Великой Отечественной музей утратил около 1400 экспонатов. Почти 300 из них — это живопись. Вид некоторых сохранился на старинных фото. Для нейросети отобрали 14, от которых остались лишь описания. Это цитаты из музейных инвентарных книг 30-х годов.
По текстам программа сгенерировала изображения. Но прежде в неё загрузили базы полотен каждого из выбранных художников. Чтобы она повторила манеру и палитру.
Например, в этом абзаце около 60 токенов. Пользователи ботов генерируют текст и таким образом тратят токены, за которые заплатили разработчики. Из-за этого во многих ботах есть лимиты на сообщения, множество рекламы или платная подписка. Вряд ли найдутся альтруисты, готовые предоставить сервис и платить за него из своего кармана. Зато можно сделать бота с ChatGPT для личного использования. Open AI выпустила четыре версии языковой модели GPT, которая обучается на текстах из интернета и может генерировать осмысленные ответы на вопросы. Основное отличие от версии GPT-3 — наличие «памяти».
Модель запоминает детали разговора и может строить ответы, основываясь на информации, которую ей уже сообщил пользователь.
Чтобы принять участие в викторине, пользователю не нужно никуда ходить. Достаточно лишь произнести фразу: «Маруся, включи викторину про картины» или сформулировать просьбу другими словами. Викторина носит еще и образовательный характер, ведь после прохождения теста пользователь сможет ознакомиться с историями каждой картины.
Раздел для тех, кто новичок в теме изображений, создаваемых искусственных интеллектом
- [quiz] Угадай, кто нарисовал картину — Казимир Малевич или нейросеть
- Курсы валюты:
- [quiz] Угадай, кто нарисовал картину — Казимир Малевич или нейросеть
- Нейросеть «Кандинский» будет рисовать фотороботы подозреваемых в совершении преступлений
- Нейросеть Малевич создала герб Брянской области за 2 минуты
Нейросеть раскрыла тайну квадрата Малевича
16 декабря прошло закрытое мероприятие в честь запуска Relictum NFT Marketplace, где в продажу поступил уникальный токен работы Малевича. Любая нейросеть представляет собой математическую модель, работающую по принципам, которые очень похожи на работу человеческого мозга. Тут вы увидите результаты работы нейросети ruDALL-E Malevich (XL).
Из‑за порчи картины ученицы Малевича все-таки возбудили уголовное дело. Подозреваемый задержан
Глава группы машинного обучения Mail. Полученный результат выглядит так, словно реставрацией старого черно-белого снимка занимался профессионал.
Как они могли выглядеть, нарисовал искусственный интеллект. В годы Великой Отечественной музей утратил около 1400 экспонатов.
Почти 300 из них — это живопись. Вид некоторых сохранился на старинных фото. Для нейросети отобрали 14, от которых остались лишь описания. Это цитаты из музейных инвентарных книг 30-х годов.
По текстам программа сгенерировала изображения. Но прежде в неё загрузили базы полотен каждого из выбранных художников. Чтобы она повторила манеру и палитру. Но нейросети не хватило вдохновения, её пришлось корректировать искусствоведу музея Наталье Бакиной.
Важная новость Автор: Фото: jets. Показанные на сегодня варианты стали причиной оживлённой дискуссии в соцсетях. Некоторые даже предложили ничего не менять, но им пояснили, что это решение назрело уже давно. Так, магистр исторических наук Игорь Афонасенко заявил , что у области исторически нет отличительного знака в виде собственного древнего герба.
А то, что за него сейчас выдают - только эмблема, которую придумал теперь уже бывший губернатор Юрий Лодкин в конце прошлого века. Кроме того, в 2024 году Брянская область отпразднует своё 80-летие.
И вот, например, я вижу как некий человек — я не знаю кто — печатает свой запрос. Я вижу, что это интересный запрос и хочу его скопировать. Я могу скопировать запрос целиком и дальше менять какие-то слова, но я могу скопировать детали и собрать свой собственный запрос из таких чужих фрагментов — описаний эффектов, освещения, цвета — которые я заимствую у другого человека. Копирование всегда было сущностью человеческой культуры, но не просто копирование, а творческое преобразование копируемого материала. То же самое происходит в эволюции: она представляет собой бесконечное копирование биологического материала, куда постоянно вкрадываются различные ошибки — таким образом появляются новые виды живых существ. Мы можем вообразить себе некого художника, который занимается копированием, но в то же время создаёт нечто новое — чисто технически это можно назвать ошибкой, но мы называем это гениальностью, хотя принцип точно такой же. Мне неоднократно говорили, что если двести раз подряд провести эту операцию, получится что-то интересное. Однако когда мне удавалось сделать что-то интересное, я сам тут же видел, что меня кто-то копирует.
То есть вы постоянно копируете и изменяете собственные изображения, заимствуете у других, а они, в свою очередь, заимствуют у вас. Важно, что здесь мы имеем дело с массовой культурой — этот механизм используют миллионы людей. Многие из этих людей используют в качестве референсов работы художников-иллюстраторов, анимационных студий, видеоигры, голливудские фильмы. В каком-то смысле здесь нет ничего нового, это очень похоже на такие ресурсы как DeviantArt и ArtStation. Уже пятнадцать лет пользователи DeviantArtделятся друг с другом изображениями, созданными по мотивам каких-то уже существующих произведений. Например, пытаются сделать что-то похожее на работы какой-нибудь известной анимационной студии. Они копируют и меняют по своему вкусу какие-то детали. Например, я задаю запрос «Blade Runner» и сайт мне выдает 27 тысяч картинок, которые пользователи создали на основе эстетики фильма Ридли Скотта. Мы можем вспомнить FanFiction или FanArt — они еще старше. Таким образом культура креативного копирования существовала всегда, однако именно цифровые инструменты сделали это явление массовым.
Из серии «После Брейгеля», 2023 Изображение, созданное нейросетью Midjourney v 5. Например, Питер Брейгель за свою жизнь создал порядка пятидесяти работ, но у него была большая семья. Братья и сыновья художника еще при его жизни и с его согласия, а потом после смерти художника создали множество копий его картин. То, что мы называем историей искусства — это один оригинал и десятки, может быть, сотни копий. Тогда почему приходя в музей, вы этого не замечаете? Потому что в каком-то смысле музей это скрывает. Музей транслирует вам модернистское представление об истории искусства, помещая на свои стены художников, которые отличаются друг от друга: вот Рубенс, вот Веронезе, там Суриков, а тут Малевич. Но вы не видите их бесконечные копии. Тогда новый вопрос: а что тогда действительно нового в этой форме копирования, которую предоставляет нам ИИ. Конечно, вы можете управлять им по-разному: давать ему видео, чтобы получить новое видео, задать ему картинку или звук.
Но на данный момент популярнее всего то, что называется text to image, то есть вы создаёте текстовый запрос и получаете картинку или анимацию. Дело в том, что в современном обществе почти все люди умеют писать и читать. А вот рисовать или делать хорошие фотографии — далеко не все. Мы могли бы представить какой-нибудь авангардный вариант, где пользователь бы использовал в качестве запроса музыку, а в ответ получал архитектуру. Но пока все работают с текстовыми запросами. Как я уже говорил, пользователи могут видеть, как другие набирают свои запросы в каналах Discord и воспроизводить их целиком или частями. Так учатся новые пользователи, так же учился и я. Разные части этого текста могут описывать разные части изображения, как, например, в художественной литературе мы видим описание внешности Анны Карениной или Мадам Бовари. Эти описания менее структурны и более свободны, чем те, что создаём мы. Наши больше похожи на программирование.
Скажем, отдельно мы описываем желаемое освещение, отдельно мы даём референсы на интересных нам по стилю художников, отдельно пишем very detailed или epic composition, и таким образом мы можем разобрать изображение на части, как «лего», и эти части скопировать.
Вологодские студенты обучили нейросеть распознавать рак легких
Пока что представленная нейросеть является лишь исследовательским проектом и не ясно, когда что-то подобное NVIDIA выпустит в открытый доступ. Работы Мунка наполнены грустью и печалью, а вот Байкал нейросеть показала вполне весело. Цель проекта – обучение нейросети распознавать на снимках злокачественные новообразования, а также классифицировать рак легких. НЕЙРОСЕТЬ ДЛЯ BEAUTY МАСТЕРОВ КРАСОТЫ Малевич GPT нейросеть на русском.
К 9 Мая нейросеть Mail.ru поможет отреставрировать фотографии
«Малевич»: россиянам продемонстрировали нейросеть будущего. Нейросеть сделала Беллу Хадид героиней фильмов Андрея Тарковского и Дэвида Линча. промт можете созда на английском языке, пример "professional photography of Dua Lipa as bat girl".
Русский музей запустил собственную нейросеть в сообществе ВКонтакте - События
Первая версия — Kandinsky 2. Использовать нейросеть можно в разных отраслях — в маркетинге, SMM, дизайне, рекламе и других. Первый заместитель председателя правления Сбербанка Александр Ведяхин считает, что у каждого может найтись задача для Kandinsky 2. Например, с помощью нейросети можно создавать иллюстрации для постов в соцсетях. А пресс-служба «Сбера» говорит, что в «банковской сфере её можно использовать для создания персонализированных маркетинговых решений, ярких образов продуктов, привлечения и удержания внимания клиентов».
Нейросеть доступна без ограничений — чтобы использовать её на сайте «Сбера», регистрация не нужна. Кроме того, она доступна на умных устройствах Sber с помощью команды «Запусти художника», в мобильном приложении «Салют», на платформах ML Space , Fusion Brain и в телеграм-боте. Как использовать нейросеть Kandinsky 2.
В результате нейронная сеть сможет распознать разные виды злокачественных новообразований и отличать здоровые легкие от пораженных заболеванием», — поясняет студент ВоГУ Сергей Смекалов. Окончательное решение всегда остается за специалистом и может потребовать дополнительной диагностики. Самое главное здесь — не потерять время на исследованиях и начать лечение как можно раньше», — считает студент ВоГУ Павел Смирнов. В дальнейшем студенты планируют добиться еще более точных результатов за счет расширения набора данных и привлечения новых методов искусственного интеллекта.
Репин, Суриков, Маковский. Полотна этих и других прославленных творцов были достоянием Сталинградской картинной галереи. Одним из ее основателей был Александр Ивлиев. Он, пусть и невольно, помог восстановить полотна. Нейросеть Сбера изучила сотни работ художников, сопоставила с фотографиями полотен, а затем создала образы девяти утраченных картин, учитывая авторский стиль и технику.
Для обучения нейросети были использованы опубликованные в широком доступе фотографии и видео. Материалы помогут воссоздать детали и раскрасить снимки более точно, в соответствии с действительностью. Мы уверены, что это поможет многим людям по-другому взглянуть на дорогие им снимки и сохранить их не только в памяти», — сказал Дмитрий Меркушов , руководитель группы машинного обучения Mail.
Вологодские студенты обучили нейросеть распознавать рак легких
Для обучения нейросети использованы опубликованные в широком доступе фотографии и видео. Один дрочер в свою нейросеть азиаток напихал, другой пельменегубых. В Москве пройдет выставка, созданная при помощи мировых нейросетей и российской нейросети Государственный Русский музей запустил собственную нейросеть в своей официальной группе в соцсети "В Контакте". «Малевич»: россиянам продемонстрировали нейросеть будущего.