Нейросети стремительно входят в нашу жизнь и даже грозят тем, что скоро смогут заменить многие профессии, но так ли они хороши на самом деле? Обучение нейросети ruDALL-E на кластере Christofari стало самой большой вычислительной задачей в России. Нейронная сеть, используемая для создания выставки, была обучена на наборе данных тысяч известных картин, что привело к уникальному сочетанию знакомого стиля и новых творческих. Мы попросили нейросеть придумать «Ниву» будущего и самую красивую машину XX века. Мы протестировали нейросеть ruDALL-E Malevich и развлечения ради сделали запросы про будущее Архангельска: какой будет природа через много лет, до чего дойдет наука.
Нейросеть рисует будущее Архангельска: какими будут дома, транспорт и люди
После сбора и фильтрации данных от слишком коротких описаний, маленьких изображений и изображений с непригодным отношением сторон, а также изображений, слабо соответствующих описаниям мы использовали для этого англоязычную модель CLIP , перевода всех английских описаний на русский язык, был сформирован широкий спектр данных для обучения — около 120 млн. Хочется отдельно упомянуть сложность выбора оптимальных режимов генерации для разных объектов и доменов. В ходе исследования генерации объектов мы начали с доказавших свою полезность в NLP-задачах подходов Nucleus Sampling и Top-K sampling, которые ограничивают пространство токенов, доступных для генерации. Эта тема хорошо исследована в применении к задачам создания текстов, но для изображений общепринятые настройки генерации оказались не самыми удачными. Серия экспериментов помогла нам определить приемлемые диапазоны параметров, но также указала на то, что для разных типов желаемых объектов эти диапазоны могут очень существенно отличаться. И неправильный их выбор может привести к существенной деградации качества получившегося изображения. Вопрос автоматического выбора диапазона параметров по теме генерации остаётся предметом будущих исследований. Вот не совсем удачные генерации объектов на примере котиков, сгенерированные по запросу «Котик с красной лентой»: Картинка 1 — у кота 3 уха; второй не вышел формой; третий немного не в фокусе. А вот «Автомобиль на дороге среди красивых гор». Автомобиль слева въехал в какую-то трубу, а справа — странноватой формы. При этом на этапе генерации и ранжирования можно менять различные параметры, влияющие на количество генерируемых примеров, их отбор и абстрактность.
Пайплайн генерации изображений по тексту В Colab можно запускать инференс модели ruDALL-E Malevich XL с полным пайплайном: генерацией изображений, их автоматическим ранжированием и увеличением. Рассмотрим его на примере с оленями выше.
Как правило, чем подробнее и точнее запрос, тем качественнее результат. Самая популярная нейросеть: Midjourney Запрос: на английском языке Регистрация и авторизация: необходим аккаунт в Discord, с помощью которого можно зарегистрироваться на сервисе и генерировать изображения.
Существует лимит изображений. Особенно хорошо этой нейросети удается хуманизация, Самая популярная нейросеть с запросом на русском языке: ruDALL-E Запрос: на русском языке Регистрация и авторизация: не требуется. Нет лимитов на количество изображений. Однако, по сравнению с остальными сервисами, у ruDALL-E достаточно долгое ожидание, которое может составлять до 15-20 минут в зависимости от количества желающих.
Нарисовать картинку с помощью нейросети ruDALL-E можно в двух режимах: «Кандинский» — создание коллажа из 16 изображений, или «Малевич» — изображение одно, но в более высоком качестве. Стоит учитывать, что российская нейросеть менее точно выполняет запросы и требует более точных формулировок. Иногда, для получения результата требуется повторять запрос несколько раз.
Потому чтоьмы немного знаем его довоенных вещей. И там мало с чем сравнивать.
Это вот воронежский художник. В общем, понятная цветовая гамма, опять привязке к дате, понятный мотив, понятный характер линий, — говорит учёный секретарь воронежского художественного музея имени Крамского Наталья Бакина. Про художественную достоверность тут говорить не приходится, заявляют эксперты. Какие-то генерации близки к оригиналу, в каких-то — почерк художника читается с трудом. Это всё-таки больше фантазии.
Но для посетителей интрига и азарт делают своё дело, и в какой-то момент даже кажется, что картин как-то мало. Оценить талант нейросети можно до 1 марта, выставка будет в залах постоянной экспозиции музея. Но никогда нейросеть не сможет заменить ни художника, ни музей.
Чтобы не учить только краткосрочные зависимости между пикселями и текстами, а делать это более высокоуровнево, обучение модели проходит в 2 этапа: Предварительно сжатые изображения с разрешением 256х256 поступают на вход автоэнкодера мы обучили свой SBER VQ-GAN, улучшив метрики для генерации по некоторым доменам, и об этом как раз рассказывали тут , причем также поделились кодом , который учится сжимать изображение в матрицу токенов 32х32. Фактор сжатия 8 позволяет восстанавливать изображение с небольшой потерей качества: см. Для токенизации текстов использовался токенизатор YTTM. Публикация описывает её общими словами, но обходит вниманием некоторые важные нюансы реализации. Он включает такие детали, как позиционное кодирование блоков картинки, свёрточные и координатные маски Attention-слоёв, общее представление эмбеддингов текста и картинок, взвешенные лоссы для текстов и изображений, dropout-токенизатор. Из-за огромных вычислительных требований эффективно обучать модель можно только в режиме точности fp16.
Это в 5-7 раз быстрее, чем обучение в классическом fp32. Кроме того, модель с таким подходом занимает меньше места. Но ограничение точности представления чисел повлекло за собой множество сложностей для такой глубокой архитектуры: a иногда встречающиеся очень большие значения внутри сети приводят к вырождению лосса в Nan и прекращению обучения; b при малых значениях learning rate, помогающих избежать проблемы а , сеть перестает улучшаться и расходится из-за большого числа нулей в градиентах. Для решения этих проблем мы имплементировали несколько идей из работы китайского университета Цинхуа CogView , а также провели свои исследования стабильности, с помощью которых нашли ещё несколько архитектурных идей, помогающих стабилизировать обучение. Так как делать это приходилось прямо в процессе обучения модели, путь тренировки вышел долгим и тернистым. Сбор данных и их фильтрация: безусловно, когда мы говорим об архитектуре, нововведениях и других технических тонкостях, нельзя не упомянуть такой важный аспект как данные. Как известно, для обучения трансформеров их должно быть много, причем «чистых».
Русский музей запустил нейросеть, позволяющую получить свой портрет "от Пикассо и Малевича"
| В воронежском музее нейросеть создала картины известных художников | Суть инновационного проекта заключается в том, чтобы научить нейросеть распознавать на снимках злокачественные новообразования и классифицировать рак легких на ранней стадии. |
| Нейросеть от Mail.ru отреставрирует фотографии | К 125-летию со дня открытия Русский музей запустил собственную нейросеть в сообществе ВКонтакте. |
| Нейросеть Сбер ruDALL-E Malevich, картинки, онлайн, картины, фотографии - 14 ноября 2021 - 29.ру | Теперь нейросеть, подобно опытному фокуснику, формирует промежуточное представление картинки в виде латентного кода — своеобразной «шпаргалки», содержащей квинтэссенцию. |
Как отреставрировать фото с помощью ИИ от Mail.ru
- Арты нейросетей + Казимир Малевич
- Нейросеть от отреставрирует фотографии - IT Speaker, новости информационных технологий
- В Москве пройдет выставка, созданная при помощи мировых нейросетей и российской нейросети ReText.AI
- Нейросеть показала, как выглядит мультивселенная — видео
- Выставка называется «Возрождённая коллекция».
- Vladimir Malevich
Нейросеть раскрыла тайну квадрата Малевича
открыла доступ к нейросети, которая может восстановить старые фотографии. Читайте все самые свежие и актуальные новости 2024 на «Нейронные сети могут полноценно генерировать голос, полностью копировать его и заставлять озвучивать различные странные вещи.
Примеры запросов и стилей генерации изображений
Например, у нейросетей плохо получаются лица, пальцы и ноги. Но искусственный интеллект постоянно учится и совершенствуется, а изображения становятся правильнее. Однако, при правильных и точных запросах можно получить настоящие шедевры. Например, с помощью нейросетей нарисовали города России. Новости партнеров Мы в социальных сетях Сетевое издание «Бердск Онлайн» Зарегистрировано в Федеральной службе по надзору в сфере связи, информационных технологий и массовых коммуникаций Роскомнадзор. Адрес редакции: 633010, Новосибирская область, г. Бердск, ул. Вокзальная, 26, оф. При использовании материалов сайта и саттелитных проектов, гиперссылка гиперлинк на соответствующий раздел сайта «Бердск Онлайн» обязательна.
С помощью искусственного интеллекта можно получить свой собственный портрет, как будто бы написанный рукой кого-то из великих художников, рассказали в пресс-службе музея. Все произведения, из которых нейросеть может сгенерировать ваше изображение, находятся в коллекции музея.
Разработчиками проекта проанализировано более ста картин. Получить свой личный портрет "от Кустодиева", "от Врубеля" и прочих совсем просто.
В 2017 году команда единомышленников основала стартап Brandland для того, чтобы сделать что-то большое.
Тогда нас было всего 4 человека, с которых и началась история. Максим и Александра Хассан, Оля Блинова и Саша Пономарев поставили перед собой цель — создать продукт, который можно поставить в один ряд с такими гигандами как «Meta», «Apple» и «Google». Сервисы, которые мы все используем и любим.
Летом 2023 года — создан первый частный исскуственный интеллект.
Чтобы воспользоваться этой функцией, необходимо загрузить фото в сервис, предварительно отсканировав и сохранив его на своем устройстве. Пользователю предоставляется на выбор 1 из 3 вариантов бесплатного сохранения: на ПК, в облаке или в социальной сети. Глава группы машинного обучения Mail.
NVIDIA представила ИИ, который генерирует видео с высоким разрешением по текстовому описанию
| Нейросеть Сбера Kandinsky 2.1 пользуется огромной популярностью | Любая нейросеть представляет собой математическую модель, работающую по принципам, которые очень похожи на работу человеческого мозга. |
| Студенческое портфолио / НЕЙРО-МАЛЕВИЧ | Программа фоторедактор Малевич — Мобильное приложение для редактирования фотографий MLVCH вышло в середине 2016 года. |
| Вологодские студенты обучили нейросеть распознавать рак легких - МК Вологда | По Кубизму Малевича нейросеть изобразила индустриальный пейзаж Липецка в перспективе в черных, красных, желтых, синих и голубых тонах. |
| Из‑за порчи картины ученицы Малевича все-таки возбудили уголовное дело. Подозреваемый задержан | Мы протестировали нейросеть ruDALL-E Malevich и развлечения ради сделали запросы про будущее Архангельска: какой будет природа через много лет, до чего дойдет наука. |
Нейросеть показала, как выглядит мультивселенная — видео
В левой части «шедевра» - корона и половина лошади, в правой, страшно сказать - расчленённый петух. Интересный выбор, ничего не скажешь. Достойный конкурент другим предложенным вариантам. Возможно, брянские чиновники возьмут такой подход а что, модно и неожиданно на вооружение и также попробуют обратиться за помощью к нейросети. Наблюдая за тем, что предложили на сегодня, создаётся впечатление, что хуже уже не будет. Подписывайтесь, чтобы первыми узнавать о важном: Другие новости Общество.
Тем самым, используя новые технологии, приложение создаст портрет в выбранном образе и соответствующей художественной манере, а друзья и коллеги смогут проверить свой потенциал и определить первоисточник. Читайте нас в.
Изображение предоставлено пресс-службой Русского музея Изображение предоставлено пресс-службой Русского музея Изображение предоставлено пресс-службой Русского музея Изображение предоставлено пресс-службой Русского музея Изображение предоставлено пресс-службой Русского музея Анна Цветкова Временно исполняющая обязанности генерального директора Русского музея — о запуске нейросети: Русский музей — крупнейшая в мире сокровищница национального искусства. Наряду с ним в собрании музея экспонируется и уникальная коллекция «Музея Людвига» с произведениями Пабло Пикассо. Энди Уорхолла, Роя Лихтенштейна и других мастеров. Во дворцах и садах Русского музея, на его интернет-ресурсах мы рады представить нашим реальным и виртуальным посетителям шедевры великих мастеров прошлого и произведения наших современников.
И там мало с чем сравнивать. Это вот воронежский художник. В общем, понятная цветовая гамма, опять привязке к дате, понятный мотив, понятный характер линий, — говорит учёный секретарь воронежского художественного музея имени Крамского Наталья Бакина.
Про художественную достоверность тут говорить не приходится, заявляют эксперты. Какие-то генерации близки к оригиналу, в каких-то — почерк художника читается с трудом. Это всё-таки больше фантазии. Но для посетителей интрига и азарт делают своё дело, и в какой-то момент даже кажется, что картин как-то мало. Оценить талант нейросети можно до 1 марта, выставка будет в залах постоянной экспозиции музея. Но никогда нейросеть не сможет заменить ни художника, ни музей. Это игра.
Айвазовский
- MLVCH - бесплатно скачать онлайн приложение для обработки фото
- Боты нейросетей в Телеграме: как подключить и пользоваться
- VK / Нейросеть поможет отреставрировать фотографии
- Нейросети рисуют картины по тексту онлайн |
- Нейросеть Малевич создала герб Брянской области | Новости Брянска
- НЕЙРО-МАЛЕВИЧ
«Сбер» представил новую версию нейросети Kandinsky — Kandinsky 2.1: как ей пользоваться
Краеведы предложили провести открытый конкурс на новый проект герба Брянской области, но местные власти пока на данную инициативу не ответили. Мы решили не оставаться безучастными и обратились к нейросети Малевич. За 2 минуты она «нарисовала» картину в стиле известного художника-авангардиста. Получилось жутковато, на наш взгляд. В левой части «шедевра» - корона и половина лошади, в правой, страшно сказать - расчленённый петух.
Интересный выбор, ничего не скажешь.
Как сообщает пресс-служба музея, к 125-летию со дня открытия учреждение запустило первый нейро-художественный проект. Известные полотна Бориса Кустодиева, Карла Брюллова, Валентина Серова, Михаила Врубеля, Казимира Малевича, Пабло Пикассо и ряда других великих мастеров из собрания музея предстанут в современном прочтении нейросети, разработанной на платформе социальной сети. Желающим увидеть свой портрет в новой творческой трактовке следует отправить фото арт-боту, обозначить пол и получить в личном сообщении сгенерированное нейросетью изображение.
Для обучения нейросети были использованы опубликованные в широком доступе фотографии и видео. Материалы помогут воссоздать детали и раскрасить снимки более точно, в соответствии с действительностью. Мы уверены, что это поможет многим людям по-другому взглянуть на дорогие им снимки и сохранить их не только в памяти», — прокомментировал Дмитрий Меркушов, руководитель группы машинного обучения Mail.
Для обучения нейросети были использованы опубликованные в широком доступе фотографии и видео. Материалы помогут воссоздать детали и раскрасить снимки более точно, в соответствии с действительностью. Мы уверены, что это поможет многим людям по-другому взглянуть на дорогие им снимки и сохранить их не только в памяти», — прокомментировал Дмитрий Меркушов, руководитель группы машинного обучения Mail.
Смешанные чувства
- Нейросеть Mail.ru поможет отреставрировать фотографии
- Онлайн-курсы
- Что еще почитать
- ⚡ «Малевич»: россиянам продемонстрировали нейросеть будущего
Русский музей запустил нейросеть во «ВКонтакте»
Российские ученые создали первую отечественную квантовую нейросеть на основе сверхпроводящих кубитов. Русский музей запустил собственную нейросеть в социальных сетях. Вместе с тем, чем активнее развиваются нейросети, тем сложнее становится отличать их «творения» от работ обычных людей. Эти инструменты — Midjourney, Stable Diffusion, RunwayML — используют одну и ту же систему нейронной сети, обученной на огромном количестве изображений. Сегодня схожие работы могут генерировать нейросети. Нарисовать картинку с помощью нейросети ruDALL-E можно в двух режимах: «Кандинский» — создание коллажа из 16 изображений, или «Малевич» — изображение одно, но в более.
Тест: Малевич или нейросеть?
Опробовать возможности нейросети можно бесплатно на официальной странице сервиса. «Малевич»: россиянам продемонстрировали нейросеть будущего. Программа фоторедактор Малевич — Мобильное приложение для редактирования фотографий MLVCH вышло в середине 2016 года. Чтобы подобных недочетов было меньше, базу нейросети пополняют репродукциями фресок аналогичной иконографии и стиля. Результат генерации в нейросети Kandinsky 2.1 со стилями «Малевич», «киберпанк», «советский мультфильм» и «картина маслом». Главная страница» Гаджеты» Как пользоваться нейронной сетью Dall E malevich xl на русском: для рисования картинок с помощью искусственного интеллекта.
Тест: Малевич или нейросеть?
Главная страница» Гаджеты» Как пользоваться нейронной сетью Dall E malevich xl на русском: для рисования картинок с помощью искусственного интеллекта. «Малевич»: россиянам продемонстрировали нейросеть будущего. Как вы уже, наверное, знаете по новостям на DTF, с такими алгоритмами главное — правильно составить исходный запрос.