Сбер создал первую мультимодальную нейросеть ruDALL-E, которая генерирует картинки по описанию на русском языке - «Умный Дом и решения» » Умный Дом и решения
Сбер создал первую мультимодальную нейросеть ruDALL-E, которая генерирует картинки по описанию на русском языке - «Умный Дом и решения»
Что такое Умный дом — это система домашних устройств, связанных между собой и выполняющих действия по команде человека или даже без его участия, по расписанию или сигналу от датчика. Некоторые умные дома управляются через приложения и голосом через умные колонки, другие — с помощью отдельных устройств. Задачи тоже могут быть разными: повысить комфорт, сэкономить время или обеспечить безопасность..

СБЕР

Сбер создал первую мультимодальную нейросеть ruDALL-E, которая генерирует картинки по описанию на русском языке - «Умный Дом и решения»

  • Варвара
  • 02-ноя-2021, 11:40
  • 0 комментариев
  • 2 198 просмотров

Сбер создал первую мультимодальную нейросеть ruDALL-E, которая генерирует картинки по описанию на русском языке

2 ноября 2021. Созданный Сбером проект — большой для русскоязычной индустрии шаг в области ИИ и в работе с клиентами на разных направлениях.


Сбер создал первую в мире нейронную сеть ruDALL-E, которая способна создавать изображения на основе текстового описания на русском языке. Использовать её можно для создания вариантов дизайна интерьера, стоковых изображений или векторных иллюстраций, материалов для рекламы, копирайтинга, архитектурного и промышленного дизайна. Попробовать ruDALL-E можно уже на его сайте — https://rudalle.ru/.

Нейросеть одновременно обучается на двух видах данных — картинках и текстах, и позволяет создавать неограниченное число новых изображений по заданному описанию. Есть два варианта модели:

· ruDALL-E XL, содержащая 1,3 миллиарда параметров;

· ruDALL-E 12B с 12 миллиардами параметров.

Моделью ruDALL-E XL можно воспользоваться бесплатно, загрузив её с сервиса Github. Обе модели также вскоре будут доступны на платформе ML Space в хабе предобученных моделей и датасетов DataHub от SberCloud.


Создание изображений при помощи ruDALL-E происходит в три этапа: сначала одна нейросеть принимает текст на вход и генерирует заданное число картинок, затем следующая выбирает, какие из них наиболее удачны и максимально соответствуют описанию, а третья увеличивает их в размере без потери качества. Таким образом можно получить неограниченное количество новых изображений, подходящих под указанные характеристики.

Архитектура модели DALL-E для английского языка была впервые представлена OpenAI в 2021 году, однако эта модель так и не была полностью выложена в открытый доступ. На основе публикации OpenAI команды SberDevices и Sber AI при содействии SberCloud воспроизвели код и запустили обучение нейросети на платформе ML Space на базе суперкомпьютера Кристофари, получив аналогичный результат для русского языка. В результате получилась самая большая модель такого рода в мире, работающая с русским языком: обучение заняло 23 тысячи GPU-часов на массиве данных из 120 миллионов пар текст-изображение. Проект по обучению ruDALL-E стал самым большим нейросетевым вычислительным проектом в России и СНГ.

Помимо вклада в прогресс в области ИИ, генерация изображений закрывает две важные потребности современного бизнеса — возможность получить уникальную картинку под собственное описание, а также в любой момент создавать необходимое количество licence-free-иллюстраций. При этом создание «мультимодальных» нейронных сетей, которые обучаются сразу на нескольких видах данных, даже сейчас, в эпоху big data и огромных возможностей поиска, будет очень востребованным, поскольку решает задачи на принципиально ином уровне. Технология пока совсем новая, первые шаги в этом направлении были сделаны только в 2020 году, а еще в 2018–2019 годах даже постановку такого рода задачи нельзя было себе представить. ruDALL-E можно считать настоящим прорывом для русскоязычной индустрии

Давид РафаловскийИсполнительный вице-президент Сбербанка, CTO Сбера, руководитель блока «Технологии»


SberDevices — компания экосистемы Сбер, центр экспертизы по решениям на основе искусственного интеллекта в таких областях, как речевые технологии, технологии понимания естественного языка, лицевая и голосовая биометрия. Компания также фокусируется на создании умных устройств для конечных потребителей и корпоративных клиентов. SberDevices учреждена в мае 2019 года в качестве департамента блока «Технологии» Сбербанка.

Sber AI — R&D-подразделение Сбера, отвечающее за развитие технологий искусственного интеллекта и их внедрение в различные сферы жизни и бизнеса.

Другие пресс-релизы
15 июня 2023Пресс-релизЧисло проданных умных устройств Sber с ассистентом Салют превысило 1,5 млн

Число проданных умных устройств Sber с ассистентом Салют превысило полтора миллиона.

6 июня 2023Пресс-релизSberDevices и ГК Softline заключили соглашение о стратегическом сотрудничестве

В рамках партнерства ГК Softline и SberDevices предлагают рынку флагманские B2B-решения вендора: сервис видеоконференций SberJazz, корпоративный мессенджер Dialog, платформу речевых сервисов SaluteSpeech и конструктор для создания чат-ботов SaluteBot.

23 мая 2023Пресс-релизSberDevices получили награду за проект «Построение импортонезависимой аналитической платформы» на Data Award 2023

18 мая состоялось официальное объявление итогов и награждение лауреатов Премии Data Award 2023, учрежденной издательством «Открытые системы» и порталом об ИТ-менеджменте «Директор информационной службы». В номинации «За реализацию антикризисного проекта» победителем был признан проект SberDevices «Построение импортонезависимой аналитической платформы».

Цитирование статьи, картинки - фото скриншот - Rambler News Service.
Иллюстрация к статье - Яндекс. Картинки.
Есть вопросы. Напишите нам.
Общие правила  поведения на сайте.
Сбер создал первую мультимодальную нейросеть ruDALL-E, которая генерирует картинки по описанию на русском языке2 ноября 2021. Созданный Сбером проект — большой для русскоязычной индустрии шаг в области ИИ и в работе с клиентами на разных направлениях. Сбер создал первую в мире нейронную сеть ruDALL-E, которая способна создавать изображения на основе текстового описания на русском языке. Использовать её можно для создания вариантов дизайна интерьера, стоковых изображений или векторных иллюстраций, материалов для рекламы, копирайтинга, архитектурного и промышленного дизайна. Попробовать ruDALL-E можно уже на его сайте — https://rudalle.ru/. Нейросеть одновременно обучается на двух видах данных — картинках и текстах, и позволяет создавать неограниченное число новых изображений по заданному описанию. Есть два варианта модели: · ruDALL-E XL, содержащая 1,3 миллиарда параметров; · ruDALL-E 12B с 12 миллиардами параметров. Моделью ruDALL-E XL можно воспользоваться бесплатно, загрузив её с сервиса Github. Обе модели также вскоре будут доступны на платформе ML Space в хабе предобученных моделей и датасетов DataHub от SberCloud. Создание изображений при помощи ruDALL-E происходит в три этапа: сначала одна нейросеть принимает текст на вход и генерирует заданное число картинок, затем следующая выбирает, какие из них наиболее удачны и максимально соответствуют описанию, а третья увеличивает их в размере без потери качества. Таким образом можно получить неограниченное количество новых изображений, подходящих под указанные характеристики. Архитектура модели DALL-E для английского языка была впервые представлена OpenAI в 2021 году, однако эта модель так и не была полностью выложена в открытый доступ. На основе публикации OpenAI команды SberDevices и Sber AI при содействии SberCloud воспроизвели код и запустили обучение нейросети на платформе ML Space на базе суперкомпьютера Кристофари, получив аналогичный результат для русского языка. В результате получилась самая большая модель такого рода в мире, работающая с русским языком: обучение заняло 23 тысячи GPU-часов на массиве данных из 120 миллионов пар текст-изображение. Проект по обучению ruDALL-E стал самым большим нейросетевым вычислительным проектом в России и СНГ. Помимо вклада в прогресс в области ИИ, генерация изображений закрывает две важные потребности современного бизнеса — возможность получить уникальную картинку под собственное описание, а также в любой момент создавать необходимое количество licence-free-иллюстраций. При этом создание «мультимодальных» нейронных сетей, которые обучаются сразу на нескольких видах данных, даже сейчас, в эпоху big data и огромных возможностей поиска, будет очень востребованным, поскольку решает задачи на принципиально ином уровне. Технология пока совсем новая, первые шаги в этом направлении были сделаны только в 2020 году, а еще в 2018–2019 годах даже постановку такого рода задачи нельзя было себе представить. ruDALL-E можно считать настоящим прорывом для русскоязычной индустрииДавид РафаловскийИсполнительный вице-президент Сбербанка, CTO Сбера, руководитель блока «Технологии» SberDevices — компания экосистемы Сбер, центр экспертизы по решениям на основе искусственного интеллекта в таких областях, как речевые технологии, технологии понимания естественного языка, лицевая и голосовая биометрия. Компания также фокусируется на создании умных устройств для конечных потребителей и корпоративных клиентов. SberDevices учреждена в мае 2019 года в качестве департамента блока «Технологии» Сбербанка. Sber AI — R


Комментарии (0)
img
Обзор управляемого замка Danalock V3 - «Умный Дом и решения»

Что такое Danalock Сегодня устанавливал на дверь замок Danalock V3, расскажу про свои впечатления. Задача состояла в том, чтобы можно было удалённо

Категории сайта
Разное

Производитель и новинки производства

Это не только возможность управлять лампочкой со смартфона, а слаженная, незаметная для Вас, работа всех систем дома как инструментов в оркестре.

       89a39215
img
Aqara / Производитель / Новинки / Умные Решения
Aqara представила пять новых гаджетов для умного дома на выставке CES 2026 - «Умный Дом и решения»

Компания Aqara анонсировала пять новых продуктов для умного дома с поддержкой Matter. Это позволяет интегрировать гаджеты в популярные платформы

img
Умный Дом и решения / Новинки / Zigbee / Смарт.ТВ / Бренд / Умные Решения
С Новым 2026 годом, умные дома и их ещё более умные хозяева! - «Умный Дом и решения»

Друзья, вот и подошёл к концу ещё один год апдейтов, прошивок, автоматизаций и бесконечных «а почему оно не сработало в 03:17 ночи». Мы все прожили

img
Шлюз - Центр умного дома / Смарт.ТВ / Производитель / Умные Решения
Huawei выпустила хаб HarmonyOS с Wi-Fi и Bluetooth Mesh - «Умный Дом и решения»

Huawei представила новый хаб для управления Bluetooth-устройствами - HarmonyOS Smart Home Bluetooth Gateway Lite. ...[/h]

img
Новинки / Sprut.hub / Умные Решения
5 января представим крупное обновление Spruthub 2.0 - «Умный Дом и решения»

5 января 2026 года пройдет Новогодний стрим Spruthub. На нем увидите: ▶ масштабное обновление Spruthub 2.0 для всех актуальных хабов ▶ планы команды

  • Dunce
  • 5-01-2026, 16:30
  • 41
img
Xiaomi / Производитель / Умные Решения
Xiaomi выпустила очиститель воздуха с 13-слойной системой фильтрации - «Умный Дом и решения»

Xiaomi выпустила новый очиститель воздуха Mijia Air Purifier 6 Pro с улучшенной системой фильтрации и повышенной производительностью. Основные

img
Xiaomi / Производитель / Новинки / Умные Решения
Xiaomi выпустила мощный кондиционер, который охлаждает дом всего за 5 минут - «Умный Дом и решения»

Компания Xiaomi представила новый центральный кондиционер Mijia Central Air Conditioner Pro Dual Air Wheel. Это - одна из самых продвинутых систем

Top.Mail.Ru