пїЅпїЅпїЅпїЅпїЅпїЅпїЅ Orphus
Общество | Главное

Сбер представил первую российскую диффузионную модель для генерации изображений по тексту


Общество 27 ноября 2022 г., 16:58

На международной конференции по искусственному интеллекту (ИИ) Artificial Intelligence Journey Сбер представил Kandinsky 2.0 — первую российскую мультиязычную диффузионную модель для генерации изображений по текстовому описанию с 2 млрд параметров.

Нейросеть разработали и обучили исследователи Sber AI при партнёрской поддержке ученых из Института искусственного интеллекта AIRI на объединённом датасете Sber AI и SberDevices из 1 млрд пар «текст — изображение». Увидеть, как она рисует, можно на сайте FusionBrain, а также при помощи команды «Запусти художника» на умных устройствах Sber и в мобильном приложении Салют.

FusionBrain.ai – открытый портал для демонстрации моделей, приближающих мир к созданию AGI (Artificial General Intelligence, сильный искусственный интеллект) от Института AIRI, который Сбер решил поддержать, первым выложив свою модель на ресурсе. В будущем на сайте FusionBrain.ai будут доступны как генеративные, так и передовые мультимодальные и мультизадачные модели.

В Kandinsky 2.0 разработчики использовали набирающий популярность диффузионный подход, поскольку модели подобной архитектуры, в отличие от трансформеров, дают хорошие результаты почти во всех задачах генерации мультимедийного контента по текстовому описанию (синтез изображений, видео, 3D и аудио).

Модель способна одинаково быстро и качественно обрабатывать запросы на 101 языке. Среди них как распространённые русский и английский, так и более редкие, например, монгольский. Система поймёт задачу, даже если в одном запросе будут слова на разных языках.

Kandinsky 2.0 отличается от своего предшественника более сочной, глубокой и реалистичной картинкой и расширенными возможностями. На сайте FusionBrain изображения можно генерировать в 20 различных стилях, среди которых ренессанс, классицизм, мультипликация, Новый год и даже хохлома. В модели также реализованы функции inpainting (замена любой части изображения и любого объекта на изображении на сгенерированные нейросетью) и outpainting (возможность дорисовывать готовое изображение и фон вокруг картинки).

Кроме того, в Kandinsky 2.0 пользователи могут оценить, как одинаковые с точки зрения смысла лингвистические конструкции и понятия отличаются в зависимости от языка и культурной окраски. Например, если сформулировать запрос «национальное блюдо» на русском языке, нейросеть чаще всего рисует щи, а на японском это будет мисо суп и суши.

Александр Ведяхин, первый заместитель Председателя Правления Сбербанка: «Мы продолжаем развивать решения для автоматической генерации изображений по описанию на естественном языке — так называемый креативный ИИ. Kandinsky 2.0, который пришёл на смену первой версии модели, — прорыв в этой сфере. Наша модель позволяет за несколько секунд получить уникальную картинку под конкретную задачу и свободно распространять её без лицензии, что очень актуально для бизнеса. Генеративные модели развиваются очень быстро: ещё четыре года назад даже постановку такой задачи сложно было представить, а сегодня мы имеем работающую модель, которая понимает 101 язык и рисует реалистичные изображения, которые зачастую неотличимы от тех, что создают люди».

Реклама. Рекламодатель: https://www.sberbank.ru/ru/about/main.

Заметили опечатку? Выделите ошибку и нажмите Ctrl+Enter.

Поделиться
Поделиться
Отправить
Поделиться
Поделиться
Поделиться
Отправить
Поделиться

Другие новости

19 апреля 2024 г.

Сбер: мошенники усовершенствовали схему оформления займов с помощью «Госуслуг»

Мошенники усовершенствовали схему, при реализации которой получают кредиты в микрофинансовых организациях с помощью учётной записи граждан на «Госуслугах». Они начали совершать видеозвонки и предъявлять поддельные документы.

19 апреля 2024 г.

В Улан-Удэ после паводка осматривают участки пострадавших жителей

На возмещение убытков из республиканского бюджета могут рассчитывать горожане, постоянно проживающие в пострадавших от паводка домах. Соответствующие выплаты осуществляет Министерство социальной защиты населения Бурятии

19 апреля 2024 г.

Можете ли вы попасться на удочку телефонным мошенникам – выясняем с МТС

На волне рассылок от мобильных операторов про подтверждение персональных данных участились случаи телефонных мошенничеств. Верифицировать персональные данные действительно необходимо в соответствии с Федеральным законом «О связи». Если игнорировать эту просьбу, можно потерять любимый номер.

19 апреля 2024 г.

В селе Бурятии огонь с травы перебросился на дома

Это произошло в селе Турунтаево Прибайкальского района. Там сначала загорелась сухая трава, но огонь быстро распространился, перекинулся на забор и надворные постройки, была также угроза перехода огня на жилье.

19 апреля 2024 г.

Житель Улан-Удэ хотел обмануть мошенников, которые обманули его, но не вышло

Жителя Улан-Удэ мошенники обманули дважды. В дежурную часть отдела полиции № 1 Управления МВД России по г. Улан-Удэ с заявлением о мошенничестве обратился 62-летний мужчина, работающий водителем в транспортной компании, пишет Восток-Телеинформ со ссылкой на МВД по Бурятии.

Лента новостей
19.04.2024

ВТБ выяснил: каждый пятый дальневосточник проведет майские праздники на природе

18:30

Клещи покусали уже почти 60 жителей Бурятии

18:26

Сбер: мошенники усовершенствовали схему оформления займов с помощью «Госуслуг»

17:45

В Улан-Удэ после паводка осматривают участки пострадавших жителей

17:28

Бурятия вошла в лидеры регионов ДФО по количеству коров и овец

16:23

Депутат Народного Хурала - участник СВО прокомментировал программу «Время героев»

15:57

Можете ли вы попасться на удочку телефонным мошенникам – выясняем с МТС

15:20

В селе Бурятии огонь с травы перебросился на дома

15:14

Прогноз погоды на выходные стал известен в Улан-Удэ

14:54

Житель Улан-Удэ хотел обмануть мошенников, которые обманули его, но не вышло

14:45

Куда сходить в Улан-Удэ на майские праздники

14:24

Бурятские спортсмены выступят на чемпионате по боксу в Сербии

14:09

Авиапатрулирование лесов проводится в Бурятии ежедневно

13:50

Рыбаки пытались провезти из Монголии в Россию омуля в запасных колесах

13:39

В Улан-Удэ девушки сбили собаку и оставили умирать

13:23

В Селенгинском районе сняли карантин по бешенству

13:08

В Чите прошла встреча председателя Байкальского банка с губернатором

12:59

В Бурятии пройдет горный фестиваль «Мунку-Сардык»

12:31

В Бурятии предприниматели продавали подозрительные семена

11:46

Властям Монголии объяснили, как работает пункт пропуска в Бурятии

11:27

В Бурятии сгорели крыша и веранда жилого дома

11:19

В Улан-Удэ помыли самую большую в мире скульптуру головы Ленина

11:00

Более 1000 студентов участвовали в конкурсе по использованию ИИ-технологий для банковской сферы

11:00

Еще один мотоциклист пострадал в ДТП в Бурятии

10:58

В Бурятии мотоциклист врезался в автобус

10:54

Сложный лесной пожар в горах тушат в Бурятии

10:44

С бывших работниц детсада в Улан-Удэ взыскали 1,5 миллиона за мошенничество

10:39

В Бурятии убийце отменили самооборону и дали 8 лет вместо года

09:04

Прокуратура Бурятии разобралась с зарплатой совместителей

09:03

В Улан-Удэ фирме назначили полмиллиона штрафа за коррупцию

09:02

В Улан-Удэ сегодня станут известны итоги дней пропавших парня и девушки

09:00

Краткий зурхай на сегодня от настоятеля Курумканского дацана Гандан Ше Дувлин

06:00

18.04.2024

Алексей Цыденов поблагодарил Социальный фонд Бурятии за работу

18:19

В Бурятии завтра потеплеет до +17

18:03

Обновленный центр «Барс» открыли на Комушке в Улан-Удэ

17:36

На границе Бурятии с Монголией за сутки пресекли насколько нарушений при перевозке продукции

17:24

В Бурятии горит ферма, есть угроза взрыва нефтепродуктов и погибший

17:23

Участники автопробега «Автомобили и мотоциклы на службе правопорядка в СССР» побывали в Улан-Удэ

17:02

Сын бывшего спикера Народного Хурала Бурятии объявлен в международный розыск

16:57

На ж/д переездах ВСЖД с начала года зафиксировано 140 нарушений правил дорожного движения

16:46

В Бурятии выясняют сумму ущерба от паводков

16:31

За нарушения ПДД на ж/д переездах в Бурятии с начала года привлекли 19 водителей

16:24

Бурятские бизнесмены вошли в число победителей премии Сбера

16:11

В Бурятии началась подготовка к строительству второго Северомуйского тоннеля

15:47

В Улан-Удэ стартует федеральный проект «Чистый воздух»

15:34

В Бурятии инспекторы нашли незаконный слив бытовых отходов на особо охраняемой природной территории

15:26

Уровень воды на Селенге в Бурятии снижается

15:04

Лесникам Бурятии закупили квадроциклы

15:00

В Улан-Удэ ко Дню Победы заменят часть панно Героям Советского Союза

14:37

В Улан-Удэ мужчина с ножом напал на офис микрозаймов

13:55

Доверить инвестиционные решения цифровому помощнику готовы 19% сибиряков

13:35

В Бурятии специалисты просят не пить из колодцев и скважин жителей подтопляемой территории

13:29

Движение Первых запустило флешмоб «Спасибо спасателям»

13:14

В Бурятии мотоциклист влетел в автобус с пассажирами

13:13

В Бурятии участковый поймал в лесу черного лесоруба

13:07

ВТБ тестирует собственную метавселенную

13:05

Буддийскую карусель поставят в дацане Бурятии

13:04

Жителей Бурятии приглашают посоревноваться в рецептах здорового питания

12:47

В Бурятии осудят участников ОПГ за двойное убийство десятилетней давности

12:07

Мошенники начали обманывать предпенсионеров под видом сотрудников пенсионного фонда

11:56



«« Апрель 2024 »»
Пн Вт Ср Чт Пт Сб Вс
20
21
22
23
24
25
26
27
28
29
30