пїЅпїЅпїЅпїЅпїЅпїЅпїЅ Orphus
Общество | Главное

Сбер представил первую российскую диффузионную модель для генерации изображений по тексту


Общество 27 ноября 2022 г., 16:58

На международной конференции по искусственному интеллекту (ИИ) Artificial Intelligence Journey Сбер представил Kandinsky 2.0 — первую российскую мультиязычную диффузионную модель для генерации изображений по текстовому описанию с 2 млрд параметров.

Нейросеть разработали и обучили исследователи Sber AI при партнёрской поддержке ученых из Института искусственного интеллекта AIRI на объединённом датасете Sber AI и SberDevices из 1 млрд пар «текст — изображение». Увидеть, как она рисует, можно на сайте FusionBrain, а также при помощи команды «Запусти художника» на умных устройствах Sber и в мобильном приложении Салют.

FusionBrain.ai – открытый портал для демонстрации моделей, приближающих мир к созданию AGI (Artificial General Intelligence, сильный искусственный интеллект) от Института AIRI, который Сбер решил поддержать, первым выложив свою модель на ресурсе. В будущем на сайте FusionBrain.ai будут доступны как генеративные, так и передовые мультимодальные и мультизадачные модели.

В Kandinsky 2.0 разработчики использовали набирающий популярность диффузионный подход, поскольку модели подобной архитектуры, в отличие от трансформеров, дают хорошие результаты почти во всех задачах генерации мультимедийного контента по текстовому описанию (синтез изображений, видео, 3D и аудио).

Модель способна одинаково быстро и качественно обрабатывать запросы на 101 языке. Среди них как распространённые русский и английский, так и более редкие, например, монгольский. Система поймёт задачу, даже если в одном запросе будут слова на разных языках.

Kandinsky 2.0 отличается от своего предшественника более сочной, глубокой и реалистичной картинкой и расширенными возможностями. На сайте FusionBrain изображения можно генерировать в 20 различных стилях, среди которых ренессанс, классицизм, мультипликация, Новый год и даже хохлома. В модели также реализованы функции inpainting (замена любой части изображения и любого объекта на изображении на сгенерированные нейросетью) и outpainting (возможность дорисовывать готовое изображение и фон вокруг картинки).

Кроме того, в Kandinsky 2.0 пользователи могут оценить, как одинаковые с точки зрения смысла лингвистические конструкции и понятия отличаются в зависимости от языка и культурной окраски. Например, если сформулировать запрос «национальное блюдо» на русском языке, нейросеть чаще всего рисует щи, а на японском это будет мисо суп и суши.

Александр Ведяхин, первый заместитель Председателя Правления Сбербанка: «Мы продолжаем развивать решения для автоматической генерации изображений по описанию на естественном языке — так называемый креативный ИИ. Kandinsky 2.0, который пришёл на смену первой версии модели, — прорыв в этой сфере. Наша модель позволяет за несколько секунд получить уникальную картинку под конкретную задачу и свободно распространять её без лицензии, что очень актуально для бизнеса. Генеративные модели развиваются очень быстро: ещё четыре года назад даже постановку такой задачи сложно было представить, а сегодня мы имеем работающую модель, которая понимает 101 язык и рисует реалистичные изображения, которые зачастую неотличимы от тех, что создают люди».

Реклама. Рекламодатель: https://www.sberbank.ru/ru/about/main.

Заметили опечатку? Выделите ошибку и нажмите Ctrl+Enter.

Поделиться
Поделиться
Отправить
Поделиться
Поделиться
Поделиться
Отправить
Поделиться

Другие новости

31 мая 2024 г.

В Бурятии жители поселка страдают из-за бездорожья после разлива реки

В Бурятии жители поселка Потанино жалуются на бездорожье. Проезд на перекресте с улицы Октябрьская засыпан камнями и отходами. Затопление местных дорог произошло из-за разлива реки Шанагинка, об этом сообщили очевидцы в viber-группе Бичура-инфо 24.7.

31 мая 2024 г.

В Улан-Удэ для самокатчиков вводят новые штрафы до 100 тысяч рублей

Компания Whoosh – оператор самокатов вводит новые штрафы и повышает размер уже существующих для нарушителей при езде на электросамокатах.

31 мая 2024 г.

«Лада седан-баклажан»: В Бурятии пьяная девушка угнала автомобиль и уехала в соседнее село веселиться

Ночью по окончании распития алкоголя она, не получив от собутыльников положительного ответа на просьбу увезти её домой, села за руль чужого транспортного средства сама.

31 мая 2024 г.

В Бурятии прошли учения по разминированию с беспилотниками

Тренировки с инженерными подразделениями по преодолению минных заграждений прошли на учебных полигонах Восточного военного округа (ВВО), дислоцированных в Бурятии и Забайкальского края. Специалисты тренируются проделывать в них проходы, пишет Восток-Телеинформ со ссылкой на пресс-службу ВВО.

31 мая 2024 г.

В МВД Бурятии опровергли появление дорожных камер по фиксации разговоров водителей по телефону

В МВД Бурятии опровергли слухи о появлении новых дорожных камер, отслеживающих разговоры водителей по телефону. В крупных городах России подобные средства фиксации уже широко применяются, но в республике таких комплексов устройств пока нет, сообщает Восток-Телеинформ.

Лента новостей
31.05.2024

В Улан-Удэ завтра запрещена продажа алкоголя

18:25

В Улан-Удэ на месяц закроют улицу в центре

18:16

В Улан-Удэ борьба с безнадзорными животными переходит в «борьбу с надзорными»

18:07

В Бурятии мужчину будут судить за реабилитацию нацизма

17:43

Житель Бурятии отправился на 7 лет в колонию за покушение на убийство собутыльника

17:30

В Бурятии жители поселка страдают из-за бездорожья после разлива реки

17:15

В Улан-Удэ детсадовцы посадили деревья с лесниками

16:51

В Бурятии водитель выехал на «встречку» и устроил ДТП с пострадавшими

16:40

В Бурятии назвали самый частый вид нарушений ПДД

16:20

В Улан-Удэ сносят бесхозные баннеры

16:03

В Улан-Удэ для самокатчиков вводят новые штрафы до 100 тысяч рублей

15:58

Верховный суд ответил депутатам Народного Хурала

15:50

Путешествия со вкусом: знакомство с туристическим потенциалом Иркутской области, Забайкалья, Бурятии и Якутии прошло в павильоне Сбера на ВДНХ

15:40

Сотрудники Байкальского банка спасли от мошенников 52 млн рублей своих клиентов

15:31

В Улан-Удэ мужчина зарезал собутыльника и отправился на 9 лет в колонию

15:20

В Бурятии маршем почтили память героев битвы при Халхин-Голе

15:12

«Лада седан-баклажан»: В Бурятии пьяная девушка угнала автомобиль и уехала в соседнее село веселиться

15:06

В Улан-Удэ проводят бесплатные экскурсии по шатрам туристской выставки

14:58

В Бурятии прошли учения по разминированию с беспилотниками

14:50

Байкальский заповедник попросил у депутатов Хурала автостоянку

14:32

В Бурятии эвакуировали шахтеров из-за дыма в шахте

14:31

В МВД Бурятии опровергли появление дорожных камер по фиксации разговоров водителей по телефону

14:20

На Котокеле в Бурятии обнаружили массовую гибель рыбы

14:14

Половина всех видеокамер Бурятии установлена в Улан-Удэ

13:58

Сбер выступил партнером Братского экономического форума

13:30

За год в фонд «Защитники Отечества» в Бурятии пришло более 18 тысяч запросов

13:22

«Бурятия – самая красивая»: в Улан-Удэ открылась крупная туристская выставка

12:57

Улан-Удэ отметит день рождения: программа праздничных мероприятий-2024

12:44

В Бурятии продолжают разбивать сады в честь погибших воинов

12:14

Долгосрочные инвестпортфели как «подушку безопасности» могут создать жители Бурятии

12:07

В Еравне 90 лет отметила труженица тыла и ветеран труда

11:32

Ветерану Великой Отечественной войны исполнился 101 год, как Бурятии

11:15

В Муйский район стягивают подкрепление пожарных с Бурятии

11:11

В Бурятии владельца заболевшего скота проверят

11:06

В Бурятии жители села потребовали изолировать заболевший скот местного фермера

10:53

В Улан-Удэ прибыл первый прямой рейс из Сочи

10:33

ЗГРП ищет на работу повара, бульдозериста и водителя большегруза

10:12

В Заиграевском районе Бурятии подводят промежуточные итоги грантового конкурса «Сибагро рядом»

09:49

В Бурятии ночью насмерть сбили неизвестного пешехода

09:28

В Бурятии машина врезалась в жилой дом

09:26

В Улан-Удэ подросток на велосипеде проезжал через дорогу и попал под машину

09:24

В Бурятии на сегодня тушат семь лесных пожаров

09:20

В Бурятии мужчина устроил незаконный ломбард и попался

09:06

В Бурятии с женщины пытались взыскать долги за двойника

09:04

Житель Бурятии задолжал ребенку полмиллиона рублей алиментов

09:03

В Бурятии пьяный мужчина зарезал жену и сел на 10 лет

09:02

В Бурятии в пожаре на заимке погибли люди

09:01

В Бурятии заключенная сказала уполномоченному по правам человека, что хочет на СВО

08:57

Краткий зурхай на сегодня от настоятеля Курумканского дацана Гандан Ше Дувлин

06:00

30.05.2024

Дожди, град и грозы по Бурятии 31 мая

19:03

Уникальная школа откроется в Улан-Удэ

18:55

Многодетная мама из Бурятии прошла в финал программы по подготовке управленцев

17:33

Жительница Бурятии поверила в инвестиции и потеряла 3 миллиона рублей

17:09

В Улан-Удэ доверчивая студентка перевела мошенникам 400 тысяч рублей

17:05

Министр природы Бурятии рассказала о гибели мужа на СВО

17:00

Мэр Улан-Удэ посадил голубую ель в парке

16:52

Улан-удэнцы продлят отдых на 12 июня отпусками и отгулами

16:44

Житель Бурятии бросил золотодобычу и начал коптить крафтовые колбасы

16:36

В Бурятии отметили значительный рост промышленного производства

16:33

В Бурятии дерево убило местного жителя

16:09



«« Июнь 2024 »»
Пн Вт Ср Чт Пт Сб Вс
 
 
 
 
 
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30