Как нейросети генерируют картинки?
Ғылым және технология
Генеративные нейросети превращают простой текстовый запрос в фантастические иллюстрации, фотореалистичные изображения, обложки книг, видео для соцсетей и другой контент. И всё это можно сделать буквально за пару минут. В приложении Шедеврум и картинки, и видео помогает создавать нейросеть YandexART, о которой мы говорим в новом видео.
Это рубрика «Вопрос со звёздочкой», в которой разработчики Яндекса простым языком рассказывают, как работают самые сложные технологии.
Роман Исаченко руководит подгруппой анализа изображений в Яндексе. В новом выпуске он рассказывает, как современные нейросети создают картинки из шума и почему для этого нужно обязательно «испортить» изображение.
🔗 Скачивайте Шедеврум и генерируйте изображения из текста
Android: clck.ru/36xRGD
iOS: clck.ru/36xRHP
Пікірлер: 47
Было круто, если бы в конце было сказано что данное видео со спикером было полностью сгенерировано нейросетю 😅😅
Учу шедеврум писать слова - научил с большим трудом писать WOW, MOM и ABC. Однако при последующих генерациях установил, что шедеврум не имеет понятия о счете и создать картинку с заданным количеством объектов невозможно от слова совсем. Долгими часами генераций повысил процент правильных генераций двух шариков одного цвета и двух другого. Кроме того, ни как не удалось генерировать например коромысло или корову с выменем, но раз разработчики не учли такие простые варианты то может удастся на карачках проползти к цели через скрытые и от них возможностями шедеврума путем его обучения методом зазубривания без алгоритма понимания запроса?
Шед не генерит обнажёнку, но это можно обойти. Однако это оглашению не подлежит. Не надо засорять платформу. Но как прочувствование работы алгоритмов поучительно.
Шедеврум это КРУТЯК 👍🏻 😎
Из "переводит текст в машинный код" не понятно, как конкретно. И причем здесь обучение на шумах? Может текст переводится в шум, который нейросеть потом детализирует? Объясните пожалуйста. Как в итоге текст превращается в картинку осталось неясным.
@tellator
5 ай бұрын
Поэтапно никто в принципе объяснить не сможет. Для полного понимания проще посмотреть любое видео "как работают нейросети" - тут будет то же самое Если примитивно, то обученная нейросеть - это немного кода и гигабайты "весов", то есть миллионы вычисленных коэффициентов. Код предназначен для работы с этими весами. Подав на вход кода набор символов, он пропускает их через матрицу коэффициентов. Поэтапно просмотреть, что происходит, будет сложно, так как коэффициентов слишком много, но в итоге на последнем слое матрицы появятся значения. Если нейросеть обучена правильно и на достаточном наборе данных, то эти значения пригодны для использования как результат Если применять это к рисующей нейронке, то она сначала генерирует поле со случайным шумом, а потом на вход подаётся текстовый запрос и нейросеть шаг за шагом высчитывает поправки к шуму, чтобы он постепенно превращался в изображение. А текстовый энкодер проверяет, похоже ли получилось, в правильную ли сторону идёт генерация, и вносит правки при необходимости Но на самом деле при желании меня можно поправлять до бесконечности, потому что объснение очень уж примитивное
@yandex
5 ай бұрын
Здравствуйте, извините за долгий ответ! Мы не можем раскрывать все нюансы работы алгоритмов в приложении, но стараемся максимально доступно донести информацию о процессе генерации до пользователей Шедеврума. Надеемся, что это видео помогло больше узнать о работе нейросетей 😊
А как видео сделать или гифку, я в шедевруме видел гифки, тут тоже про это сказали, но не понятно как
@yandex
4 ай бұрын
Здравствуйте! Генерация видео пока работает в режиме тестирования. Она доступна активным пользователям Шедеврума, а результаты в ленте приложения видят все. Создавайте креативный контент, ставьте лайки и пишите комментарии. Мы стремимся к тому, чтобы больше пользователей могли генерировать видео, поэтому периодически выдаём новые доступы 🙌🏼
Привет яндекс,как можно приобрести яндекс станцию первого поколения?
@yandex
5 ай бұрын
Здравствуйте! Сейчас Станция не производится и не продаётся. Выбрать модель по душе можно на Яндекс Маркете: clck.ru/375Ljt
@yandex
5 ай бұрын
Здравствуйте, сейчас Станция не производится и не продаётся. Выбрать модель по душе можно на Яндекс Маркете: clck.ru/375Ljt
Было бы так хорошо без телесуфлера. Там же не такие длинные фразы. А то как будто не к тебе обращаются
А у меня нет опции генерировать видео... В чем может быть дело, как это исправить?
@yandex
5 ай бұрын
Здравствуйте! Сейчас функция работает в режиме тестирования. Генерация видео доступна активным пользователям Шедеврума, а посмотреть результаты в ленте приложения могут все. Создавайте креативный контент, ставьте лайки и пишите комментарии. Мы хотим, чтобы большее количество пользователей имело возможность генерировать видео, поэтому периодически выдаём новые доступы ❤️
Классно было бы, если бы нейросети браузера локально улучшали видео с 144p до 420p, ну или хотя бы просто делало получше, что бы те у кого мало ГБ, не тратили их на ненужное.
@yandex
4 ай бұрын
Здравствуйте! Спасибо за пожелание о том, чтобы нейросеть делала качество видео лучше. Нам важно знать, чего хотят пользователи. Ваш отзыв поможет нашей команде понять, над чем стоит поработать 🙌🏼
@user-uv8yi4gh4c
3 ай бұрын
"Лучше" исходное видео-сделать НЕВОЗМОЖНО, НИ КАКАМИ НЕЙРОСЕТЯМИ!!! Вернее, лишь испортить! Все эти "улучшения" не являются естественными* И противоречат вообще, всем правилам "естественного" формирования видео и картинок, потому что, они "НЕ НАСТОЯЩИЕ" и сдланы не по законам природы(преломление света и прочие моменты") То есть, по итогу, можно получить "подредактированное видео или фото, но оно уже к реальному, ни какого отношения не имеет.@
@YaShoom
3 ай бұрын
@@user-uv8yi4gh4c свидетель Истинного Света?))) Мне как-то безразлично на тонкости, когда у меня глаза и так болят от мутотени, и всё равно ничего не видно, а гигабайты жрёт как не в себя... И кто говорит, что развитие нейросетей не должно развиваться в этом направлении?
Это все интересно, но Яндекс Банк блокирует счета и не может разблокировать. Служба поддержки ничем помочь не может! Как такое возможно в Яндексе??
@yandex
5 ай бұрын
Здравствуйте! Можем ограничить доступ к счёту, если заметим подозрительную активность. Чтобы всё проверить и защитить аккаунт нам нужно немного времени. Если причин для беспокойства нет, то снимем ограничения.
Классная реклама
ааааааа вот как)
а сколько платите за картинки с которых ваша нейросеть обучалась и брала пример??
Ваша служба поддержки умного дома обещала разобраться с тем, что перестал работать один датчик и беспроводная кнопка. В последний раз выходили на связь 29 ноября. Так и забыли. Вот это сервис я понимаю. Мои проблемы видимо это мои проблемы.
@yandex
5 ай бұрын
Здравствуйте! Увидели ваш комментарий и хотим разобраться. Расскажите подробности о том, что случилось. Если у вас есть номер обращения в поддержку, то пришлите нам. Всё проверим и постараемся помочь 🙌🏻
Интересно!
До чего дошёл прогресс до невидоных чудес
Вот это дааа До чего техника дошла
какая же шаблонная вода, в которую понапихали слова "яндекс" и "шедеврум", текст видимо тоже нейросеточка делала
Где приложение?
@yandex
5 ай бұрын
Здравствуйте! Уточните, пожалуйста, у вас не получается скачать приложение?
@io1889
5 ай бұрын
@@yandexну тут просто нигде нет ссылки, так что да, я не могу скачать
@yandex
5 ай бұрын
@@io1889 Вот ссылки для скачивания на мобильные устройства: Google Play: play.google.com/store/apps/details?id=com.yandex.shedevrus App Store: apps.apple.com/ru/app/id1671837122?platform=ipad
@yandex
5 ай бұрын
Вот ссылки для скачивания на мобильные устройства: Google Play: play.google.com/store/apps/details?id=com.yandex.shedevrus App Store: apps.apple.com/ru/app/id1671837122?platform=ipad
@io1889
5 ай бұрын
Спасибо)@@yandex
спросил у yandexgpt какие есть нейросети для генерации картинок. назвал все западные, шедеврум не упомянул. спрашиваю есть ли российский аналог. он ответил что не может говорить на эту тему. вывод: шедеврум не существует.
Лучше бы подсказали, как писать запрос, чтоб картинка реалистичная была. И да, сеть никак не хочет нарисовать павлина с раскрытым хвостом хоть тресни. Ни у кого ещё не видела
@yandex
5 ай бұрын
Здравствуйте! Шедеврум пока в самом начале пути, нейросети ещё учатся. Попробуйте, пожалуйста, переформулировать запрос и проверить, получится ли создать желаемую генерацию. Если это не помогло, уточните, как именно вы формулируете запрос?
Q*
Видео открывают видимо своим родственникам, потому, что как объяснить, что у пользователя с меньшим количеством подписчиков и лайков есть доступ к видео, а у того, что выше все параметры - нет. Яндекс как всегда, всё через Ж...
Юху
YandexART звучит круче чем Шедеврум.
ФигняАрт ваша модель, тысячи раз писал в поддержку, что новая модель больше 16 слов не понимает, а им хоть бы что, не собираются фиксить. Ничего хорошего из 16 слов не получить, описать точно желаемое просто нет возможности, изображения получаются рандомными по факту.
ни о чем видос, тема не раскрыта = очередное балабольство от яндекса. впрочем приложение такое же
спасибо, Рома. очень интересно! лайкусик