There is a fierce debate going on regarding the validity of AI in the field of art. Matthieu Le Cauchois believes that AI can, indeed, create art, and created a good example: a “mirror” (in fact, it is a #camera connected to the screen with a picture frame) that stylizes the “reflected” person in real time using #StreamDiffusion

#PabloNet #aiart

🖼️ https://www.matthieulc.com/posts/pablonet/

[Перевод] Обзор статьи “StreamDiffusion: конвейер для интерактивной генерации в режиме реального времени”

StreamDiffusion — это новый диффузионный конвейер для интерактивной генерации изображений в режиме реального времени, позволяющий добиться более высокой производительности для прямых трансляций и других подобных сценариев. Он заменяет традиционное последовательное шумоподавление (sequential denoising) на более быстрый пакетный процесс и вводит параллельную очередь ввода-вывода для более плавной работы. В конвейере также используется новый метод Residual Classifier-Free Guidance (RCFG), позволяющий сократить количество этапов шумоподавления и повысить общую скорость работы. Кроме того, он включает стохастический фильтр сходства (Stochastic Similarity Filter) для повышения энергоэффективности. В целом StreamDiffusion может похвастаться 1,5-кратным ускорением обработки и 2,05-кратным увеличения скорости при использовании RCFG, достигая 91,07 кадров в секунду на графическом процессоре RTX4090. Кроме того, значительно снижается энергопотребление, что делает его более эффективным решением для генерации изображений в реальном времени.

https://habr.com/ru/companies/otus/articles/787484/

#StreamDiffusion #шумоподавление #CLIP

✨note記事更新情報✨
2023/12/31
#StreamDiffusion をローカル環境で動かす方法を丁寧に解説

初心者にも優しい手順書になっていると思いますので、「PythonとかGitとか解らんし...」という方も一度お試しいただければと思います。
https://note.com/jap4ai/n/nd4595aa328b4
#AIイラスト #AIArtworks