sayzard田中義弘 | taziku CEO / AI × Creative (@taziku_co)
StreamDiffusionV2의 프로젝트 페이지를 공유하며, 표정·동작·배경·스타일을 생성 후편집이 아니라 실시간으로 바꿔가며 라이브처럼 연출하는 사용 사례를 강조합니다. AI 아바타, 라이브 스트리밍, 이벤트 영상, 실시간 광고 등에서 활용 가능성이 큽니다.
田中義弘 | taziku CEO / AI × Creative (@taziku_co)
StreamDiffusionV2는 비디오 생성을 턴 기반이 아닌 실시간 스트리밍형 파이프라인으로 확장하려는 접근입니다. 사용자와 지속적으로 대화하듯 길이보다 즉시 반응성과 인터랙티브 디렉션을 강조하며, 향후 AI 비디오의 생성/편집 UX를 바꿀 가능성이 있습니다.
Augustine LeudarMy recent exhibition “Silvano” (God of Forests) at Hay Festival Peru .The installation used sensors to track body movements to change sounds and effects in 3D space as well as AI using models trained on my own artwork to morph visitors into abstract organic and zoomorphic shapes from mythology of the forest as well as 3D field recordings of Amazonian wildlife: #touchdesigner #maxmsp #installationart #interactiveart #streamdiffusion #soundart #3DSound
Paolo PerroneHere's a lecture at MIT on Markov categories, symmetries, and generative AI, by Rob Cornish and myself.
https://youtu.be/ozN4zLEUCgs?feature=shared
#touchdesigner #streamdiffusion #bananas
https://youtu.be/ozN4zLEUCgs?feature=shared
#touchdesigner #streamdiffusion #bananas
ACT4ED Special Lecture - Paolo Perrone, Rob Cornish (Oxford): Markov Categories, Symmetries, & GenAI
Wilfredo 💭There is a fierce debate going on regarding the validity of AI in the field of art. Matthieu Le Cauchois believes that AI can, indeed, create art, and created a good example: a “mirror” (in fact, it is a #camera connected to the screen with a picture frame) that stylizes the “reflected” person in real time using #StreamDiffusion
matthewcroughan
Habr[Перевод] Обзор статьи “StreamDiffusion: конвейер для интерактивной генерации в режиме реального времени”
StreamDiffusion — это новый диффузионный конвейер для интерактивной генерации изображений в режиме реального времени, позволяющий добиться более высокой производительности для прямых трансляций и других подобных сценариев. Он заменяет традиционное последовательное шумоподавление (sequential denoising) на более быстрый пакетный процесс и вводит параллельную очередь ввода-вывода для более плавной работы. В конвейере также используется новый метод Residual Classifier-Free Guidance (RCFG), позволяющий сократить количество этапов шумоподавления и повысить общую скорость работы. Кроме того, он включает стохастический фильтр сходства (Stochastic Similarity Filter) для повышения энергоэффективности. В целом StreamDiffusion может похвастаться 1,5-кратным ускорением обработки и 2,05-кратным увеличения скорости при использовании RCFG, достигая 91,07 кадров в секунду на графическом процессоре RTX4090. Кроме того, значительно снижается энергопотребление, что делает его более эффективным решением для генерации изображений в реальном времени.
JAP@AI術師✨note記事更新情報✨
2023/12/31
#StreamDiffusion をローカル環境で動かす方法を丁寧に解説
初心者にも優しい手順書になっていると思いますので、「PythonとかGitとか解らんし...」という方も一度お試しいただければと思います。
https://note.com/jap4ai/n/nd4595aa328b4
#AIイラスト #AIArtworks
StreamDiffusionインストール方法｜JAP
更新履歴 2023/12/24 初版 ( 殴り書きレベル ) 公開 はじめに こんにちは、JAPと申します。 今回は 2023年12月 に公開された StreamDiffusion をローカル環境に導入する手順を紹介します。 StreamDiffusionとは 一言でいうと「爆速画像生成AIツール」です。 T.B.D. 前提条件 この記事の手順は以下の環境が前提となっています。 Windows11 Home Python 3.10.11 インストール手順 Windows PowerShell を起動して、以下のコマンドを順に実行します
StreamDiffusionインストール方法｜JAP
更新履歴 2023/12/24 初版 ( 殴り書きレベル ) 公開 はじめに こんにちは、JAPと申します。 今回は 2023年12月 に公開された StreamDiffusion をローカル環境に導入する手順を紹介します。 StreamDiffusionとは 一言でいうと「爆速画像生成AIツール」です。 T.B.D. 前提条件 この記事の手順は以下の環境が前提となっています。 Windows11 Home Python 3.10.11 インストール手順 Windows PowerShell を起動して、以下のコマンドを順に実行します
#StreamDiffusion のインストール方法
まだ殴り書きレベルですが、とりあえず動かしてみたい方向け。コマンドを順番にコピペしていくだけで試せると思います。
素晴らしい成果物を OSS として公開してくださった あき先生 とチームの皆様に感謝🙏
https://note.com/jap4ai/n/nd4595aa328b4
まだ殴り書きレベルですが、とりあえず動かしてみたい方向け。コマンドを順番にコピペしていくだけで試せると思います。
素晴らしい成果物を OSS として公開してくださった あき先生 とチームの皆様に感謝🙏
https://note.com/jap4ai/n/nd4595aa328b4
StreamDiffusionインストール方法｜JAP
更新履歴 2023/12/24 初版 ( 殴り書きレベル ) 公開 はじめに こんにちは、JAPと申します。 今回は 2023年12月 に公開された StreamDiffusion をローカル環境に導入する手順を紹介します。 StreamDiffusionとは 一言でいうと「爆速画像生成AIツール」です。 T.B.D. 前提条件 この記事の手順は以下の環境が前提となっています。 Windows11 Home Python 3.10.11 インストール手順 Windows PowerShell を起動して、以下のコマンドを順に実行します