Oh wow, Corridor Crew hat das Problem "Freistellen vor Greenscreen" erschöpfend durch reenforcement learning erschlagen. Für alle Anwendungen unterhalb Avatar 23 ist es mehr als ausreichend. Und es ist open source. 🤯

https://www.youtube.com/watch?v=3Ploi723hg4
https://github.com/nikopueringer/CorridorKey
It Took Me 30 Years to Solve this VFX Problem

YouTube
@erd
Es ist vibe coded und hat keine offene Lizenz. Meh

@berggorilla @erd Da scheiden sich bestimmt die Geister wie offen CC BY-NC-SA noch ist.

Die Lizenz gibt schon Spielraum, aber setzt eben auch klare Spielregeln.

@erd Das ist kein Reinforcement-Learning. Sie haben ein CNN supervised auf synthetischen Daten trainiert und dabei Data Augmentation und eine Art manuelle Hard-Example-Generation genutzt.

Die Ergebnisse sehen wirklich gut aus

@erd Er hat so ne coole GPU mit 96GB VRAM.. Ich bin etwas neidisch.
Wäre interessant zu wissen, wieviel schlechter genau das Ergebnis mit ner Consumer GPU ist.