AI - Nvidia Cosmos Models - Neues Open Source Video Modell

Nvidia hat sich in die Reihe der Next Gen Videogeneratoren eingereiht. Und mit Cosmos eine neue Video AI mit einem Image to Video Modell veröffentlicht. Die Webseite von Nvidia lässt sowas erst gar nicht vermuten. Auf ihr wird von einem World Foundation Modell gesprochen. Und dass das Modell physikalisch basiert ist. Aber ComfyUI hat das Modell schon eingebunden, und man kann es da nativ nutzen.

Die Minimumgrösse ist 704x704 Pixel. Und man braucht im Moment zumindest momentan noch mindestens 16 besser 24 Gigabyte Vram. Dementsprechend langsam läuft das Ganze auch. Und die Videolänge scheint am Besten mit 121 Frames zu funktionieren.

Cosmos steht unter der Open Source Open Model License. Das bedeutet man kann alle erzeugten Ergebnisse auch kommerziell verwenden. https://www.nvidia.com/en-us/agreements/enterprise-software/nvidia-open-model-license/

https://www.nvidia.com/en-us/ai/cosmos/

https://blog.comfy.org/p/comfyui-now-supports-nvidia-cosmos
https://comfyanonymous.github.io/ComfyUI_examples/cosmos/