ubuntuusers.de

Moin!

Gibt es inzwischen auch für Linux Programme zum Bearbeiten von Bilder mit "KI", evtl sogar OpenSource? Insbesondere das Entrauschen von Fotos mit hoher ISO interessiert mich. Darktable ist zwar gut im Entrauschen, aber im Vergleich zu dem, was im Netz an Möglichkeiten unter Windows vorgeführt wird, doch nur ein Witz.

Stable Diffusion in Verbindung mit dem Refiner Modell, ich hab auch schon Bilder mit ControlNet bearbeitet. Entrauscht habe ich so auch bereits, allerdings muss man die Parameter, inbesondere Denoising Strength, passend setzen, sonst kommen ganz andere Bilder dabei raus, oder man erkennt kaum eine Änderung zum Originalbild. Zudem muss das VAE zum Modelltyp passen, damit kein Murks ausgegeben wird.

Was bei mir gut geklappt hat, war eine Methode Pix2Pix, ein bestimmtes Modell, das man per Prompt anweisen konnte: "Ändere das Bild so und so", habe aber lange nichts mehr damit gemacht.

Dazu nehme ich: https://github.com/AUTOMATIC1111/stable-diffusion-webui

Gimp und Krita Plugins habe ich auch gefunden, ich nehme an, dass damit der Funktionsumfang nicht so groß ist. Da stand nur was von Bilder erstellen, drum verlinke ich sie hier nicht.

verdooft schrieb:

Stable Diffusion in Verbindung mit dem Refiner Modell, ich hab auch schon Bilder mit ControlNet bearbeitet.

Das ist ja eine Installations-Orgie... ☹

Bin gespannt, was da am Ende herauskommt.

Gimp und Krita Plugins habe ich auch gefunden, ich nehme an, dass damit der Funktionsumfang nicht so groß ist. Da stand nur was von Bilder erstellen, drum verlinke ich sie hier nicht.

Doch, bitte, nenn mir die Namen, damit ich weiß, wonach ich suchen muss.

https://github.com/blueturtleai/gimp-stable-diffusion

https://github.com/Interpause/auto-sd-paint-ext

Hab ich beides nicht in Verwendung.

Meine Urinstallation von Automatic1111 liegt lange zurück, ich update manchmal mittels: git pull, das war damals eigentlich recht einfach, aber je mehr man rumprobiert, Modelle läd, desto voller wird die Platte. Zudem habe ich keine geeignete GPU und lasse alles per CPU laufen. Und wenn man die offenen Issues liest, steht oft was davon, dass was in neuen Versionen nicht mehr, nicht mehr so gut, nicht mehr so flott funktioniert.

Ich hätte nicht gedacht, daß das so kompliziert wird. Ich will doch nur Bilder entrauschen. Gibt's denn da kein Programm oder PlugIn für GIMP oder ein anderes Bildbearbeitungsprogramm, daß ohne eine Installations-Orgie mit tausend Abhängigkeiten auskommt?

Stable Diffusion läuft bei mir schon mal nicht. ☹

Nachtrag: ich sehe gerade, daß bei allen von Dir vorgeschlagenen Programmen / PlugIns stets von Installationen auf NVidia oder AMD Grafikkarten ausgegangen wird. Mit einfach Intel-OnBoard funktionieren die also alle nicht, oder?

Ich verwende viele KI Tools mittlerweile, um dem Problem verschiedener Abhängigkeiten (verschiedene Versionen von xyz) aus dem Weg zu gehen, setze ich venvs ein. Leider ist so zig mal Pytorch und anderer Kram irgendwo verstreut, aber alles funktioniert. Ich meine mich daran zu erinnern, dass der Automatic1111 Installer das alles von selbst erledigt hat.

Hat zwar nichts mit dem Thread zu tun, aber seit paar Stunden generiere ich Musik per audiocraft, hätte nicht gedacht, dass das per CPU, auch mit dem large-Modell, doch noch machbar ist.

Auf Hugging Face und anderen Seiten gibts gehostete Instanzen von Stable Diffusion und anderen Anwendungen, da ich die nicht nutze, kann ich keine empfehlen. Vielleicht gibts da was für dich geeignetes.

Wolfgang.Klein schrieb:

Ich will doch nur Bilder entrauschen.

Sowas suche ich schon seit Jahren - idealerweise alles mit einem Klick 😇 . Gibt es aber nicht und wird es so schnell nicht geben. Selbst kostenpflichtige, teure KI-Generatoren schaffen es nur teilweise und hinken den Wünschen immer noch weit hinterher. Sollte ein KI-Server einmal soweit sein, orakle ich jetzt schon, dass das schnelle/unkomplizierte Entrauschen eines Bildes mit 1 Klick nicht gerade billig sein wird.

Bis dahin bleibt nur: Manuelles Nachbearbeiten. Der GIMP-Filter Rauchreduktion alleine bringt nicht viel. Ich kombiniere unterschiedlichste Filter und Verbesserungsmöglichkeiten (in GIMP) auch mit Funktionen anderer Software. In GIMP wird es mit unterschiedlichen Ebenen übereianander gelegt und unterschiedlich abgedeckt. Sowas dauert bei mir zwischen 30 Min. bis 2 Std. Nachbearbeitungszeit.

Wolfgang.Klein schrieb:

Mit einfach Intel-OnBoard funktionieren die also alle nicht, oder?

Deine Grafikkarte scheint egal zu sein.

Habe das von verdooft erwähnte Plugin gimp-stable-fusion zum ersten Mal gesehen - interessiert mich sehr. Dauert aber, bis ich mich da eingelesen habe.

Nach dem ersten Überfliegen der Infos: Das Bearbeiten/Rendern & Co. scheint auf externe Server ausgelagert und dort per KI abgearbeitet zu werden. Eine onboard-Grafik könnte sowas gar nicht leisten. Am Ende erhältst du wohl nur das fertige Ergebnis. Die Krux dabei, wie bei fast allen KI-Bildrenderern: max. 1024x1024 Pixel!

ABER: Ich hol mir dieses Plugin mal. Das kann beim Nachbearbeiten hoffentlich etliches an Zeit sparen.

Selbst mit dem gimp-stable-fusion-Plugin wirst du um die manuelle Nachbearbeitung nicht rumkommen.

Wolfgang.Klein schrieb:

Nachtrag: ich sehe gerade, daß bei allen von Dir vorgeschlagenen Programmen / PlugIns stets von Installationen auf NVidia oder AMD Grafikkarten ausgegangen wird. Mit einfach Intel-OnBoard funktionieren die also alle nicht, oder?

Wie erwähnt, habe ich auch keine geeignete Grafikkarte, ich starte Automatic1111 mit --use-cpu all --skip-torch-cuda-test. Bisschen Geduld muss man schon mitbringen, wenn es nur auf der CPU läuft.

Guten Morgen, gibt es nicht auch eine Online-Lösung? Das wäre doch plattform-unabhängig. ☺

verdooft schrieb:

Auf Hugging Face und anderen Seiten gibts gehostete Instanzen von Stable Diffusion und anderen Anwendungen, da ich die nicht nutze, kann ich keine empfehlen. Vielleicht gibts da was für dich geeignetes.

Viele Dienste haben Kontingente oder/und fügen ein Wasserzeichen hinzu, kosten für mehr. Zudem verlassen eigene Bilder den lokalen Rechner. Plattformübergreifend sind so Tools wie SD (Automatic1111) schon, da kommt oft eine Web GUI zum Einsatz. Wobei ich teilweise auch direkt im Terminal hantiere, allerdings nicht zur Bildgenerierung, -bearbeitung. Dieses Audiogen war gestern ziemlich überlastet (Onlineinstanz auf HF), da gab es eine lang Queue. Ist auch der Vorteil, wenn man sowas lokal ausführt, auf Erreichbarkeit von Diensten ist man so nicht angewiesen.

Verschweigen möchte ich nicht, dass man für vieles viel RAM braucht. Die SD-XL Modelle haben da nochmal was draufgelegt.

Steve_ schrieb:

Guten Morgen, gibt es nicht auch eine Online-Lösung? Das wäre doch plattform-unabhängig. ☺

Die gibt's wie Sand am Meer. Alle, die ich ausprobiert habe, sind zum Entrauschen wenig geeignet. Falls doch brauchbar, dann nur für kleine Ausschnitte. Insgesamt nicht weniger zeitaufwändig, weil danach immer noch nachgearbeitet werden muss.

verdooft schrieb:

Viele Dienste haben Kontingente oder/und fügen ein Wasserzeichen hinzu, kosten für mehr. Zudem verlassen eigene Bilder den lokalen Rechner.

Genau das sind aktuelle Probleme bei Online-Diensten. Im Kostenlos-Bereich erhält man nur eingeschränke Möglichkeiten und reduzierte Auflösungen (ev. mit deren Wasserzeichen), zudem erteilt man ein uneingeschränktes Nutzungsrecht, also alle Rechte (ohne Widerrufsmöglichkeit) zu deren freier Nutzung.

Habe testweise dann auch Kohle hingeblättert, aber die Möglichkeiten und Ergebnisse waren trotzdem nicht merklich besser.

Unschärfen hinzufügen können alle gut. Aber umgekehrt, Unschärfen/Rauschen zu korrigieren, geht aktuell nur partiell und reduziert auf kleine Bildbereiche.

tshe schrieb:

Wolfgang.Klein schrieb:

Ich will doch nur Bilder entrauschen.

Sowas suche ich schon seit Jahren - idealerweise alles mit einem Klick 😇 . Gibt es aber nicht und wird es so schnell nicht geben.

Ob per Klick oder per Kommandozeile wäre mir egal. ☺

Ich will nur keine Installations-Orgie, bei der ein Paket das nächste und eine Abhängigkeit die nächsten drei Abhängigkeiten nach sich zieht. Das sollte im Jahre 2023 möglich sein. ☹

Das ganze Pythonzeugs ist bei mir in einem venv, dachte aber, dass Automatic1111 das per Installer automatisch anlegt, weils im Ausführungsscript auch betreten wird. Gerade im Zusammenhang mit KI Zeugs, das mit Python programmiert wurde, ist das Normalität.

Wolfgang.Klein schrieb:

tshe schrieb:

Wolfgang.Klein schrieb:

Ich will doch nur Bilder entrauschen.

Sowas suche ich schon seit Jahren - idealerweise alles mit einem Klick 😇 . Gibt es aber nicht und wird es so schnell nicht geben.

Das sollte im Jahre 2023 möglich sein. ☹

Bis zum Jahresende 2023 ist es ja noch lange hin, ganze 3 volle Monate. 😊 Der Optimist in mir meint auch: Das sollte in 3 Monaten möglich sein. Oder dann eben 202X. 😉

Kommandozeile wäre mir egal. ☺

Ich will nur keine Installations-Orgie, bei der ein Paket das nächste und eine Abhängigkeit die nächsten drei Abhängigkeiten nach sich zieht. Das sollte im Jahre 2023 möglich sein.

Eigentlich wäre das die ursprüngliche Linux Idee. Aber natürlich ginge das auch anders. Der Ubuntu Weg wäre dann snap Das ist möglicherweise auch nicht das, was du willst. Dabei müsste natürlich auch erstmal jemand einen snap-container bauen (habe jetzt nicht geprüft, ob es den schon gibt).

[ot] Ich gehe da manchmal einen Zwischenweg, indem ich einige Abhängigkeiten statisch einbinde, was dann die Binärdatei entsprechend vergrößert. Aber meine Motivation dafür hat eher mit der Aktualität der Quellen zu tun.[\ot]