Welches Programm für eigene Stimme in KI ohne recording

[030xxx]

Hi,

Ich möchte wissen ob sich jemand auskennt mit Musik Producer KI Programmen hier? Weiß jemand welche am besten dafür geeignet ist, meine eigene Stimme zu verwenden, einzufügen. Ich habe zwar eigene Aufnahmen, aber möchte nun die KI singen lassen mit meiner Stimme und eigenen Songs... ohne selbst zu singen. Da hab ich außerdem Suno Songs komponieren lassen und möchte einfach meine eigene Stimme einsetzen. Ich habe bisher nur Apps gefunden die Songs covern mit der eigenen Stimme, aber eigene Songs lassen mit meinen Texten, will auf jeden Fall die Gesangsstimme verwenden und den Beat ausbessern. Nur auf Suno funktioniert es irgendwie auch nicht meine Stimme zu verwenden.


Danke...

 

[Carcinome]

Wieso eigentlich?

 

[Joost]

Dann installier Dir die Programmiersprache Python und lade Dir das Softwareprojekt RVC von hugginface herunter. Danach erstelle aus Aufnahmen mit Deiner eigenen Stimme damit ein Stimmenmodell. Danach musst Du noch ein Stück per Stem Separation in Einzelstimmen auftrennen und kannst dann die Gesangsstimme aus der Aufnahme mit Deiner Stimme austauschen.

Der Haken dabei: das Berechnen des Stimmenmodells kann durchaus mehr als eine Stunde Rechenzeit benötigen. Wenn Du aber erst ein Stimmenmodell hast, dauert das Hineinrechnen nur Minuten. Wie nahezu alle als KI bezeichnete Software siehst Du dann, daß es ohne Anlernen eines ML Modelles keine neue Stimme automatisch einem sogenannten KI System zur Verfügung steht. Das ist alles maschinelles Lernen und keine künstliche Intelligenz….

Zur Stem Separation empfehle ich das auf GitHub veröffentlichte demucs Projekt in Version 4, welches ebenso in Python geschrieben wurde

 

[jet2]

Dann installier Dir die Programmiersprache Python und lade Dir das Softwareprojekt RVC von hugginface herunter. Danach erstelle aus Aufnahmen mit Deiner eigenen Stimme damit ein Stimmenmodell. Danach musst Du noch ein Stück per Stem Separation in Einzelstimmen auftrennen und kannst dann die Gesangsstimme aus der Aufnahme mit Deiner Stimme austauschen.

Der Haken dabei: das Berechnen des Stimmenmodells kann durchaus mehr als eine Stunde Rechenzeit benötigen. Wenn Du aber erst ein Stimmenmodell hast, dauert das Hineinrechnen nur Minuten. Wie nahezu alle als KI bezeichnete Software siehst Du dann, daß es ohne Anlernen eines ML Modelles keine neue Stimme automatisch einem sogenannten KI System zur Verfügung steht. Das ist alles maschinelles Lernen und keine künstliche Intelligenz….

Zur Stem Separation empfehle ich das auf GitHub veröffentlichte demucs Projekt in Version 4, welches ebenso in Python geschrieben wurde

RVC hätte ich auch für sowas empfohlen.
wenn man aber nicht die richtige hardware besitzt und sich nicht mit einer python umgebung auskennt, macht es keinen sinn, zu versuchen, das auf seinem rechner zu installieren.
da nimmt man besser ein voreingestelltes google-collab web.
wird vielerseits angeboten.

stimm-model berechnen dauert bei mir auf dem rechner 15 - 30 min.
stimme über einen gesang legen - je nach länge - ca 30 sec -1 1/2 min.

 

[Joost]

Die Rechenzeit wird höher, wenn man den Detailgrad erhöht. Hilfreich bei der Berechnung ist, wenn man eine fette Grafikkarte, bevorzugt von NVIDIA hat, um die Berechnungen auf dieser zu machen, denn eine Grafikkarte kann solche Berechnungen um den Faktor 20 beschleunigen, sofern die Projekte Cuda oder OpenCL unterstützen

 

[therealelfatale]

Hi,

Ich möchte wissen ob sich jemand auskennt mit Musik Producer KI Programmen hier? Weiß jemand welche am besten dafür geeignet ist, meine eigene Stimme zu verwenden, einzufügen. Ich habe zwar eigene Aufnahmen, aber möchte nun die KI singen lassen mit meiner Stimme und eigenen Songs... ohne selbst zu singen. Da hab ich außerdem Suno Songs komponieren lassen und möchte einfach meine eigene Stimme einsetzen. Ich habe bisher nur Apps gefunden die Songs covern mit der eigenen Stimme, aber eigene Songs lassen mit meinen Texten, will auf jeden Fall die Gesangsstimme verwenden und den Beat ausbessern. Nur auf Suno funktioniert es irgendwie auch nicht meine Stimme zu verwenden.


Danke...

du kannst auch einfach vocoflex benutzen von dreamtonics um die stimme zu ersetzen dass gibt es als plugin für pc.

 

[Kurt34]

Audimee bietet Stimm-Models, einige kannst Du für wenige Minuten gratis testen. Tipp: eigenen Probegesang auf wenige Sekunden begrenzen, keine komplette Spur einfach hochladen. Dann ist die Zeit schnell weg.
Mit einer Schiebefunktion kannst Du auch Deine Stimme mit einem Voicemodel zu einer neuen Stimme kombinieren. Diese Funktion ist aber erst ab einer Bezahlversion möglich.

Suno hat eine Beta-Version für Uploads. Der Gesang bleibt dann sehr nah an Deiner Melodie-Vorgabe. Nachteil: privat use only! Die Stimme ist fast immer gedoppelt, schlecht zu isolieren und nicht für zwei Songs als "Sänger" wiederholbar, schlecht für ein Album.

Wenn Du Deine Musik verkaufen/verbreiten willst wäre ich beim KI-Einsatz ohnehin rechtlich vorsichtig.

Der längere Weg ist einen Sänger oder eine Sängerin zu suchen, z. B. bei Chören oder hier auf recording; ruhig einmal eines Deiner Projekte hochladen.

 

[Joost]

du kannst auch einfach vocoflex benutzen von dreamtonics um die stimme zu ersetzen dass gibt es als plugin für pc.

Genau. In diesem Fall solltest Du das dann auch nur mit Deiner eigenen Stimme machen, den Vocoflex baut in jedes erzeugte Audio eine digitale Signatur ein, um Nachverfolgbarkeit zu erlauben. Zumindest hatten sie bei der Beta des Produktes einen solchen Passus.

 

[Schludi]

Hier hatten wir so was auch mal diskutiert:

https://recording.de/threads/stimme-mit-ai-von-einer-person-imitieren-und-diese-singen-lassen-yt-beispiel.258201

Du kannst also folgendes machen:

• SUNO AI Song generieren lassen - Aufwand 1 Klick + Befüllen einer Textbox
• STEM Separation anwenden (z.B. mit splitter.ai oder https://www.lalal.ai/) - Aufwand 1 Klick
• Ein Modell mit Deiner Stimme trainieren. - Aufwand mit einiger Experimentiererei vmt. ne Woche - siehe meinen Link
• Den Stem mit deiner Stimme durchjagen - Aufwand 1 Klick
• Die Stems wieder zusammenmischen und Audio-Export