IA, de nouveaux outils audiovisuels à découvrir ... et tester ?

bon, je sais pas si ca valais le coup d'acheter deux 3090, mais on rigole bien.
la semaine prochaine j'essaie de faire un modele (fichier .ckpt) avec un collègue pour pouvoir générer des image specifiquement de lui.
il faut une trentaine de photos et le module dreambooth qui est intégré a Stable Diffusion.

Comme ca on peut taper comme texte: un portrait de GérarP68 dnas le role de rambo .peint par picasso.
ou n'importe quelle autre style, du manga a vangogh.
Après reste plus qu'a lui imprimer un T-shirt

un exemple:a portrait of Donald Trump in a startrek costume

Bon allez, j'arrete de pourrir le forum avec des images a la con

 

pour la config, je sais pas trop, j'essaie ca sur mes nouveaux Pc qui sont pas des betes de course, mais en tout cas récents. Et ca tourne nickel, une image est facilement crée en 2-3 secondes.
et pour le DeepFake, ca tourne en temps réel sans problème.

carte mère Asus X670E plus wifi
cpu AMD 7900X et 7600X (il a fallu faire des économies vu que j'ai bousillé un 7900X)
ram DDR5 128 gig pour un et 64 pour l'autre.
GPU MSI 3090 (pour les 24 gig de Vram qui profitent bien a l'IA)
tout en SSD M.2 Nvme gen 3 (de la recup) et Gen4 (du neuf), la carte mère supporte 4 M.2
un est en win11 , l'autre en win10.

Je pense qu'avec un GPU pas récent du tout mais avec pas mal de VRAM (au moins 8go, genre une 1080ti), on doit y arriver. En Theorie avec ma 780 a 6 Go de Vram ca aurait du fonctionner, mais non...
Peut-etre qu'en creusant un peu... mais bon de toute facon ca reste une excellente carte pour faire de la video , mais un peu limite pour le VR. Et c'etait dommage d'avoir une vieill carte en PCIe gen3 quand la carte mère est en Gen5 (bien que la 3090 soit en gen4, donc meme avec cette carte je suis pas au max., c'est pour ca que j'ai pas pris une 4090 qui a la meme quantié de mémoire 24go et est aussi en Gen4, donc aucun intéret surtout vu le prix. Mes 3090 je l'ai ai payées 650 euros)

 

pour rester dans l'IA il y a pas que l'image, il y a un nouveau soft qui est sorti, VOICEMOD, pour changer sa voix. Bon , c'est pas terrible, il y a mieux, mais c'est plus cher.
Voicemod Pro (Testing ALL Voices) - 2021! - YouTube

 

une video interessante qui montre comment a partir d'une photo, on peut générer une autre tout en gardant la pose originale du modèle de départ.
Ca montre qu'on peut avec un peu de travail , faire a peu près ce qu'on veut.
Je pense qu'il y a vraiment de quoi en faire une profession a part entiere.
en plus partant de la, on doit pouvoir extraire les images d'une vidéo et regenerer image par image une nouvelle video
Stable Diffusion for Flawless Portraits - YouTube

 

pour ceux qui suivent toujours (mais la je crois que j'ai déjà perdu tout le monde en route),on trouve des bibliothèques safeTensors qui sont adaptées a un sujet ou un style particulier (par exemple dédié a un modele de voiture, de paysage ou un style graphique, une personne connue en particulier (surtout des femmes, mais il y a Macron )

Civitai | Stable Diffusion models, embeddings, LoRAs and more

pratique pour choisir puisque une image donne le ton général

pour essayer (ca coute rien a part un peu d'espace disque)
comment installer Stable Diffusion

 

Avec Stable diffusion
J aime bien générer des portraits avec des défauts, ça donne des têtes assez flippantes, des idées pour des maquillages

 

oui c'est clair qu'il arrive qu'on ait quelques horreurs en sortie.
Pour eviter ca on utilise les prompts negatifs.

ca permet de pas avoir des personnes avec 3 jambes etc...

par exemple tu peux eviter tes visages étranges avec:
cropped, lowres, poorly drawn face, out of frame, poorly drawn hands, blurry, bad art, disfigured, deformed, closed eyes

 

justement pour ce type d image, il ne faut pas en mettre, d ailleurs j utilise aussi souvent des listes de prompt négatifs récupéré à droite a gauche en prompt de base, pour obtenir des bizarreries
genre ça, avec parfois un petit côté Francis bacon

 

(C'est des trucs pour se préparer psychologiquement le matin à aller se raser devant la glace ?
Non parce qu'en voyant çà, je me trouverais presque beau, souriant et rayonnant même si qu'artificiellement).

Au tour de la musique pour les vidéos :


Musique pour vidéos de Monsieur ou Madame tout le monde, on n'est pas à du James Newton Howard, Hans Zimmer, Howard Shore, Fernando Velazquez ou autres hélibrius ...

Mais l'auteur du tuto indique que d'autres logiciels IA existent pour la musique pour vidéos.

(Config informatique non précisée).

Des catas aussi en perspective ? ...

 

Décidemment, il suffit d'accepter de regarder une vidéo pour que Youtube succède les propositions sur le même thème.

Celle-ci pour faire des vidéos sans caméra, sans micro et sans montrer sa tronche en postcast et prendre une voix plus intelligible ou plus jeune, douce et aimable :


Perso, réfractaire comme un gaulois ou plutôt prudent car des usages spécifiques peuvent s'envisager sans trop de danger.

Exemples gentils, un poète n'aimant pas se voir à l'image et parler dans l'poste, déclamer ses poèmes ou tout auteur littéraire, raconter ses courtes histoires.

Sinon, pour promos d'entreprises et pubs, pour JT mais pas si au détriment de l'emploi.

 

oui, tu peux aussi animer un avatar a partir d'une webcam. C'est moins artificiel.

J'en avais parlé il y a quelques années sur le repaire, pour faire des tutos, qui auraient pu etre en plusieures langues.
On aurait eu un avatar "repaire". Perso je préfère un personnage style cartoon.
On pouvait faire ca avec la version PC de snapchat (on peut toujours avec une version "hackée"), et ca marche toujours avec un smartphone.

Snap Camera is BACK! Face Filters for Your Stream - Bing video

 

(Oui, crains après qu'on me reproche de pas être descendu dans les archives et que vous en aviez déjà parlé puis pardon @ipsonelo, le poète déclamerait ses alexandrins).

Par contre, aussi pour le court-métrage ou qu'un storyboard animé, pas mal si on peut monter plusieurs modèles sur différentes échelles de plans et même mouvements. Oui çà, je sais, on en a déjà parlé sur l'exemple au Nikon film festival mais c'était un autre logiciel IA et ia pas d'mal ...