Recherche logiciel IA "deepfake" très spécifique

deja pour gouter , il faudrait investir un temps considérable, et comme les IA ne sont en géneral pas gratuites, il faut aussi un budget conséquent.
Il y a aussi des specialistes qui travaillent tout le temps avec le meme outil, ce qui se comprend pour les meme raisons.
En plus il y a pas mal de mouvement dans ce domaine, chaque mois voit venir un nouvel arrivant, et certains sites disparaissent sans prévenir, sans compter qu'un meme site peut drastiquement évoluer en proposant de nouvelles fonctionalité ou des modeles améliorés.
En partant sur Kling et sur Heygen, tu as ce qui se fait de mieux et ce depuis un moment, mais evidemment sans etre a l'abri de surprises.
Donc trouver quelqu'un qui a une large vue des produits disponibles et qui peut les comparer, c'est pas forcément evident, et meme la, leur opinion peut-etre plus ou moins fortement biaisée.

Donc je conseille fortement de faire le plus vite possible ses propres expériences en commencant a un bout, puisqu'il faut bien commencer quelque part.
Le petit projet de notre ami lock2 semble assez bien adapté, pas trop de prétention, taille raisonnable, permettant un investissement en temps et en argent pas trop important.
Après , on verra le résultat.
une fois qu'on a trouvé une méthodologie qui fonctionne selon ses moyens et ses buts, on peut choisir de s'y tenir, ou au contraire d'aller voir si l'herbe est plus verte chez le voisin.

 

j'ai essayé d'obtenir une video de 5 sec de notre princesse africaine (2ieme version) avec le prompt
"a black african princess is saying "happy birthay Mister president, poo poo pidoo""
mais ca fait bien 30 min que c'est en file d'attente (temps estimé, plus d'une heure)
L'outil est donc pas forcément super rapide si on décide de l'utiliser en version gratuite (ce que je fais),
ce qui peut devenir fatiguant si on a besoin d'une tripotée de petites séquence et qu'il faut les refaires plusieures fois.
mais bon, plus d'une heure après , elle est quand meme sortie
test kling - YouTube

On voit bien qu'il n'y a aucun problème avec les mouvements de la bouche.
Si on veut un lipsync parfait, on peut fournir au fichier audio, mais je pense que si la video de reference pour le mouvement contient la piste son, on arrive au meme resultat.
Pour ca on aura interet a filmer la video de reference avec les paroles, mais sans musique (avec des ecouteurs discrets par exemple pour etre synchrome avec la musique). Ca sera plus facile pour le decoupage (sur un passage silencieux si possible)
Heygen est très performant de ce coté, plus que Kling, mais ca peut le faire dans Kling, surtout que Heygen est particulièrement cher a l'usage.

c'est toute la difficulté avec l'IA, tout créer a partir d'un prompt est beaucoup plus facile que de devoir coller tout ou partiellement a une réalité (son ou image) existante.
C'est pour ca que la méthodologie doit etre bien pensée dès le départ, pour concevoir des éléments directement utilisables et pas devoir lutter ensuite contre un outil rétif qui va vous emmené dans une direction qui n'est pas celle voulue.

 

Je vous souhaite bon courage à tous les deux.

PS : mais s'il vous plaît, publiez-nous le résultat, ici, si vous vous en trouvez soulagé, mais dans la rubrique "Festival du Repaire" si vous en êtes content ou fier.

 

Pucés ! depuis que nous connaissons Laetitia

 

Il semble que si ... il est sur Artlist...

C'est bien là tout le pb de l'IA...une dépendance ...mais bravo pour ton expérience et ton obstination à répondre au sujet.

 

Je ne donne qu'un avis personnel qui n'engage que moi ...

Artistiquement, au lieu d'utiliser de l'iA générative (il y a de nombreuses formes d'iA), je pense que j'aurais essayé de faire l'effet manuellement d'abord.

En fait, le morphing donne un effet de transition. Donc quel effet de transition rendrait le résultat de l'impression de transformation au spectateur ?

On peu essayer avec des prismes devant l'objectif avec un bras magique, avec des verres à facettes ou kaléidoscope qui se trouve à quelques Euros sur le net ou en chinant.
On peut utiliser sur ces images des transition existante à améliorer avec Fusion ou AE
On peut aller plus loin avec des VFX, comme l'ffet de particules etc.

Si tu prends des références cinémas, le morphing existe depuis des années. (The Mask, Lucy, Willow ...)
Tu auras quelque chose d'unique, la satisfaction d'avoir réalisé par toi même. Rien n'empêche d'utiliser quelques outils d'iA comme aide, plutôt que de chercher l'iA qui va produire le résultat que veux, ce qui est, à mon avis, illusoire.

 

maintenant on va juste voir si notre ami a vraiment envide de realiser ce qu'il a dit ou si c'est seulement un reveur. Je comprend que pour un débutant ce soit un peu difficile au début, mais dans ce cas de figure, l'investissement (temps , argent , effort) est pas singulièrement important.
Sur youtube , tu trouves déja des films entièrement réalisé a l'IA (qui sont vraiment a ch..r, c'est inregardable) qui durent 1h30.

 

Bonjour à tous les participants,

Et non, je ne suis pas parti comme un voleur. C'est juste qu'hier j'étais trop pris pour poster quoique ce soit. Surtout qu'avec moi c'est bien souvent des pavés, comme ça va être le cas ici encore j'imagine.


À Giroudf: Non je ne suis pas un rêveur qui va laisser tous le monde en plan. Déjà parce que j'ai un devoir de moral vis à vis de toi (et de certains autres) qui m'ont appris bien des choses en plus d'apporter bénévolement leurs aides. Puis aussi, parce que ce projet me tient tellement à cœur que je ne lâcherai pas tant que l'on n'aura pas trouvé une solution à mes besoins.

Ceci étant dit je vais repartir sur l'idée de l'outil en ligne «Kling» et non-pas "Artlist", dont je confirme les propos d'un autre membre, qui était en fait le premier lien que tu m'avais passé et qui ne pointait pas sur «Kling». L'erreur est humaine, ça arrive à tous le monde sans exception. Ton second lien est le bon.

Je mis suis donc inscrit gratuitement, et jusque là pas de problème concernant l'arborescence du site (version portable) de la toute première capture d'écran que tu m'as fait. J'ai suivi scrupuleusement tes consignes, puis j'ai appuyé sur l'icône avec un gros "+" au dessus et avec la mention «Image/Video" en dessous. Ensuite il me propose plusieurs options dont «Video-upload» qui - en toute vraisemblance - semble être le bon choix. Après en effet, il me propose de me rendre dans la photothèque (ne pas oublier que je test sur un iPhone 15) qui porte très mal son nom d'ailleurs puisque que l'on peut y mettre des vidéos tant qu'elles sont au format mp4 ou mov.
Du coup en ayant choisi cette option j'ai bien accès à mes vidéos dans photothèque.

Pour en faire un test essai gratuit je n'ai pas choisi la vidéo originale de moi qui fait 27s car je suis au courant des limites surtout quand il s'agit de tester avant de passer à la caisse.
Dès lors j'ai choisi une version cuté à 8s. Le transfère se fait proprement. Ensuite j'ai copier/coller un prompt à côté du @video sur fond mauve et sur la même page. Pour la trad automatique - pour ne pas changer - j'ai utilisé le site DeepL du français vers l'anglais (américain). Et c'est là, à partir du moment où j'appuie sur «Generate» avec un nombre de jetons à côté; où j'ai le droit à un message plutôt long en anglais qui me fait comprendre qu'en l'état c'est mort, puis me redirige naturellement vers leurs différentes offres:

Offres qui, au passage ne me semble pas excessivement chères compte tenu d'un exemple dans l'un de tes poste en page une où on peut voir l'image source d'une femme blanche de peau, cheveux long et habillé d'une certaine manière, et pour en définitive, en arrivé à un résultat que j'estime "bluffant" en tout cas pour mon usage, où la femme initialement représentée devient noir de peau, mais pas seulement. La morphologie du visage est complètement différente et est tout à fait en phase avec la morphologie d'une femme noir de type "subsaharienne" et avec les cheveux crépus qui vont avec + l'accoutrement changé également grâce à ce que tu as mis dans ton prompt.

J'ai fait trois captures d'écran, dont la second avec le petit pavé en anglais que je n'ai pas eu le temps de traduire automatiquement car défile un peu trop dans le speed mais qui doit forcément expliquer où est-ce que ça a bien pu merdé. Tout en sachant que je n'ai pu faire AUCUN essai jusqu'à présent. Et même qu'en jouant sur les paramètres tels que baisser la résolution à 720p et limité le rendu à 3s au lieu de 8s pour faire baisser le nombre de jetons, ne change strictement rien avec toujours le même message en anglais.

Sans plus attendre voici les trois captures d'écran dans l'ordre chronologique des opérations:





Pourrais-tu m'éclairer sur point stp, en tout cas pour l'instant ? Car j'ai d'autres questions avenir à soulever et aux quelles je penses qu'il sera aisé pour toi d'y répondre vue que tu sembles utiliser Kling à ton essence.


Bien à toi ainsi qu'aux autres (sauf ceux qui m'ont vannés ^^)


PS: la 3ème capture d'écran ne passe pas (limitation du forum je suppose) mais de toute façon il ne s'agit que de la page des différentes offres qu'ils proposent avant de sortir la CB.

 

apparament, Kling est trop occupé avec ses membres payant pour attribuer de la ressources gratuite.
tu n'y peux rien a par prendre un abo.
Essaie aussi le matin ou le soir, le matin chez nous par exemple , les ricains dorment, alors Kling est peut-etre plus dispo.

par contre , faire ca depuis un smartphone, c'est pas top. Essaie depuis un PC, parce que l'interface Kling est touffue, donc ca doit pas etre pratique sur un petit ecran.

Ton prompt par contre est pas très bon.
On decris ce qu'on veut, pas besoin de dire " le gard devrait ressembler a un jamaicain".

on dit "un jamaicain , peau noire, cheveux crépu, portant des sneakers blanc et des jeans bleus"
on peu raffiner avec la coupe de cheveu, parce qu'en un rasta et une coupe afro, il y a pas mal de différence.
un petit tour sur google image pour trouver une image qui te convient et après sur un site IA qui te donne la définition.

par exemple

donne :
"A young man with a large afro and a warm smile is captured in a headshot against a textured background.
The composition is a straightforward, centered headshot that focuses entirely on the subject, with the background providing a subtle contrast without distraction. The framing emphasizes the man's face and distinctive hairstyle, drawing the viewer's attention directly to his expression and features. There is a sense of direct engagement as he looks towards the camera.
The key subject is a young man of color with a voluminous, dark, and curly afro hairstyle that frames his face. He has a medium complexion, dark eyes, and a neatly trimmed mustache and goatee. His expression is one of genuine happiness, conveyed by a wide, open-mouthed smile that reveals his teeth and crinkles the corners of his eyes. He is wearing a casual, dark blue denim button-down shirt with the collar slightly unbuttoned. His pose is relaxed, with his shoulders slightly sloped, contributing to the approachable and friendly demeanor.
This image appears to be a photograph, likely taken with a digital camera. The technical execution is competent, with good focus on the subject and appropriate exposure. The style is naturalistic and candid, aiming to capture the personality of the individual. There are no overt artistic stylizations, suggesting a focus on realism and authenticity. Creative choices include the framing and the slight upward angle of the shot, which can add a subtle sense of dynamism.
The setting is a simple, close-up portrait against a background of stacked, light gray rectangular blocks that resemble brickwork or a textured wall. This background is softly out of focus, creating a shallow depth of field that makes the subject stand out. The lighting appears to be soft and even, illuminating the man's face from the front, minimizing harsh shadows and highlighting his features and the texture of his afro. The overall atmosphere is positive and inviting, driven by the subject's cheerful expression and the clean, uncluttered presentation."

du coup tu prends la dedans ce qui te convient, vaut mieux faire court.
Mais non seulement ca peut donner des idées, mais aussi le vocabulaire qui te manque.

tu n'a pas décrit non plus la chemise, ni l'age, et specifié que c'est un homme peut pas faire de mal.
Quand au mouvement (il marche, il danse ?), au mouvement de camera, au cadrage, ca peut faire aussi partie du prompt. C'est pas parce que tu donne le mouvement dans une vidéo que l'IA sait si c'est un gars qui commande un macdo ,qui chante un opéra ou qui engeule sa femme. Du coup ca peut aider de donner le contexte.
Manque aussi la définition du background , dans ton cas, demander un fond neutre.

Faire un bon prompt ca aide a generer moins de vidéo, ca sauve la planète et accessoirement des jetons gratuits et du temps.

 

Ok et merci infiniment Giroudf pour l'explication qui justifie ne pas pouvoir faire d'essai, en tout cas actuellement. Mais je viens de faire un essai ce matin (mercredi 18) à 07:15 et après réitération de la même manip avec un prompt anglais amélioré comme largement suggéré dans un de tes précédent post, In Fine ce n'est plus une histoire de ricains qui se connectent trop sur les serveurs en journée, mais bien un message de Kling qui - après avoir appuyé sur «Generate» - me dit dans un anglais à ma porté que je n'ai pas assez de crédit/points pour faire pour la première fois un pauvre essai de 8s (pour rappel) même en diminuant le nombre de crédits en m'étant en 720p au lieu de 1080 et en limitant ma vidéo à 3s au lieu de 8.

En partant de là, je vais naturellement te posées BEAUCOUP de questions pour les quelles il nécessitera pour chacune une réponse. Je pense que tu puisses comprendre ma position dans la mesure où là je n'ai pas d'autres choix que de lâcher un billet plus ou moins à l'aveugle. Si tu parviens à répondre dans le détail à chacune de ces questions, normalement il n'y a aucune raison que je te sollicite de nouveau pour un échange interminable où je suis conscient que cela te prend un temps précieux pour toi, dans la générosité d'aider un simple débutant comme moi. Encore plein de merci rien que pour ça, et maintenant place aux dernières questions tout du moins si tu te sens en mesure d'y répondre en fonction de ton temps libre, pour ne pas dire "ta vie privée" sur laquelle je ne souhaite pas empiéter. Donc avant de t'aventurer à lire chaque point, scroll ce qui sera de toute façon un pavé, et seulement après c'est à toi de te concerter avec toi-même avant de te lancer OU non dans toutes les questions interminables qui vont suivre. Si tu manque de temps, d'envie de t'investir bénévolement à ce point; ne t'inquiète pas, je pourrais tout à fait comprendre un refus.


D'ailleurs, je penses qu'il serait préférable de me dire avant toute chose si tu te sens prêt pour une bonne dizaine de questions et remarques où chacune fera l'objet d'un TRÈS LONG développement. Si je préfère te prévenir et te demander ça à l'avance, c'est pour éviter de mon côté de taper "un roman" dans le vide.

Merci par avance pour ta réponse. Qu'elle soit de nature positive ou négative, même dans ce dernier cas de figure je n'aurais aucune animosité à l'avenir te concernant car tu m'as déjà beaucoup aidé par le biais de conseils forts instructifs, comme c'est d'ailleurs plutôt dans ton habitude dans quasiment chacune de tes interventions avec chaque membre sur ce forum.


En l'attente de ta réponse, bien à toi.

 

Il faut que tu rédiges bien tes prompts à l'Hi giroudf pour consommer moins de tocken sur l'IA Kling.


Juste mes 2 cents dans la machine :
1/ Entre ce que tu veux faire et ce que la GenAi te donnera en retour, il y aura toujours un écart même avec le prompt le mieux rédigé du monde. Cela veut dire que tu auras toujours des itérations à faire

2/ Si tu as l'intention de générer 2-3-4 images sur le même modèle, il y a aura toujours des écarts ou des incohérences entre les générations de clips. Cela veut dire encore pas mal de prompts pour essayer de les réduire.

3/ Il faut absolument donner des images In et Out finies pour réduire les erreurs. Si tu les génères en Ai, tu vas augmenter le nombre de prompts nécessaires. Ma recommandations c'est d"utiliser Photoshop si tu as la dernière version pour cette étape.

4/ Attention à la qualité en sortie. Si tu veux de l'UHD ou de la 2K pour zoomer ou recadrer au montage, il faut absolue prendre un abonnement plus chère que la base.

4/ Le temps de génération de 6 secondes de vidéos prend pas mal de temps. Donc il faudra prendre ton temps. Une image se génère vite, un vidéo de quelques secondes se génère en dizaines de minutes.

C'est le business model de l'IA, faire consommer du prompt.

 

tu devrais commencer par le commencement
-faire ta video qui va donner les mouvement et les positions du corps, dans le bon format (vertical ? horizontal ?) avec le bon cadrage, sur un fond neutre, uni.
-tu decoupes ensuite cette video dans les morceaux indiqués (quelques secondes pour chaque personnage, avec une sequence de transition de 1 ou 2 secondes pour la transition), en les numérotants pour s'y retrouver.
Si tu décides de te simplifier la vie avec un simple fondu, tu fais simplement des bouts qui se recouvrent d'une demi.seconde)
si tu a 90 secondes de video, et 10 personnages, ca va te faire des bouts de 8 sec + 1 sec de transition.
Tant que tu restes sous les 10 secondes, ca devrait etre ok.

Ensuite pour chaque bout, tu generes une image de l'ethnie/apparence désirée a partir de la premiere image du bout en question.

Deja la, ca te fais pas mal de boulot.

quand tu auras tout ca, tu pourra commencer a generer la premiere video.
jusque la, ca devrait rester gratuit.

Il me semble que Kling te donne des crédit au fil du temps (genre 1 credit par jour).
donc le temps que tu fasses tout ce boulot de préparation, il devrait y avoir assez de crédits accumukés pour génerer la premiere video.

Si tu veux pas payer tu peux lancer une oeuvre collaborative sur le repaire, ou des gentils membres iront s'inscrire pour obtenir un compte gratuit, charger la video, l'image et le prompt que tu leur auras fourni. Il passeront un bon moment a apprendre quel que chose de marrant et tu profiteras du résultat.
juste une idée en passant