Workflow Cómo empezar... ¿Por dónde comienzo?

ArunSocket9

Lurker
Registrado
29 Mar 2022
Mensajes
106
Puntos de reacción
0
Me interesa crear primero unas fotos, y luego quizás unos videos, replicando imágenes y videos que ya tengo, pero todo esto es nuevo para mí. Todavía no quiero registrarme en un sitio de pago. Empezando con cosas como fotos de pies y upskirts. ¿Dónde podría probar y crear material fotorrealista?
 
Si no te interesa suscribirte a un sitio de pago, tienes las opciones gratis, pero si quieres crear las tuyas en local (usando solo el hardware de tu PC) PRIMERO NECESITAS el hardware, idealmente algo de Nvidia con al menos 12 GB de VRAM (que no sea una 3060).

El mejor lugar para empezar es usar Google Ai para que te vaya guiando. Yo aprendí todo en unas semanas: cómo crear imágenes, cómo hacer un LORA y cómo hacer un personaje de IA con función de texto a voz, todo con Google AI. De hecho, también puedes usar Google AI para ayudarte a armar una guía de IA con el software que estés usando.

Tiene esa paciencia infinita que necesitas y puede explicártelo todo para que lo entiendas, porque hay muchísimas cosas en las que meter la cabeza, como las Temperatures y los Lora's secundarios para ajustar el detalle. También te puede dar enlaces directos para Command Prompt para descargar todo lo que necesitas, sin tener que ir a buscarlo y descargar por error la versión equivocada, lo cual ahorra tiempo.
 
¿Te refieres al modelo de 10gb en vez de la 3080 ti de 12gb, si mal no recuerdo? La 3080 está bien para empezar, ya que hay mucho disponible para arrancar que cabe en una GPU de 8gb de VRAM, así que tener 2gb extra ayuda bastante.

Definitivamente puedes aprender mucho y divertirte con una 3080. Es un buen punto de partida, porque si trabajas dentro de tu VRAM, o bien sabrás tras la etapa inicial de aprendizaje que una GPU de 12gb (como una 5070) te sirve, o si te cuesta un montón encontrar lo que necesitas en un modelo pequeño, esos 12gb de VRAM tampoco te servirían, así que tendrías que subir a una 5070 ti de 16gb de VRAM. Lamentablemente hoy en día hay una gran diferencia de precio.

Aunque hay un MONTÓN por aprender y en qué meterse a fondo. Por ejemplo, un modelo de 7.5GB cabe en los 8GB de VRAM que tiene una 3070, pero la interfaz y el backend también consumen VRAM, y llenar de más la VRAM mata la capacidad de respuesta.
 
tengo una pregunta que no tiene que ver. ¿Cómo generan la misma cara y cuerpo en cada prompt como esos perfiles de IA? ¿Hay que armar y entrenar un LORA?
 
Sí, pero sitios/apps como Kling se ahorran tener que hacer LORAs simplemente usando imágenes de referencia. Supongo que sus algoritmos están muy entrenados para captar detalles faciales, pero para uso casero, para generar una imagen sin referencia, con una cara y un cuerpo consistentes, necesitarías armar una LORA.

Aunque no entiendo qué significa "entrenar" una LORA, ya que no aprende ni necesita entrenamiento. No le puedes dar feedback para que se corrija. Solo le pasas imágenes para que trabaje con ellas. "Armar" una LORA, en cambio, es relativamente simple: consiste en imágenes de tu sujeto desde tantos ángulos como sea posible.
 
Hola gente, ¿alguien tiene recomendaciones de software y modelos que den resultados decentes con una 3070 Ti de 8GB y que valgan la pena para crear imágenes y videos cortos como this, en 3D o fotorrealistas? ¿Debería usar ComfyUI o hay herramientas más simples en GitHub que den buenos resultados?
 
ComfyUI es la interfaz más complicada y manual que puedes usar. No es un buen lugar para empezar siendo principiante, porque tienes todas las opciones a tu disposición para ajustar y por lo tanto romper; al principio es bastante abrumador.

Empieza haciendo imágenes, usando Stable Diffusion y algo como Fooocus, y experimenta hasta dónde puedes llegar con eso.

Sobre todo con una 3070ti y 8gb de VRAM. Experimentar va a ser lento, así que aprende lo básico primero y empieza de a poco. Todavía no he empezado con la creación de video, pero verás lo desastrosas que salen tus imágenes al principio, con dedos y ojos deformes, etc.; con los videos será lo mismo.
 
Bueno, lo más fácil que he encontrado es con Runpod. Hay un usuario en civitai que tiene una plantilla de runpod que deja todo listo. Solo tienes que meter una imagen, cambiar algunos ajustes, agregar algunos loras, escribir tu prompt y ejecutar, y ya tienes un video de alta calidad. La plantilla se llama Yet another workflow. Tiene una guía completa y también una guía en video. He estado sacando resultados decentes y me parece que H3 responde sorprendentemente bien a prompts mejorados. Literalmente le escribí el prompt como a grok y salieron resultados más o menos - por ejemplo con una foto inicial de la cara de una mujer: corte instantáneo a nueva escena, ella está acostada en la cama completamente desnuda abrazándose las rodillas, tetas grandes rebotando, pov un hombre la está cogiendo en misionero, le mete la verga bien profundo mientras ella gime y mira al espectador.

Estoy sacando muy buenos resultados así, aunque con un prompt bien hecho se pueden lograr resultados mucho mejores, sobre todo con varios planos
 
Acabo de cumplir 6 meses de autoaprendizaje.

Hay dos sitios gratis que conozco y que me gustan porque hacen lo que yo quiero... pornworks y perchance. Son bastante precisos y potentes, ojo, siempre que aprendas a escribir bien los prompts. Ese fue mi primer paso. Cuando logré que las webapps online me dieran lo que quería, me sentí satisfecho con ese avance. No digo que no haya más que aprender, hay montones, y yo apenas estoy empezando, así que uso oraciones básicas bien escritas para describir la idea general en una o dos frases. Después pongo los detalles y uso palabras clave separadas por comas, por ejemplo.

Luego quise aprender más sobre la parte técnica, así que conseguí una EVGA GTX 1080TI usada en eBay por 150 dólares. Funciona perfecto para modelos pequeños y mantiene mi presupuesto bajísimo. No le veo sentido a pagar más del precio de venta por mucho que una GPU sea buena o de una generación nueva. Usé LUMO como ayuda, haciéndole las preguntas (que yo creía que eran las buenas) que necesitaba para aprender lo que intentaba hacer. Tengo 32 GB de RAM, todo DDR4, baratísimo. NVME para que el sistema vaya rápido, pero uso discos extra para guardar los modelos grandes y el respaldo de LoRAs.

Ya con el hardware, me puse a aprender sobre los LLM y cuáles eran los términos que tenía que aprender, conocer y entender para guiarme dentro del "ecosistema". Ojo con el alcance: por ahora solo estoy aprendiendo generación de imágenes, así que mis preguntas son bastante específicas. Pero en realidad empecé con LLM de texto: corro LM studio en local, con un buen modelo que es genial en matemáticas y ciencia, registros históricos, etc., y además programa y lo hace MUY bien. Estoy usando el modelo Qwen3.5 9B Uncensored HauhauCS Aggressive, por si les interesa. Creo que es suficiente para empezar.

Con eso y LUMO pude aprender qué son los frameworks, workflows, nodos, comfy UI, local vs no local, la diferencia entre LLM de generación de texto y modelos de generación de imagen... Cuando tuve una idea básica, vi videos de youtube durante un mes más o menos, solo para ver qué hace la gente, y la verdad aquí no me sirvió mucho porque la mayoría de los que hacen guías tenían videos muy viejos o el software cambió y me salían errores si los seguía, y más importante, eran demasiado avanzados y no explicaban los conceptos básicos, simplísimos, que a mí me faltaban.

Así que seguí con los LLM de texto, instalé comfy UI y cargué mi primer modelo de RED-CIVIT.AI, que era un SD 1.5, para mantener todo pequeño y fácil para mi GPU y también para el workflow. No es tan abrumador como pensé al principio, pero solo porque me quedé con los mapas (o sea, workflows) más básicos. Uso solo los nodos necesarios y no tengo nada sofisticado. Tampoco tenía expectativas de lo que iba a obtener como resultado. Simplemente fui resolviendo bugs, problemas de software e instalación, aprendiendo cómo funciona todo, usando LUMO sobre todo porque puede acceder a la web y está más actualizado: consigue las últimas actualizaciones de software, parches, cambios, etc.

La mayor parte de mi tiempo hasta ahora la pasé en crear bien los entornos en mi computadora y mantener todo organizado. Cuando tuve funcionando la configuración más básica, pude empezar a aprender sobre los nodos y los bugs que me salían al copiar el workflow de otra persona (eso fue una pesadilla si es complejo, por cierto), así que seguí usando LUMO para salir adelante, usando solo los nodos necesarios para generar en SD 1.5. Tengo como 5 u 8 nodos o algo así, si no me falla la memoria, ehh, el que lleva la lora creo. ¿Quizá 6 nodos solo para texto a imagen? Ahora no puedo mirar, porque justo en este momento estoy entrenando una lora. :D

Siguiendo, cuando dominé SD 1.5, pasé a aprender más sobre los distintos modelos, qué son las LORAs, y los estilos o temáticas. En Civit.AI es muy fácil ver lo que te llevas y lo tienen bien organizado, así que me quedé ahí para eso. Descubrí qué modelos y loras funcionan con mi GPU, empecé a descargar unos cuantos modelos de los pocos arquetipos distintos que existen: tengo pony, krea2, SD 1.5, SDXL, Illustrious, y así sucesivamente, y de cada uno bajé unas pocas loras, solo unas pocas, manteniendo los directorios limpios y ordenados en un VENV funcional (esto es para python en linux).

Luego aprendí y guardé los workflows más básicos para cada tipo de modelo: con / sin lora, con / sin imagen de entrada junto al texto. Así que ahora puedo usar cualquiera de esos modelos con y sin loras para generar una imagen a partir de texto. Sin olvidar que también aprendí distintas formas de controlar el resultado, como UNET, text encoders, vae y nodos personalizados.

Después quise entrenar una lora de personaje, así que me puse con eso, usando LUMO otra vez como guía porque tiene acceso a internet e información actualizada. Instalé el framework de entrenamiento kohya_ss y lo puse a funcionar, con árbol de directorios organizado, etc... y esta mañana estoy procesando mi lora de personaje V2. Esta mañana usé por primera vez mi propia lora, la que entrené toda la noche de ayer. Tardó 10 horas. Nada mal, pensé. Entonces volví a preguntar cómo puedo mejorarla después de probar y usar esa lora. Funciona al pelo, pero es potente, demasiado potente de hecho, y tiene poca flexibilidad.

Haciendo unos ajustes al comando de entrenamiento inicial, ahora estoy corriendo un entrenamiento para producir una lora más flexible pero con el mismo dataset.

Eso es algo que no mencioné, pero tuve que aprender a crear y procesar un dataset antes de entrenar la lora... es parte del proceso. Claro que hay infinitas formas de hacerlo, pero elegí un enfoque simple que me enseñara los conceptos básicos, y además uso CLI y no GUI para ganar más experiencia con la terminal. Es más fluido y controlable, con ajuste fino, pero un poco más complejo de configurar al principio. Se puede usar windows y kohya_ss, pero es una GUI y NO uso windows, hace más de 10 años que no. No pienso volver.

Dicho esto, estoy muy contento con mi progreso, porque no escucho los malos consejos de otros sobre usar la IA como guía. Les pregunto a la gente y todos parecen tener opiniones bastante negativas sobre la IA y entiendo por qué, a mí tampoco me gusta mucho usar las granjas de IA de la industria porque gastan un montón de electricidad, prefiero usar lo local cuando puedo. Solo no se rindan, usen una herramienta, aprendan bien a usarla y sigan agregando herramientas a su caja. Tomen en cuenta todo lo que alguien les diga y no sean prejuiciosos, porque pueden perderse algo que les serviría si simplemente no hubieran mirado para otro lado.

Van a encontrar lo que les funciona a ustedes, y ese es mi consejo.
Editado por gramática u ortografía, etc.
 
Wow, qué impresionante. Yo ni sé cuántas horas me he pasado tratando de aprender cosas para correr programas de IA NSFW en local en mi PC, pero entendí como la mitad de las palabras y el 5% del contenido. Aparte de descargar y probar muy por encima un montón de los programas principales (ollama, intenté montar un chat NSFW sin censura tipo crushon o juicychat y me tomó 5 horas conseguir una versión muy mala y rota de 1 chatbot jaja), no llegué a ningún lado con LM Studio ni Comfyui, etc.

Lo más lejos que llegué fue a hacer unos faceswaps bastante buenos, usando FaceFusion a través de Pinokio. ¿Qué chance hay de que no te moleste ayudar a un tipo medio lento y negado con la IA (con una PC decente) a averiguar cómo instalar y usar todo esto? Lo que más quiero es editar fotos que ya tengo de forma NSFW/sin censura, y generarlas o hacer videos sería solo un extra. Del tema de los chats ni hablo por ahora jaja.
 
Atrás
Arriba