Equipamiento y software
Eso era todo el hardware que tenía. Casi un proyecto sin presupuesto. Más adelante te cuento más sobre la IA que usé.
Instrumentos, tecnología (sin IA)
¡Estoy muy agradecido de poder tocar una obra maestra como esta, siendo un guitarrista ocasional y mediocre! La Bernabé vale mucho más que el resto de mi equipo. Modelo 40, año de fabricación 1992. La compré por aquel entonces. Grabada con dos micrófonos, en el traste 12 (Røde NT1-A) y junto a la boca (Røde M3), a 30 cm de distancia. Grabada por duplicado, es decir, la parte principal en cuatro pistas de audio. Es el único instrumento que suena tal y como se grabó, sin ecualizador, sin reverberación, Bernabé en estado puro.
La habitación de Julian es la que está más lejos de Jonas, que es muy sensible al ruido. Por eso tenía que estar aquí mi estudio de grabación. Tengo su permiso para hacer música allí. Pero él no sabía nada de mis grabaciones. Todas las partes de guitarra clásica y voz se grabaron aquí. Cubrí el suelo de baldosas con mantas e intenté colocar elementos que absorbieran el sonido por todas partes. El objetivo es conseguir un sonido lo más seco posible, que luego se pueda editar de forma específica en el DAW. Siempre hacía fotos antes y luego lo dejaba todo tan ordenado que nadie se diera cuenta de lo que había hecho. ¿Por qué? Échale un vistazo a Proyecto BluJo.
Mi Ibanez de 45 años ha tocado todo esto. Su valor es más o menos una centésima parte del de la Bernabé. Con MIDI Guitar 3 en Reaper he creado señales MIDI a partir de la guitarra eléctrica. A partir de ahí, el bajo con MODO Bass, el oboe en la tercera estrofa con Decent Sampler/Decent Oboe y el sintetizador con Splice/Opia Synth Wave 1 en la parte final. La guitarra eléctrica en el último estribillo con Bogren BDH 66o6 Plus. He retocado mucho a mano. He eliminado los «sonidos fantasma», sobre todo en el bajo, he usado un noise gate en la guitarra eléctrica y he desplazado muchas notas MIDI o cambiado su duración.
Durante dos meses, la parte de batería y percusión de «Smooth Operator» de Sade, que se encuentra en https://www.youtube.com/watch?v=CTJkqlRYzbw, fue el ritmo de mi canción; la descargué de YouTube como archivo de audio y la aceleré en Reaper a 136 bpm. Un groove latino, totalmente seco, sin reverberación. Además, grabé todas las partes de guitarra clásica y la voz en alemán. En https://www.youtube.com/watch?v=oFHLsPumPCM se veía de maravilla —con cinco cámaras— qué golpe se da en qué parte de la batería y cuándo. Lo consultaba una y otra vez cuando tenía dudas. La base del ritmo de mi canción era la bossa nova.
Todos los instrumentos rítmicos tenían que programarse como notas MIDI en Reaper. Primero intenté hacerlo con ReaSamploMatic5000, que ya viene incluido en Reaper. Busqué en Internet durante muchas horas los sonidos adecuados para cada instrumento. Pasé una eternidad afinando y comparando los sonidos de bongó para que tuvieran la altura correcta. El resultado era correcto rítmica y melódicamente, pero sonaba horrible. Luego lo intenté con MODO Drum, que ya costaba 50 €. Un set de batería en el que todas las piezas encajan bien. Pero seguía gustándome mucho más el sonido «robado» de Sade. Al final compré EZDrummer por 219 € y allí seleccioné todo de cuatro baterías diferentes. Hi-hat, bombo y platillo del set TightR, los toms de MainR, la caja con golpe lateral de Jazz y, del set de percusión, dos congas, dos bongos y campanas en la parte final, para el «lluvia de flores». Ahora por fin estaba satisfecho.
DAW son las siglas de Digital Audio Workstation. Al principio tenía la ilusión de grabar la canción con Audacity. Ya había hecho algo con ese programa hace décadas. Pero si quieres sacar algo decente a tu canción, necesitas un DAW y tienes donde elegir. Antes de grabar la primera nota, pasé un mes viendo vídeos en YouTube. Primero, para elegir una DAW, y luego para dar los primeros pasos en Reaper. Mi canción tiene 57 pistas, muchas de ellas solo para efectos cortos. 9 pistas de voz en alemán, 9 en inglés. Cada una en su propio bus, para poder silenciarlas con un solo clic. En la imagen de arriba se ven las pistas de guitarra y voz. Hay un proyecto principal y un proyecto maestro para la masterización final. A diferencia de los programas de diseño gráfico, un proyecto de audio de este tipo se puede crear sin problemas con un portátil normal. De vez en cuando, congela las pistas de plug-ins que consumen mucha memoria y mantén todo bien ordenado.
A diferencia de los programas de diseño gráfico con IA, en los que se crean nuevas imágenes o videoclips a partir de entradas de texto y el resultado suele depender mucho del azar, Davinci es como un kit de cirugía gráfica con el que pude controlar secuencias de imágenes con una precisión de 30 milésimas de segundo y crear efectos complejos con total exactitud. Aquí los resultados nunca son aleatorios. Pero la IA también juega un papel: puedes usarla para mejorar la calidad de vídeos antiguos o usar la Magic Mask, que se convirtió en mi herramienta favorita. Con ella puedes recortar objetos de clips de vídeo e insertarlos en otros clips. Eso sí, es muy recomendable tener un ordenador con procesador gráfico. Mi portátil no tiene. En 60 proyectos preliminares realicé todos los efectos que requerían mucha potencia de cálculo; en algunos casos tuve que hacer proyectos preliminares de los preliminares y, a menudo, los tiempos de espera eran interminables. Guardé los resultados en archivos ProRes de la máxima calidad, que son enormes, pero fáciles de procesar. Aun así, tuve que dividir mi proyecto principal de 30 fps en dos partes para los 6 minutos. Me compré un disco SSD rápido de 1,7 TB por 200 euros. Al igual que en Reaper, en los proyectos principales tenía pistas de audio y texto en alemán e inglés, con un idioma silenciado en cada caso. Las pistas de audio venían directamente de Reaper.
El sonido del viento al principio y al final de la canción lo elegí desde el principio. Hay muchas páginas web con este tipo de sonidos. Muchos se pueden conseguir gratis, aunque yo también compré algunos por muy pocos euros. Sin embargo, al final no utilicé gran parte de ellos. Lo importante es no escatimar donde no se debe. Compré unos soportes para micrófonos y cables de buena calidad. Con Shutter Encoder he redimensionado un montón de vídeos e imágenes, por ejemplo, todas las imágenes de esta web a un máximo de 150 KB en formato webp, la mayoría incluso mucho más pequeñas. Y por estas pequeñas herramientas tan útiles, a veces he donado voluntariamente 10 euros o algo así.
He creado esta página web con WordPress, el editor Gutenberg, los temas Astra y Spectra, y la plantilla Outdoor Adventure. He usado Polylang para que sea multilingüe. ¿Por qué? Pensé: «¿Y si me hacen mil preguntas y no tengo tiempo para responderlas? ¿Dejarlas sin respuesta, cuando me importa tanto llamar la atención sobre el complicado tema del síndrome de fatiga crónica (SFC)?». Esta página web pretende responder al mayor número posible de preguntas, para que yo pueda simplemente remitirme a ella. Y si nadie pregunta, bueno, entonces el esfuerzo habrá sido en vano.
Inteligencia artificial
Así es como acabé convirtiéndome también en actor. Un papel totalmente nuevo para mí. Me grabé mientras tocaba la parte de guitarra eléctrica y Kling AI lo trasladó todo, incluidas mis expresiones faciales, a Dragomir. Pero meterle una guitarra eléctrica en las manos y colocarlo en la posición inicial correcta también me llevó un buen rato. Utilicé este método muchas veces en el vídeo.
Sin la IA, nunca habría empezado este proyecto.
Yo uso la IA como si tuviera aquí a un amigo viviendo. No, a muchos. Todos son autistas con un talento excepcional. Saben todo lo que hay que saber sobre sus temas específicos, pero a veces se lían con las cosas más sencillas. O dan instrucciones detalladas, pero por desgracia tienen en la cabeza una versión anterior del programa. Te das cuenta enseguida y vuelves a preguntar. Y con suerte, así te enteras de cómo se hace según el manual más reciente. – Pero a veces es mejor rendirse y hacerlo de otra manera:
He usado la IA en
• Audio: Audimee de fondo durante unos segundos, mi propia voz una octava más grave. Por lo demás, la canción no contiene IA.
• Búsquedas y preguntas prácticas sobre cualquier tema técnico
• Vídeo: Kling AI y Runway para escenas inventadas y recreadas (suscripciones Pro por 36 y 33 € al mes), funciones de IA de DaVinci
• Texto en inglés: Google, ChatGPT, Claude + DeepL. Durante tres días, compararon mis sugerencias con las suyas hasta que el resultado me convenció. Pero las ideas clave siempre las tuve yo mismo: Just ME —simplemente yo, ya sabes.
Uso de IA en video: ¿dónde?
Uno de los grandes riesgos de la IA es que ya no se pueda distinguir la realidad de la ficción. Es complicado. Casi todas las fotos las hice yo —solo yo— y aparecen en el vídeo sin ningún retoque con IA. Tampoco los vídeos que grabé yo mismo están modificados con IA, salvo por «pequeños detalles». Algo como, por ejemplo, añadir una libélula minúscula en la imagen, solo por diversión. O lo que describo más abajo en el minuto 00:20. Algunas imágenes iniciales de los videoclips generados con IA también son fotos reales. Aquí tienes todas las escenas que se han editado con IA y también explicaciones sobre algunas otras.
Enlace al vídeo 00:00: Andrea y Jonas miran hacia el mar, desde el extremo sur de La Palma, en dirección a El Hierro. Los siguientes 20 segundos los generé con Runway. El motivo por el que de repente aparece un dragón lo puedes ver en JustMe/Dragos.
Enlace al vídeo 00:20 – El dragón se creó en Runway, se recortó con la herramienta Magic Mask de DaVinci y se pegó aquí. Por lo demás, no se ha cambiado nada. ¿Qué fue lo que Julian vio al mirar a su alrededor poco después? ¿Quizás sí que era un dragón de verdad? Quién sabe. – Todo esto no tiene un aspecto muy profesional. Intenté crear otro vuelo de dragón, pero al final lo dejé. Tenía demasiadas cosas que hacer. Como todo el mundo sabe que los dragones no existen, se nota claramente que es artificial. Eso es «arte» —en el sentido más literal de la palabra— y, por lo tanto, no necesita ninguna indicación adicional.
Enlace al vídeo 00:30: Esta es la única escena en la que me he desviado de mi principio de no modificar los originales: la foto ya estaba así de original. Después hice más fotos y también grabé un breve vídeo. Pero ahí los dos ya estaban en el fondo y aún quedaba una nube de polvo detrás de ellos. Eso no me lo podía quedar. ¡Y con el ritmo que le he dado, esta carrera rápida queda simplemente perfecta! Le di a Kling AI la imagen inicial y la final y hice innumerables intentos hasta que me gustó más o menos. Eso fue aún mucho más complicado, tuve que cortarlo en dos partes, pero eso nos llevaría demasiado lejos aquí. Pero te lo juro: ¡así es exactamente como bajaron corriendo en su momento!
Enlace al vídeo 00:39: El fondo es la imagen inicial del vídeo (00:00). He «teletransportado» a Andrea y Jonas con Kling AI y he hecho que Dragoblew entrara volando. Me llevó una eternidad, sobre todo ajustar los cinco golpes de Dragoblew a la canción con una precisión de 30 milésimas de segundo. Pero ¿no son bongos lo que se oye ahí en la canción? Exacto, son los toms. PERO: He añadido cinco golpes de bongos en paralelo solo para eso (notas MIDI de EZDrummer, set de percusión en Reaper). Están ahí, aunque no puedan hacerse oír por encima de los ruidosos toms. Más detalles sobre Dragoblew en JustMe/Dragos.
Enlace al vídeo 00:46: En la primera estrofa no hay nada modificado con IA. Las cuatro fotos del principio las hice el 20 de junio de 2013, una tras otra. Y también la de después, en el columpio. Todas las fotos solo están «recortadas» y «animadas». Los efectos de entrada, zoom, etc., son funciones estándar sencillas de Davinci Resolve. Pero aun así lleva mucho tiempo hasta que encaja con la música. Sobre todo para mí, que soy principiante en la edición de vídeo.
Enlace al vídeo 01:21: Esto es solo para rellenar, porque ahí no hay texto. Solo soy yo, recortado con Magic Mask en Da Vinci. La imagen original la animé en Kling AI para que las nubes se movieran. En el original se veía exactamente así, y de cerca era aún más impresionante. Como una lluvia de nubes que se disuelve en la nada. Podría quedarme mirándolo durante horas. En la realidad, me habría sentado al revés para disfrutar de las vistas.
Y sí, no parece una grabación de verdad, ni tampoco es esa la intención. Solo es una broma. No me dio tiempo a añadir una sombra para que pareciera más real. Por supuesto, yo también interpreté esa parte durante la grabación, con la canción de fondo a 136 bpm. Poner las nubes en movimiento, sincronizar los movimientos de la boca exactamente con la música… todo eso ya fue bastante complicado.
Enlace al vídeo 01:35: Imagen de inicio real proporcionada y generada en Kling AI. – Además de la música y las excursiones por las islas durante las vacaciones, los juegos de mesa son mi mayor afición. Y también en lo que más tiempo he pasado en mi vida, aparte del trabajo y dormir. Les he contagiado esta afición a mis hijos. El azul siempre es mi color. Con el amarillo le estoy tomando el pelo a Julian. Por desgracia, casi no tenemos fotos de todas esas horas que pasamos jugando. Por eso monté el tablero especialmente para estas escenas. Julian y yo seguimos jugando a «Zug um Zug» a menudo, sobre todo a su propia variante de «El Señor de los Anillos».
Enlace al vídeo 01:46: Durante una excursión cerca de Friburgo. Julian mira así de verdad, no hay nada retocado. Recorté a los tres con la herramienta «Magic Mask» de DaVinci. Después bailé samba por el jardín. A Dragomir, tras horas de trastear en Runway, le puse unos bongos. Con ellos debía recorrer la imagen tocando y bailando samba. Pero Runway no servía para nada en este caso. En Kling AI con Motion Control, Dragomir copió mis movimientos a la perfección, pero en la primera décima de segundo tiró los dos bongos. Practiqué durante horas buscando otra alternativa y tocando bongos imaginarios fuera de compás. No funcionó. Así que sale por la imagen sin bongos. Oso y unicornio (¿por qué? Mira al final de Letras): En Kling AI, el movimiento del dragón estaba predefinido para otros dos videoclips individuales. Por eso todos siguen el ritmo. Luego, en Davinci, los recorté todos uno a uno con Magic Mask y superpuse las cinco capas. Al principio también estaba Drag-O-Flynn, pero lo volví a quitar, era demasiado. Me llevó todo un fin de semana.
Enlace al vídeo 02:37: Quité a Jonas y Andrea de la imagen original con Kling AI. Incorporar a DragoMa y hacer que volara hacia la cámara de forma creíble fue mucho más complicado de lo que pensaba. Lo recorté de otro clip de vídeo con Magic Mask, y tuve que ir y venir varias veces entre Kling AI y Davinci. Al final, le di a Kling AI tanto la imagen inicial como la final (mira la foto de arriba). No quedé satisfecho con el resultado hasta que DragoMa también proyectó una sombra y pude hacer que las nubes se movieran con la ayuda de Kling AI. Volví a recortar las nubes en movimiento con Magic Mask y las superpuse sobre el fondo. Por desgracia, los programas de vídeo con IA a menudo también modifican cosas que deberían permanecer igual o empeoran la calidad. Más sobre Drag-O-Flynn al final de la página. Y en JustMe/Dragos.
Enlace al vídeo 03:09: Tuvimos que superar muchos obstáculos durante un año hasta que Jonas pudo recibir la inmunoadsorción. ¡También salió bien gracias a nuestra estupenda aseguradora mkk en Berlín! – Este videoclip no contiene ningún elemento inventado. Pero es un buen ejemplo de cómo se puede convertir un vídeo vertical de 9:16, que está movido, en un pequeño fragmento de 16:9 con estabilización en Davinci Resolve, de forma que quede tan estable que aún se pueda usar. Se trata de una «función de IA» que ha tenido ocupado a mi débil portátil durante horas, pero no en el sentido de un programa de vídeo con IA como Kling o Runway. No se inventa nada, sino que las imágenes se desplazan de tal manera que encajan sin vibraciones. – Pero eso no siempre es posible. Quería usar clips de vídeo en los que, tras muchos intentos, acabé rindiéndome. La calidad era simplemente demasiado mala.
Enlace al vídeo 03:51: En realidad, toda la parte del hospital debía ser en estilo cómic, para dejar bien claro que se trataba de una recreación. Pero los programas de IA no me lo permitieron; todos los intentos con «personajes de cómic» quedaban ridículos. Podría hacer un vídeo aparte sobre eso… Cuando terminé la parte del hospital, respiré aliviado. Lo más difícil de mi proyecto ya estaba hecho. Aquí todo se ha creado con la ayuda de Kling AI, Davinci, así como con mis propias imágenes y vídeos recreados. La mayoría de las veces con varios proyectos preliminares en Davinci, algo muy laborioso. Explicarlo con más detalle se saldría del alcance de este artículo. He etiquetado toda esta parte como «representación simbólica». Pero todas las escenas están inspiradas en la realidad de la estancia de Jonas en el hospital en 2014. Para ello, me pasé una eternidad pensando en cómo podía representar en un clip de vídeo de dos segundos cosas que se prolongaron durante horas o incluso un año, siempre en consonancia con el texto. También investigué mucho al respecto. En 2024 también tuvimos malas experiencias y hoy en día la situación no es mejor en la mayoría de los hospitales. Salvo excepciones como la clínica BDH de Waldkirch en 2025, donde se tuvo mucho en cuenta los síntomas de Jonas. Les estoy muy agradecido a los médicos y a todos los demás que estaban allí. Mira también las preguntas frecuentes al respecto.
Enlace al vídeo 04:19: En Runway describí la imagen del robot de combate y los coronavirus en una colina sobre la ciudad en llamas, con un rayo y una explosión atómica al fondo, y mucho más. Fue sorprendentemente rápido. Pero luego la animación resultó complicada. El rayo se quedaba fijo y, cuando por fin conseguía que algo quedara como yo quería, Runway cambiaba algo que antes ya estaba perfecto, pero para peor. No conseguí que todo saliera bien. Por eso, por ejemplo, la gente de la playa no se mueve. La imagen de Jonas en la cama la añadí más tarde en Davinci, junto con el efecto de luz de la imagen y el bocadillo.
Nuestra sociedad pierde, a causa del síndrome de fatiga crónica (SFC), a miles de personas muy comprometidas y llenas de vida, que necesitaríamos tanto para hacer frente a tantas crisis y problemas. No solo nosotros echamos mucho de menos a Jonas, sino también nuestra sociedad. Ese es el significado de esta escena.
Enlace al vídeo 04:50: De fondo se ve un videoclip del sol en marzo en Baden. La foto de Jonas con Los cuernos es de una época en la que se encontraba mejor que nunca en los últimos 10 años. Por aquel entonces, a veces se movía tan fuerte en la cama de cuidados que me preocupaba que se fuera a caer. La animación de la foto está hecha en Davinci, pero calculada con una hoja de Excel con una precisión de 30 milésimas de segundo: un movimiento de balanceo que se va deteniendo poco a poco y luego se inclina, siempre al compás. Ya he descrito más arriba, con un carrusel de imágenes, cómo Dragomir se convirtió en un héroe de la guitarra.
Enlace al vídeo 05:10: Le describí a Kling AI esta escena con todo detalle, tal y como se ve en el vídeo. Y me dio un montón de rosas ridículamente grotescas que se derramaban desde la lámpara sobre Jonas. ¡Plaf! ¡Ahí tienes esas estúpidas flores! Por eso no hay IA en esta parte del vídeo. Todos los efectos se han calculado en DaVinci. La base es una girasol. El del logotipo de arriba, o más bien el que florece para Jonas en la imagen real de arriba. En diferentes tamaños, giros y variaciones. Y en tres capas, extraídas con la Máscara Mágica, al igual que diferentes zonas de la imagen: los postes de la cama en primer plano, la lámpara arriba, Jonas con la manta, las plantas. Todas son capas individuales. Luego superpuse estas capas. Por eso, algunos girasoles caen en primer plano, otros en el centro y algunos al fondo. Los del fondo son, en promedio, algo más pequeños y tienen un «desenfoque» para crear profundidad espacial. Antes animé la imagen en Davinci con un efecto de resplandor, y la lámpara por separado. Todos los efectos van aumentando lentamente, según lo definido en Excel. El polvo brillante lo creé en Davinci Fusion con seis efectos seguidos. Ahí se me fue otro fin de semana. Luego, en el vídeo final, también incorporé el efecto durante un segundo como transición, lo que me llevó dos horas. ¡Pero era justo así como lo quería!
Enlace al vídeo 05:25: Aquí la ficción y la realidad se funden, y eso es lo que me gusta. Hice un póster con esta escena del vídeo, lo colgué en el techo de la habitación de Jonas y saqué esta foto. En ese sentido, aunque hay IA de por medio, el póster ya es real. La imagen también muestra lo imperfecto que es mi vídeo. El color blanco se satura, es demasiado brillante. Al final me dio igual, que así sea. No tengo más tiempo.
Enlace al vídeo 05:32: Más detalles en la subpágina JustMe/Dragos. Todos los vídeos de dragones se han creado con Kling AI y Davinci, además de mis propias grabaciones. En varias mezclas. Para la imagen del equipo Dragoduction, al final tenía 10 capas superpuestas. El vuelo final del jinete de dragones Jonas en DragoPa fue una aventura muy laboriosa de un día y medio para mí. Ese fue el último gran obstáculo antes de terminar el vídeo. Tuve que cambiar mi enfoque varias veces y recurrir a trucos hasta que quedó como debía. No es perfecto —DragoPa parece un cerdo volador—, pero para mí está bien.
Este pequeñajo parece aparecer por todas partes en el vídeo, si te fijas bien. Simplemente quiere demostrar a todo el mundo que, aunque sea tan pequeño, puede ser un sustituto perfecto de los dragones voladores cuando estos no pueden hacerlo. Al fin y al cabo, su nombre en inglés es «dragonfly». Es tan atrevido como su homónimo Errol y, ¿quizás también de origen irlandés? – PERO: ¡No es IA! Sino que lo ha grabado en directo Jürgen Liebenstein, aquí en su canal de YouTube: https://www.youtube.com/watch?v=V2pqL2tRAig. Y aparece en el vídeo con su amable permiso. ¡Gracias! – Por muy pequeñas que sean, la IA no consigue imitar el vuelo de las libélulas. Podría hacer un vídeo aparte sobre eso… ¿Quizás alguien quiera verlo?
