Esta cámara vende imágenes de poesía con IA

¿Alguna vez te paraste frente a un árbol rojo y pensaste: "¿No sería lindo si hubiera un poema en lugar de un árbol?" Tampoco Joyce Kilmer. Caroline Zhang y Ryan Mather pretenden cerrar la brecha entre la IA y la poesía con su Poetry Camera. El dispositivo de código abierto combina tecnología de punta con visión artística, lo que da como resultado creaciones que cruzan los límites de ambos campos.

A primera vista, la Poetic Camera parece una herramienta más en el panorama en constante evolución de los dispositivos digitales. Sin embargo, tras una inspección más cercana, queda claro que no se trata de una cámara cualquiera. En lugar de simplemente tomar fotografías, Poetic Camera lleva el concepto de fotografía a nuevas alturas.

Jean y Mather, los líderes de este proyecto, combinaron su experiencia en tecnología y arte para crear un dispositivo que es a la vez técnicamente impresionante y estéticamente atractivo.

La historia de Poetic Camera comenzó como un proyecto de pasión personal para Jean y Mather, quienes tuvieron la idea de combinar su amor por la tecnología y su aprecio por el arte. En las primeras etapas de desarrollo, pasaron innumerables horas investigando diferentes componentes y probando diferentes modelos de IA para hacer realidad su visión.

“La fuente del proyecto es cuando tuve acceso a GPT-3. Mi primer instinto fue jugar a Dungeons & Dragons porque soy un idiota. Pensé: "Si esto pudiera jugar a Dungeons & Dragons, sería fantástico". Sí, funcionó para eso. Esto fue cuando necesitabas diseñar rápido. Así que fue necesario un poco de esfuerzo para que funcionara. Pero tuve la idea de hacer una cámara como proyecto”, dijo Mather. "¿Qué pasaría si tuvieras una cámara y reaccionara a la cultura de Instagram? ¿Qué pasaría si apareciera texto en lugar de una imagen?... Todo el mundo prefiere la versión del libro a la película, así que así es capturar un momento".

Mientras refinaban sus prototipos, Jean y Mather comenzaron a compartir sus creaciones con amigos y familiares en reuniones públicas. La respuesta que recibieron no fue sorprendente. El concepto de una cámara que pueda crear poesía basándose en lo que ve ha despertado mucho interés. El dispositivo rápidamente se convirtió en el centro de atención, provocando animadas discusiones y despertando la imaginación de todos los que se toparon con él.

Estas reacciones iniciales dieron a Zhang y Mather un fuerte incentivo para seguir mejorando su invento. Se dieron cuenta de que la 'Cámara de poesía' podía cerrar la brecha entre la tecnología y el arte y conmover a la gente. A medida que se corrió la voz sobre la Poetry Camera, se encontró con una avalancha de preguntas de personas curiosas que querían probar el dispositivo por sí mismos. Este interés los llevó a considerar convertir su proyecto en un producto comercial viable y hacer accesible la magia de la cámara poética a un público más amplio.

Técnica

En el corazón de este dispositivo innovador se encuentra la Raspberry Pi, una computadora de placa única del tamaño de una tarjeta de crédito que tiene un gran impacto. Este pequeño pero poderoso componente es el cerebro de la cámara de poesía, lo que le permite capturar imágenes y conectarse al GPT-4 de OpenAI para crear poesía.

Raspberry Pi captura imágenes y luego utiliza algoritmos de visión por computadora para analizar los datos visuales. Luego, los modelos de IA interpretan la imagen, identificando elementos clave, colores, patrones y emociones en el marco. Esta información forma la base del proceso de creación de una estrofa poética.

Zhang señaló a la cámara en nuestra entrevista por Zoom:

Ryan Mather y Keleen Carolyn Zhang en una entrevista con su reportero. Credito de imagen: Captura de pantalla de Zoom

Y entonces apareció un poema:

Poemas creados y publicados por Poetry Camera (traducidos a continuación). Credito de imagen: cámara de poesía

Un hombre ajusta su mirada detrás de la lente,
En el límite cuadrado del espacio de píxeles.
Haga zoom en rostros colocados en lugares virtuales,
Dejé la carrera de ratas hace mucho tiempo.

La luz del día se filtra a través de un dosel translúcido,
El café caliente se arremolinaba en su mano.
Habla a través de fronteras virtuales,
Su reflejo se convierte en espejo y aparece en la pantalla.

En el estante, el libro se inclina y habla en voz baja.
Una planta en desarrollo, la única sustancia viva.
La casa de las gafas es su consuelo,
Dentro de estos muros su mundo se extendió.

Esta mañana de abril de 2024,
La nueva normalidad transcurre silenciosamente.

Un poema @poesia.camara

La frase de Jean "fuera de la carrera de ratas" es mi teoría de la camisa hawaiana.

Los creadores me dicen que la producción de Poetic Cam no se limita a un solo formato. Dado que la herramienta es de código abierto, los usuarios pueden elegir entre una variedad de formas de poesía, como haiku, sonetos o verso libre, según sus preferencias, habilidades y voluntad de conectarse al código fuente.

A medida que Poetry Camera continúa evolucionando, Zhang y Mather exploran nuevas formas de mejorar sus capacidades. Están constantemente mejorando y seleccionando modelos de IA, ampliando las instrucciones de los dispositivos y experimentando con técnicas avanzadas de procesamiento del lenguaje natural. El objetivo es crear un dispositivo que cree poesía y participe en conversaciones significativas con los usuarios, creando una conexión profunda entre la tecnología y el arte.

La intersección del arte y la tecnología

La Cámara Poética es testigo de las increíbles posibilidades que existen en la intersección del arte y la tecnología. Aprovechando el poder de la inteligencia artificial y el aprendizaje automático, Zhang y Mather han creado un dispositivo que no sólo captura la belleza del mundo que nos rodea, sino que también la interpreta de una manera increíblemente conmovedora. Técnicamente, es simple, pero me encanta cómo Poetic Camera hace que las cosas sean accesibles. Se vuelve muy fácil soñar y atreverse a traspasar los límites de lo que la tecnología puede lograr.

Las pantallas dominan nuestra vida diaria; La cámara poética ofrece un refrescante descanso de la norma. En lugar de depender de una pantalla digital para mostrar la producción poética, el dispositivo utiliza un método de comunicación más táctil e inmersivo. El poema resultante se imprime en papel, creando una encarnación física de la experiencia artística. La naturaleza efímera del arte se lleva bastante lejos a través de la cámara de la poesía.

Otro poema de muestra. Credito de imagen: cámara de poesía

“No almacenamos fotografías ni poemas digitalmente. Hay varias razones para esto: una es más fácil. Dos: privacidad. Tres, si son como estos artefactos temporales, añaden un significado adicional al poema. Si la pierdes, desaparece", explica Mather. "Hoy en día todo el mundo lleva una cámara en el bolsillo de su teléfono móvil; queríamos hacer algo completamente diferente".

Hemos visto la nueva interfaz de usuario con productos como Plaud y Humane Ai Pin, y este dispositivo sigue siendo el mismo. Permite al usuario romper con el constante aluvión de estimulación visual y participar en trabajos de cámara poéticos de una manera más atenta y contemplativa. No es para todos los estudiantes de arte, pero la experiencia visceral de tener en la mano un poema impreso es una invitación a reflexionar sobre las palabras, apreciar la belleza del lenguaje y conectarse más profundamente con la obra de arte.

La filosofía del diseño afecta toda la experiencia del usuario más allá del propio dispositivo. Zhang y Mather diseñan cuidadosamente la cámara poética para crear una sensación de sorpresa y descubrimiento. Tomar una fotografía, esperar a que la IA cree un poema y luego recibir el resultado impreso genera anticipación y asombro, y mejora el compromiso general con el dispositivo.

Un reflejo del futuro de la IA y la informática personal

La poética filosofía de diseño de cámaras de Zhang y Mather refleja su visión más amplia del futuro de la informática personal y la inteligencia artificial. Creen que la tecnología debería fluir sin problemas en nuestra vida diaria y mejorar nuestra experiencia sin sentirnos abrumados por una estimulación constante. Al crear un dispositivo que prioriza la simplicidad y la expresión artística, desafían el status quo y marcan el comienzo de una nueva era de la tecnología.

“Creo que la cámara poética es un microcosmos de lo que sucederá en muchos campos con la inteligencia artificial. La cámara de poesía es diferente de las clases tradicionales: nunca has conocido a alguien que diga: "Oh, soy un fotógrafo de poesía para eventos corporativos", se ríe Zhang. Entre este campo establecido de la fotografía y la poesía existen cámaras poéticas. Esto es algo nuevo y extraño. Sobre todo, es agradable ver a la gente interactuar: la gente encuentra alegría infantil en sus divertidos personajes".

¿Que sigue?

Mientras Poetic Camera continúa captando audiencias y generando expectación, Zhang y Mather están pensando detenidamente en el futuro de su trabajo innovador. El dispositivo comenzó como un proyecto apasionante personal, pero la respuesta abrumadoramente positiva llevó a explorar la posibilidad de ponerlo a disposición comercial de un público más amplio.

"Después de las primeras 100 preguntas que hizo la gente, dijimos: 'No vamos a venderlo', pero después de 101 preguntas, pensamos que tal vez deberíamos pensar más en ello y hacerlo accesible a la gente", reflexionó Zhang. "Pero es un proyecto artístico, ¿sabes? Nuestra primera respuesta fue abandonar el capitalismo".

Sin embargo, fieles a su compromiso con la sostenibilidad y el consumo consciente, Zhang y Mather se están tomando su tiempo antes de lanzarse a la producción en masa. En cambio, están adoptando un enfoque más mesurado, enfatizando la calidad sobre la cantidad con reducciones limitadas del volumen de producto. Al controlar cuidadosamente el proceso de fabricación, su objetivo es garantizar que cada cámara Poetic cumpla con los más altos estándares de rendimiento y durabilidad con atención al detalle.

Animé al equipo a comprar productos de hardware: teléfonos con cámaras, conexiones a Internet y pantallas. ¿No es más estable utilizar el hardware existente?

Otro poema de muestra, antecedentes y su creador. Credito de imagen: cámara de poesía

"Lo más sostenible sería no hacer nada", admite Zhang. “Pero primero lo iniciamos como un proyecto de bricolaje de código abierto y proporcionamos todas las instrucciones en línea; A la gente le resultó difícil reunir todas las piezas que necesitaban. Al principio jugamos con la idea de hacer cajas de cartón. Pero he notado que parte de lo que hace que a la gente le guste y quiera jugar es la estética del producto mejorado con Poké Ball. Creo que una cámara poética debe ser un producto de apariencia pulida para cobrar vida en su máximo potencial. No sé cómo abordarlo desde una perspectiva de sostenibilidad, pero es importante para nosotros".

De cara al futuro, Zhang y Mather imaginan un futuro en el que la cámara poética no solo sea un dispositivo innovador, sino también un catalizador para cambiar la forma en que interactuamos con la tecnología y el arte. Esperan que su trabajo inspire a otros a explorar la intersección de estos dos campos, ampliar los límites de lo posible y crear nuevas formas de expresión.

Me encanta vivir en un mundo donde los pasatiempos inspiradores se cruzan con el arte y la tecnología, y este proyecto encaja perfectamente en el diagrama de Venn.

“Para mí, sigue siendo arte porque se trata de expresión. Es una herramienta para crear el mundo que queremos ver, un mundo donde la gente pueda jugar con esta nueva tecnología: la IA no es todo pesimismo. Y no se trata sólo de que la IA imite a los humanos de manera más profunda, más rápida y peor”, concluyó Zhang. “Se trata de hacer algo completamente nuevo con nueva tecnología y sacar a relucir tu yo interior. Para este proyecto, no se trata de ganar dinero, sino de recrear esa maravilla infantil".

Si quieres ver más de cerca la cámara en acción, TikTok parece ser la mejor fuente.