Esta câmera troca fotos por poesia de IA

Você já parou na frente de uma sequóia e se perguntou: “Não seria ótimo se isso fosse poesia em vez de uma árvore?” Nem Joyce Kilmer. Kelin Carolyn Zhang e Ryan Mather, no entanto, decidiram preencher a lacuna entre a tecnologia de IA e a poesia com sua criação cativante – o Câmera de Poesia. O dispositivo de código aberto combina tecnologia de ponta com visão artística, resultando em uma criação que ultrapassa os limites de ambos os campos.

À primeira vista, a Poetry Camera parece mais um gadget no cenário em constante evolução dos dispositivos digitais. No entanto, após uma inspeção mais detalhada, fica evidente que esta não é uma câmera comum. Em vez de apenas capturar imagens, a Poetry Camera leva o conceito de fotografia a novos patamares, gerando poesia instigante (ou, bem, tão instigante quanto a poesia de IA pode ser) com base nos recursos visuais que encontra.

Zhang e Mather, os idealizadores deste projeto, combinaram perfeitamente seus conhecimentos em tecnologia e arte para criar um dispositivo tecnicamente impressionante e esteticamente cativante.

A história da Poetry Camera começou como um projeto de paixão pessoal para Zhang e Mather, que se viram cativados pela ideia de fundir o seu amor pela tecnologia com o seu apreço pelas artes. Nos estágios iniciais de desenvolvimento, eles passaram inúmeras horas mexendo em vários componentes e experimentando diferentes modelos de IA para dar vida à sua visão.

“A origem do projeto é quando tive acesso ao GPT-3. Meu primeiro instinto foi jogar Dungeons & Dragons porque sou um nerd. Eu pensei ‘se essa coisa pudesse jogar Dungeons & Dragons, seria impressionante’. E sim, funcionou para isso. Isso foi quando você tinha que fazer engenharia imediata. Então foi preciso um pouco de esforço para fazê-lo funcionar. Mas também tive a ideia de talvez fazer uma câmera como projeto”, diz Mather. “E se você pegasse uma câmera, mas fosse uma reação à cultura do Instagram? E se sair texto em vez de uma foto? … Todo mundo prefere a versão do livro ao filme, então é assim para capturar momentos.”

À medida que refinavam o seu protótipo, Zhang e Mather começaram a partilhar a sua criação com amigos e familiares em reuniões sociais. As reações que receberam foram simplesmente surpreendentes. As pessoas ficaram fascinadas pelo conceito de uma câmera que pudesse gerar poesia a partir do que via. O dispositivo rapidamente se tornou o centro das atenções, provocando discussões animadas e despertando a imaginação de todos que o encontraram.

Essas reações iniciais foram um poderoso motivador para Zhang e Mather continuarem a refinar sua invenção. Eles perceberam que a Poetry Camera tinha o potencial de preencher a lacuna entre a tecnologia e a arte de uma forma que ressoasse nas pessoas. À medida que a notícia da Poetry Camera se espalhava, a dupla foi inundada com perguntas de curiosos ansiosos para experimentar o dispositivo por si próprios. Este interesse levou-os a considerar a possibilidade de transformar o seu projecto num potencial produto comercial, tornando a magia da Câmara Poesia acessível a um público mais vasto.

A tecnologia

No coração deste dispositivo inovador está um Raspberry Pi, um computador de placa única do tamanho de um cartão de crédito que possui um desempenho poderoso. Este pequeno mas poderoso componente serve como o cérebro da Poetry Camera, permitindo-lhe capturar imagens e comunicar-se com o GPT-4 da OpenAI para gerar poesia.

Um Raspberry Pi captura a imagem e então emprega algoritmos de visão computacional para analisar os dados visuais. Os modelos de IA interpretam então a imagem, identificando elementos-chave, cores, padrões e emoções dentro do quadro. Essas informações servem de base para o processo de geração de poesia.

Zhang apontou a câmera para nossa entrevista no Zoom:

E saiu um poema:

O poema gerado e impresso pela Poetry Camera (transcrito abaixo). Créditos da imagem: Câmera de Poesia

Atrás da lente, um homem ajusta seu olhar,
Dentro dos limites quadrados do espaço de pixels.
Ampliado em rostos alojados em local virtual,
Há muito que partiu da corrida desenfreada.

A luz do dia filtra através de cortinas desbotadas,
Na mão, bois de café morno.
As conversas flutuam, através da fronteira virtual,
Seu reflexo espelhado, aparece na tela.

Na estante, os livros se inclinam, a conversa silenciosa,
Uma planta próspera, a única matéria viva.
Com os copos empoleirados, o lar torna-se a sua plácida massa,
Dentro destas paredes, seu mundo se espalhou.

Nesta manhã de abril de 2024,
Uma nova normalidade, silenciosamente desgastada.

Um poema de @poetry.camera

Zhang teoriza que a referência a “partiu da corrida desenfreada” é uma referência à minha camisa havaiana.

Os inventores me disseram que a produção da Poetry Camera não se limita a um único formato. Como o dispositivo é de código aberto, os usuários podem escolher entre várias formas poéticas – como haicai, soneto ou verso livre – dependendo de suas preferências e capacidade e vontade de se envolver com o código-fonte.

À medida que a Poetry Camera continua a evoluir, Zhang e Mather estão explorando novas maneiras de aprimorar suas capacidades. Eles refinam e selecionam constantemente os modelos de IA, expandem as instruções do dispositivo e experimentam técnicas avançadas de processamento de linguagem natural. O objetivo é criar um dispositivo que gere poesia e mantenha um diálogo significativo com os usuários, promovendo uma conexão mais profunda entre a tecnologia e as artes.

A interseção entre arte e tecnologia

A Poetry Camera serve como um testemunho do incrível potencial na intersecção entre arte e tecnologia. Ao aproveitar o poder da IA ​​e do aprendizado de máquina, Zhang e Mather criaram um dispositivo que não apenas captura a beleza do mundo que nos rodeia, mas também o interpreta de uma forma que pode ser surpreendentemente comovente. Como tecnologia, é simples, mas adoro como a Poetry Camera torna as coisas acessíveis. Torna-se tão fácil ousar sonhar e ultrapassar os limites do que a tecnologia pode alcançar.

As telas dominam nossas vidas diárias; a Poetry Camera oferece um afastamento refrescante da norma. Em vez de depender de um display digital para mostrar seus resultados poéticos, o dispositivo emprega um método de interação mais tátil e envolvente. Os poemas gerados são impressos em papel, criando uma personificação física da experiência artística. A natureza temporária da arte é levada muito longe com Poetry Camera.

Outro exemplo de poema. Créditos da imagem: Câmera de Poesia

“Não salvamos nenhuma das imagens ou poemas digitalmente. Existem algumas razões para isso: Primeiro, é mais fácil. Dois: privacidade. Terceiro, acrescenta significado extra aos poemas se eles forem como esses tipos de artefatos efêmeros. Se você perdê-lo, ele desaparece”, explica Mather. “Todo mundo tem uma câmera no bolso através do celular agora – queríamos fazer algo muito diferente.”

Vimos novas UIs com produtos como Plaud e Humane Ai Pin – e este dispositivo continua na mesma linha. Ele permite que os usuários se desconectem da barragem constante de estímulos visuais e se envolvam com as criações da Poetry Camera de uma forma mais consciente e contemplativa. Não para ser todo estudante de artes, mas a experiência visceral de segurar um poema impresso nas mãos é um convite para refletir sobre as palavras, apreciar a beleza da linguagem e estabelecer uma conexão mais profunda com a obra de arte.

A filosofia de design vai além do dispositivo, influenciando toda a experiência do usuário. Zhang e Mather criaram cuidadosamente a Câmera de Poesia para promover um sentimento de admiração e descoberta. Capturar uma imagem, esperar que a IA gere um poema e depois receber o resultado impresso cria uma sensação de antecipação e surpresa, melhorando o envolvimento geral com o dispositivo.

Um reflexo do futuro da IA ​​e da computação pessoal

A filosofia de design de Zhang e Mather para a Poetry Camera reflete sua visão mais ampla para o futuro da computação pessoal e da IA. Eles acreditam que a tecnologia deve ser perfeitamente integrada na nossa vida quotidiana, melhorando as nossas experiências sem nos sobrecarregar com estímulos constantes. Ao criar um dispositivo que dá prioridade à simplicidade e à expressão artística, estão a desafiar o status quo e a abrir caminho para uma nova era da tecnologia.

“Acho que as câmeras de poesia são um microcosmo do que acontecerá com muitas indústrias com IA. As câmeras de poesia são diferentes de uma disciplina tradicional: você nunca conheceu alguém que dissesse: ‘Ah, sou fotógrafo de poesia para eventos corporativos’, ri Zhang. Poesia As câmeras estão entre este campo estabelecido da fotografia e da poesia. É uma coisa nova e estranha. Mais importante ainda, observar as pessoas interagindo com elas é agradável: as pessoas encontram alegria infantil em sua personalidade lúdica.”

Qual é o próximo?

À medida que a Poetry Camera continua a cativar o público e a gerar buzz, Zhang e Mather consideram cuidadosamente o futuro da sua criação inovadora. Embora o dispositivo tenha começado como um projeto de paixão pessoal, a resposta esmagadoramente positiva levou-os a explorar a possibilidade de disponibilizá-lo comercialmente para um público mais amplo.

“Depois das primeiras 100 perguntas, dissemos: ‘Não estamos vendendo’, mas depois de 101 perguntas, começamos a pensar sobre isso com mais detalhes, nos perguntando se deveríamos disponibilizá-lo para as pessoas”, contempla Zhang. “Mas ao mesmo tempo é um projeto de arte, sabe? A nossa resposta inicial foi deixar o capitalismo fora disso.”

No entanto, fiéis ao seu compromisso com a sustentabilidade e o consumo consciente, Zhang e Mather estão a demorar antes de se precipitarem para a produção em massa. Em vez disso, estão adotando uma abordagem mais comedida, com potencial para quedas limitadas de produtos que priorizem a qualidade em detrimento da quantidade. Ao controlar cuidadosamente o processo de produção, pretendem garantir que cada Poetry Camera seja fabricada com a máxima atenção aos detalhes e cumpra os seus elevados padrões de desempenho e durabilidade.

Desafiei a equipe sobre a necessidade de comprar um produto de hardware: os telefones possuem câmeras, conexões de internet e telas. Não seria mais sustentável usar hardware que já existe?

Outro exemplo de poema, com, ao fundo, a pessoa que o inspirou. Créditos da imagem: Câmera de Poesia

“A coisa mais sustentável seria não fazer nada”, concorda Zhang. “Mas inicialmente começamos isso como um projeto DIY de código abertoe tínhamos todas as instruções online; só que é difícil para as pessoas reunirem todas as diferentes peças necessárias. Inicialmente, brincamos com a ideia de criar um invólucro de papelão. Mas percebi que parte do que faz as pessoas amarem e quererem brincar com isso é a estética do produto polido com Pokébola. Acho que para que a Poetry Camera ganhe vida em sua forma mais completa, ela deveria ser um produto de aparência sofisticada. Não sei como abordar isso tendo a sustentabilidade em mente, mas é importante para nós.”

Olhando para o futuro, Zhang e Mather imaginam um futuro onde a Poetry Camera não seja apenas um dispositivo inovador, mas também um catalisador para mudanças na forma como interagimos com a tecnologia e a arte. Eles esperam que a sua criação inspire outros a explorar a intersecção destes dois campos, ultrapassando os limites do que é possível e criando novas formas de expressão.

Adoro viver em um mundo onde hobbies entusiasmados se cruzam com arte e tecnologia, e este projeto se enquadra perfeitamente nesse diagrama de Venn.

“Para mim, isto continua a ser arte porque se trata de expressar. É um veículo para moldar um mundo que queremos ver, que é um mundo onde as pessoas podem brincar com esta nova tecnologia: a IA não é só desgraça e tristeza. E não se trata apenas de a IA imitar os humanos de uma forma mais profunda, rápida e pior”, conclui Zhang. “Trata-se de fazer algo totalmente novo com sua nova tecnologia e trazer à tona a criança interior novamente. Para este projeto, não se trata de ganhar dinheiro – trata-se de tornar possível novamente aquela maravilha infantil.”

Se você quiser ver mais de perto a câmera em ação, TikTok parece ser o melhor recurso.