Esta câmera troca fotos com poesia AI

Créditos da imagem: câmera de poesia

Você já parou na frente de uma sequóia e pensou: “Não seria ótimo se houvesse um poema em vez de uma árvore?” Nem Joyce Kilmer. Mas Kelin Carolyn Zhang e Ryan Mather decidiram preencher a lacuna entre a tecnologia de IA e a poesia com sua fascinante criação, Poetry Camera. Este dispositivo de código aberto combina tecnologia de ponta e visão artística para criar uma obra que ultrapassa os limites de ambos os campos.

À primeira vista, a Poetry Camera parece apenas mais um gadget em uma linha em constante evolução de dispositivos digitais. Mas um olhar mais atento revela que esta não é uma câmera comum. Em vez de simplesmente capturar imagens, a Poetry Camera leva o conceito de fotografia gerando poemas instigantes (ou poemas tão instigantes quanto a poesia de IA pode chegar) com base nos recursos visuais que encontra.

Os idealizadores do projeto, Zhang e Mather, combinaram perfeitamente seus conhecimentos em tecnologia e arte para criar um dispositivo tecnicamente impressionante e esteticamente cativante.

A história da Poetry Camera começou como um projeto de paixão pessoal para Zhang e Mather. Eles ficaram fascinados com a ideia de combinar o amor pela tecnologia com o apreço pelas artes. Nos estágios iniciais de desenvolvimento, eles passaram inúmeras horas mexendo em diferentes componentes e experimentando diferentes modelos de IA para dar vida à sua visão.

“Este projeto começou comigo acessando o GPT-3. Sou um nerd, então meu primeiro instinto foi jogar Dungeons & Dragons. Pensei: 'Não seria ótimo se eu pudesse jogar Dungeons & Dragons com isso?' pensamento. E sim, funcionou. Isso foi na época em que você tinha que fazer engenharia rápida. Portanto, foi necessário algum esforço para fazê-lo funcionar. Mas também tive a ideia de construir uma câmera como projeto”, diz Mather. “E se eu pegasse minha câmera e fosse uma reação à cultura do Instagram? E se surgisse texto em vez de fotos… Todo mundo prefere a versão do livro ao filme?

À medida que Zhang e Mather aperfeiçoavam seu protótipo, eles começaram a compartilhar seu trabalho com amigos e familiares em reuniões sociais. A resposta que receberam foi incrível. As pessoas ficaram fascinadas pelo conceito de uma câmera que pudesse gerar poesia a partir do que via. O dispositivo tornou-se imediatamente o centro das atenções, provocando discussões animadas e estimulando a imaginação de todos que o encontraram.

Estas reações iniciais forneceram uma forte motivação para Zhang e Mather continuarem a melhorar a sua invenção. Eles perceberam que a Poetry Camera tinha o potencial de preencher a lacuna entre a tecnologia e a arte de uma forma que repercutisse nas pessoas. Assim que a notícia da Poetry Camera se espalhou, a dupla foi inundada com perguntas de curiosos que queriam experimentar o dispositivo por si próprios. Este interesse levou-os a considerar a possibilidade de converter o seu projecto num potencial produto comercial e tornar a magia da Poetry Camera acessível a um público mais vasto.

Zatech

No centro deste dispositivo inovador está o Raspberry Pi, um computador de placa única do tamanho de um cartão de crédito que tem um impacto poderoso. Este pequeno mas poderoso componente atua como o cérebro da Poetry Camera, permitindo capturar imagens e se comunicar com o GPT-4 da OpenAI para gerar poemas.

O Raspberry Pi captura imagens e usa algoritmos de visão computacional para analisar os dados visuais. Um modelo de IA então interpreta a imagem e identifica elementos, cores, padrões e emoções importantes dentro do quadro. Essas informações servem de base para o processo de geração do poema.

Zhang virou-se para a câmera durante uma entrevista no Zoom.

Ryan Mather e Kellyn Carolyn Chan em entrevista ao nosso correspondente. Créditos da imagem: Captura de tela do zoom

Surgiu então o seguinte poema:

Poesia produzida e impressa pela Poetry Camera (transcrito abaixo). Créditos da imagem: câmera de poesia

Um homem ajusta a gaze atrás da lente,
Dentro de um quadrado no espaço de pixels.
Amplie rostos armazenados em locais virtuais,
A corrida desenfreada está dividida há muito tempo.

A luz do sol brilha através do tecido fino desbotado,
Ele segura uma xícara de café morno na mão.
As conversas atravessam fronteiras virtuais;
Sua imagem é refletida no espelho e aparece na tela.

Os livros estavam apoiados nas prateleiras, as pessoas conversavam baixinho.
Uma planta próspera, a única coisa viva.
Usando óculos, a casa se torna sua massa gentil,
Seu mundo estava espalhado dentro dessas paredes.

Esta manhã de abril de 2024,
Um novo cotidiano que você pode adquirir tranquilamente.

poema de @poetry.camera

O Sr. Chan teoriza que a frase “sair da corrida desenfreada” pode estar se referindo à minha camisa havaiana.

Os inventores dizem que a produção da Poetry Camera não se limita a um único formato. Como o dispositivo é de código aberto, os usuários podem escolher entre uma variedade de formatos de poesia, incluindo haicais, sonetos e versos livres, dependendo de suas preferências e de sua capacidade e disposição de interagir com o código-fonte.

À medida que a Poetry Camera continua a evoluir, Zhang e Mather estão explorando novas maneiras de aprimorar suas capacidades. Eles refinam e selecionam constantemente modelos de IA, aprimoram os prompts dos dispositivos e experimentam técnicas avançadas de processamento de linguagem natural. O objetivo é criar dispositivos que gerem poesia, envolvam-se em diálogos significativos com os usuários e promovam conexões mais profundas entre tecnologia e arte.

A interseção entre arte e tecnologia

Poetry Camera é uma prova das incríveis possibilidades na intersecção entre arte e tecnologia. Ao aproveitar o poder da IA ​​e do aprendizado de máquina, Zhang e Mather criaram um dispositivo que não apenas captura a beleza do mundo que nos rodeia, mas também o interpreta de maneiras surpreendentes e inspiradoras. Embora a tecnologia seja simples, adoro a facilidade de uso da Poetry Camera. Torna-se muito mais fácil sonhar e ultrapassar os limites do que a tecnologia pode alcançar.

As telas dominam nossa vida diária. Poetry Camera oferece uma pausa refrescante da norma. Em vez de depender de displays digitais para produção poética, o dispositivo emprega um método de interação mais tátil e imersivo. Os poemas gerados são impressos em papel, encarnando fisicamente a experiência artística. A natureza efêmera da arte é capturada em grande parte pela Poetry Camera.

Outro exemplo de poema. Créditos da imagem: câmera de poesia

“Não armazenamos imagens ou poemas digitalmente. Há vários motivos para isso. Um: é mais fácil. Dois: privacidade. Terceiro: a poesia é um tipo de coisa tão efêmera. Quando é como uma obra de arte, acrescenta um toque especial significado para o poema. Se você perder isso, ele desaparece”, explica Mather. “Hoje todo mundo tem câmera no bolso e usa celular. Queríamos fazer algo completamente diferente.”

Produtos como Plaud e Humane Ai Pin viram novas UIs, e este dispositivo continua na mesma linha. Isso libera os usuários da estimulação visual constante e permite que eles se envolvam com o trabalho da Poetry Camera de uma forma mais consciente e meditativa. Embora isso possa não ser verdade para todos os estudantes de arte, a experiência visceral de segurar um poema impresso nas mãos incentiva você a ponderar as palavras, apreciar a beleza da linguagem e formar uma conexão mais profunda com a obra de arte.

A filosofia de design vai além do dispositivo e impacta toda a experiência do usuário. Chan e Mather criaram cuidadosamente a Poetry Camera para promover um sentimento de admiração e descoberta. Capturar uma imagem, esperar que a IA gere um poema e receber o resultado impresso cria uma sensação de antecipação e surpresa, aumentando o envolvimento geral com o dispositivo.

Refletindo o futuro da IA ​​e da computação pessoal

A filosofia de design de Zhang e Mather para a Poetry Camera reflete sua visão mais ampla para o futuro da computação pessoal e da IA. Eles acreditam que a tecnologia deve ser perfeitamente integrada na nossa vida quotidiana, melhorando as nossas experiências sem nos sobrecarregar com estímulos constantes. Ao criar dispositivos que dão prioridade à simplicidade e à expressão artística, estão a desafiar o status quo e a abrir caminho para uma nova era da tecnologia.

“Acho que as câmeras de poesia são um microcosmo do que vai acontecer com muitas indústrias com IA. As câmeras de poesia são diferentes dos campos tradicionais: 'Ah, sou fotógrafo de poesia para eventos corporativos.' diz isso, Chan ri. A Poetry Camera situa-se entre este campo estabelecido da fotografia e da poesia. É algo novo e estranho. Mais importante ainda, é divertido ver as pessoas interagindo com eles. As pessoas encontram alegria infantil em suas personalidades lúdicas. ”

Qual é o próximo?

À medida que Poetry Camera continua a cativar o público e a gerar buzz, Chan e Mather consideram cuidadosamente o futuro do seu trabalho inovador. Embora o dispositivo tenha começado como um projeto de paixão pessoal, a resposta esmagadoramente positiva levou-nos a explorar a possibilidade de comercializá-lo para um público mais amplo.

“Após as primeiras 100 perguntas, dissemos: 'Não estamos vendendo', mas depois da 101ª pergunta, pensamos: deveríamos oferecê-lo às pessoas? Começamos a olhar mais de perto para isso.” “Mas, ao mesmo tempo, isso também é um projeto de arte, sabe? Nossa primeira resposta foi tirar o capitalismo disso.”

Mas, fiéis ao seu compromisso com a sustentabilidade e o consumo consciente, Zhang e Mather estão a demorar algum tempo a acelerar a produção em massa. Em vez disso, eles estão adotando uma abordagem mais comedida, priorizando a qualidade em vez da quantidade e permitindo a possibilidade de quedas limitadas de produtos. Ao controlar cuidadosamente o nosso processo de produção, pretendemos garantir que cada câmara Poetry seja fabricada com a máxima atenção aos detalhes e cumpra elevados padrões de desempenho e durabilidade.

Insisti com minha equipe que precisávamos comprar um produto de hardware. O telefone possui câmera, conexão à Internet e tela. Não seria mais sustentável usar o hardware existente?

Outro exemplo de poema. A pessoa que inspirou o poema está retratada ao fundo. Créditos da imagem: câmera de poesia

“A opção mais sustentável seria não produzir absolutamente nada”, concorda Chan. “Mas inicialmente começamos isso como um projeto DIY de código aberto e colocamos todas as instruções on-line. Só que é difícil reunir todas as diferentes peças que você precisa. No início, começamos com papelão. Mas percebi que parte do que faz as pessoas adoro e quero brincar com ele é a beleza do produto, polido com Pokébolas acho que para a Poetry Camera tirar o máximo proveito dele precisa ser um produto elegante, mas não sei como. abordá-lo com a sustentabilidade em mente é importante para nós.”

Olhando para o futuro, Chan e Mather imaginam um futuro onde a câmara de poesia seja mais do que apenas um dispositivo inovador, mas um catalisador para mudar a forma como interagimos com a tecnologia e a arte. Eles esperam que o seu trabalho inspire outros a explorar a intersecção destes dois campos, ampliando os limites das possibilidades e criando novas formas de expressão.

Adoro viver em um mundo onde os hobbies dos entusiastas se cruzam com a arte e a tecnologia, e este projeto se encaixa perfeitamente no diagrama de Venn.

“Para mim, isto continua a ser uma questão de expressão. Esta é uma forma de moldar o mundo que queremos ver, um mundo onde as pessoas possam brincar com esta nova tecnologia. maneiras mais rápidas e piores”, conclui Zhang. “Trata-se de despertar a criança interior, criando algo completamente novo usando novas tecnologias. Este projeto não é para ganhar dinheiro, é para tornar possível aquela maravilha infantil novamente.”

Se você quiser ver mais de perto como a câmera funciona, o TikTok parece ser o melhor recurso.