Aaron Koblin: um olhar artístico da humanidade

Acho que os dados podem realmente tornar-nos mais humanos. Estamos a recolher e a criar todo o tipo de dados sobre como estamos a viver as nossas vidas, e isso permite-nos contar algumas histórias fascinantes. Recentemente, um sábio teórico dos meios de comunicação "twittou", "A cultura do século XIX foi definida pelo romance, a cultura do século XX foi definida pelo cinema, e a cultura do século XXI vai ser definida pela interface." Acredito que isto vai ser verdade. As nossas vidas estão a ser guiadas por dados, e a apresentação desses dados é uma oportunidade de criarmos interfaces extraordinárias que contam grandes histórias. Vou mostrar-vos alguns dos projectos em que tenho trabalhado nos últimos anos que se reflectem nas nossas vidas e nos nossos sistemas.

Este é um projecto chamado Flight Patterns. O que estão a ver é o tráfego aéreo sobre a América do Norte num período de 24 horas. Como podem ver, começa tudo a escurecer e vêem pessoas a irem dormir. Seguindo isso, vêem na costa oeste os aviões a deslocarem-se para a costa este, são voos nocturnos. E vêem as pessoas a acordar na costa este, e de seguida a chegada de voos europeus, no canto superior direito. As pessoas estão a mover-se da costa este para a costa oeste. Vêem San Francisco e Los Angeles a começarem as suas viagens até ao Hawai no canto inferior esquerdo.

Acho que uma coisa é dizer que 140.000 aviões estão a ser monitorizados pelo governo federal num dado momento, e outra coisa é observar esse sistema a desenvolver-se. Isto é uma imagem num hiato de tempo destes mesmos dados, mas eu codifiquei-os com cores por tipo, e assim podem ver a diversidade de aviões que voam sobre nós. Comecei a fazer isto e depois coloquei no Google Maps dando a possibilidade de fazer zoom e observar os aeroportos individualmente assim como os padrões que estão a ocorrer. Aqui podemos ver que o branco representa baixas altitudes, e o azul representa altas altitudes. E podem fazer zoom. Aqui estamos a observar Atlanta. Podem ver que se trata de um aeroporto de carga, e que há todo o tipo de actividade aqui. É possível também distinguir a partir da altitude por modelo e fabricante. De novo, a diversidade. E podem explorar e ver alguns dos aeroportos e os seus diferentes padrões. Aqui estamos sobre a costa este. Podem ver um pouco do caos que está a acontecer em Nova Yorque com os controladores aéreos a terem de lidar com todos os principais aeroportos próximos uns dos outros.

Voltando atrás, vemos de novo os EUA - a Florida está no canto inferior direito. Movendo para a costa oeste, conseguem ver San Francisco e Los Angeles - grandes zonas de tráfego baixo pelo Nevada e Arizona. E estes somos nós em L.A. e Long Beach no fundo. Comecei por olhar para parâmetros diferentes, pois vocês podem escolher o que querem retirar dos dados. Aqui estamos a ver as descolagens versus aterragens. E podem ver como, com o tempo, os aeroportos mudam. Podem ver os padrões que se começam a desenvolver no fundo do ecrã. E podem ver que, eventualmente, o aeroporto muda a direcção.

Aqui está outro projecto em que trabalhei com as Sensible Cities Lab no MIT. Isto é a visualização de comunicações internacionais. Isto é como Nova Yorque comunica com outras cidades internacionais. Nós configurámos isto no formato de um globo ao vivo, no Museu de Arte Moderna em Nova Yorque para a exposição "Design the Elastic Mind". Teve uma transmissão ao vivo durante 24h e era possível ver o desenrolar da relação e alguma informação demográfica vinda através dos dados da AT&T e revelando-se. Este é outro projecto em que trabalhei com Sensible Cities Lab e CurrentCity.org. Estamos a visualizar a quantidade de SMS que estão a ser enviadas na cidade de Amesterdão. Estão assim a ver o fluxo diário de pessoas a enviar mensagens de diferentes partes da cidade, até chegarmos à noite de Ano Novo, em que toda a gente diz "Feliz Ano Novo!"

(Risos)

Esta é uma ferramenta interactiva que podem movimentar e ver diferentes partes da cidade. Aqui estamos a ver outro acontecimentos. Este é chamado o Dia da Rainha. E de novo, temos o fluxo diário de pessoas a enviar mensagens SMS de diferentes partes da cidade. Agora vão ver pessoas a reunir-se no centro da cidade para celebrar a noite anterior, o que acontece exactamente aqui. E depois podem ver as pessoas a celebrarem o dia seguinte. Podem pausar e voltar para a frente e para trás e ver fases diferentes.

Agora, algo completamente diferente. Alguns de vocês talvez reconheçam isto. Isto é a máquina mecânica de jogar xadrez de Baron Wolfgang von Kempelen's. É este robot extraordinário que joga xadrez extremamente bem, excepto numa coisa: não é um robot. É na verdade um homem sem pernas que se senta nessa caixa e controla este jogador de xadrez. Esta foi a inspiração para um serviço web da Amazon chamada Mechanical Turk - em homenagem a este homem. É baseada na premissa de que há certas coisas que são muito fáceis para as pessoas, mas muito difíceis para os computadores. Então eles fizeram este serviço web e disseram, "Qualquer programador pode escrever um pouco de software e colocá-lo na mente de milhares de pessoas." O meu lado nerd pensou "Wow, isto é extraordinário. Eu posso entrar na mente de milhares de pessoas." E o meu outro lado nerd pensou "Isto é horrível. Isto é completamente bizarro. O que significa isto para o futuro da humanidade, onde estamos todos ligados a este borg?" Eu estava provavelmente a ser um pouco extremista. Mas o que quer isto dizer, quando não temos um contexto do que quer que seja que estajamos a trabalhar, e fazemos apenas este pequenos trabalhos?

Então criei esta ferramenta de desenho. Pedi às pessoas que desenhassem uma ovelha virada para a esquerda. E disse: "Pago-te 2 cêntimos pela tua contribuição." E comecei a coleccionar ovelhas. Coleccionei muitas, muitas ovelhas diferentes. Imensas ovelhas. Peguei nas primeiras 10.000 ovelhas que recolhi, e coloquei-as num website chamado TheSheepMarket.com onde podem comprar colecções de 20 ovelhas. Não podem escolher ovelhas individuais, mas podem comprar um bloco de selos como um produto. Sobrepostos contra esta rede, vêem na realidade, ao passar por cada uma individualmente, a humanidade por trás deste enorme processo mecânico. Acho que há algo de realmente interessante em observar as pessoas à medida que usam esta ferramenta criativa - algo com que todos nos podemos relacionar, este processo criativo de tentar fazer algo a partir do nada. Acho que foi realmente interessante sobrepor esta humanidade contra esta rede de distribuição maciça. É incrível o que algumas pessoas fizeram.

Aqui estão algumas estatísticas do projecto. Uma recolha aproximada de 11 ovelhas por hora, o que daria um custo de trabalho de 69 cêntimos por hora. Foram rejeitadas 662 ovelhas que não cumpriram os critérios e foram retiradas do rebanho. (Risos) O total de tempo gasto a desenhar variou de 4 segundos a 46 minutos. Isto dá-vos uma ideia das diferentes motivações e dedicações. E foram 7.599 pessoas que contribuíram para o projecto - ou únicos endereços de IP - enfim, foi mais ou menos esta a quantidade de pessoas que contribuíram. Mas apenas uma destas 7.599 pessoas disse...isto. (Risos) Com o que eu fiquei bastante surpreendido. Esperava que as pessoas se perguntassem "Porque é que eu desenhei uma ovelha?" E acho que é uma questão muito válida.

Há uma série de razões pela qual escolhi uma ovelha. A ovelha foi o primeiro animal a ser criado a partir de subprodutos processados mecanicamente, a primeira a ser criada selectivamente para características de produção, o primeiro animal a ser clonado. Obviamente, nós pensamos nas ovelhas como seguidoras. E há esta referência ao "O Principezinho" em que o narrador pede ao príncipe para desenhar uma ovelha. Ele desenha ovelha atrás de ovelha. O narrador apenas se apazigua quando ele desenha uma caixa. E ele diz: "Não é sobre a interpretação científica de uma ovelha. É sobre a tua própria interpretação e fazeres algo diferente." E eu gostei disso.

Este é um clip do "Modern Times" de Charlie Chaplin. Mostra Charlie Chaplin a lidar com algumas das maiores alterações durante a Revolução Industrial. Não existiam mais sapateiros, mas agora há pessoas a colocar solas no calçado das pessoas. E toda a ideia de relação com o trabalho mudou imenso. E achei que este era um clip interessante para dividir em 16 partes e colocá-las na Mechanical Turk com uma ferramenta de desenho. Isto permitiu que - o que vêem no lado esquerdo é o frame original, e no lado direito vêem como esse frame foi interpretado por 16 pessoas que não tinham qualquer ideia do que estavam a fazer.

E isto foi a inspiração para um projecto em que trabalhei com o meu amigo Takashi Kawashima. Nós decidimos usar a Mechanical Turk exactamente para aquilo que foi concebida, que é fazer dinheiro. E pegámos numa nota de 100 dólares e dividimo-la em 10.000 partes pequeninas, e introduzimo-las na Mechanical Turk. Pedimos às pessoas que desenhassem o que viam. Mas não havia nenhum critério como nas ovelhas. As pessoas, se desenhassem um rabisco ou uma cara sorridente, isso era inserido na nota. O que estão a ver é na verdade a representação de como as pessoas fizeram tão bem o que lhes foi pedido para fazer. Pegámos nestas notas de 100 dólares, e colocámo-las num website chamado TenThousandsCents.com, onde podem navegar e ver todas as contribuições individuais. Na verdade podem trocar notas verdadeiras de 100 dólares por notas de 100 dólares falsas e fazer uma doação para o Hundred Dollar Laptop Project, que é agora conhecido por One Laptop Per Child. Isto está de novo a mostrar todas as diferentes contribuições. Podem ver que houve pessoas que fizeram representações detalhadas. como esta aqui no topo - passaram muito tempo a fazerem versões realísticas. E outras pessoas desenhavam rabiscos ou caras sorridentes. Aqui no lado direito no meio vêem esta pessoa escrevendo "$0.01!!! A sério?" É tudo o que vou receber por isto?

(Risos)

O último projecto Mechanical Turk de que vos vou falar é chamado Bicycle Built for 2000. Esta é uma colaboração com o meu amigo Daniel Massey. Talvez reconheçam estes dois tipos. Este é Max Mathews and John Kelly do Bell Labs nos anos 60, onde criaram a canção "Daisy Bell," que foi o primeiro computador cantor mundial. Talvez reconheçam isto de "2001: Uma odisseia no espaço." Quando HAL está a morrer no final do filme ele começa a cantar esta canção, como referência a quando os computadores se tornaram humanos. E nós re-sintetizámos esta canção. Isto é como soava no início. Nós decomposémos tudo em notas individuais na canção assim como nos fonemas na canção.

Daisy Bell: ♫ Daisy, Daisy ... ♫

Aaron Koblin: E nós pegámos em todas estas peças individuais, e colocámo-las em outro Turk. Isto é como parecerá se entrarem no site. Digitam o vosso código, mas primeiro devem testar o vosso microfone. Receberiam um clip de áudio muito simples. (Buzina) E depois dariam o vosso melhor para recrear isso com a vossa voz. Depois de reverem e confirmarem e submeterem, podem submeter isso no Mechanical Turk sem mais nenhum contexto. E isto foi o que obtivemos com as primeiras submissões.

Gravando: ♫ Daisy, Daisy ♫ ♫ dá-me a tua resposta ♫ ♫ Estou meio louco ♫ ♫ pelo teu amor ♫ ♫ Não pode ser um casamento elegante ♫ ♫ Não posso pagar uma carruagem ♫ ♫ Mas estarás linda sobre esse assento ♫ ♫ de uma bicicleta feita para dois ♫

AK: James Surowieki teve esta ideia da sabedoria das multidões que diz que um conjunto de pessoas é mais esperto do que uma individual. Queríamos ver como isto se aplicava à colaboração, a criação distribuída de música, onde ninguém sabia em que é que estava a trabalhar. Por isso se forem ao BicycleBuiltforTwoThounsand.com podem ouvir o que tudo isto soa em conjunto. Desculpem-me por isto.

(Barulho)

Refrão: ♫ Daisy, Daisy ♫ ♫ Dá-me a tua resposta ♫ ♫ Estou meio louco ♫ ♫ pelo teu amor ♫ ♫ não pode ser um casamento elegante ♫ ♫ não posso alugar uma carruagem ♫ ♫ Mas estarás linda sobre esse assento ♫ ♫ de uma bicicleta feita para dois ♫

AK: Voltando atrás por um segundo, quando eu estava na UCLA indo para a universidade, estava também a trabalhar num lugar chamado Center for Embedded Network Sensing. E estava a escrever software para scanners de laser visual. Basicamente movimento em espaço 3D. E isto foi visto por um director em LA chamado James Frost que disse, "Espera aí. Quer dizer que nós podemos fazer um video de música sem usar na verdade um vídeo?" E nós fizemos exactamente isso. Nós fizemos um video musical para uma das minhas bandas preferidas, Radiohead. E eu acho que uma das minhas partes preferidas do projecto não foi apenas fazer um video com lasers, mas também por ser de código aberto, e nós lançamo-lo como um projecto Google Code, onde as pessoas podiam fazer o download de uma série de dados e algum código de fonte para construírem a sua própria versão. E as pessoas estavam a fazer coisas maravilhosas. Estas são na verdade duas das minhas preferidas: a versão pin-boar de Thom Yorke e a versão LEGO de Thom Yorke. Imensas pessoas do canal YouTube a submeterem material muito interessante. Recentemente, alguém até imprimiu a cabeça de Thom Yorke em 3D, o que é um pouco assustador, mas muito fixe.

Com tantas pessoas a fazerem coisas tão interessantes e entendendo na verdade o que estavam a fazer, Estava realmente interessado em fazer um projeto colaborativo onde as pessoas trabalhariam juntas para construir algo. Conheci um director de vídeos de música chamado Chris Milk. E começámos a saltar entre ideias para fazer um projecto vídeo-musical colaborativo. Mas nós sabíamos que precisávamos mesmo da pessoa certa para nos suportar e contruir alguma coisa. Por isso deixámos a ideia em banho-maria por uns meses. E ele acabou por falar com Rick Rubin, que estava a terminar o ultimo álbum de Johnny Cash chamado "Ain't No Grave." A letra da canção principal dizia "Nenhum túmulo pode manter o meu corpo em baixo." E nós pensámos que isto era perfeito para construir um projecto memorial colaborativo e uma ressurreição virtual para Johnny Cash,

Por isso reuni-me com o meu bom amigo Ricardo Cabello, conhecido como Mr. doob, que é um programador muito melhor do que eu, e ele fez esta ferramenta maravilhosa de desenho Flash. Como vocês sabem, uma animação é uma série de imagens. Por isso o que fizemos foi cortar uma série de imagens do arquivo de Johnny Cash, e em oito frames por segundo, nós permitimos que individuos desenhassem um frame apenas que iria misturar-se com os outros nesta alteração dinâmica de video de música. Não tenho tempo de mostrar tudo, mas quero mostrar-vos dois breves clips. Um é o inicio do video de música. E esse vai ser seguido por um breve clip de pessoas que já contribuíram realmente para o projecto falando sobre isso brevemente.

(Música)

(Vídeo) Johnny Cash: ♫ Nenhuma sepultura ♫ ♫ pode prender o meu corpo em baixo ♫ ♫ Nenhuma sepultura ♫ ♫ pode prender o meu corpo em baixo ♫ ♫ Quando eu ouço o som do trompete ♫ ♫ Eu vou levantar-me do chão ♫ ♫ Nenhuma sepultura ♫ ♫ pode prender o meu corpo ... ♫

(Aplausos)

AK: Que melhor maneira de prestar tributo ao homem do que fazer algo por uma das suas canções.

Colaborador: Senti-me realmente triste quando ele morreu. Apenas pensei que isto seria maravilhoso, seria realmente muito bom contribuir de algum modo para a sua memória.

Colaborador dois: Isto realmente permite que esta última gravação seja uma memória viva, que respira.

Colaborador três: Cada frame desenhado pelos fãs, cada frame individual, tem um grande sentimento posto em si.

Colaborador quatro: Vi pessoas do Japão, Venezuela, até aos EUA, até Knoxville, Tennessee.

Colaborador cinco: Na medida em que é diferente de frame para frame, é realmente pessoal. Colaborador seis: Vendo o vídeo na minha sala, vi que não entendia isto no ínicio. Trabalhei e trabalhei no problema até que todas as pequenas batalhas que eu estava a travar com a imagem começaram a resolver-se por si mesmas. Posso realmente ver o sentido quando eu sei o que estou a fazer, e imensa luz e escuridão acaba por vir. E, de uma forma estranha, é isso que eu gosto na música de Johnny Cash. É a soma total da sua vida, todas as coisas que aconteceram - as coisas más, as coisas boas. Estamos a ouvir a vida de uma pessoa.

AK: Se forem ao site JohnnyCashProject.com, o que vão ver é o vídeo que está a passar em cima. E em baixo todos os frames individuais que as pessoas têm submetido para o projecto. Isto ainda não está terminado de todo, este é um projecto contínuo onde as pessoas podem continuar a colaborar. Se passarem sobre qualquer uma destas miniaturas individuais, podem ver quem foi a pessoa que desenhou essa miniatura individual e onde elas se localizam. E se encontrarem uma que vos interesse, podem clicar nele e abrir um painel informativo onde podem classificar o frame, o que o ajuda a subir ao topo Também podem ver a forma como foi desenhado. De novo, podem ver o contributo pessoal. Além disso, está listado o nome do artista, a localização, quanto tempo levaram para desenhá-lo. E podem escolher um estilo. Este aqui foi classificado como "Abstrato". Mas há toda uma série de estilos diferentes. E podem misturar o video de diferentes maneiras. Vocês podem dizer, "Eu quero ver a versão em pontos ou a versão de esboço ou a versão real. E aqui de novo, a versão abstracta, que acaba por se tornar um pouco maluca.

A última colaboração de que vos quero falar é outra colaboração com Chris Milk. E é chamada "The Wilderness Downtown." É um vídeo de música online dos The Arcade Fire. Chris e eu estávamos realmente maravilhados pelo potencial dos navegadores de web modernos, onde temos áudio e vídeo em HTML5 e o poder do JavaScript para se tornar realmente rápido. Queríamos usar a ideia de video de música feito para a web para além da janela quatro por três ou 16/9 e tentar tocar e coreografar através do ecrã. Mas, mais importante, acho eu, queríamos mesmo fazer uma experiência que era diferente do projecto Johnny Cash, onde tinhamos um grupo pequeno de pessoas a gastar imenso tempo para contribuir com algo para todos. E se nós tivéssemos um compromisso muito baixo, mas retribuíssemos com algo único e individual a cada pessoa que contribuiu?

Por isso o projecto começa por pedir para introduzirem o vosso endereço ou da casa onde cresceram. E vocês introduzem o endereço - na verdade isso cria um video de música especialmente para ti, extraindo imagens do Google Maps e imagens Streetview na experiência em si mesmo. Por isso isto deve ser visto em casa com vocês introduzindo o vosso endereço, mas vou mostrar-vos um pouco daquilo que podem esperar.

(Video) Win Butler: ♫ Agora as nossas vidas estão a mudar rapidamente ♫ ♫ Agora as nossas vidas estão a mudar rapidamente ♫ ♫ Espero que algo puro possa durar ♫ ♫ Espero que algo puro possa durar ♫ ♫ Ooh nós costumávamos esperar ♫ ♫ Ooh nós costumávamos esperar ♫ ♫ Ooh nós costumávamos esperar ♫ ♫ Ás vezes nunca vinha ♫ ♫ Ás vezes nunca vinha ♫ ♫ Ainda a movermo-nos pela dor ♫ ♫ Costumávamos esperar por isso ♫ ♫ Costumávamos esperar por isso ♫ ♫ Costumávamos esperar por isso ♫

AK: Acho que, se há alguma coisa para guardar da minha conversa de hoje, é que a interface pode ser um instrumento narrativo poderoso. E à medida que recolhemos mais e mais dados pessoais e sociais relevantes, temos a oportunidade e talvez até a obrigação, de preservar a humanidade e contar algumas histórias maravilhosas à medida que exploramos e colaboramos juntos.

Muito obrigado.

(Aplausos)