Jeff Han demonstra sua Inovadora tela sensível ao toque

Estou realmente animado em estar aqui hoje, porque estou prestes a demonstrar algo que está pronto para sair do laboratório, literalmente, e estou muito contente que vocês estarão entre os primeiros a vê-la pessoalmente, porque eu acho que mudará a forma com que interagimos com as máquinas de agora em diante.

Esta é uma mesa de projeção. Ela tem 36 polegadas de largura, e está equipada com um sensor multi toque. Os sensores de toque normais que você vê em telas ou quadros interativos, podem registrar apenas um ponto de contato de cada vez. Esta tela permite multiplos pontos de contato ao mesmo tempo. Permite que eu utilize ambas as mãos, com movimentos conjuntos, e posso até utilizar todos os 10 dedos se eu quiser. Sabe, assim.

Sensores multi toque não são novidade. Pessoas como Bill Buxton brincavam com eles nos anos 80. Entretanto, o que construi aqui é na verdade de alta resolução, baixo custo, e provavelmnte o mais importante, muito escalável. A tecnologia não é a coisa mais emocionante aqui, a não ser pela sua acessibilidade. O que é realmente interessante é o que você pode fazer com ela, e o tipo de interfaces que você pode construir sobre ela. Então vamos ver.

Por exemplo, temos aqui uma aplicação "abajur de lava". Podem ver, que posso utilizar ambas as mãos para apertar e juntar as bolhas. Posso injetar calor no sistema, ou posso separar com dois dedos. É completamente intuitivo; não há manual de instruções. A interface simplesmente desaparece. Isto começou como uma proteção de tela que um dos doutorandos em nosso laboratório, IIya Rosenberg, fez. Mas eu acho que sua verdadeira identidade aparece aqui.

O que é interessante em um sensor multi toque é que eu poderia estar fazendo isto com vários dedos, mas é claro multi toque também significa multi usuário. Então o Chris poderia estar interagindo com outra parte da lava, enquanto eu brinco com ela por aqui. Você pode imaginar um novo tipo de ferramenta para esculpir, onde eu estou aquecendo algo, tornando-o maleável, e então deixando-o esfriar e solidificar em uma certa forma. A Google deveria ter algo assim em sua recepção. (Risos)

Vou lhes mostrar algo -- um exemplo mais concreto. Esta é uma aplicação de "mesa de fotógrafo". Novamente, posso utilizar ambas as mãos para interagir e mover as fotos. Mas o que é realmente legal é que se tenho dois dedos, eu posso pegar uma foto e facilmente esticar assim. eu posso mover, ampliar e girar sem esforço. Eu posso fazer isto facilmente com ambas as mãos, ou posso fazer isto com somente dois dedos de cada mão. Se eu pegar a tela posso fazer a mesma coisa -- espichar. Posso fazer simultaneamente, segurando este, e pegando outro, espichando assim.

Novamente, a interface simplesmente desaparece. Não há manual. Isto é exatamente o que você espera, principalmente se você nunca interagiu com um computador. Agora, quanto temos iniciativas tais como o laptop de 100 dólares, eu reluto com a idéia de que estaremos introduzindo à uma nova geração de pessoas a computação com interface padrão de mouse e janelas. Esta aqui é a forma que deveríamos estar interagindo com máquinas de agora em diante. (Aplausos) Agora, é claro, posso ativar um teclado. E posso trazer isto para cá, colocar isto para lá. Agora, obviamente, este é um teclado padrão, mas é claro que posso redimensionar para que funcione melhor para minhas mãos. E isto é mesmo importante, porque atualmente não há motivo para nos sujeitarmos a um dispositivo físico, que leva a coisas ruins, tal como LER. Hoje em dia temos tanta tecnologia que estas interfaces deveriam começar a se ajustar a nós. Muito pouco é aplicado hoje para melhorar a forma com que interagimos com interfaces. Este teclado é provavelmente o caminho errado a seguir. Você pode imaginar, no futuro, a medida que desenvolvemos este tipo de tecnologia, um teclado que automaticamente flutua a medida que sua mão se desloca, e de forma inteligente antecipa qual tecla você está tentando pressionar. Então -- novamente, isto não é ótimo?

Platéia: Onde fica seu laboratório?

Jeff Han: Sou pesquisador na NYU em Nova Iorque.

Aqui temos um exemplo de um outro tipo de aplicação, onde posso fazer estas pequenas bolas. Ela lembrará os movimentos que estou fazendo. É claro que posso fazer com as duas mãos. É sensível a pressão, como podem notar. Mas o que é legal, é o movimento com dois dedos que permite você ampliar rapidamente, uma vez que você não tem que selecionar outra ferramenta manual ou uma ferramenta para ampliar; você pode fazer as coisas de forma contínua em múltiplas escalas, tudo ao mesmo tempo. Posso criar coisas grandes aqui, mas posso rapidamente voltar onde iniciei, e fazer bolinhas ainda menores aqui.

Isto será realmente importante a medida que começamos a fazer coisas como visualização de dados. Por exemplo, creio que todos gostamos da palestra de Hans Rosling, e ele realmente enfatizou algo sobre o qual estou pensando a bastante tempo também: temos todos estes ótimos dados, mas por algum motivo, estão lá parados. Não estamos acessando-os. E um dos motivos pelo qual imagino que isto aconteça, é porque -- seremos auxiliados por gráficos, visualizações e ferramentas de inferência. Mas também imagino que grande parte será começar a ter melhores interfaces, poder aprofundar-se neste tipo de dados, e ao mesmo tempo ter uma visão mais ampla.

Deixe-me mostra-lhes uma outra aplicação. Isto chama-se "WorldWind". É feita pela NASA. Nós todos vimos Google Earth; esta é uma versão código aberto dele. Há plugins que permitem carregar diferentes conjuntos de dados coletados pela NASA com o passar dos anos. Mas como podem ver, posso utilizar os mesmos movimentos de dois dedos para descer e aproximar de forma realmente contínua. Não há interface. Ela realmente permite qualquer um entrar -- e faz o que você espera que faça. Novamente não há interface aqui. A interface simplesmente desaparece. Posso trocar entre diferentes visualizações dos dados. Isto é que é legal nesta aplicação. Pronto, a NASA é mesmo legal. Eles tem estas imagens hiper espectrais que são coloridas, é otimo para determinar uso vegetativo. Bom, vamos voltar.

Agora, o legal de aplicações com mapas -- não é 2D, é 3D. Então, com a interface multi pontos, você pode fazer um movimento assim -- o que permite que você incline a visão. Não está simplesmente restrito a movimentos 2D. Este movimento que desenvolvemos, usando 2 dedos, define um eixo de inclinação, e posso inclinar para cima e para baixo, assim. É algo que acabamos de criar; provavelmente não seja a coisa correta a fazer, mas há tantas coisas interessantes que você pode fazer com este tipo de interface. É tão divertido brincar com ela também. (Risos)

Então a última coisa que quero mostrar a voces é -- tenho certeza que podemos imaginar aplicações de entretenimento que podemos fazer com isto. Estou um pouco mais interessado nas aplicações criativas. Agora, aqui temos uma aplicação simples -- Posso desenhar uma curva. E quando eu a fecho, ela tranforma-se em um personagem. Mas o legal nela é que, eu posso adicionar pontos de controle. E então posso manipulá-los com ambos os dedos ao mesmo tempo. E observe o que ela faz. É um tipo de fantoche, onde posso utilizar tantos dedos quanto disponíveis para desenhar e mover --

Agora, há muita matemática envolvida para controlar esta malha e fazer a coisa correta. Digo, esta técnica de poder manipular uma malha aqui, com múltiplos pontos de controle, é realmente estado da arte. Acabou de ser lançado na Siggraph ano passado, mas é um ótimo exemplo do tipo de pesquisa que realmente adoro. Todos este poder computacional para fazer com que as coisas funcionem corretamente. Coisas intuitivas. Para fazer exatamente o que você espera.

Então, pesquisa em interação multi toque é uma área bastante ativa no momento. Não sou o único, há muitas outras pessoas se envolvendo nisto. Este tipo de tecnologia permitirá que ainda mais pessoas se envolvam. E estou bastante ansioso para interagir com todos vocês durante os próximos dias e ver como ela se aplica às suas respectivas áreas. Obrigado. (Aplausos)