O documento apresenta o Intel Perceptual Computing SDK, que permite o desenvolvimento de aplicativos que reconhecem gestos, voz, rostos e objetos por meio de câmeras. O SDK oferece funcionalidades como rastreamento de mãos, dedos, faces e objetos 3D, reconhecimento de voz e realidade aumentada. Exemplos de casos de uso incluem interfaces interativas, jogos e acessibilidade. Requisitos de hardware incluem processadores Intel Core e câmeras Creative Senz3D.

1. Intel Perceptual
Computing SDK
Felipe Pedroso
Alessandro de Oliveira Faria

2. Agenda
• O que é Perceptual Computing?
• Intel Perceptual Computing SDK
• Hardware
• Funcionalidades
• Demos
2

3. Interação com Dispositivos
3

4. Qual é o próximo salto?
4

5. Perceptual Computing

6. O que é?
• Adicionar “sentidos” ao “cérebro” do “PC”
• Usar mãos, olhos, ouvidos, voz, toque,
emoções e sensibilidade ao contexto para
criar experiências que sejam…
N
8
aturais
I
ntuitivas
I
mersivas

7. 9

8. Intel Perceptual Computing SDK
• Biblioteca de detecção de padrões e
implementações de algoritmos de
reconhecimento (áudio e imagem)
• Foco na implementação da app, não nos
algoritmos
• Quer escovar bits? É possível!
• Extensível: permite a adição de novos modos
de utilização
10

9. Requisitos do SDK
• Hardware
• 2ª e a 3ª geração da arquitetura Intel® Core™
• 1GB de memória livre no HD
• Creative* Senz 3D* camera
• S.O
• Windows 7 SP1 ou superior
• Windows 8 (Modo desktop)
11

10. Creative Camera / Senz3D
• Captura de imagem HD
(720p)
• Sensor de profundidade
(QVGA)
• Array de dois microfones
• Alimentação USB
(<2.5W)
• Drivers para Windows 7
e Windows 8
12

11. Câmeras Integradas aos dispositivos!
13

12. O que usar para desenvolver?
• Linguagens
• C++
• C#
• Java
• Frameworks
•
•
•
•
14
Unity PRO
Processing
openFrameworks
Havok

13. Vamos falar um pouco de arquitetura…
15

14. Mãos/Dedos
• Rastreamento dos “nós”
• 7 pontos: pontas dos dedos, centro da palma e punho
• Gestos e poses padronizadas
• Poses: positivo/negativo, paz, High-5
• Gestos: swype, círculo e aceno
16

15. Face
• Detecção/rastreamento de
múltiplas faces
• Detecção de até 7 pontos
de referência: olhos, nariz
e boca
• Reconhecimento:
semelhanças entre um
conjunto de faces
17

16. Voz
• Desenvolvido pela empresa Nuance
• Reconhecimento de comandos prédefinidos (em pt-br)
• Ditado
• Sintetização de frases curtas
18

17. Realidade Aumentada
• Rastreamento de superfícies planas 2D
• Posição e orientação
• Rastreamento de objetos 3D
• Baseado em modelos 3D
• Orientação de faces
19

18. Background subtraction
• Efeito ‘chroma key’ em tempo real
• Permite focar no que é mais relevante na
imagem e separar do resto
20

19. Legal, posso capturar todas
essas informações…
… mas e a privacidade do usuário?
21

20. Privacy Notification Tool

21. Casos de Uso
• Interfaces interativas
• Jogos
• Realidade Aumentada
• Acessibilidade
• Segurança
23

22. 24

23. 25

24. 26

25. 27

26. 28

27. 29

28. 30

29. 31

30. 32

31. 33

32. 34

33. 35

34. Hello Hands!
38

35. 39

36. Aonde posso saber mais?
• http://intel.com/software/perceptual
40

37. OK,mas como conseguir
uma câmera?
41

38. Programa de parcerias
Mais informações sobre parcerias: http://software.intel.com/pt-br/partner-home

39. Eventos/Concursos
Curta nossa página no Facebook: https://www.facebook.com/intelswbrasil

40. Para desenvolvedores…
• Participar ativamente do IDZ :
• Apresentar uma proposta de um bom projeto
• Se comprometer a escrever artigos técnicos com a câmera em
mãos
• Problema: Depende da disponibilidade e do comprometimento do
desenvolvedor
• Developer edition
• www.intel.com/software/perceptual
• 149 dólares (+ impostos)
• Entrega no Brasil
• Senz3D
• Creative: http://bit.ly/1cxdZpa
• Amazon: http://amzn.to/GPgSne
44

41. Quer saber mais?
• http://software.intel.com.br/
45

42. Comunidade Ultrabooks/Windows
46

43. Take aways
• As interfaces naturais mudarão a interação
Homem-Device
• Diferencie sua app no meio da multidão
• Faça sua app ser referência na tecnologia
antes das câmeras forem integradas
• SDK: Foque no desenvolvimento da sua
app
48

44. Q/A
49

45. Muito obrigado!
• Contatos
•
•
•
•
Felipe Augusto Pedroso
felipe.pedroso@intel.com
facebook.com/felipe.a.pedroso
@felipepedroso
• Alessandro de Oliveira Faria
• alessandrdofaria@netitec.com.br
50