TensorFlow je špičková knihovna pro umělou inteligenci (AI), kterou Google překvapivě open-sourcoval. V přednášce se dozvíte rychlý úvod do AI a využití TensorFlow. Vše uvidíte na reálném příkladu Android aplikace s TensorFlow, který si pak můžete doma vyzkoušet. Video: https://www.youtube.com/watch?v=7jhDYKZ8wqc Celý program: Petr Zadražil: TensorFlow v mobilních aplikacích Petr Šíma: Principy funkcionálně reaktivního programovaní Petr Hamerník: Textová analytika v mobilních aplikacích Web: http://mdevtalk.cz E-mail: info@mdevtalk.cz FB: https://facebook.com/mdevtalk Twitter: https://twitter.com/mdevtalk

2. PETR ZADRAŽIL
Software Engineer, Google

3. TensorFlow
pro mobilní vývojáře

4. Rozpoznávání obrázků
TensorFlow
Mobilní praxe
Obsah

5. Rozpoznávání obrázků

6. Skok Kupředu

7. 32x32px - 10 kategorií
ukázky obrázků
správně
2015 96.53%
2014 93.72%
2013 90.68%
2012 90.50%
2011 80.00%
člověk ~94.00%
CIFAR-10

8. Inceptionism

9. Inceptionism

10. Inceptionism

11. Inceptionism

12. Umělecké Styly

13. výpočetní síla (i mobilní)
množství dat
distribuované algoritmy
větší porozumění
nové typy neuronových sítí
Proč až nyní?

14. Preprocessing

15. 10 čísel (kategorií)
60 000 trénovacích
10 000 testovacích
28 x 28 pixelů
MNIST

16. MNIST

17. y = softmax (Wx + b)
Softmax Regression
i →
j
↓

18. Ztrátová funkce
y = softmax (Wx + b)
y = [0.5, 0.2, 0.3]
y’ = [1, 0, 0]
i →
j
↓

19. Výsledek

20. TensorFlow

21. distribuovaný machine-learning framework
vedlejší produkt výzkumu v Google
umožňuje:
100 000 000 000+ parametrů
100 000 000 000+ příkladů
100+ výpočetních serverů
TensorFlow

22. interface: Python, C++, …
portabilní: CPU, GPU, mobilní telefony, …
využití:
rozpoznávání řeči
rozpoznávání obrazu
robotika
vytežování dat
výzkum léků
TensorFlow

23. vstup
parametr
operace
tensor
Graf - základ výpočtu
W
b
x
MatMul
Add

24. Graf - základ výpočtu
W
b
x
MatMul
Add
LossLearn
y’

25. Ukázka Kódu
https://github.com/tensorflow/tensorflow/blob/master/tensorflow/
examples/tutorials/mnist/mnist_softmax.py

26. Neuronová síť

27. Neuron
Σ f()W2
W3
b
W1

28. Aktivační funkce
Sigmoid: 1 / (1 - e^(-x))
Gausian: e ^ (-(x^2))
ReLU: max(0, x)

29. Neuronová Síť

30. Konvoluční Neuronová Síť
preprocessing - centrovani

31. Konvoluční Neuronová Síť

32. Konvoluční Neuronová Síť

33. Konvoluční Neuronová Síť

34. Animace

35. Ukázka Kódu
https://drive.google.com/open?id=0B00r-2PrfhYJX3l6Wnh2VHhSWms

36. Krizehvsky et al. (2012)
2 GPUs, ReLU, DropOut, ImageNet

37. Krizehvsky et al. (2012)

38. Krizehvsky et al. (2012)

39. Mobilní Praxe

40. Vývojový proces

41. Knihovna
Java
Nativní Kód (C)
TensorFlow

42. Android Kód
https://github.com/tensorflow/tensorflow/tree/master/tensorflow/examples/android
tensorflow::Tensor input_tensor(
tensorflow::DT_FLOAT,
tensorflow::TensorShape({1, g_tensorflow_input_size,
g_tensorflow_input_size, 3}));
auto input_tensor_mapped = input_tensor.tensor<float, 4>();
input_tensor_mapped(i, j, k, l) = <float>;

43. Android Kód
https://github.com/tensorflow/tensorflow/tree/master/tensorflow/examples/android
tensorflow::Tensor input_tensor(
tensorflow::DT_FLOAT,
tensorflow::std::vector<std::pair<std::string, tensorflow::Tensor> > input_tensors(
{{"input:0", input_tensor}});
std::vector<tensorflow::Tensor> output_tensors;
std::vector<std::string> output_names({"output:0"});
tensorflow::Status s = session->Run(input_tensors, output_names, {},
&output_tensors);

44. Android Kód
https://github.com/tensorflow/tensorflow/tree/master/tensorflow/examples/android
if (!s.ok()) {
LOG(ERROR) << "Error during inference: " << s;
return "";
}
tensorflow::Tensor* output = &output_tensors[0];({1,
g_tensorflow_input_size, g_tensorflow_input_size, 3}));

45. Google Translate
Živé Ukázky
TensorFlow Demo App

46. https://www.youtube.com/watch?v=0zKU7jDA2nc&t=1m50s
Google Translate

47. Triky
preprocessing
detekce tvarů
normalizace
nepřesný překlad (5uper)

48. Triky
Generovaná Data

49. Kam Dál
Web TensorFlow: https://www.tensorflow.org/
TebsorFlow Android Example: https://github.com/tensorflow/
tensorflow/tree/master/tensorflow/examples/android
Materiály k prezentaci: https://drive.google.com/open?
id=0B00r-2PrfhYJQ0oyZkpyaFF5amc
Colah’s Blog: http://colah.github.io/
Karpathy’s Blog: http://karpathy.github.io/

50. Otázky?

51. Líná huba - holé neštěstí.
— moje babička

52. Web TensorFlow: https://www.tensorflow.org/
TensorFlow White Paper: http://download.tensorflow.org/paper/whitepaper2015.pdf
TebsorFlow Android Example: https://github.com/tensorflow/tensorflow/tree/master/
tensorflow/examples/android
Google Research Blog: http://googleresearch.blogspot.cz/
Colah’s Blog: http://colah.github.io/
Karpathy’s Blog: http://karpathy.github.io/
Rodrigo’s Blog: http://rodrigob.github.io/
XKCD: http://xkcd.com
Neural Artist Style: https://github.com/jcjohnson/neural-style
Zdroje

53. WWW.MDEVTALK.CZ
mdevtalk