Recommandé
Recommandé
Contenu connexe
En vedette
En vedette (20)
Haptic face prezentacja
- 1. Cel: Opracowanie haptycznego systemu do nauki kontroli mimiki twarzy dla osób niewidomych i słabowidzących.
- 2. Członkowie Haptic Face team: inż. Artur Milewski inż. Michał Ostaszewski dr inż. Tomasz Huścio – opiekun Haptic – z greckiego hapticos - dotykowy
- 3. „Komunikacja niewerbalna jest najważniejszym elementem komunikacji w relacjach międzyludzkich” prof. Albert Mehrabian Mimika Przekaz informacji 1. Treść wypowiedzi - 7% 2. Mowa ciała - 55% 3. Brzmienie głosu - 38%
- 4. • Brwi i czoło • Oczy • Nos • Górna warga • Dolna warga i broda • Szczelina ust Regiony twarzy kształtujące wyraz mimiczny
- 5. Ekspresja
- 6. Skala problemu Na świecie – 285 milionów ludzi cierpi na dysfunkcję wzroku, z czego 39 milionów jest niewidome – dane World Health Organization z 2014 roku W Polsce – 1,8 miliona ludzi cierpi na tą dysfunkcje, z czego 90 tysięcy jest niewidome – dane GUS z 2015 roku.
- 8. Nauka kontroli mimiki twarzy Istniejące rozwiązania do nauki kontroli mimiki twarzy: •Ćwiczenia z osobą, której twarz jest wzorcem dotykanym przez niewidomego •Ćwiczenia ze sztuczną twarzą
- 9. Robot naśladujący ludzką mimikę Sophia: • Prototyp z 2016 roku • Zbudowana w Hanson Robotics • 64 robotyczne „mięśnie” • Przypuszczalnie wysoka cena • Niska dostępność • Zakres mimiki ograniczony do jednego wzorca
- 10. Mimika dzieci widzących staje się z wiekiem coraz bardziej wyrazista i bogata, natomiast mimika dzieci niewidomych albo nie ulega zmianie, albo ubożeje. Mimika u dzieci niewidomych
- 11. Człowiek, który nie widzi, nie zdaje sobie sprawy z tego, że jego mimika twarzy może się różnić od typowych wzorców. Stereotyp – dziecko niewidome jest najczęściej upośledzone i ograniczone umysłowo. Dlaczego powinniśmy działać? Zmniejszenie pewności siebie, wykluczenie ze społeczeństwa.
- 12. Ogólnodostępnego Przenośnego Taniego Intuicyjnego w obsłudze Przyjaznego człowiekowi w potrzebie Jakiego rozwiązania szukamy?
- 13. Autorskie rozwiązanie Problem niepożądanych, niekoordynowanych ruchów twarzy u osoby niewidomej Haptic Face Podniesienie samooceny i przełamanie wykluczenia społecznego Haptyczny system do nauki kontroli mimiki twarzy dla osób niewidomych i słabowidzących
- 14. Tablety haptyczne Tactile feedback Technologia dotykowa umożliwiająca rozpoznawanie chropowatości ekranu tabletu Odczuwanie wrażeń dotykowych: tekstury przedmiotów oraz kształtów Urządzenia haptyczne z dotykowym sprzężeniem zwrotnym
- 15. •Indywidualny trening •Wyświetlanie dotykowego wzorca twarzy na tablecie haptycznym •Analiza mięśni mimicznych twarzy poprzez przednią kamerę •Komunikaty głosowe informujące o poprawności wykonanego ćwiczenia •Wskazówki motywujące do dalszych ćwiczeń Haptic Face – założenia systemu
- 16. • Ćwiczenia na zasadzie wciągającej gry • Im wyższy poziom, tym trudniejsze zadania do wykonania • Tryb multiplayer Haptic Face – tryb gry
- 17. • Współpraca z Polskim Związkiem Niewidomych • Analiza istniejących urządzeń haptycznych z dotykowym sprzężeniem zwrotnym • Kontakt z firmami, które opracowały prototypy tabletów haptycznych Co zostało już zrobione?
- 18. • Projekt interfejsu graficznego z bazą twarzy z występującymi wyrazami mimicznymi Co zostało już zrobione?
- 19. Haptic Face Team dziękuje za uwagę!
Notes de l'éditeur
- Dzień dobry, chciałbym powitać Kapitułę oraz zebranych gości Ja nazywam się M.O., mój kolega to AM, jesteśmy studentami AiR, już na drugim stopniu studiów. Od początku studiów udzielamy się w pracach Koła Naukowego Robotyków, w którym braliśmy udział między innymi w projekcie łazika marsjańskiego. Jesteśmy pasjonatami technologii mobilnych. Naszym opiekunem w tym projekcie jest dr inż. Tomasz Huścio. Wspólnie tworzymy zespół Haptic Face. Jesteśmy finalistami w kategoriach technotalent, technotalent Politechniki Białostockiej oraz inspiracje Zanim przejdziemy do meritum naszego tematu najpierw krótki wstęp.
- Dzień dobry, chciałbym powitać Kapitułę oraz zebranych gości Ja nazywam się M.O., mój kolega to AM, jesteśmy studentami AiR, już na drugim stopniu studiów. Od początku studiów udzielamy się w pracach Koła Naukowego Robotyków, w którym braliśmy udział między innymi w projekcie łazika marsjańskiego. Jesteśmy pasjonatami technologii mobilnych. Naszym opiekunem w tym projekcie jest dr inż. Tomasz Huścio. Wspólnie tworzymy zespół Haptic Face. Jesteśmy finalistami w kategoriach technotalent, technotalent Politechniki Białostockiej oraz inspiracje Zanim przejdziemy do meritum naszego tematu najpierw krótki wstęp.
- Nasz projekt koncentruje się na komunikacji niewerbalnej, a zwłaszcza mimice, która jest jej podstawą. Mimika są to ruchy mięśni twarzy, wyrażające myśli, emocje, przeżycia, nastroje, a także postawy wobec innych ludzi oraz bieżące komentarze do toczącej się komunikacji. Komunikacja niewerbalna jest dla nas czymś naturalnym. Nawet teraz moja postawa, mimika, gesty przedstawiają Państwu wiele informacji o mnie. Czy jestem spięty, pewny siebie, czy wiem o czym mówię.
- Głównymi regionami twarzy, które kształtują naszą ekspresją mimiczną są, broda i czoło, oczy, nos, górna i dolna warstwa, broda oraz szczelina ust.
- Wykonywać różne gesty uczymy się już od dziecka. Naśladując zachowanie rodziców i otaczających nas ludzi kreujemy swój sposób prezentowania emocji. Mimo, że każdy z nas jest inny, pewne cechy ekspresji są wspólne dla różnych emocji. Dobrym przykładem tego jest uśmiech. Na zdjęciach widzimy ludzi w różnym wieku, o różnej płci, z różnych stron świata. Nie zmienia to faktu, że zdjęcia są o siebie bardzo podobne. Na każdym z nich można wyczuć radość. Nie można przejść obok tego obojętnie. Gdyby którakolwiek z tych osób była naszym rozmówcą, jestem pewien, że dobry nastrój odbiłby się i na nas. Co więc mają zrobić ludzie, którzy nie widzą?
- Według danych Światowej Organizacji Zdrowia z 2014 roku na świecie na dysfunkcję wzroku cierpi około 285 milionów ludzi, z czego 39 milionów to osoby niewidome. W samej Polsce według danych Głównego Urzędu Statystycznego z 2015 niewidomych jest około 90 tysięcy, a na dysfunkcje wzroku cierpi około 1,8 miliona ludzi. Wielu z nich nie widzi od urodzenia. Problem z okazywaniem emocji jest olbrzymi. Prowadzi do zmniejszenia pewności siebie osób niewidomych oraz do wykluczenia ich ze społeczeństwa.
- Żeby zaradzić temu zjawisku niewidome dzieci uczy się naśladować emocje. Często wykorzystuje się ćwiczenie polegające na tym, że dziecko dotyka twarzy osoby udającej dane emocje, na przykład mamy lub taty. Rozwiązanie to ma swoje plusy, pozwala dobrze „wyczuć” daną ekspresję oraz zwiększa więzi z osobą, z którą ćwiczenie jest wykonywane. Niestety osoba niewidoma nie ma możliwości pracy z dużą liczbą partnerów, a z biegiem lat wykonywanie tego ćwiczenia może być dla niej krępujące.
- W wielu laboratoriach na świecie trwają prace nad wykonaniem robota z ludzką twarzą. Robot tego typu mógłby pomóc w ćwiczeniu rozpoznawania i naśladowania emocji. Problemem w tego typu projektach, mimo, że są one warte uwagi i zainteresowania, jest trudność w odwzorowaniu mięśni twarzy człowieka. Mamy ich aż 54, a roboty często potrzebują ich jeszcze więcej, aby chodź trochę zbliżyć się do naszej mimiki. Roboty o ludzkim wyglądzie jeszcze nie są dostępne w sprzedaży, ale można spodziewać się, że nawet jeśli zdadzą egzamin i będą nadawać się do nauki osób niewidomych, to ich cena będzie astronomiczna. Będą mogli pozwolić sobie na nie tylko ludzie bardzo bogaci lub duże organizacje. Skutkować to będzie małą dostępnością aparatury naukowej.
- W Polsce, jak pokazaliśmy wcześniej, jest bardzo wiele osób niewidomych. Stowarzyszenia nawet jeśli wiedzą o najnowszych urządzeniach pomagających swoim podopiecznym nie mają funduszy na ich zakup. Trzeba im jakoś pomóc. Osoba niewidząca nie ma możliwości bezpośredniej obserwacji i porównywania z innymi swojej mowy ciała, gestykulacji oraz mimiki twarzy.
- Człowiek, który nie widzi, nie zdaje też sobie sprawy z tego, że jego mimika twarzy może się różnić od typowych wzorców. Nie zdaje sobie sprawy do czasu, aż ktoś mu o tym powie – często złośliwie. Kwestię uświadamiania dzieci poruszyły panie psycholog, [nazwiska]z którymi rozmawialiśmy podczas spotkania w Białostockim oddziale Polskiego Związku Niewidomych. Jeżeli dzieci niewidome zaczniemy od najmłodszych lat uczyć kontrolowanej mimik twarzy, to oszczędzimy im problemu złośliwości, który może ich dotknąć w każdej chwili. Z tym, że nie widzą najczęściej się godzą, ale informacja, że robią dziwne, miny może być poważnym ciosem. Ta niestandardowa ekspresja jest przyczyną jeszcze jednego stereotypu – że dziecko niewidome jest najczęściej upośledzone i ograniczone umysłowo. Takiego stanu rzeczy nie możemy tolerować.
- Czego więc szukamy? Rozwiązania ogólnodostępnego, przenośnego, taniego, intuicyjnego w obsłudze. Czyli systemu, który umożliwiłby realizację ćwiczeń – najlepiej samodzielnie, w dowolnym miejscu oraz niskim kosztem. Przedstawimy teraz nasze autorskie rozwiązanie – system Haptic Face.
- Haptic Face jest technologią, która pozwoli osobom niewidomym na pozbycie się niewygodnego problemu związanego z niepożądanymi ruchami twarzy. Umiejętność przekazywania komunikatów niewerbalnych poprawi niewidomym samoocenę i przełamie wykluczenie społeczne. Do tego celu wykorzystamy tablety z technologią haptyczną.
- Umożliwiają one rozpoznawanie chropowatości powierzchni ekranu. Bardziej technicznie rzecz ujmując specjalna nakładka w formie ultra cienkiej powłoki pozwala zaadoptować "zwykłe" ekrany dotykowe do generowania wrażeń dotykowych. Nakładka jest podzielona na części, tzw. Tiksele. Przy kontakcie ze skórą wytwarzają one siłę elektromagnetyczną. Wartość tej siły może być modulowana, dzięki temu można tworzyć różne wrażenia dotyku. Zatem mamy możliwość wykrycia różnych tekstur oraz kształtów takich jak: wybrzuszenia, krawędzie czy śliska powierzchnia. Warto wspomnieć, że osoba niewidoma dzięki wyostrzonemu zmysłowi dotyku jest w stanie wyczuć dłońmi różnice w chropowatości powierzchni dużo lepiej niż osoba widząca.
- Wykorzystamy możliwości tabletu haptycznego do wyświetlania konkretnej mimiki twarzy, którą następnie osoba niewidoma będzie mogła zanalizować przy pomocy dłoni i spróbować ją naśladować. Przy pomocy przedniej kamery program zeskanuje twarz osoby niewidomej i poinformuje użytkownika komunikatami głosowymi o poprawności wykonanego ćwiczenia. Jednocześnie aplikacja będzie trenerem osoby niepełnosprawnej, który wyznacza konkretne cele i motywuje do dalszego działania.
- Ćwiczenia będą odbywały się na zasadzie wciągającej gry, w której użytkownik za poprawnie wykonane ćwiczenia zdobywa nowe poziomy. Im wyższy poziom, tym trudniejsze zadania do wykonania otrzymuje. Mogą to być bardziej złożone miny bądź krótszy czas naśladowania wzorca. Planujemy również stworzyć tryb multiplayer, który pozwoli wprowadzić element rywalizacji do gry. Niewidomi będą mogli ćwiczyć ze sobą oraz motywować się wzajemnie.
- Na tę chwilę: Przeprowadziliśmy rozmowy z Polskim Związkiem Niewidomych by jak najlepiej zrozumieć problemy, z którymi spotykają się na co dzień ich podopieczni. Nasz pomysł został przyjęty z ogromnym entuzjazmem. Dokonaliśmy analizy istniejących urządzeń haptycznych z dotykowym sprzężeniem zwrotnym. Wysłaliśmy zapytania do 5 niezależnych firm o możliwość zakupu bądź wypożyczenia tabletu haptycznego z oprogramowaniem niezbędnym do budowy haptycznych interfejsów. Są to: Senseg, Continental, TPAD, Fujitsu oraz Apple. Planujemy przeprowadzić testy na możliwie jak największej liczbie tych urządzeń oraz wybrać te najbardziej obiecujące. Głównym kryterium wyboru będzie możliwa najwyższa rozdzielczość odwzorowania konkretnego obrazu oraz intensywność wrażenia dotyku. Zaprojektowaliśmy interfejsy graficzne, na bazie których będą zaprojektowane interfejsy haptyczne Jesteśmy zespołem ambitnych inżynierów posiadających doświadczenie przy bardziej złożonych projektach. Wspólnie z Michałem jesteśmy konstruktorami 2 analogów łazików marsjańskich.
- Na tę chwilę: Przeprowadziliśmy rozmowy z Polskim Związkiem Niewidomych by jak najlepiej zrozumieć problemy, z którymi spotykają się na co dzień ich podopieczni. Nasz pomysł został przyjęty z ogromnym entuzjazmem. Dokonaliśmy analizy istniejących urządzeń haptycznych z dotykowym sprzężeniem zwrotnym. Wysłaliśmy zapytania do 5 niezależnych firm o możliwość zakupu bądź wypożyczenia tabletu haptycznego z oprogramowaniem niezbędnym do budowy haptycznych interfejsów. Są to: Senseg, Continental, TPAD, Fujitsu oraz Apple. Planujemy przeprowadzić testy na możliwie jak największej liczbie tych urządzeń oraz wybrać te najbardziej obiecujące. Głównym kryterium wyboru będzie możliwa najwyższa rozdzielczość odwzorowania konkretnego obrazu oraz intensywność wrażenia dotyku. Zaprojektowaliśmy interfejsy graficzne, na bazie których będą zaprojektowane interfejsy haptyczne Jesteśmy zespołem ambitnych inżynierów posiadających doświadczenie przy bardziej złożonych projektach. Wspólnie z Michałem jesteśmy konstruktorami 2 analogów łazików marsjańskich.
- Razem możemy zmienić życie wielu niewidomych i niedowidzących ludzi na całym świecie! Dziękujemy za uwagę