NCLab 신입생 OT 발표자료

1. 석사 신입생들을
환영합니다!
NCLAB
송준화 교수

2. AI &
Deep Learning
Mobile-IoT
Systems
Human & Social
Computing
NCLab 주요 연구 분야
NCLAB

3. 연구분야
연구실 사례)
• 세계 최초의 AI기반 Mobile 플랫폼 (프로액티브형 mobile-IoT 플랫폼, MobiSys 2008 첫 발표)
• 최초의 인터랙션 모니터링 플랫폼/최초의 일상몰입형 게임플랫폼/최초의 협동형 모바일 플랫폼/등등등
Life-immersive Socio-Physical Platform
Platforms &Services
of FUTURE
AI & Deep Learning
Human & Social
Computing
IoT/Mobile Systems

4. .
Real-world AI System
• Real world 와의 직접적인 연결,
▪ Sensor를 통해 physical world로 부터 실시간으로 데이터 생성
▪ Actuator를 통한 실세계에 직접 개입
• AI의 일상 근접성, 사용자 근접성
• 연속성, 지속성, 실시간성
• Physical computing을 위한 모바일-IoT 시스템의 중요성 부각
• End-to-end 서비스의 관점
▪ Real world immersion을 위한 accuracy 및 성능
▪ Seamless integration of “physical world, AI logic, human interaction”
Data-driven AI
• 실제 real world에 직접 연결되기에
부족,
• 기수집된 데이터 셋 활용
• DNN model building 위주
• 모델 성능 중심
• 수학, 통계학, 알고리즘 위주

5. Earable Intelligence Platform
● Intelligence on the Ear
○ Wearable AI의 중요성: AI의 일상 근접성, 사용자 근접성 (Real world AI를 위해서는 AI가 사용자의
가까이에 있어야 함)
○ 이어러블
■ 사용자의 몸에 상시 착용하는 디바이스
■ 이머징 모바일-IoT HW의 대표
■ Human understanding, Sociality, Mobility, Stability
● Can such a TINY device become a platform for AI?
○ 매우 작은 HW, 배터리 제약
○ 다수의 AI 모델, 상시적 동시다발적 수행
…
Surround Sensing
(주변 목소리, 긴급상황 소음, …)
Physiological Sensing
(스트레스 모니터링, 일상 건강관리, …)
… …

6. … …
고밀집주거공간의 커뮤니티 공간집사 AI: AI for Social
Appropriateness
카이스트 진리관
Sleep-in-peace Hair Dryer, Mindful Vacuum Cleaner, …
Could be a most complex & advanced AI system in the real world!
다수의 사람, 좁은 공간, 불완전한 분리, 익명성 (서로를 모름) → 커뮤니티의 삶의 질
공간집사 AI

7. [Platform for Massive Mobile-IoT Social Computing]
밀집한 도시, 반복되는 소음피해!
IoT가 내 단잠을 지켜줄 수 있을까?
잠깐만요!
드라이어 소리가 수면중인
학우를 깨울 수 있어요!

8. Elasticizer: Real World AI를 위한 자동 AI 모델 생성기
• Real-world AI: 일상 근접성, 사용자 근접성
• 다양한 기기에서 작동 하게 됨: Mobile AI, Wearable AI, IoT AI 등등등
• 현재 방식은 각 디바이스에 맞는 모델을 각각 개별적으로 수동 생성
• 한 가지 모델을 다양한 하드웨어 특성 및 사용자 요구 사항에 맞게
자동으로 변환하는 시스템
Nokia eSense 이어러블에서
인퍼런스 시간 50ms 이하
Google Pixel 4에서
인퍼런스 시간 200ms 이하
Galaxy Watch 4에서
인퍼런스 시간 100ms 이하
…
…

9. [Platform for Massive Mobile-IoT Social Computing]
IoT 기술, 민주주의의 통로:
진정한 직접 민주주의는 이루어질 수 있을까?
Hivemind: Social Control-and-Use of IoT towards Democratization of Public Spaces (MobiSys ‘21)

10. [Life-immersive Socio-physical Computing]
Wearable Computing, 가장 인간적인 갈등 속으로 파고들다
“우리 엄마가 달라졌어요!”
꼭지 돈 엄마의
괴물같은 표정
Dyadic Mirror: Everyday Second-person Live-view for Empathetic Reflection upon Parent-child Interaction (IMWUT ’20)

11. [Platform for Massive Mobile-IoT Social Computing]
모바일 컴퓨팅, 대규모 군중의 하나된 마음을 그리다!
Card-Stunt as a Service: Empowering a Massively Packed Crowd for Instant Collective
Expressiveness (MobiSys ‘17)

13. [Life-immersive Socio-physical Computing]
소셜 컴퓨팅으로 ‘동네’의 개념을 확장한다:
시골 아이에게 동네 형, 누나를 만들어줄 수 있을까?
교육격차의 문제
소외의 문제
다문화 문제
…

14. https://www.youtube.com/watch?v=p9P9bBwIP54
[Life-immersive Socio-physical Computing]
함께 사는 느낌을 주는 ‘로봇 아바타’
HomeMeld: Co-present Robotic Avatar System for Illusion of Living Together

15. [Life-immersive Socio-physical Computing]
멀리 있는 친구와 함께 !
힘을 전달하는 웨어러블 플랫폼
Pole-with-a-catch: 손맛을 재현하는 대낚시 체험 시스템
“Cheers!” 초시공간 맥주 테이스팅
TimeGlass: Creating the illusion of drinking beer together

16. Deep Learning
Engine
[AI Platform for life-immersive socio-physical computing]
프라이버시를 고려한 딥 러닝 엔진
Occlumency: Privacy-preserving Remote Deep-learning Inference Using SGX

17. https://www.youtube.com/watch?v=aJ924Jdlwik&list=PLubxhb9-l07TLPSTp7qpvBue6sQn0_pEW
[‘특수 상황 앱’ 개발을 위한 VR 기반의 Mobile-IoT 플랫폼]
Empath-D
VR-based Empathetic App Design for Accessibility

18. 이어러블: 모바일-IoT 플랫폼의 승자 18
…
보이시나요? 모든 귀에 이어러블이 있습니다.

19. +
고혈당, 고혈압, 고지혈, 염증 지수, 심전도, 노인 건강, 스트레스, 우울증, …
새로운 개념의 일상항시형 의료 및 건강관리 서비스를 위한 플랫폼
[귀를 중심으로 확장 가능한 일상·항시적 건강관리 플랫폼]
Earable 기반의 헬스케어 플랫폼
아기늘봄이: 미숙아 무호흡 모니터링 디바이스 사회성 기반 상시 건강습관 교정
과음하는 아빠

20. 국제적 지명도
• IoT/모바일 플랫폼 및 소셜 컴퓨팅 분야에서 국제적 명성
• Top conferences (관련 분야 최고 학회)
• ACM MobiSys, ACM SenSys, ACM MobiCom, ACM UbiComp, ACM CSCW, ACM
HotMobile, ACM CHI, ACM IUI, IEEE ISWC, IEEE PerCom, ACM Multimedia, …
• ACM MobiSys: 모바일 시스템 분야 최고의 학회
• ACM MobiSys 2019 General Chair
• 한국기관 최초, 최다 논문
• 한국기관에서 총 22편 중 8편이 우리 연구실 논문 (2021.10)
• ACM SenSys: IoT/임베디드 및 센서 시스템 최고의 학회
• ACM Sensys 2015 General Chair
• 한국기관 최초, 최다 논문
• 한국기관에서 총 12편 중 6편이 우리 연구실 논문 (2021.10)
• ACM UbiComp: 유비쿼터스 컴퓨팅 시스템 분야 최고의 학회
• ACM UbiComp 2014 Program Co-Chair
• ACM CSCW: 소셜 컴퓨팅 분야 최고의 학회
• 한국 기관 최초, 최다 논문
• 한국에서 총 25편 중 8편이 우리 연구실 논문 (2021.10)

21. 국제적 지명도 (졸업생)
• Apple, US: 유충국 박사 (前 IBM Research)
• Nokia Bell Labs, UK: 민철홍 박사
• Telefonica Research, Spain: 박순일 박사
• Amazon, US: 이진원 박사 (前 Qualcomm Research)
• Amazon Alexa, US: 박태우 박사 (前 Michigan State Univ. 교수)
• 서울대 컴퓨터공학과: 이영기 교수
• KOREATECH 컴퓨터공학과: 강승우 교수
• POSTECH 컴퓨터공학과: 황인석 교수 (前 IBM Research)

22. Life-immersive
Socio-physical computing
• https://nclab.kaist.ac.kr
• E3-1 4438호
• 한수경, sookyung@nclab.kaist.ac.kr
저희 연구실에
관심과 흥미가
있으신 분들은:
AI & Deep Learning
Human & Social
Computing
IoT/Mobile Systems
NCLab Open Day: 11/2 (수) 오후 5:00