1. 2de IBBT Brokerage Event
Break-out Sessie
3D Graphics
Sessieleider: Eddy Flerackers
IBBT Program Manager: Nico Verplancke
2. 2de IBBT Brokerage Event – « 3D Graphics»
Sessievoorzitter
Sessievoorzitter: Prof. dr. Eddy Flerackers
Presentatie: Prof. dr. Frank Van Reeth
2
3. 2de IBBT Brokerage Event – « 3D Graphics»
Topics to Cover
Doelstelling break-out sessie
IBBT onderzoek 3D Graphics
IBBT GBO en ISBO projecten met 3D Graphics
componenten
Discussie mogelijke project-voorstellen/topics
Conclusies
3
4. 2de IBBT Brokerage Event – « 3D Graphics»
Doelstelling break-out sessie
Het basisprincipe van het IBBT is een
vraaggedreven onderzoeksprogrammering
De doelstelling van het brokerage event is
proposals te initiëren op basis van
onderzoeksvragen en ideeën vanuit de
bedrijfswereld
De doelstelling van de break-out sessies:
de thema’s die zouden kunnen leiden tot
projectvoorstellen verder uitdiepen
potentiële trekkers voor een mogelijke indiening
detecteren
4
5. 2de IBBT Brokerage Event – « 3D Graphics»
Doelstelling break-out sessie
Idealiter zal de break-out “3D Graphics” leiden
tot:
een potentiële cluster van partners
uitwisseling van contactgegevens
Op basis hiervan zal de coördinator de nodige
initiatieven nemen om de partners samen te
brengen en de proposal verder uit te werken rond
een gezamenlijk interessedomein
5
6. 2de IBBT Brokerage Event – « 3D Graphics»
IBBT onderzoek « 3D Graphics »
Lopende en ingediende IBBT projecten met 3D
Graphics componenten:
GBO:
A4MC3
VACF
ASCIT
...
ISBO:
VIN
QoE
6
17. 2de IBBT Brokerage Event – « 3D Graphics»
IBBT onderzoek « 3D Graphics »
IBR in Genetwerkte Virtuele Omgevingen
17
18. 2de IBBT Brokerage Event – « 3D Graphics»
IBBT onderzoek « 3D Graphics »
Mobiele Genetwerkte Virtuele Omgevingen
18
19. 2de IBBT Brokerage Event – « 3D Graphics»
IBBT onderzoek « 3D Graphics »
Mobiele Genetwerkte Virtuele Omgevingen
19
20. 2de IBBT Brokerage Event – « 3D Graphics»
IBBT onderzoek « 3D Graphics »
Mobiele Genetwerkte Virtuele Omgevingen
20
21. 2de IBBT Brokerage Event – « 3D Graphics»
IBBT onderzoek « 3D Graphics »
Video Avatars in Genetwerkte Virtuele Omgevingen
21
22. 2de IBBT Brokerage Event – « 3D Graphics»
IBBT onderzoek « 3D Graphics »
Interactie met Genetwerkte Virtuele Omgevingen
22
23. Online Gaming
IBBT onderzoek « 3D Graphics »
Scalable 3D Collaborative
Gaming Framework
Terminal Scalable network &
3D GAME characteristics terminals
Global
Processing
capabilities
Local
Canonical Network
3D content model
Representation Global Topology
Network Weak Powerful
characteristics node node
Intelligent
Scalable content Distribution
of the 3D game
Game World Game World Partition
in the initial network
23
24. Online Gaming
IBBT onderzoek « 3D Graphics »
high performance
high quality
content
stored
online
low quality
low performance
low power 24
25. Content Quality Driven Energy Management
System for Mobile 3D Graphics
IBBT onderzoek « 3D Graphics »
Don’t show what
isn’t needed
25
26. Content Quality Driven Energy Management
System for Mobile 3D Graphics
IBBT onderzoek « 3D Graphics »
MPEG-4
Wavelet Subdivision Surfaces
Error
Complexity: software and hardware rendering 26
27. MPEG-4 Scalable Video Coding
IBBT onderzoek « 3D Graphics »
A new video codec with true scalability in Speaker
space, time and quality QCIF
15Hz
To be standardized in MPEG-4 Part 10
Amendment 1
Phone User
QQCIF
7.5Hz
wireless Silent User
nerworks
QQCIF
3.75Hz
27
30. MultiView
IBBT onderzoek « 3D Graphics »
Reconstruction:
<< users server-based
N # cameras >> users client-based
Tx
2
Relation with SVC
1 multi-resolution
Camera RaySpace (one MPEG candidate):
Compression >> users, yet server-based
CR=200 CR=30 CR=60 CR=200
30
Distribute to both sides
31. Multiview
IBBT onderzoek « 3D Graphics »
Omni-directional video
31
32. Multiview
IBBT onderzoek « 3D Graphics »
Free Viewpoint video
32
33. MPEG-4: AFX
IBBT onderzoek « 3D Graphics »
The AFX toolset, standardized by the SNHC group from
MPEG-4, comprises tools to achieve virtual 3D scenes, such
as: high-level geometry representations, texture tools, solid
modeling, animation tools, …
Example of tools:
Wavelet Subdivision Surfaces: Light Field Mapping:
Solid Representations: MeshGrid:
33
35. MESHGRID Components
IBBT onderzoek « 3D Graphics »
MESHGRID Components:
Reference Grid (RG) : acts as the reference system (RS) of the model and allows for non-
uniform sampling of the volume.
Connectivity Wireframe (CW): the surface description.
35
41. MESHGRID: 3D Scientific Simulation
IBBT onderzoek « 3D Graphics »
Dynamic multi-layer MeshGrid model. Topological changes are
seamless during the animation.
The animation can be saved as a 3D video.
41
43. MESHGRID: Summary
IBBT onderzoek « 3D Graphics »
MESHGRID is the most generic object representation from MPEG-4 AFX.
Designed using a novel approach: preserve both the volumetric and the
surface description of the model.
MESHGRID is multi-scalable (level of detail and quality) and allows for
view-dependent reconstruction:
Size of the models is not an issue due to the ROI-based encoding.
MESHGRID has particular animation possibilities: volumetric modeling
of surface models.
Presence of the volumetric information allows specifying material
properties (e.g. density, elasticity, …) to the volume of the model:
Useful in virtual reality applications using haptic devices for force
feedback.
MESHGRID is appropriate for representing dynamic models (e.g. in
scientific simulations or real life scenes) and for encoding the
animation as a 3D interactive video.
43
44. 2de IBBT Brokerage Event – « 3D Graphics»
Discussie mogelijk projectvoorstel rond « 3D Graphics »
Rondvraag publiek: specifieke verdere interesses?
Expliciet voorbereiden/klaarmaken “conclusie
slide”
=> Bezoek de stands in de demoruimte ☺
44
45. 2de IBBT Brokerage Event – « 3D Graphics»
Conclusies
Er is een substantiële know-how aanwezig binnen IBBT rond
3D Graphics:
Modelleren, Animatie, Beeldsynthese
Interactie met 3D virtuele omgevingen
Link naar netwerken: Genetwerkte Virtuele Omgevingen
Optimisatie naar 3D weergave op mobiele toestellen
Input naar standardisatie via MESHGRID R&D
Er zijn een aantal lopende (GBO) en ingediende projecten
(ISBO) met 3D Graphics componenten
Mogelijke GBO projectvoorstellen:
Larian: next generation GPUs
BARCO avionics: Digital Terrain DB’s -> multires rep.
Agoria: Location based 3D services?
VRT + KMO’s: 3D community building (ook naar kultuur toe)
45
