Revivez les moments marquants de 2019 dans le monde des codecs videos

1. Revue de l’année 2019
Luc Trudeau
( @trudluc, LucTrudeau)
2019-12-04
Cette présentation de Luc Trudeau est mis à disposition selon les termes
de la licence Creative Commons Attribution 4.0 International.

2. Chercheur en compression vidéo
Coauteur du format AV1
Auteur de brevets et d’articles scientifiques
Chercheur pour Two Orioles (Eve-AV1)
Coconcepteur du décodeur dav1d
Luc Trudeau ( @trudluc, LucTrudeau)

3. 2019 La guerre des guerres
Guerre des codecs
AV1 vs. HEVC, VVC (LCEVC, EVC)
Guerre des transports
DASH vs. LHLS vs. LL-HLS
Guerre des services OTT
Netflix vs. Disney+ vs. Apple TV+ vs Prime Video vs ...

4. 2019 La guerre des guerres
Guerre des codecs
AV1 vs. HEVC, VVC (LCEVC, EVC)
Guerre des transports
DASH vs. LHLS vs. LL-HLS
Guerre des services OTT
Netflix vs. Disney+ vs. Apple TV+ vs Prime Video vs ...
https://www.twitch.tv/videos/501523712
https://www.twitch.tv/videos/501523712

5. MPEG en 2019
Janvier
Ref: https://boingboing.net/2018/01/30/rent-seekers-rant.html
http://blog.chiariglione.org/a-crisis-the-causes-and-a-solution/
Le fondateur et président de MPEG dit que
c’est la fin

6. Brevets HEVC en 2019
Ref: http://blog.chiariglione.org/a-crisis-the-causes-and-a-solution/

7. BlackBerry rejoint Velos Media (Janvier)
Ref: http://blog.chiariglione.org/a-crisis-the-causes-and-a-solution/

8. Brevets HEVC en 2019
Ref: http://blog.chiariglione.org/a-crisis-the-causes-and-a-solution/
Les modalités des
licenses ne sont
toujours pas
disponibles
(2 ans plus tard!)

9. Les regroupements de brevets (patent pool) couvrent seulement ⅓
des brevets
Ref: https://www.ipwatchdog.com/2018/07/11/high-efficiency-video-coding-video-ecosystem-evolving/id=99094/

10. MPEG en 2019
Ref: https://www.youtube.com/watch?v=SSCizM8u9Cw
3 nouveaux formats videos

11. VVC (ITU H.266 et/ou MPEG-I Part 3) Versatile Video Coding
Successeur de H.265/HEVC
50% mieux que HEVC?
à suivre…
Solution au problème de brevets?
Pas vraiment, à suivre…
Disponibilité?
Novembre 2020
Ref: https://www.youtube.com/watch?v=QqgpxqlFA7w

12. EVC (MPEG-5 Part 1) Essential Video Coding
Similaire à HEVC
Solution au problème de brevets?
peut-être…?
Disponibilité 2020

13. EVC Solution au problème de brevets
Outils avancés (avec redevances)
Utilisés seulement s’il y a une entente pour la propriété
intellectuelle (sinon remplacé par outil de base)
Outils de bases (sans redevances)
Basé sur des brevets expirés

14. LCEVC (MPEG-5 Part 2) Low Complexity Enhanced Video Coding
Extension à un codec existant
Solution au problème de brevets?
à suivre?
Disponibilité 2020

15. LCEVC Comment ça marche
4K
Set top box avec encodeur matériel (BCM7271)
Décodeur H.264
Processeur (ARM)
Rehausseur
AgrandissementDonnées de rehaussement
1080p
LCEVC

16. VVC vs. AV1 vs. EVC (JVET-O0898)
Comparé à HM (encodeur de référence HEVC)
BD-Rate
PSNR YUV
Temps
encodage
Temps
décodage
VTM-5.0 -31.4% 12.17x 1.62x
AV1 -20.1% 4.97x 2.69x
ETM-2.01 -17.4% 2.57x 1.61x
Ref: http://phenix.int-evry.fr/jvet/doc_end_user/documents/15_Gothenburg/wg11/JVET-O0898-v1.zip

17. AOM en 2019
Problème de troll?

18. Un troll de brevets AV1?
Mars 2019, Sisvel dit avoir des brevets reliés
à AV1
Sisvel n’a toujours pas divulguer d’information
sur les brevets
Ref: https://lactualite.com/lactualite-affaires/la-chasse-aux-trolls-de-brevets/

19. SVT-AV1 (Intel et Netflix) Avril
Annoncé à NAB
Temps réel*
Gratuit / Logiciel Libre
Famille d’encodeurs
SVT-HEVC, SVT-VP9
Ref: https://medium.com/netflix-techblog/introducing-svt-av1-a-scalable-open-source-av1-framework-c726cce3103a
https://videocodectracker.dev/

20. Encodeur AV1 Temps Réel (Cisco) Juin
Démonstration d’AV1 dans Webex
Vidéoconférence à New York avec serveur à San Jose
Serveur capable d’interfacer
AV1 avec H.264
Ref: https://vimeo.com/344366650
https://blogs.cisco.com/collaboration/cisco-leap-frogs-h-264-video-collaboration-with-real-time-av1-codec

21. Ecosystème encodeurs AV1
Logiciel Libre:
• Libaom
• SVT-AV1
• Rav1e
Propriétaire:
• Eve-AV1
• Socionext (FPGA)
• NGCodec (FPGA)
• ATEME
• Harmonic
• Bitmovin
• Visionular Aurora
• Allegro DVT (hardware)
• Cisco AV1

22. État des encodeurs 2019
Ref: https://aomedia.org/wp-content/uploads/2019/10/RonaldBultje_TwoOrioles.pdf
https://vimeo.com/344663992

23. Dav1d: Décodeur AV1 haute vitesse (VideoLAN)
Gratuit / Logiciel Libre
(license n’est pas virale)
Conception hautement parallèle
Décodeur écrit en Assembleur
(peut contenir des traces de C)
Ref: https://medium.com/@ewoutterhoeven/av1-is-ready-for-prime-time-part-2-decoding-performance-d3428221313

24. Décodeurs Matériel “hardware”
Applications: Set Top Boxes
Broadcom BCM7218X (Septembre 2019)
4k à 60 FPS
Technicolor Jade
Ref: https://www.broadcom.com/products/broadband/set-top-box/bcm7218x
https://www.realtek.com/en/press-room/news-releases/item/realtek-launches-worldwide-first-4k-uhd-set-top-box-soc-rtd1311-integrating-av1-video-decoder-and-multiple-cas-functions
https://www.youtube.com/watch?v=IGtjBwMwTtE
Realtek RTD1311 (Juin 2019)
4k à 60 FPS
Amlogic S905X4 (? 2020)
4k à 120 FPS

25. AV1 chez YouTube
Plus 5 milliards d’heures d’AV1 visioner (octobre 2019)
Quand les décodeurs matériels seront
disponibles YouTube va être beaucoup
plus agressif avec AV1
Ref: https://www.youtube.com/watch?v=dqpEcNB6ltw

26. AV1 ailleur
Vimeo test AV1 en production sur ses vidéos “Staff picks”
Facebook vise 1% des vues sur sa plateforme soient AV1 en
2020 (surtout 720p, séquences <5 minutes)
Netflix en processus d’évaluation d’AV1, vise le déploiement pour
son contenu HDR (10 bit)
Ref: https://vimeo.com/blog/post/av1-new-standard-codecs/?utm_source=twitter&utm_medium=social&utm_campaign=trending&vcid=31447
https://www.youtube.com/watch?v=fgztbt6HLs4
https://www.youtube.com/watch?v=M1vwnI0vbMI

27. Jamais autant de formats vidéos en production
MPEG-2, H.264, H.265/HEVC, VP8, VP9, AV1…
Beaucoup de recherche et de nouveaux formats
LCEVC, EVC, VVC, AV2…
2019 fait partie de l'âge d’or de l’encodage vidéo

28. Sondage Bitmovin 2019
91% des répondants utilisent H.264
20% des répondants prévoient déployer AV1 en 2020
Ref: https://go.bitmovin.com/video-developer-report-2019

29. Acquisitions 2019
Intel acquiert Omnitek (Avril)
Encodeur FPGA H.264 et HEVC
Broadcom acquiert Argon Design (Juin)
Spécialisation AV1 et séquences de conformité
Xilinx acquiert NGCodec (Juillet)
Encodeur FPGA VP9, HEVC, AV1
Haivision acquiert LightFlow (Octobre)
Optimization d’encodage “intelligente”
Ref: https://newsroom.intel.com/news/intel-acquires-omnitek-fpgas/#gs.iig4rq
https://forums.xilinx.com/t5/Xilinx-Xclusive-Blog/Buffer-Be-Gone-Xilinx-Acquires-NGCodec-to-Deliver-High-Quality/ba-p/990357
https://www.businessweekly.co.uk/news/hi-tech/broadcom-pays-megabucks-acquire-argon-design-cambridge
https://www.studiodaily.com/2019/10/haivision-acquires-lightflow-streaming-optimization-technology/#:~:targetText=Montr%C3%A9al%2Dbased%20H
aivision%20said%20today,for%20streaming%20video%20quality%20optimizations.

30. Future
Les prochains gains en compression vidéo necessiterons une
augmentation exponentielle de la complexité
Ref: https://www.linkedin.com/pulse/encoder-complexity-hits-wall-david-ronca/

31. Future
En 2019, les centres de données
consomment 3% de la production
mondiale d’énergie
Si la tendance se maintient,
en 2025 cela représentera 20%
Ref: https://www.researchgate.net/publication/320225452_Total_Consumer_Power_Consumption_Forecast