Soumettre la recherche
Mettre en ligne
オンライン会議と音声認識
•
1 j'aime
•
863 vues
Yuji Kubota
Suivre
オンライン会議と音声認識
Lire moins
Lire la suite
Technologie
Signaler
Partager
Signaler
Partager
1 sur 17
Télécharger maintenant
Télécharger pour lire hors ligne
Recommandé
Head toward Java 16 (Night Seminar Edition)
Head toward Java 16 (Night Seminar Edition)
Yuji Kubota
Head toward Java 15 and Java 16
Head toward Java 15 and Java 16
Yuji Kubota
Head toward Java 14 and Java 15 #LINE_DM
Head toward Java 14 and Java 15 #LINE_DM
Yuji Kubota
Head toward Java 14 and Java 15
Head toward Java 14 and Java 15
Yuji Kubota
Head toward Java 13 and Java 14 #jjug
Head toward Java 13 and Java 14 #jjug
Yuji Kubota
Catch up Java 12 and Java 13
Catch up Java 12 and Java 13
Yuji Kubota
Migration Guide from Java 8 to Java 11 #jjug
Migration Guide from Java 8 to Java 11 #jjug
Yuji Kubota
Introduction to Java 11: Support and JVM Features #jjug
Introduction to Java 11: Support and JVM Features #jjug
Yuji Kubota
Recommandé
Head toward Java 16 (Night Seminar Edition)
Head toward Java 16 (Night Seminar Edition)
Yuji Kubota
Head toward Java 15 and Java 16
Head toward Java 15 and Java 16
Yuji Kubota
Head toward Java 14 and Java 15 #LINE_DM
Head toward Java 14 and Java 15 #LINE_DM
Yuji Kubota
Head toward Java 14 and Java 15
Head toward Java 14 and Java 15
Yuji Kubota
Head toward Java 13 and Java 14 #jjug
Head toward Java 13 and Java 14 #jjug
Yuji Kubota
Catch up Java 12 and Java 13
Catch up Java 12 and Java 13
Yuji Kubota
Migration Guide from Java 8 to Java 11 #jjug
Migration Guide from Java 8 to Java 11 #jjug
Yuji Kubota
Introduction to Java 11: Support and JVM Features #jjug
Introduction to Java 11: Support and JVM Features #jjug
Yuji Kubota
Java 10でぼくたちの生活はどう変わるの?
Java 10でぼくたちの生活はどう変わるの?
Yuji Kubota
Project Jigsaw #kanjava
Project Jigsaw #kanjava
Yuji Kubota
Java 9 and Future #jjug
Java 9 and Future #jjug
Yuji Kubota
Secrets of Rock Star Developers (and How to Become One!) [CON7615] (Yuji KUBO...
Secrets of Rock Star Developers (and How to Become One!) [CON7615] (Yuji KUBO...
Yuji Kubota
Unified JVM Logging
Unified JVM Logging
Yuji Kubota
Prepare for Java 9 #jjug
Prepare for Java 9 #jjug
Yuji Kubota
jcmd #javacasual
jcmd #javacasual
Yuji Kubota
JavaOne 2016 Java SE Feedback #jjug #j1jp
JavaOne 2016 Java SE Feedback #jjug #j1jp
Yuji Kubota
OpenJDK コミュニティに参加してみよう #jjug
OpenJDK コミュニティに参加してみよう #jjug
Yuji Kubota
Garbage First Garbage Collection (G1 GC) #jjug_ccc #ccc_cd6
Garbage First Garbage Collection (G1 GC) #jjug_ccc #ccc_cd6
Yuji Kubota
JavaOne 2015 JDK Update (Jigsaw) #j1jp
JavaOne 2015 JDK Update (Jigsaw) #j1jp
Yuji Kubota
OpenJDK トラブルシューティング #javacasual
OpenJDK トラブルシューティング #javacasual
Yuji Kubota
HeapStats @ Seasar Conference 2015 LT
HeapStats @ Seasar Conference 2015 LT
Yuji Kubota
JDK9 新機能 (日本語&ショートバージョン) #jjug
JDK9 新機能 (日本語&ショートバージョン) #jjug
Yuji Kubota
JDK9 Features (Summary, 31/Jul/2015) #JJUG
JDK9 Features (Summary, 31/Jul/2015) #JJUG
Yuji Kubota
HeapStats: Introduction and Technical Preview
HeapStats: Introduction and Technical Preview
Yuji Kubota
JVM のいろはにほ #javajo
JVM のいろはにほ #javajo
Yuji Kubota
HeapStats: Troubleshooting with Serviceability and the New Runtime Monitoring...
HeapStats: Troubleshooting with Serviceability and the New Runtime Monitoring...
Yuji Kubota
Concurrent Mark-Sweep Garbage Collection #jjug_ccc
Concurrent Mark-Sweep Garbage Collection #jjug_ccc
Yuji Kubota
楽して JVM を学びたい #jjug
楽して JVM を学びたい #jjug
Yuji Kubota
Postman LT Fukuoka_Quick Prototype_By Daniel
Postman LT Fukuoka_Quick Prototype_By Daniel
danielhu54
TSAL operation mechanism and circuit diagram.pdf
TSAL operation mechanism and circuit diagram.pdf
taisei2219
Contenu connexe
Plus de Yuji Kubota
Java 10でぼくたちの生活はどう変わるの?
Java 10でぼくたちの生活はどう変わるの?
Yuji Kubota
Project Jigsaw #kanjava
Project Jigsaw #kanjava
Yuji Kubota
Java 9 and Future #jjug
Java 9 and Future #jjug
Yuji Kubota
Secrets of Rock Star Developers (and How to Become One!) [CON7615] (Yuji KUBO...
Secrets of Rock Star Developers (and How to Become One!) [CON7615] (Yuji KUBO...
Yuji Kubota
Unified JVM Logging
Unified JVM Logging
Yuji Kubota
Prepare for Java 9 #jjug
Prepare for Java 9 #jjug
Yuji Kubota
jcmd #javacasual
jcmd #javacasual
Yuji Kubota
JavaOne 2016 Java SE Feedback #jjug #j1jp
JavaOne 2016 Java SE Feedback #jjug #j1jp
Yuji Kubota
OpenJDK コミュニティに参加してみよう #jjug
OpenJDK コミュニティに参加してみよう #jjug
Yuji Kubota
Garbage First Garbage Collection (G1 GC) #jjug_ccc #ccc_cd6
Garbage First Garbage Collection (G1 GC) #jjug_ccc #ccc_cd6
Yuji Kubota
JavaOne 2015 JDK Update (Jigsaw) #j1jp
JavaOne 2015 JDK Update (Jigsaw) #j1jp
Yuji Kubota
OpenJDK トラブルシューティング #javacasual
OpenJDK トラブルシューティング #javacasual
Yuji Kubota
HeapStats @ Seasar Conference 2015 LT
HeapStats @ Seasar Conference 2015 LT
Yuji Kubota
JDK9 新機能 (日本語&ショートバージョン) #jjug
JDK9 新機能 (日本語&ショートバージョン) #jjug
Yuji Kubota
JDK9 Features (Summary, 31/Jul/2015) #JJUG
JDK9 Features (Summary, 31/Jul/2015) #JJUG
Yuji Kubota
HeapStats: Introduction and Technical Preview
HeapStats: Introduction and Technical Preview
Yuji Kubota
JVM のいろはにほ #javajo
JVM のいろはにほ #javajo
Yuji Kubota
HeapStats: Troubleshooting with Serviceability and the New Runtime Monitoring...
HeapStats: Troubleshooting with Serviceability and the New Runtime Monitoring...
Yuji Kubota
Concurrent Mark-Sweep Garbage Collection #jjug_ccc
Concurrent Mark-Sweep Garbage Collection #jjug_ccc
Yuji Kubota
楽して JVM を学びたい #jjug
楽して JVM を学びたい #jjug
Yuji Kubota
Plus de Yuji Kubota
(20)
Java 10でぼくたちの生活はどう変わるの?
Java 10でぼくたちの生活はどう変わるの?
Project Jigsaw #kanjava
Project Jigsaw #kanjava
Java 9 and Future #jjug
Java 9 and Future #jjug
Secrets of Rock Star Developers (and How to Become One!) [CON7615] (Yuji KUBO...
Secrets of Rock Star Developers (and How to Become One!) [CON7615] (Yuji KUBO...
Unified JVM Logging
Unified JVM Logging
Prepare for Java 9 #jjug
Prepare for Java 9 #jjug
jcmd #javacasual
jcmd #javacasual
JavaOne 2016 Java SE Feedback #jjug #j1jp
JavaOne 2016 Java SE Feedback #jjug #j1jp
OpenJDK コミュニティに参加してみよう #jjug
OpenJDK コミュニティに参加してみよう #jjug
Garbage First Garbage Collection (G1 GC) #jjug_ccc #ccc_cd6
Garbage First Garbage Collection (G1 GC) #jjug_ccc #ccc_cd6
JavaOne 2015 JDK Update (Jigsaw) #j1jp
JavaOne 2015 JDK Update (Jigsaw) #j1jp
OpenJDK トラブルシューティング #javacasual
OpenJDK トラブルシューティング #javacasual
HeapStats @ Seasar Conference 2015 LT
HeapStats @ Seasar Conference 2015 LT
JDK9 新機能 (日本語&ショートバージョン) #jjug
JDK9 新機能 (日本語&ショートバージョン) #jjug
JDK9 Features (Summary, 31/Jul/2015) #JJUG
JDK9 Features (Summary, 31/Jul/2015) #JJUG
HeapStats: Introduction and Technical Preview
HeapStats: Introduction and Technical Preview
JVM のいろはにほ #javajo
JVM のいろはにほ #javajo
HeapStats: Troubleshooting with Serviceability and the New Runtime Monitoring...
HeapStats: Troubleshooting with Serviceability and the New Runtime Monitoring...
Concurrent Mark-Sweep Garbage Collection #jjug_ccc
Concurrent Mark-Sweep Garbage Collection #jjug_ccc
楽して JVM を学びたい #jjug
楽して JVM を学びたい #jjug
Dernier
Postman LT Fukuoka_Quick Prototype_By Daniel
Postman LT Fukuoka_Quick Prototype_By Daniel
danielhu54
TSAL operation mechanism and circuit diagram.pdf
TSAL operation mechanism and circuit diagram.pdf
taisei2219
SOPを理解する 2024/04/19 の勉強会で発表されたものです
SOPを理解する 2024/04/19 の勉強会で発表されたものです
iPride Co., Ltd.
論文紹介:Semantic segmentation using Vision Transformers: A survey
論文紹介:Semantic segmentation using Vision Transformers: A survey
Toru Tamaki
Open Source UN-Conference 2024 Kawagoe - 独自OS「DaisyOS GB」の紹介
Open Source UN-Conference 2024 Kawagoe - 独自OS「DaisyOS GB」の紹介
Yuma Ohgami
[DevOpsDays Tokyo 2024] 〜デジタルとアナログのはざまに〜 スマートビルディング爆速開発を支える 自動化テスト戦略
[DevOpsDays Tokyo 2024] 〜デジタルとアナログのはざまに〜 スマートビルディング爆速開発を支える 自動化テスト戦略
Ryo Sasaki
論文紹介:Content-Aware Token Sharing for Efficient Semantic Segmentation With Vis...
論文紹介:Content-Aware Token Sharing for Efficient Semantic Segmentation With Vis...
Toru Tamaki
論文紹介:Automated Classification of Model Errors on ImageNet
論文紹介:Automated Classification of Model Errors on ImageNet
Toru Tamaki
スマートフォンを用いた新生児あやし動作の教示システム
スマートフォンを用いた新生児あやし動作の教示システム
sugiuralab
Dernier
(9)
Postman LT Fukuoka_Quick Prototype_By Daniel
Postman LT Fukuoka_Quick Prototype_By Daniel
TSAL operation mechanism and circuit diagram.pdf
TSAL operation mechanism and circuit diagram.pdf
SOPを理解する 2024/04/19 の勉強会で発表されたものです
SOPを理解する 2024/04/19 の勉強会で発表されたものです
論文紹介:Semantic segmentation using Vision Transformers: A survey
論文紹介:Semantic segmentation using Vision Transformers: A survey
Open Source UN-Conference 2024 Kawagoe - 独自OS「DaisyOS GB」の紹介
Open Source UN-Conference 2024 Kawagoe - 独自OS「DaisyOS GB」の紹介
[DevOpsDays Tokyo 2024] 〜デジタルとアナログのはざまに〜 スマートビルディング爆速開発を支える 自動化テスト戦略
[DevOpsDays Tokyo 2024] 〜デジタルとアナログのはざまに〜 スマートビルディング爆速開発を支える 自動化テスト戦略
論文紹介:Content-Aware Token Sharing for Efficient Semantic Segmentation With Vis...
論文紹介:Content-Aware Token Sharing for Efficient Semantic Segmentation With Vis...
論文紹介:Automated Classification of Model Errors on ImageNet
論文紹介:Automated Classification of Model Errors on ImageNet
スマートフォンを用いた新生児あやし動作の教示システム
スマートフォンを用いた新生児あやし動作の教示システム
オンライン会議と音声認識
1.
オンライン会議と音声認識 全員在宅‑>会議はオンライン化 1.この時難聴者はどうなるのかを共有 2.今あるサービスを使ってみた結果を共有
2.
1.この時難聴者はどうなるのかを共有
3.
アクセシビリティ チャートのカラーをアクセシビリティを考慮した色へ変更する (tokyo‑metropolitan‑gov/covid19) カラーをどのように設計するか(多様な意見も含めて)知見の塊 生活と意見:ソーシャルディスタンスなどと称してユーザー名や文 章にスペースを挟む行為についての苦情 学会・研究会等における情報保障マニュアル アクセシビリティはおまけではないが、断絶された側が居ることと その重要性に気付くのは難しい。 ということで、オンライン会議になってどうなったかをGW中に改 めてまとめた。
4.
人間の聴覚の働き 空間がわかる‑存在の認識 周囲の音がわかる‑生命の保持 言葉がわかる‑コミュニケーション、知性 音楽がわかる‑感性 耳科学:難聴に挑むより
5.
難聴者(私)と超えたい壁、音声認識周辺の技術 音の存在そのものに気づかない(音源検知,sounddetection) 音があるのはわかるが聞き分けができない(音源分離,sound separation) 音は分かるが人間の声かそれ以外か分からない(音源同定,環境音認 識,(environmental)soundclassification) 人間の声なのは分かるがうまく文字に変換できない(音声認識, speechrecoognition) 声に乗った感情が分からない(発話内容は解るがイントネーション や抑圧が把握できない)
6.
難聴者(私)に起こること 音声認識率は多分10‑70%ぐらいを推移してる 全部聞こえてる保証は常にないから正確には分からない 話題を追跡できてればおおよそ推測ができる(こともある) 聞き取れないのが連続して一度文脈を失うと途端に破綻する 単純に音を大きくしても音源検知の精度が上がるだけでそれ以 外は基本的に下がる 唇や表情などの音声以外の情報も駆使して会話をしようと試みる オンライン会議ではその情報が少ない チーム活動ならWikiやBTS、PRなりで各々がやってる内容を踏まえれる ので(聞こえてなくても)おおよそ推測は成り立つ。が、新しい情報(特に 固有名詞)には弱い。
7.
オンライン会議に求めること 会話に参加できる(≒その時の話題・内容が低コストで把握できる) リアルタイムで認識率が低くても良いので参考になる情報が欲しい 後で知っても会話に参加できない 会議システムと同じ画面に出て欲しい 視線移動が多いと情報を取り逃す 且つ自分以外にも同時に共有したい ゆっくり発言したり言葉を変えたりと精度改善が試みやすい 音声出力はできればヘッドホンに流したい 認識率を少しでも上げるたい
8.
2.今あるサービスを使ってみた結果を共有
9.
Zoom audiotranscription。リアルタイムで提供されてない、英語だけ 字幕機能もあるが手入力かRESTAPI経由で提供された内容を映す機 能
10.
GoogleMeet captions。英語だけ 英語での認識率は悪くなかった
11.
Skype livecaptions&subtitles。日本語にも対応している。認識率はそこ そこ 現状のコストに対するベストはこれ。友人とのオンライン呑みは Skypeでやってる ただし有効にできない時もある。再現条件が不明
12.
GoogleDocument+オンライン会議ツール GoogleDocは音声入力が可能 やり方 1.PCの音声をオーディオインターフェースなりでルーティングして GoogleDocumentの音声入力に流し込む 2.PCの出力画像を仮想カメラ入力にしてオンライン会議システムに流 す(人の顔が映るところで内容が分かる) 欠点 1.(共通)全員の発言が混ざった状態で音声認識にかけられるので、認 識率がガタ落ちするかつ誰の発言か記録に残らない 2.(共通)発言が被るとより悪化する 3.(GoogleDoc固有)上の状態や雑音が混ざると認識を諦めるのか、音 声入力を一度オフにしてオンに入れ直さないとそれ以降入力が行わ れない(これが一番厄介)
13.
GoogleDocument+オンライン会議ツール(2) 会議参加者全員が各自で音声入力直接行えれば一番良いかもしれない。 ただしやり方に癖があるし、タイムライン形式で交互に入力を切り替え られるわけではないので統合も難しい。 理想 10:00 Aさんの発言1 10:01 Bさんの発言1 10:03
Aさんの発言2 10:03 Cさんの発言1 現実 Aさんの発言1Aさんの発言2Aさんの発言3Aさんの発言4 Bさんの発言1Bさんの発言2 Cさんの発言1 それぞれが独立した音声入力なのでこうなる。
14.
UDTalk+オンライン会議ツール UDTalkはiOSかAndroidでのみアプリを提供している。PCもあるが認識 結果を閲覧・編集する機能があるだけ。 やり方 1.オンライン会議ツール(PC)‑>オーディオインターフェースor SoftwareでWiFi経由で流すorPCの真横にスマホを置く‑>UDtalk 欠点 1.GoogleDocsと同じ(共通)の問題がある 2.認識結果の共有方法で効率的な手段がまだ見つけられていない 画面共有ができるなら楽だがミーティングでは他の人のPC画 面を映すのが殆どなので出来ない PCはブラウザアクセスではなくバイナリパッケージをインス トールする必要がある 自分一人だけ見るならこれが一番(Skypeよりも)認識率が良い
15.
Julius+IPtalk+オンライン会議ツール 経験上、認識率が下がるのは目に見えてたのでやっていない。 参考:音声認識技術の変遷と最先端(2018/07)
16.
(おまけ)みえる電話 NTTdocomoが提供している電話内容のリアルタイム可視化+入力した 文字の音声通話。 双方向で独立して認識しているようで認識率も悪くない。UIも悪くなく 電話の苦がだいぶ軽減された。
17.
現状の有力候補 1.UDTalkの省エネ化 2.GoogleDocsを各自で入力して貰う 3.Skypeを使う 4.Zoomが良い感じのtranscriptionを提供してくれるのを願う
Télécharger maintenant