最近話題のこのキャラクターご存知ですか?!名前はハケグチくんというそうですかわいい
YYのサインネームです! pic.twitter.com/1UWikEMiC0
— YYProbe YY文字起こし 開発してる人 (@yysystem_dev) December 2, 2022
今日は、そのハケグチくんが活躍するYYシステムについて、YYシステムさんとお話できる機会があるとのことで、参加させていただきました(まみねこさんのツイートを見て参加させていただきましたありがとうございました!)
YY Probe、YY文字起こし、YYデスクトップ字幕などのアプリを開発している@yysystem_dev さんから直接アプリの説明とデモなどのzoom企画を考えてます🙋♀️
— まみねこ(耳をお空に置いてきた) (@catfoodmami) November 21, 2022
興味ある方はリプかDMお待ちしております🙏
感想は、参加してよかったです!YYシステム開発担当の方や、他のユーザーさんともzoomチャットでやり取りしたりと、ただ聞いてる(見てる)だけでなく、双方向でコミュニケーションを取れて、1時間半があっという間でした(ただ聞いてる、見てるだけでももちろんOKです!)。もし興味ある方は今後もあると思うので、ぜひ参加してみてはどうでしょうか
説明会がどんな感じだったか簡単に書いてみようと思います説明会の内容は、毎回全く同じわけではなさそうなので、そのあたりはご了承くださいませ。
---
区切り
個人的驚きポイント
---
説明会の目次や画面はこんな感じでした(YYシステムさんに写真掲載確認済)。zoomで、顔出しは自由、音声はミュートが基本。何かコメントがあればzoomのチャットに書いていくという感じです。私はずっとカメラもオフでした。
最初の5~10分くらいは、
・開発してる方の自己紹介
・なぜこのシステムを作ろうと思ったのか、ハケグチくんはなぜハケグチくんというのか
などの説明でした。
個人的驚きポイント:YYProbeが総称ではなかった!!!!
⇒「YYシステム」が総称だそう。
YYシステム
┗YYProbe(携帯)
┗YY文字起こし(携帯)
┗YY雰囲気カメラ(携帯)
┗YYデスクトップ字幕(パソコン)
リアルタイム音声認識アプリYY probe - iPhoneアプリを使って会話を記録、保存、分析 | YY System(ワイワイシステム)
次に「なぜ雑音下でも音声認識ができるのか」という技術面の説明でした。
個人的驚きポイント:YYProbeは工場の騒音の中でも素早く正確に「声」を識別するアイシン独自のアルゴリズムを搭載!
「音」と「声」を識別しているので、「音」を無理やり「声」と認識しないようにしているのだそう。これまで使ってきた音声認識アプリなどは声も音も拾うので、「音」も無理やり文字化され表示されていたが、このアプリでは「声」だけ取れるようにされているのだそう!どうやって「音」と「声」を区別させているのか?など詳細は説明会などで聞いてください
⇒そんなことができるのか!!という驚きでした。これはすごい。ある程度雑音や騒音がある中でも音声認識ができるのはこの技術があるからなんだ~と納得でした
参考)
こちら弊社の記事になります。
— 「YYProbe」開発してる人📛 (@yysystem_dev) April 19, 2022
株式会社アイシンでは、聴覚に障害をお持ちの方を中心に数百名規模でYYProbeを業務で活用をしております。
自動車業界の厳しい情報セキュリティやコンプライアンスルールをクリアし運用しております。#YYProbehttps://t.co/n5ioyP7yiw
YYProbeはアイシン社内の騒音下の工場や職場、オンライン会議、セミナーなどで実証を積み重ねてきました。
— 「YYProbe」開発してる人📛 (@yysystem_dev) October 29, 2022
社内のイントラネットワーク内で、大きなトラブルもなく3年目の運用です。
その実績を元に社外法人向けのサービスも提供しております。
詳しくはお問い合わせください。 https://t.co/hCmJcfcXNO
音声をリアルタイムで文字化。聴覚障がい者や高齢者とのコミュニケーションを支援 | AI Think - アイシンの今、未来を知る 「アイシンク」 (aisin.com)
次に、それぞれのアプリの紹介。
会議で使える音声認識アプリ「YYProbe」
— 「YYProbe」開発してる人📛 (@yysystem_dev) December 13, 2022
軽くて一人で使える「YY文字起こし」
楽しいオノマトペアプリ「YY雰囲気カメラ」
PCで利用できる「YYデスクトップ字幕」
などノイズに強く精度の高い音声認識アプリを開発してます。
ご質問や要望など、お気軽にお声がけください!!
YY Probe
・ログイン認証必要
・複数人で使うことを想定(誰の声かを識別し、色を変える)
リアルタイム音声認識アプリYY probe - iPhoneアプリを使って会話を記録、保存、分析 | YY System(ワイワイシステム)
YY文字起こし
・一人で使うことを想定(または一対一?)
・背景をカメラ録画しながら音声認識ができる
YYProbe、YY文字起こし iOS版
— 「YYProbe」開発してる人📛 (@yysystem_dev) December 15, 2022
メッセージボードに手書きで絵や文字を書けます!
書いた絵は保存しておけます!
詳しくは動画を! pic.twitter.com/pHYVifjImc
ホームアナウンス認識できるか?ご質問ありましたので過去のツイートをリツイートします。
— 「YYProbe」開発してる人📛 (@yysystem_dev) December 13, 2022
「YY文字起こし」のカメラ撮影機能で
JR秋葉原駅で撮影しました!
こちらのアプリはiOSのみです。 https://t.co/UsxkbjMCsx
YY文字起こし
— 「YYProbe」開発してる人📛 (@yysystem_dev) December 12, 2022
背景をカメラにして、文字起こし結果を重ねて表示し、最後に動画にできる機能がありますが、録画の最大時間を300秒に延長しました。
次のバージョンから反映いたします。 pic.twitter.com/an90xPiaZy
YY文字起こしの基本的な使い方(2021.06.28)-YYシステム
YY ProbeとYY文字起こしの違いについて
はい、YY文字起こしは
— 「YYProbe」開発してる人📛 (@yysystem_dev) December 13, 2022
ログインも登録も必要ない軽いアプリです。
YYProbeは会議アプリで複数人で使う想定のアプリです。会議アプリのためログイン認証が必要です。
音声認識の性能は2つとも共通です!
一人で使う場合はYY文字起こしの方が便利かも。
YY雰囲気カメラ
・音を聞き分けて、アニメーションオノマトペを表示
YY雰囲気カメラ
— 「YYProbe」開発してる人📛 (@yysystem_dev) December 13, 2022
救急車、消防車、パトカーのオノマトペをアニメーション化しました。ver2.1.12でリリース予定です
それぞれのサイレン音を聞き分け該当するアニメーションオノマトペが表示されます
乗り物オノマトペはきっとKIDS達も大喜び!
※音源は静岡SSR様の動画を利用させていただきました pic.twitter.com/rbXPBmWHjM
エキマトペをデザインされた方角さんがデザインされているそう!
YYシリーズには
— 「YYProbe」開発してる人📛 (@yysystem_dev) December 13, 2022
「YY雰囲気カメラ」というオノマトペアプリがあります
いろんな音を可視化してくれ、最新の画像生成AIも入ってますので、言葉を自動的にイラストにもしてくれます。
オノマトペのデザインは「エキマトペ」で有名な株式会社方角さん@hogakuinc ですhttps://t.co/MLDgSHY9Kc
YYデスクトップ字幕
・PCで利用可
(こちらは私も試してみる予定なので、また記事アップしますね)
あとはzoomチャットでみなさんの質問に回答という感じでした。
・例えば無料版と有料版の違いは?など
┗機能別プランについて(2021.09.08)-YYシステム
※記事アップ以降のアップデート内容は記事に反映していないものもあるようです。
文字起こしリクエストは無理で2回までですね。
— 「YYProbe」開発してる人📛 (@yysystem_dev) December 16, 2022
音声認識は無理です。
時間制限あります。
詳しくはアプリ内のお知らせに記載しております、
※無理×⇒無料〇
今日現在(2022/12/18)までに発信されているお知らせの中で2つピックアップ。
・聴覚障がい者向けプレミアムプラン
・Lite版ご利用時間制限について
なので、おそらく現在は、
・音声認識の連続使用時間:60分(聴覚障がい者用プレミアムプランは90分)
・1日の使用時間上限:120分
だと思います!
こんな感じでYYシステムさんの説明会に参加してきました、と いうレポでした。みなさんもご興味ある方は参加してみるといいかもしれません本日も読んでいただきありがとうございました
その他ブログ記事⇩