Live Captions and Live Universal Translator

このトピックでは、Brightcove Live チャンネルで Live Captions と Live Universal Translator を使用する方法について説明します。

はじめに

Live CaptionsLive Universal Translator は Brightcove AI Suite の一部です。Brightcove Live チャンネルに、リアルタイムの AI キャプション、キャプション翻訳、音声吹き替えを追加できます。

これらのオプションは、Live チャンネルの作成時、または後からチャンネル設定で構成します。チャンネルがライブになると、生成されたキャプションや翻訳トラックをプレーヤーのトラックメニューで利用できます。

AI 拡張付き NextGen Live Event チャンネルの作成

Live AI Enhancements は、Event Channel タイプの NextGen Live チャンネルで利用できます。

  1. Live モジュールを開きます。
  2. New Channel をクリックします。
  3. チャンネルタイプを選択する画面で、Event Channel を選択します。Live AI Enhancements は Linear Channel では利用できません。
  4. チャンネル名、レンディションプロファイル、フレームレート、リージョン、入力転送プロトコルなどのチャンネル設定を完了します。
  5. Next をクリックします。
  6. ステップ 2 で Live AI Enhancements をオンにします。

    Live AI Enhancements トグルを表示する New Channel ダイアログ
  7. フレームレートの変更を確認し、Proceed をクリックします。Proceed をクリックすると、チャンネルのフレームレートが自動的に 29.97 fps に切り替わることを承認したことになります。

    フレームレート変更を示す Enabling Live AI Enhancements ダイアログ

AI 拡張 Live の制限事項

Live AI Enhancements には、現在以下の制限があります。

  • 複数の音声トラックはサポートされません。Live AI Enhancements が有効な場合、Audio Tracks セクションにメッセージが表示され、Add Audio Track 操作は使用できません。
  • Low Latency (LL-HLS) はサポートされません。
Live AI captions が複数音声トラックをサポートしないことを示す Audio Tracks セクション

自動キャプションと翻訳の設定

Auto-Captions & Translation セクションで、ライブストリームのソース言語とキャプション翻訳言語を設定します。

  1. Auto-Captions & Translation を展開します。
  2. イベントの主言語として Source Language を選択します。Live AI Enhancements は自動検出をサポートしていないため、ライブストリームの実際のソース言語を選択する必要があります。カスタム用語の認識精度を高めるために、Use custom Dictionary and Glossary を選択することもできます。

    Source Language が選択された Auto-Captions and Translation 設定
  3. Captions Translations Languages の横にある Add Languages をクリックします。
  4. 対象言語を 1 つ以上選択し、Save をクリックします。

    対象言語を選択する Caption Translation Languages ダイアログ

リアルタイム音声吹き替えの設定

Real-Time Voice Dubbing を使用して、キャプションからリアルタイムの吹き替え音声トラックを生成します。

  1. Real-Time Voice Dubbing を展開します。
  2. Dubbing Languages の横にある Add Languages をクリックします。
  3. 吹き替え言語を 1 つ以上選択し、Save をクリックします。

    吹き替え言語が選択された Add Dubbing Languages ダイアログ

Live AI 設定の編集

チャンネル設定から Live AI 設定を確認および更新できます。

編集できる設定は次のとおりです。

  • Live AI Enhancements 全体を削除する。
  • キャプション翻訳言語を追加または削除する。
  • 吹き替え言語を追加または削除する。
  1. Live チャンネルを開きます。
  2. Channel Settings をクリックします。
  3. Live AI Enhancements を選択します。
  4. 必要に応じて Live AI 設定を更新します。

    編集可能な Live AI 設定を表示する Channel Settings
  5. Save をクリックします。
ライブ中は Live AI 設定を編集できないことを示す Channel Settings

生成されたキャプションと音声トラックの確認

通常の NextGen Live ストリームと同じ方法で、ソースをチャンネルに接続します。

  1. Live チャンネルを開きます。
  2. Control Room ヘッダーで Start をクリックし、チャンネルがエンコーダー接続を受け付ける状態になるまで待ちます。
  3. Input Source パネルで、Input URLInput Stream Name をコピーします。
  4. エンコーダーで、Input URL をストリームエンドポイントとして、Input Stream Name をストリーム名 / キーとして設定します。
  5. エンコーダーから配信を開始します。

生成されたキャプショントラックは、プレーヤーのキャプションメニューから利用できます。

生成されたキャプションオプションを表示する Live チャンネルプレーヤー

リアルタイム音声吹き替えを設定している場合、生成された音声トラックはプレーヤーの音声トラックメニューから利用できます。

生成された音声トラックオプションを表示する Live チャンネルプレーヤー

対応言語

Live Autocaption

Live Autocaption 対応言語とコード (Part 1)
言語 コード
Afrikaans af
Arabic ar
Azerbaijani az
Bashkir ba
Belarusian be
Bulgarian bg
Bangla bn
Bosnian bs
Catalan ca
Czech cs
Welsh cy
Danish da
German de
Greek el
English en
English (Australia) en-AU
English (United Kingdom) en-GB
English (United States) en-US
Esperanto eo
Spanish es
Estonian et
Basque eu
Persian fa
Finnish fi
French fr
Irish ga
Galician gl
Gujarati gu
Hebrew he
Hindi hi
Croatian hr
Hungarian hu
Indonesian id
Italian it
Japanese ja
Kazakh kk
Live Autocaption 対応言語とコード (Part 2)
言語 コード
Kannada kn
Korean ko
Lithuanian lt
Latvian lv
Macedonian mk
Malayalam ml
Mongolian mn
Marathi mr
Malay ms
Maltese mt
Multiple languages mul
Dutch nl
Norwegian no
Punjabi pa
Polish pl
Portuguese pt
Romanian ro
Russian ru
Slovak sk
Slovenian sl
Albanian sq
Serbian sr
Swedish sv
Swahili sw
Tamil ta
Telugu te
Thai th
Filipino tl
Turkish tr
Uyghur ug
Ukrainian uk
Urdu ur
Vietnamese vi
Chinese (Simplified) zh-CN
Chinese (Traditional) zh-TW
Chinese (Cantonese) zh-yue

Live Translation

Live Translation 対応言語とコード (Part 1)
言語 コード
Afrikaans af
Akan ak
Amharic am
Arabic ar
Assamese as
Aymara ay
Azerbaijani az
Bashkir ba
Belarusian be
Bulgarian bg
Bhojpuri bho
Bambara bm
Bangla bn
Tibetan bo
Bodo brx
Bosnian bs
Catalan ca
Cebuano ceb
Central Kurdish ckb
Corsican co
Czech cs
Welsh cy
Danish da
German de
Dogri doi
Lower Sorbian dsb
Divehi dv
Ewe ee
Greek el
English en
Esperanto eo
Spanish es
Spanish (Mexico) es-MX
Estonian et
Basque eu
Persian fa
Dari fa-AF
Finnish fi
Fijian fj
Faroese fo
French fr
French (Canada) fr-CA
Western Frisian fy
Irish ga
Scottish Gaelic gd
Galician gl
Guarani gn
Konkani gom
Gujarati gu
Hausa ha
Hawaiian haw
Hebrew he
Hindi hi
Hmong hmn
Croatian hr
Upper Sorbian hsb
Haitian Creole ht
Hungarian hu
Armenian hy
Indonesian id
Igbo ig
Western Canadian Inuktitut ikt
Iloko ilo
Icelandic is
Italian it
Inuktitut iu
Inuktitut (Latin) iu-Latn
Japanese ja
Javanese jv
Georgian ka
Kazakh kk
Khmer km
Kurdish (Northern) kmr
Kannada kn
Korean ko
Krio kri
Kashmiri ks
Kurdish ku
Kyrgyz ky
Latin la
Luxembourgish lb
Live Translation 対応言語とコード (Part 2)
言語 コード
Ganda lg
Lingala ln
Lao lo
Lithuanian lt
Mizo lus
Latvian lv
Literary Chinese lzh
Maithili mai
Malagasy mg
Māori mi
Macedonian mk
Malayalam ml
Mongolian mn
Mongolian (Traditional) mn-Mong
Manipuri (Meitei Mayek) mni-Mtei
Marathi mr
Malay ms
Maltese mt
Burmese my
Nepali ne
Dutch nl
Norwegian no
Northern Sotho nso
Nyanja ny
Oromo om
Odia or
Querétaro Otomi otq
Punjabi pa
Polish pl
Pashto ps
Portuguese pt
Portuguese (Brazil) pt-BR
Portuguese (Portugal) pt-PT
Quechua qu
Romanian ro
Russian ru
Rundi run
Kinyarwanda rw
Sanskrit sa
Sindhi sd
Sinhala si
Slovak sk
Slovenian sl
Samoan sm
Shona sn
Somali so
Albanian sq
Serbian sr
Serbian (Latin) sr-Latn
Southern Sotho st
Sundanese su
Swedish sv
Swahili sw
Tamil ta
Telugu te
Tajik tg
Thai th
Tigrinya ti
Turkmen tk
Filipino tl
Klingon tlh
Tswana tn
Tongan to
Turkish tr
Tsonga ts
Tatar tt
Tahitian ty
Uyghur ug
Ukrainian uk
Urdu ur
Uzbek uz
Vietnamese vi
Xhosa xh
Yiddish yi
Yoruba yo
Yucatec Maya yua
Chinese (Simplified) zh-CN
Chinese (Traditional) zh-TW
Chinese (Cantonese) zh-yue
Zulu zu

Live Dubbing

Live Dubbing 対応言語とコード (Part 1)
言語 コード
Arabic ar
Czech cs
Danish da
German de
Greek el
English (Australia) en-AU
English (Canada) en-CA
English (United Kingdom) en-GB
English (Ireland) en-IE
English (United States) en-US
Spanish es
Spanish (Mexico) es-MX
Finnish fi
French fr
French (Canada) fr-CA
Hebrew he
Live Dubbing 対応言語とコード (Part 2)
言語 コード
Hindi hi
Hungarian hu
Italian it
Japanese ja
Korean ko
Dutch nl
Norwegian no
Polish pl
Portuguese pt
Portuguese (Brazil) pt-BR
Portuguese (Portugal) pt-PT
Romanian ro
Russian ru
Swedish sv
Thai th
Turkish tr

よくある質問

  • Live Captions と Live Universal Translator は誰が利用できますか?
    この機能は AI Suite の一部として提供予定で、現在は一部のお客様を対象としたベータテストとして提供されています。詳しくはアカウントマネージャーにお問い合わせください。
  • Live Universal Translator の利用は AI Suite クレジットを消費しますか?
    はい。Live Universal Translator は AI Suite クレジットを消費します。詳しくはアカウントマネージャーにお問い合わせください。
  • ライブイベント後、生成されたキャプションと吹き替え音声は VOD アセットで利用できますか?
    はい。ライブイベントを VOD アセットとして保存するオプションを選択した場合、キャプションファイルと吹き替えファイルはその VOD アセットの一部として含まれます。
  • 生成されたライブキャプションや吹き替え音声はイベント後に編集できますか?
    はい。ライブイベントを VOD アセットとして保存した場合、キャプションは通常の Brightcove キャプションファイルになり、通常どおりキャプションエディターで編集できます。