工作清單

【ついに日本語対応】Gemini Notebookで1分ショート動画が自動生成できる！

逐字稿文字預覽

はい、こんにちは。ジュリンです。今回は
ですね、ジェミニノートブックですね。
はい。え、これがですね、やっと日本語で
もショート動画の制作にですね、え、対応してくれたということではい。え、もう7
月かな、今年のね、7月にね、え、一応、え、英語件で使える[音楽]ようになって、それがですね、え、今9月2日なんですけど、はい。え、ようやくね、あの、70
カ国ですかね。はい。70の言語に
[音楽]対応してくれたということで、ま、その中にね、日本語も入りましたよということで実際にね、[音楽]作れるようになっていました。はい。なのでまずはね
、何はともあれ見てみましょう。え、実際
にね、作らせたものになります。はい。で
はですね、ちょっとこちらの動画まずはご覧ください。
ジェミナイノートブックの短め機能は資料を動画化しますが、どうやって60秒に納めるのでしょうか?例えば文字ばかりで
読むのが大変な20ページも報告書。0ロ
から映像を作る普通の生成AIとは違い、自分がアップロードした信頼できる資料だけを処理します。操作はシンプル。資料
を追加し、形式を短めに設定。あとは日本
語を選んで初心者向けと指定するだけ。
しかし、20ページもある情報をただ切りしただけでは、たった60秒の動画として意味が通じなくなってしまいます。そこで
AIが資料全体を読み込み、最も重要な確信部分だけを抽出。それを台本化し、
ナレーションとビジュアルを連携させて1本の建型動画へと自動で組み上げていきます。これは細かなデザインを作り込む
編集ツールではありません。複雑な情報を
人間がパッと見て理解できる形に翻訳する機能なのです。
最初にお見せしたあの分厚い20ページのPDF資料が忙しい移動中にもサクっと理解できる60秒の解説動画として完成するわけです。
はい。え、ちょっと画面戻しますがはい。
という形でですね、ま、今ね、まさにね、このジェミニノートブックの、え、ショート動画ですね、え、ま、短い動画、え、を作るということについてですね、ちょっと60秒ぐらいでまとめてもらい
ました。え、ま、正確にはね、1分、1分
12秒なので、ま、大体ね、概1分ぐらいの動画を作ってくれるという機能になります。はい。いかがでしたでしょうか?
えっと、これですね、あの、今までのこの動画生成ですね、え、このノートブックLMの動画生成っていうのは、ま、いわゆるね、こう、あの、スライド型のやつでしたよね。え、なんかこう、えっと
、パワーポイントみたいなスライドがこうね、パッパって切り替わ、ま、それにね、音声のナレーションがつくみたいな形なんですけど、こちらのね、あの、ショート動画作成に関しては、え、見ていただいて
分かる通り結構ね、アニメーションが出てくれるんですよ。はい。え、ま、さっきね
、ちょっとこう、あの、お見せする0から映像を作る普通の成AIとは違い、自分がアップロードした信頼できるだけを処理します。操作はシンプル。資料を追加し、
こんな風な形で、ま、ちょっとね、こうアニメーション的なことっていうのをつけてくれて、はい。その上でね、60秒程度
にまとめてくれるということで、まあね、結構ね、これ使い勝手いいのかなっていう風に感じました。はい。え、ま、大体ね、
こう1分であのようやくして、ま、まとめてくれるっていうことなので、ま、長いね、動画ってなかなかね、見る気がしない。
なんかね、すごい自分を責めてる、自分のなんかこう振り返らなくちゃいけないんじゃないかなとかちょっと思ってしまうんですけど。はい。え、長すぎる動画ってね
、やっぱね、なかなか見たくないじゃないですか。はい。え、でもこれね、あの、
60秒程度にこうね、ギュッとね、まとめて、しかもね、え、映像のところもちょっとこうアニメーションをつけて、え、分かりやすくしてくれるので、ま、結構ね、これはね、あの、勉強とかそれから、
え、ま、ちょっとこう今学んでいる、え、スキルとか資格とかっていうのの、ま、要約みたいなものには意外とね、役に立つんじゃないかなと思いました。はい。で、
もちろんね、あの、ショート動画ということで、え、縦長のね、動画という形で作るので、ま、スマホでもね、非常に見やすいのではないかと思います。ただ
[鼻息]ちょっと僕の環境でね、あの、スマホのアプリ、え、見てみたんですが、え、スマホのこの、え、ジェミニノートブックのアプリではまだね、え、このショート動画作成の画面がちょっとなかったかな、項目がなかったんじゃない
かなと思うので、ま、この辺もね、順次対応していってくれるんじゃないかなとは思います。はい。ということで、じゃあ
実際にですね、この、え、ジミニノートックのこのショート動画の作成についてですね、ちょっと画面お見せしていきたいと思います。はい。え、ま、
ソースの方はね、何かしら入っているものとしてはい。え、スタジオの中の動画解説
ですね。はい。こちらをクリックします。
はい。そしてですね、ここ動画解説を
カスタマイズという画面になりますので、はい。え、こちらのですね、ま、短めの
ところですね。はい。え、こちらを選んで
はい。それからですね、この動画で、え、
重視するポイントは何ですかというところですね。ま、ここのところで、あの、一応
ですね、そのソースを見て、え、ソースからですね、あの、自動で提案はしてくれます。だから、ま、これ選んであげれば、
あの、それでもいい、いいですし、またはね、ここのカスタムトピックっていうところで、え、今回はこの内容で喋ってみたいな、え、このテーマでお願いみたいな形で、ま、ポイントをね、絞ってあげれ
ば自分でね、あの、何について、え、1分間喋ってもらうか、1分間の動画を作ってもらうかというのはちゃんとね、あの、指定することもできます。はい。え、基本
的にね、使い方ってもう本当にこれぐらいなのでめちゃくちゃ簡単ですね。はい。
一応ね、ま、ここ言語選択、あの、ま、標準でね、あの、ま、僕の動画見てくださってる方、ほとんどの方がね、あの、日本の方だと思うので、ま、ここはね、日本語で問題ありません。え、ただ逆に
言うと、え、もし英語のね、あの、学習してる方だったらここをね、あえて英語にするっていうのもありかもしれないです。
はい。それからですね、ソースのところ、
今ね、あの、全てのソースを選んでる状態になっているので、24件のソースっていう風に表示されてます。で、これだと
その全ソースを元にして動画作ってしまうので、ちょっとね、あの、範囲が広すぎるなっていう時には、ま、ちょっとね、この1つのソースから作って欲しいみたいな時には、こちらのね、ソースのところ
クリックして、で、ここのね、全て選択のところで1回チェックを外して、で、ま、必要なところにチェックを入れてはい。
そして確認っていう風にすればはい。え、
1つの情報源、1つのソースだけで、え、この短めの動画ですね、え、作ることができるようになっています。はい。え、
基本的にね、これでできるので是非ね、あの、ちょっとこう作れるようになったら作ってみて欲しいなと思います。ちなみに
今まで通りの動画を作りたい時にはこちらの説明動画の方ですね、クリックすればはい。え、こちらは今まで通りのですね、
え、ま、解説動画みたいなのを作ることができるので、はい。今のところね、ま、2
つ短めの動画、それから説明動画が作れるようになったという風に考えてもらえればオッケーです。はい。で、本当はですね
、海外だと、あの、もう1つね、シネマティック動画っていうのが作れるようになってるんですよ。あの、ま、
要するに、え、ビジュアルがね、めっちゃリッチですごいいい感じの動画がね、作れるみたいな形にのやつが本当はね、もう1つあるんですけど、日本語環境だとそれはね、まだ来てないんですね。結構ね
、前に発表されていて、いい加減来いよみたいにね、正直ね、本当は思ってるんですけど、実はショート動画の話よりも前にね、え、発表されたので、え、ちょっと順番おかしくないみたいな感じはするん
ですけど、ま、あの、もうしばらくすれば来るのかな、それとも来ないのかなとかね、ちょっと思ったりしてるところです。
はい。すいません。ちょっと話しずれ
ちゃいましたが、ま、短めの動画ね、こういった形で作ることができます。はい。で
、ま、今回はね、もうちょっとあえてま、わざわざもう作りませんがはい。
え、実際にね、作ったものをもう1つちょっとお見せするとはい。ちょっと先ほどのとはまたちょっと違うやつができたんですね。はい。え、同じソースで作ったものになりますが、え、今度はね、ちょっとあのこの、ま、ビジュアル的なところを中心とした、え、ものができました。ちょっとね、こちらも、ま、
1分程度なのでよかったらね、あの、比較してみてみてください。
誰も読んでくれない分厚いPDFや文字ばかりの長すぎる講義資料忙しいチームメンバーにどうやって重要ポイントを正確に伝えればいいのでしょうか。その解決策
となるのがジェミナイノートブックの新しい動画解説機能です。手持ちの日本語
資料から約60秒のスマホ向け動画を自動成できるんです。使い方は非常に
シンプル。資料をアップロードして設定を
選ぶだけ。あとはAIが内容を理解して
要点を抽出し、台本、音声、ビジュアルまで全で立型動画を完成させます。普通の
動画生成AIと違うのはあなたが選んだ信頼できる資料だけをソースにする点。
外部情報で客職しないからビジネスでも使える性格性が担保されるわけです。これ
を使えば南海な車内研修の資料を1分の復習動画に変換したり長い動画の文字起こしからサクっと予告編を作ったりと情報を素早く把握させるのに最適です。
誰も開かなかったあの分厚い資料もこれなら通勤中にスマホで手軽に理解できるコンテンツに生まれ変わります。
はい。という形でですね。はい。え、
先ほどとはね、またちょっとこう違う感じの、え、動画になってたんじゃないかなと思います。え、結構ね、テキスト中心の
こうアニメーションがこうがっつりね、入ってくれるようなそういうね、動画を作ってくれるパターンと、それからですね、え、ま、いわゆる、え、画像生成AI、ま、多分Nノバナ2ライトは使われてると
思うんですけどはい。え、要するに画像
生成AIで作った、え、イラストをですね、なんか何枚かバーっと連続でどんどんこう、え、切り替えながら見せていくっていうような、ま、動画とはい。え
、ま、いろんなね、形ができるので、え、ちょっとね、何パターンか作らせてみると面白いかもしれません。はい。で、一応
ですね、今のところはこの、え、ショート動画の作成に関しては、え、有料の方、え、かな?一応ですね、こ利用できるのが、
ま、GoogleAIRAPro加入者の18歳以上に限られてるということなので、はい。え、ちょっとね、日本語の環境に
は対応したものの、え、無料版の方はね、今のところまだショート動画としては使え、作れない、え、可能性がちょっと高いのかなていうことですね。はい。っていうの
と、あとはですね、ちょっとこう有料プラン、え、ま、18歳かはい、え、18歳の方、え、以上ということで、え、この辺ね、せっかくショート動画作れるようになったのだからもうちょっとね、なんか
こう年齢層をね、ちょっとこう下げてもいいのかなとかね、思ったりしました。ま
、もちろんね、それはあの学習目的でっていう意味合いをね、込めてって込めてっていうことなんですけどはい。え、ちょっと
ね、あの、短いまとめ動画作りたいな。ま
、学習のね、え、概要を掴みたいなみたいな時に意外とね、便利ではあるかなとは思ったので、ま、この辺のね、ところはもう少しね、今後ね、え、制限が緩くなってくれると嬉しいなと思いました。
もちろんね、あの、無料プランの方にもね、え、1日に数回でもこう作ることができるようにしてもらえたらいいんじゃないのかなとは思ったりします。はい。と
いうことでですね、え、[音楽]今回はジェミニノートブックを使ってですね、え、ショート動画ですね、え、ま、短い動画というところ、え、これをね、あの、作れるようになりましたよということで、
ま、実際にね、どんなものが作れるのかということまで含めてですね、え、お見せして、え、解説してきました。はい。え、
作れるようになった方はね、あの、是非作ってみてください。はい。ということで
すね、え、今回はこの辺で失礼したいと思います。それではさよなら。

來源：transcript.txt

本次執行流程與問題處理

  1. 下達指令

    指令：videonote https://www.youtube.com/watch?v=421eezp7bjM --language ja --bilingual --learning --auto-source-subtitles

    來源：https://www.youtube.com/watch?v=421eezp7bjM

    辨識語言：ja ｜ 參數：--language ja --bilingual --learning --auto-source-subtitles

  2. 預期流程

    依指令產生的處理順序：

    1. 自動字幕優先，Whisper 作為備援
    2. 來源選擇與品質檢查
    3. 文字校正與句子單元
    4. 雙語翻譯
    5. 雙語時間軸與學習單元
    6. 筆記與發布
    7. 公開網頁發布

  3. 1. 下載與語音辨識

    工具：videonote-transcribe-url（主辨識管線：下載、Whisper 辨識與選稿）

    處理：下載音訊、以 Whisper 辨識並選出最佳逐字稿

    產出：yt_dlp_meta.json（影片元資料）、audio_16k_mono.wav（16kHz 單聲道音訊）、transcript.whisper.json（Whisper 辨識結果）、transcript.json（正式逐字稿）、transcript_selection_report.json（來源選擇報告）

    耗時：3.8 秒

    關係：依序執行

    結果：完成

  4. 2. 全文快速校讀

    工具：videonote_rapid_transcript_review.py

    處理：先速讀完整逐字稿，再修正高可信突兀詞句並列出待確認項目

    產出：rapid_transcript_review_report.json（產出檔案）

    耗時：53.3 秒

    關係：依序執行

    結果：完成

  5. 3. 建立句子單元

    工具：videonote-build-sentence-units

    處理：將逐字稿切成帶時間軸的句子單元

    產出：sentence_units.json（句子單元）

    耗時：0.4 秒

    關係：依序執行

    結果：完成

  6. 4. 時間軸稽核

    工具：videonote_timeline_audit.py

    處理：檢查時間軸與音訊對齊

    產出：timeline_audit_report.json（時間軸稽核）

    耗時：0.4 秒

    關係：依序執行

    結果：完成

  7. 5. 品質檢查

    工具：videonote_controlled_quality.py（檢查時間軸與品質）

    處理：檢查語言、時間軸與可讀性品質

    產出：controlled_quality_report.json（品質報告）、language_sanity_report.json（語言檢查）

    耗時：0.4 秒

    關係：依序執行

    結果：完成

  8. 6. 播放時間軸回填

    工具：videonote_rebase_display_timeline.py

    處理：將網頁播放時間軸回填為校正字幕時間

    產出：display_timeline_rebase_report.json（時間軸回填報告）

    耗時：0.5 秒

    關係：依序執行

    結果：完成

  9. 7. 雙語翻譯

    工具：vnt-sentence（句子雙語翻譯）

    處理：將句子翻譯成繁體中文

    產出：sentence_bilingual_transcript.json（雙語逐字稿）

    耗時：59.5 秒

    關係：依序執行

    結果：完成

  10. 8. 雙語時間軸與學習單元

    工具：videonote_learning_timeline_v2.py（建立雙語時間軸與學習單元）

    處理：建立雙語時間軸與學習內容

    產出：sentence_bilingual_timeline.html（雙語時間軸頁）、learning.json（學習單元）、japanese_learning.json（日文學習單元）

    耗時：111.1 秒

    關係：依序執行

    結果：完成

  11. 9. 生成筆記摘要

    工具：videonote-generate-note（生成筆記摘要）

    處理：生成筆記摘要與重點

    產出：note.md（筆記 Markdown）、note.html（筆記 HTML）

    耗時：75.0 秒

    關係：依序執行

    結果：完成

  12. 10. 建立筆記頁面

    工具：videonote-render-html（產生筆記 HTML）

    處理：產生可閱讀的筆記 HTML 頁面

    產出：note.html（筆記 HTML）

    耗時：0.1 秒

    關係：依序執行

    結果：完成

  13. 11. 發布公開頁面

    工具：videonote-publish（發布公開頁面）

    處理：發布到公開網站與每日列表

    產出：公開筆記網址、result.json（管線結果）

    耗時：0.2 秒

    關係：依序執行

    結果：完成

手動來源字幕

自動來源字幕

Whisper 字幕

Qwen 字幕

Parakeet 字幕

MOSS 字幕

聲學時間證據（PyAnnote / WhisperX）

校正前後逐字稿

目前待解決問題與初步改善方向

進一步精進字幕與筆記
使用 Workbench 上傳校正字幕、中文參考稿或回饋 SRT，重新產生雙語與學習單元。
開啟 Workbench