逐字稿文字預覽
中身が普通のジェミーじゃなくてエージェントになった。 一回の指示でパワーポイント以外にこういった画像が全部出来上がった。 これ4つシートありますけどこれ一気に作った。 そうなんです。数字も編集できますので間違えてれば自分でここ直していったりとか。 画面が明らかに目次めっちゃリッチですね。 資料にしたりとか、たくさんのシートの綺麗な関数入りの表にしてくれたりとか、 報告資料にまとめてくれたりみたいなものが このジェミーノートブックの中だけで ほぼ完結する いつもニワークをご覧の皆さんこんにちは 本日も私ニワと山口さんとで ジェミーノートブックエレムにお役に立つ情報を お届けしていきます 今日はですね なんと名前も変わったけど 中川が思いっきり刷新したというですね Gemini Notebook すいません Notebook LMってね 言っちゃいそうになるぐらいね Notebook LMの時代が長かったんで 多分今日もね お話ししてる時に 私も山口さんも Notebook LMって言っちゃいそうなんですが Gemini Notebook 今後この Gemini Notebookっていうアプリがね もたらす位置付けとか 更新されていく方向性みたいなところが ちょっとね 変わってくるかなと思ったのでですね 今天是新的GEMI Notebook 和解説的解説 我先把你解説的解説 我先把你解説 我先把你解説 我先把你解説 我先把你解説 我先把你解説 我先把你解説 GEMI Google Workspace 情報 我先把你解説 我先把你解説 我先把你解説 我先把你解説 我先把你解説 我先把你解説 我先把你解説 我先把你解説 我先把你解説 山口さん、今回かなり大きな ちょっと裏側のね 仕組みそのものがだいぶ変わって アップデートされたので できること増えたんですよね そうですね、大きく変わりましたね、今回は なんと中身がね 普通のジェミーじゃなくて エージェントになったっていうのが 今回ね、ジェミーのオートブックの すごい大きな 見えないこの画面上からは 違いになってるってことですよね エージェントって何かというと クロードとか あとはChatGPで言うとCodexっていうやつがあるんですが Googleもアンチグラビティっていう そのエージェントモデルがあるんですね つまり一個何か指示したら いろんなことを組み合わせて自律的に動いてくれるっていう 今のAIの最先端なんですが とうとうそいつに裏側が変わった つまりアンチグラビティになったってことなんですね できるようになったことの一つの証明というか 動作としてPowerPointが作れたりExcelが作れたりとか いろんなものがちょっと今までできなかった動きができちゃうようになった みたいな感じなんですよね はい なので今お話しあったアンチグラビティっていう 大元のプラットフォームみたいなのが変わったっていうところと あと頭脳としてもジミニの3.5っていうのが使えるようになった 今3.7とかがあるのでちょっとあれなんですけども 3.5でも十分頭いいので 3.5とアンチグラビティが使えるようになった 非常大一样 あと是100种以上的 スキルと言われる レシピみたいなもの 这个中に PowerPointを作るスキル Excelを作るスキル デザインを考えるスキル 色々なものが100種類 使えるようになったので 色々な作業ができるようになった 大きな仕組みが 変わったところになります エージェントって やれることが一気に広がるので 今後ジェミーノートブック っていうのがやれることが いきなりエンジンが 変わったことによって ドカーンって 非常多増加的可能性 是否有的 所以 如果有何可以 PowerPoint做到 就像 有了 有了 所以 看得到 就像 有了 有了 有了 有了 有了 有了 有了 有了 有了 有了 有了 有了 有了 有了 有了 通知的実績データとかを スプレッドシートで管理していたりとか あとはこういった顧客満足度のアンケートみたいなものも こういうスプレッドシートで 管理していることが多いと思います あとは打ち合わせの会議議事録を ドキュメントで管理している 要はこういった3つのデータを 今ソースに追加しているという状態になっています なので過去のこういった実績だとか アンケート議事録の中から 今回はスライドを作りたいので PowerPointを ちょっと作らせてみようかなと思います 这些スライド資料って右のところから作らせちゃうと 画像になっちゃうから おっしゃる通りです とうとう編集できるやつが作れちゃう はい ではそれどうやって作らせるのかってところなんですが 先ほどもお伝えしたこのチャット欄のところに むちゃくちゃ簡単なんですが 編集可能なPowerPointで作成してくださいという すごい簡単な一文でちょっと作らせてみたいなと思います 結構念押ししてますよね そうですね スライドを勝手に作っちゃう場合もあるので 絶対PowerPointにしてくれって はい PowerPointでというところで言ってます 所以在昔的这个Notebook里面 这个Chat欄是一、二分钟就能够返回答的 文章だけ在中心中的回答应该是有的 今是有色的考慮得到的 先程的プランニング也有了 这些PowerPoint做的 这些内容是有的 如何做得到的呢? 今考慮得到的 像是有的 Chat 像是在地面的 作出的 一种的 一种 所以就像这样的形式 出现了 有什么样的形式 就像这样的形式 就像这样的形式 一旦确定的 就像这样的形式 就像这样的形式 就像这样的形式 就像这样的形式 就像这样的形式 就像这样的形式 就像这样的形式 就像这样的形式 裏側の仕組みが変わっているので 5分くらい経つとですね こういった形で承認ありがとうございますということで 完全編集可能なPowerPointを作りましたと 強調してきましたね あれどこにできたのと思うとですね 右側のところにこういうのが出来上がっています ちょっとこれ押してみるとですね これ勝手にダウンロードされたんですが PowerPointがローカルにダウンロードされてきました ちょっとこれ開いてみますね 開くとこれ今PowerPointで開いてるんですけども こういったものをですね スライドをこういう風に作ってくれているという形になっています ちょっと見た目のデザインというのは全く指定しなかったので こういった形になっているんですが これ全部ですね文字とかもこういう風に編集できるモードになっていますので 今までだったら編集できない画像しかできなかったと思うんですが これが全部編集できるモードで作られるという形になります これねGoogleワークスペース使ってらっしゃる方だったら ドライブに上げていただいてGoogleスライドでもね 編集することができるんですけど 一旦PowerPointの形なんですよね 所以很像是有的 但是很像是有的 但是很像看著 そうなんです。ただちょっとよく見るとですね、ここ全部英語とかになっちゃってるんですね。他の文字は全部日本語だったりするので、ここなんで英語なのかなって私結構このノートブックと対話してたんですね。 这就是这样的裏的仕組み是 Linux Server的地方是在这边的 那边的日本語的フォント是 最初是英文的有关的 但是这边的 プロンプト的指定次第では 最初から正常日本語的作用 就像是在这边的 就像是在这边的 那边的 那边的 这边的 这边的 这边的 这边的 那边的 但是 以前的 这边的 这边的 这边的 これは編集はできないんですけど 結構分かりやすいものが作れてたんじゃないかなと思うんですね こういう画像も入ったりとか そこから考えると ちょっと画像の編集はできるようになったけど 若干イマイチだなという感じがあるんじゃないかと思います なのでこれも一応プロンプトをうまく調整すれば 画像とかを挟み込むことができます ちょっとこれは取手出しで ちょっと日本語になったりとかもグラフとかあるけど ここは改善することができる そうですね 对于如何調整整理解决的方法 先ほど是很容易的方法 PowardPotor 作成的方法 次是 ポイント是 各スライダーは文字だけ 分解的方法 可看的方法 必须日本語 先程的方法 英語 何も指定的方法 今の現段階 そうですね 仕組みがさっき言ったLinuxっていう 英語の環境で動いてるみたいなので その辺りはちゃんと日本語で出してね というのを言って あとはデザインは ここは皆さんの好みによると思いますが 私は結構白色の背景とかにしたかったりするので そういうデザインも指定しておくと ある程度聞いてはくれますので 一旦ちょっとこれで今回動かしてみたいと思います こっちに入れるようになったんですね 昔なんかスライド資料のところに トンマナとか入れてましたけど 昔だったらここにこういう感じで 入れて押してましたが ほとんどここがちょっと主戦場じゃなくなりつつあるということですね 基本ボタンがなくなるかもしれない じゃないかってことですよね なので今回みたいなPowerPointの編集を作りたかったら こちらにいろいろなものを入れていって送信ボタンを押します ちょっとプロンプトで工夫してあげてねっていうことでした はい ではこちらの内容で出来上がりましたので見ていきたいと思いますが こちらもPowerPointを作りましたってあってですね なんか見てみるとすごいアウトプットがいっぱい出来上がってると思うんですね あれ? はい 所以, 次の段階がもうこれですか? 一回の指示でパワーポイント以外にこういった画像が全部出来上がっている そういうことですか なるほど 今回画像作れって言ったから 各スライドにこういう画像入れようかなって1枚作って 2枚目こういうの作ろうかな これもちゃんと日本語にしてって言ったから日本語になってると思うんですけど これ指定しなきゃ英語でできちゃいますので 画像別に作っていくんだ そうなんですよ 多分一回の指示で これだったらこういうことした方がいいんだな っていうのをこういう風にですね 全部作っていって 画像が全部出来上がったら 最後にそれをパワーポイントにまとめてくれます この中に入れてってもくれてると そうなんですよ 差し込んでねって言ってるんで パワーポイントに差し込んでくれて 一瞬もう画像は作ったから 自分で最後はやってくださいっていう セットなのかと思ったら そうじゃないんですよ 入れてくれてると なのでこれの指示一回で出来上がった これの最終のパワーポイント ちょっとダウンロードして 素材まで一応載せてくれてるってことですね そうですね 就在这里的PowerPoint看来看 这个出来上がり 刚才画像作为了 在这里的报告 只是文字的表紙 在那里的表紙 在那里的表紙 在这里的表紙 在这里的表紙 在这里的表紙 在这里的表紙 在前的Notebook上 在这里的表紙 在这里的表紙 在这里的表紙 在这里的表紙 在这里的表紙 在这里的表紙 在这里的表紙 自分なりに直していくってことができますので うまくプロンプトさえ調整していけば 今までのノートブックの良さも活かしつつ 自分なりの編集できるパワーポイントというか スライドを作っていくことができるんじゃないかなと思います この画像は画像でちゃんとナノバームを作ってくれて ミックスしてくれるっていうのは 結構ね前回ねちょっとスライド Googleスライドにめっちゃ特化した動画撮ったんですけど ジェミーノートブックはジェミーノートブックでの良さありますね そうですね なるほど 就是这个 作業まで行っちゃうということで ちょっとこれを見せてもらいたいと思います はい じゃあ次に続きでですね 先ほどのものから 次に月次の実績データというのを 先ほどソースに入れてたと思うんですが そこから経営管理用のExcelをちょっと作って という指示をしてみました そうするとこういった先ほど 庭さんもありましたが 関数とかも含めながら ちゃんと作ってくれて 出来上がったものをちょっと見ていただくと これちょっとダウンロードして スプレッドシートに変換したものになりますが 就是这个形式的形式 这个形式的形式 这个形式的形式 这个形式的形式 有一个形式的形式 一样的形式的形式 一样的形式的形式 这个形式的形式 这个形式的形式 这个形式的形式 这个形式的形式 一般的形式的形式 一旦Excel 返回必须的形式 好きなの 先程の簡単なソースに入れたものから こういったものを作ってくれて 例えば経営分析サマリーも作ってくれるんですが 下の方に行くとこういったグラフも 勝手に さっきの簡単なプロンプとしか打ってないんですけど これぐらいのものも全部作ってくれて 排気ロスの分析 みたいなところも全部作ってくれますので これ資料作成よりやりたい人多いでしょうね そうですね 分析時間かかりますからね Notebook LMっていう前のものに このスプレッドシートが加えられるようになるまでも 結構時間がかかったんですけど 今度はそれを なんかもう全部集計して 至り尽くせり分析までして まとめ上げたこんな綺麗なExcelを 一発出しで作る ではちょっとですね 続きでもう一度やりたいと思うんですが 先ほどこのExcelを作ってもらいました っていうのはあると思うんですけど 就在这些东西 就在这些东西 就在这些东西 比如说 市场集结シート 就在这些东西 今后市场的东西 的东西 就在这些东西 有点 所以 在这些东西 就在这些东西 就在这些东西 有点 在这些东西 有点 有点 有点 有点 有点 有点 有点 有点 有点 有点 有点 有点 我試したら 我先把這個V2的V2的V2 就是要是 所以說 那些生物都在 所以說 所以說 是這裡 這裡 是這裡 是這裡 所以 我們來 實行 我先走了 ちょっとこれ実行してみたいと思います。自分が作ったのも覚えてるのかもしれないですね。そうですね。実行するとですねこういった形でこの見てみたとここにバージョン2っていう形で作ってくれてます。 このVer2をスプレッドシートに変換して見ていきたいと思いますが ここですね
本次執行流程與問題處理
下達指令
預期流程
- 採用來源字幕(略過語音辨識)
- 來源選擇與品質檢查
- 文字校正與句子單元
- 雙語翻譯
- 雙語時間軸與學習單元
- 筆記與發布
- 公開網頁發布
1. 下載與語音辨識
工具:videonote-transcribe-url(主辨識管線:下載、Whisper 辨識與選稿)
處理:下載音訊、以 Whisper 辨識並選出最佳逐字稿
產出:yt_dlp_meta.json(影片元資料)、audio_16k_mono.wav(16kHz 單聲道音訊)、transcript.whisper.json(Whisper 辨識結果)、transcript.json(正式逐字稿)、transcript_selection_report.json(來源選擇報告)
耗時:70.6 秒
關係:依序執行
結果:完成
2. 全文快速校讀
工具:videonote_rapid_transcript_review.py
處理:先速讀完整逐字稿,再修正高可信突兀詞句並列出待確認項目
產出:rapid_transcript_review_report.json(產出檔案)
耗時:53.6 秒
關係:依序執行
結果:完成
3. 建立句子單元
工具:videonote-build-sentence-units
處理:將逐字稿切成帶時間軸的句子單元
產出:sentence_units.json(句子單元)
耗時:0.7 秒
關係:依序執行
結果:完成
4. 句子密度平衡
工具:videonote_balance_sentence_units.py
處理:平衡句子長度與密度
產出:sentence_units.json(句子單元)
耗時:0.7 秒
關係:依序執行
結果:完成
5. 時間軸稽核
工具:videonote_timeline_audit.py
處理:檢查時間軸與音訊對齊
產出:timeline_audit_report.json(時間軸稽核)
耗時:0.7 秒
關係:依序執行
結果:失敗
問題:exit code 46
6. 品質檢查
工具:videonote_controlled_quality.py(檢查時間軸與品質)
處理:檢查語言、時間軸與可讀性品質
產出:controlled_quality_report.json(品質報告)、language_sanity_report.json(語言檢查)
耗時:0.8 秒
關係:依序執行
結果:完成
7. 播放時間軸回填
工具:videonote_rebase_display_timeline.py
處理:將網頁播放時間軸回填為校正字幕時間
產出:display_timeline_rebase_report.json(時間軸回填報告)
耗時:0.8 秒
關係:依序執行
結果:完成
8. 逐字稿交叉檢查
工具:videonote_cross_check_transcript.py
處理:交叉檢查逐字稿與來源字幕
產出:transcript_crosscheck_report.json(交叉檢查)
耗時:0.8 秒
關係:依序執行
結果:完成
9. 來源句整理
工具:videonote_prepare_source_entries.py
處理:整理來源句子供時間軸與頁面使用
產出:sentence_units.json(句子單元)
耗時:0.9 秒
關係:依序執行
結果:完成
10. 雙語時間軸與學習單元
工具:videonote_learning_timeline_v2.py(建立雙語時間軸與學習單元)
處理:建立雙語時間軸與學習內容
產出:sentence_bilingual_timeline.html(雙語時間軸頁)、learning.json(學習單元)、japanese_learning.json(日文學習單元)
耗時:100.0 秒
關係:依序執行
結果:完成
11. 生成筆記摘要
工具:videonote-generate-note(生成筆記摘要)
處理:生成筆記摘要與重點
產出:note.md(筆記 Markdown)、note.html(筆記 HTML)
耗時:135.4 秒
關係:依序執行
結果:完成
12. 建立筆記頁面
工具:videonote-render-html(產生筆記 HTML)
處理:產生可閱讀的筆記 HTML 頁面
產出:note.html(筆記 HTML)
耗時:0.5 秒
關係:依序執行
結果:完成
13. 發布公開頁面
工具:videonote-publish(發布公開頁面)
處理:發布到公開網站與每日列表
產出:公開筆記網址、result.json(管線結果)
耗時:0.6 秒
關係:依序執行
結果:完成
手動來源字幕
- 尚未產生
自動來源字幕
Whisper 字幕
Qwen 字幕
- 尚未產生
Parakeet 字幕
- 尚未產生
MOSS 字幕
- 尚未產生
聲學時間證據(PyAnnote / WhisperX)
- 尚未產生
校正前後逐字稿
- 校正前 transcript.json 純文字 JSON
- 校正後 transcript.json 純文字 JSON
目前待解決問題與初步改善方向
- Whisper 幻覺段落已切除
已移除 6 段幻覺內容,其餘逐字稿保留使用。;原始 Whisper 證據保留在 transcript.whisper.raw.json。
- 診斷筆記:目前沒有可可靠理解的逐字稿
asr_language_failure;wrong_language_after_segmented_asr;宣告語言與辨識結果不一致;原始證據已保留。;筆記仍已建立並可進入精進模式;未捏造影片摘要或翻譯。
- 逐字稿品質檢核未完全通過
requested_language_repair_inconclusive;保留 719 段 Whisper 逐字稿,已先行發布。
- 逐字稿語言與宣告語言不一致
已保留來源字幕/Whisper 內容並繼續產生筆記;請確認影片語言。;若語音辨識輸出英文,也會被語言檢查標記,不會覆蓋日文底稿。
- 逐字稿全文快速校讀未完成
已保留自動字幕/原始逐字稿並繼續生成筆記。;未完成的全文速讀項目可在精進模式回聽確認。;RAPID_REVIEW_STATUS=REVIEW_REQUIRED_INVALID_OUTPUT
- 部分時間軸可能不精確
unit 353: 4 chars owns 30.000s (max 8.000s)
- 逐字稿可先使用,但有待校正清單
segment=6 unnatural_sentence_boundary: 標點出現在句首或停在逗號位置,斷句可能不符合文法/口語;segment=7 unnatural_sentence_boundary: 標點出現在句首或停在逗號位置,斷句可能不符合文法/口語;segment=213 unnatural_sentence_boundary: 標點出現在句首或停在逗號位置,斷句可能不符合文法/口語;segment=215 unnatural_sentence_boundary: 標點出現在句首或停在逗號位置,斷句可能不符合文法/口語;segment=376 adjacent_duplicate: 與前一段完全重複,可能是滾動字幕或 ASR 重複;segment=588 unnatural_sentence_boundary: 標點出現在句首或停在逗號位置,斷句可能不符合文法/口語;segment=589 unnatural_sentence_boundary: 標點出現在句首或停在逗號位置,斷句可能不符合文法/口語
- 逐字稿品質檢核未完全通過
{'stage': 'canonical_transcript_quality', 'action': 'published_with_warning', 'signals': ['long_low_density_block', 'repeated_30_second_gaps', 'transcript_selection_not_resolved', 'asr_language_mismatch:zh']}
- Qwen3-ASR 未完成,需確認 qwen_asr_lab 環境與音訊後重試精進模式。