逐字稿文字預覽
MinerU Popo是一個面向複雜文檔解析的後處理模型框架。 核心目標是把OCR和版面分析得到的頁面集結果,進一步整理成文檔集結構化知識。 它並非替代MinerU、Manty OCR或PaddleOCR等項目,而是在這些解析工具進行OCR之後,對標題層級、段落連續性、跨頁表格、圖文關係和閱讀順序進行統一推理與修復。 通俗地說,OCR能力是負責把字看出來。 MinerU Popo負責把整份文檔真正組織起來。 在技術上,MinerU Popo採用4B參數後處理模型,並集合任務化數據引擎、動態分塊同步和文檔增強方法。 重點解決長文檔在分頁、跨頁和複雜版式下容易出現的結構斷裂問題。 在公開指標中,接入Popo框架後,MinerU的TEDS從53. 7提升到90. 6。 MineQ-C2從48. 9提升到87. 4,說明它能夠顯著提升文檔結構恢復質量。 它的價值在於讓知識庫、RAG智能問答、學術論文解析和企業文檔治理,獲得更乾淨、更穩定、更可計算的文檔資產。 MinerU Popo讓複雜文檔從可識別,走向可理解、可治理、可計算。 MinerU Popo
本次執行流程與問題處理
下達指令
預期流程
- 自動字幕優先,Whisper 作為備援
- 來源選擇與品質檢查
- 文字校正與句子單元
- 筆記與發布
- 公開網頁發布
1. 下載與語音辨識
工具:videonote-transcribe-url(主辨識管線:下載、Whisper 辨識與選稿)
處理:下載音訊、以 Whisper 辨識並選出最佳逐字稿
產出:yt_dlp_meta.json(影片元資料)、audio_16k_mono.wav(16kHz 單聲道音訊)、transcript.whisper.json(Whisper 辨識結果)、transcript.json(正式逐字稿)、transcript_selection_report.json(來源選擇報告)
耗時:14.0 秒
關係:依序執行
結果:完成
2. 全文快速校讀
工具:videonote_rapid_transcript_review.py
處理:先速讀完整逐字稿,再修正高可信突兀詞句並列出待確認項目
產出:rapid_transcript_review_report.json(產出檔案)
耗時:12.4 秒
關係:依序執行
結果:完成
3. 建立句子單元
工具:videonote-build-sentence-units
處理:將逐字稿切成帶時間軸的句子單元
產出:sentence_units.json(句子單元)
耗時:0.4 秒
關係:依序執行
結果:完成
4. 句子密度平衡
工具:videonote_balance_sentence_units.py
處理:平衡句子長度與密度
產出:sentence_units.json(句子單元)
耗時:0.5 秒
關係:依序執行
結果:完成
5. 時間軸稽核
工具:videonote_timeline_audit.py
處理:檢查時間軸與音訊對齊
產出:timeline_audit_report.json(時間軸稽核)
耗時:0.5 秒
關係:依序執行
結果:完成
6. 品質檢查
工具:videonote_controlled_quality.py(檢查時間軸與品質)
處理:檢查語言、時間軸與可讀性品質
產出:controlled_quality_report.json(品質報告)、language_sanity_report.json(語言檢查)
耗時:0.5 秒
關係:依序執行
結果:完成
7. 播放時間軸回填
工具:videonote_rebase_display_timeline.py
處理:將網頁播放時間軸回填為校正字幕時間
產出:display_timeline_rebase_report.json(時間軸回填報告)
耗時:0.6 秒
關係:依序執行
結果:完成
8. 逐字稿交叉檢查
工具:videonote_cross_check_transcript.py
處理:交叉檢查逐字稿與來源字幕
產出:transcript_crosscheck_report.json(交叉檢查)
耗時:0.6 秒
關係:依序執行
結果:完成
9. 來源句整理
工具:videonote_prepare_source_entries.py
處理:整理來源句子供時間軸與頁面使用
產出:sentence_units.json(句子單元)
耗時:0.6 秒
關係:依序執行
結果:完成
10. 生成筆記摘要
工具:videonote-generate-note(生成筆記摘要)
處理:生成筆記摘要與重點
產出:note.md(筆記 Markdown)、note.html(筆記 HTML)
耗時:55.0 秒
關係:依序執行
結果:完成
11. 建立筆記頁面
工具:videonote-render-html(產生筆記 HTML)
處理:產生可閱讀的筆記 HTML 頁面
產出:note.html(筆記 HTML)
耗時:0.1 秒
關係:依序執行
結果:完成
12. 發布公開頁面
工具:videonote-publish(發布公開頁面)
處理:發布到公開網站與每日列表
產出:公開筆記網址、result.json(管線結果)
耗時:0.2 秒
關係:依序執行
結果:完成
手動來源字幕
- 尚未產生
自動來源字幕
Whisper 字幕
Qwen 字幕
- 尚未產生
Parakeet 字幕
- 尚未產生
MOSS 字幕
- 尚未產生
聲學時間證據(PyAnnote / WhisperX)
- 尚未產生
校正前後逐字稿
目前待解決問題與初步改善方向
- 逐字稿語言與宣告語言不一致
已保留來源字幕/Whisper 內容並繼續產生筆記;請確認影片語言。;若語音辨識輸出英文,也會被語言檢查標記,不會覆蓋日文底稿。
- ⚠️ 全文快速校讀:已套用暫定修正,請確認
segment=1 已先套用暫定修正:它並非替代MinerU、Manty OCR或PaddleOCR等項目,而是在這些解析工具進行OCR之後,對標題層級,段落連續性、跨頁表格、圖文關係和閱讀順序進行統一推理與修復。 → 它並非替代MinerU、Manty OCR或PaddleOCR等項目,而是在這些解析工具進行OCR之後,對標題層級、段落連續性、跨頁表格、圖文關係和閱讀順序進行統一推理與修復。;segment=3 已先套用暫定修正:在技術上,MinerU Popo採用4B參數後處理模型,並集合任務化數據引擎。動態分塊同步和文檔增強方法。 → 在技術上,MinerU Popo採用4B參數後處理模型,並集合任務化數據引擎、動態分塊同步和文檔增強方法。;segment=4 已先套用暫定修正:重點解決長文檔在分翼、跨翼和複雜版式下容易出現的結構斷裂問題。 → 重點解決長文檔在分頁、跨頁和複雜版式下容易出現的結構斷裂問題。
- 逐字稿可先使用,但有待校正清單
segment=3 unnatural_sentence_boundary: 標點出現在句首或停在逗號位置,斷句可能不符合文法/口語;segment=6 unnatural_sentence_boundary: 標點出現在句首或停在逗號位置,斷句可能不符合文法/口語;segment=7 unnatural_sentence_boundary: 標點出現在句首或停在逗號位置,斷句可能不符合文法/口語;segment=8 unnatural_sentence_boundary: 標點出現在句首或停在逗號位置,斷句可能不符合文法/口語;segment=15 unnatural_sentence_boundary: 標點出現在句首或停在逗號位置,斷句可能不符合文法/口語;segment=23 unnatural_sentence_boundary: 標點出現在句首或停在逗號位置,斷句可能不符合文法/口語;segment=24 unnatural_sentence_boundary: 標點出現在句首或停在逗號位置,斷句可能不符合文法/口語;segment=26 unnatural_sentence_boundary: 標點出現在句首或停在逗號位置,斷句可能不符合文法/口語;segment=27 unnatural_sentence_boundary: 標點出現在句首或停在逗號位置,斷句可能不符合文法/口語
- Qwen3-ASR 未完成,需確認 qwen_asr_lab 環境與音訊後重試精進模式。