逐字稿文字預覽
Hello! A new model has sparked widespread discussion over the last couple of days, named JF. A former OpenAI researcher spent two years developing it after leaving, creating a new model trained in a way that differs from the past. I think its features are very distinct and powerful. For specific tasks, it can run at a fraction of the cost and hundreds of times the speed of traditional models, with very low hallucination rates, generating the answers you need, which is highly significant. 它是重要的,因為它選了完全不同的一路由我們現代的AI, 它是在原來的N-Token Prediction。 當大家是比拼了強硬的解決, 硬的解決,和能力的解決方法, 它其實是很小的地步。 我們不需要等待太多的信息, 或多多的解決,我們只需要一個比較的測試, 或是個比例的不同的結果。 我给你一个例子 例如,在一个公司的行业, 如果我们使用了AI的相机, 我们必须要进入到的模特, 等待在模特上的模特, 这些时间需要几秒,对吗? 这一终的效果会给你, 你会在哪个部份接触, 谁要跟他在谈论, 或者是指出的优质是低的, 需要更加注意力。 它给你一个样的效果。 在实际上,用这个新模特, 它可以非常快速, 这几个百分钟的几个百分钟的几个百分钟 这几个百分钟的几个百分钟 这几个百分钟的几个百分钟 the billing department,estimatesthe customer churn rate,and assessesthe likelihoodofneeding human intervention. Once theseassessmentsare made,I canassignthe tasktoaspecificdepartmentorouteittoahumanagent, allowingme tomakethecorrespondingadjustmentsanddecisions.So itsefficiency andcosteffectivenessareincrediblyimpressive.It isjustextremely,extremelyfast.Even initslivedemonstrationofstructuredoutput,youcanclearlyseethatitgeneratesresults 但是传统的 models 也会一直在用评论 词为文字的评论 所以这两个技术的 approaches 其实完全不同 当 the founder released this video 他说了一篇, 他说了一篇, 我们的认识, 其实是一篇的答案 合适的答案 不太不太确定, 我们喜欢他们, 对吗? 例如, 他们可能会更多 empathetic 或是更多理解我们的 但是,他們的問題是他們的解答問題 人們不可能會不喜歡, 甚至是有個方法的方法。 這帶來更加盡量的信息和 consistency。 但是,他們的解答案是叫做RLCD, 名為 Reinforcement Learning from Calibrated Decisions。 它指的是,在 Reinforcement Learning, 我實在是在調整的解答案是 的解答案是一個解答案。 解答案是每次它提供答案, 它提供一個 probability。 A confidence score For instance, with this billing inquiry the probability that I should route it to the billing department is about 90% But if the customer also mentioned other issues I believe there's a certain probability it should be prioritized for other departments So I might assign a 10% or 20% probability to those as well At this point, you can set a threshold For example, if the churn risk is very high I can have a human intervene directly 如果它是低,我可以让它 AI model handle the response. 所以,它帮助我们去解决哪个性能量的权量使用 来解决于不同的情况下。 所以,我相信这个模型会将将其进行我们的生活生活 和很多不同的专业。 以前我们曾经用了一枪创造的创造, 或者我们不需要太多的时间。 但这些随意的随意的选择是我们的选择。 但是在这个新的模式中,我们的选择和认证能更加更加更加适合。 如果我们说我们的选择这个进入我们的页务, 我们肯定能够用这个模式,因为现在,我们的页务员工程, 他们其实会有很多认证和评价的评价。 例如,如果我们的收入的收入我们的预期, 我们还是需要这些认证, 这会常常需要一个人的路程式的方法。 但是如果我们有一个模式的模式, 我们可以定义它的质量从开始 即使是80%,60%,40%的距离, 我们只需要在一个很低的40%的距离。 如果它基本上是在结构的质量, 我们不需要保持人的质量, 我们不需要保持人的质量。 所以,在这个将来的更多的模式, 它可以更加大幅并且在这些模式上 这个模式其实只发了一个新版本 没有提供的技术和计程度 我觉得这个方法非常值得考虑 它使用一个系统一式的方法 是快思考 Daniel Kahneman的作词 说一大部分人的认识 不在实际上的认识 我们立刻的认识 我们立刻的认识 例如,选择哪个衣服 很自然的衣服 我只穿着衣服 and when I'm going to work I might wear a different pair. So this judgment is actually very intuitive. It's the same for AI models. You don't actually need to generate or think through every single judgment or use chain of thought reasoning. I can use a smaller model or a model designed for fast thinking with parallel computing to accomplish our tasks and goals very efficiently. So I think it might really make its way into our society soon because it's cheap, right? 而且是最高的,因為它是很高的, 在0.042萬元的價值, 比 GPT-4的價值,可能是10萬元。 價值是這麼高,他們現在不在賣現在的價值。 所以它可以使用在一大多數的評測 scenarios。 我們看到每個小型的手法 可能有一個決定的模式背後。 以前,一名 classifier would have required someone to spend ages training it, right? 我們以前要有的要求,但現在是沒有必要的 現在,這 model可以幫我們做了一切的評判, 決定定 specific outcomes based on the context 這代表,這代表,已經融化了更多的技術和考驗 我們會看到這個功能伸展開更多的使用 是的,我认为这个是非常有趣的新方式, 一遍完全不同的方法使用力 我們之前說明, 未來可能會有小型的模式 我們只需要有小型的模式 提供的模式 而是用販的模式 每個都市場的模式 我們最近的書 我們最近的書 也有同一個同意 成為我們目標的最適合的方法 是完全不平的 所以我們想分享這些 JB的模式 They've opened their waitlist, so if you'd like to try them out, feel free to join. Have a great weekend. Bye!
本次執行流程與問題處理
下達指令
預期流程
- 下載與語音辨識
- 來源選擇與品質檢查
- 文字校正與句子單元
- 筆記與發布
- 公開網頁發布
1. 下載與語音辨識
工具:videonote-transcribe-url(主辨識管線:下載、Whisper 辨識與選稿)
處理:下載音訊、以 Whisper 辨識並選出最佳逐字稿
產出:yt_dlp_meta.json(影片元資料)、audio_16k_mono.wav(16kHz 單聲道音訊)、transcript.whisper.json(Whisper 辨識結果)、transcript.json(正式逐字稿)、transcript_selection_report.json(來源選擇報告)
耗時:367.2 秒
關係:依序執行
結果:完成
2. 全文快速校讀
工具:videonote_rapid_transcript_review.py
處理:先速讀完整逐字稿,再修正高可信突兀詞句並列出待確認項目
產出:rapid_transcript_review_report.json(產出檔案)
耗時:38.6 秒
關係:依序執行
結果:完成
3. 建立句子單元
工具:videonote-build-sentence-units
處理:將逐字稿切成帶時間軸的句子單元
產出:sentence_units.json(句子單元)
耗時:0.6 秒
關係:依序執行
結果:完成
4. 句子密度平衡
工具:videonote_balance_sentence_units.py
處理:平衡句子長度與密度
產出:sentence_units.json(句子單元)
耗時:0.7 秒
關係:依序執行
結果:完成
5. 時間軸稽核
工具:videonote_timeline_audit.py
處理:檢查時間軸與音訊對齊
產出:timeline_audit_report.json(時間軸稽核)
耗時:0.7 秒
關係:依序執行
結果:完成
6. 品質檢查
工具:videonote_controlled_quality.py(檢查時間軸與品質)
處理:檢查語言、時間軸與可讀性品質
產出:controlled_quality_report.json(品質報告)、language_sanity_report.json(語言檢查)
耗時:0.7 秒
關係:依序執行
結果:完成
7. 播放時間軸回填
工具:videonote_rebase_display_timeline.py
處理:將網頁播放時間軸回填為校正字幕時間
產出:display_timeline_rebase_report.json(時間軸回填報告)
耗時:0.8 秒
關係:依序執行
結果:完成
8. 逐字稿交叉檢查
工具:videonote_cross_check_transcript.py
處理:交叉檢查逐字稿與來源字幕
產出:transcript_crosscheck_report.json(交叉檢查)
耗時:0.8 秒
關係:依序執行
結果:完成
9. 來源句整理
工具:videonote_prepare_source_entries.py
處理:整理來源句子供時間軸與頁面使用
產出:sentence_units.json(句子單元)
耗時:0.8 秒
關係:依序執行
結果:完成
10. 生成筆記摘要
工具:videonote-generate-note(生成筆記摘要)
處理:生成筆記摘要與重點
產出:note.md(筆記 Markdown)、note.html(筆記 HTML)
耗時:90.0 秒
關係:依序執行
結果:完成
11. 建立筆記頁面
工具:videonote-render-html(產生筆記 HTML)
處理:產生可閱讀的筆記 HTML 頁面
產出:note.html(筆記 HTML)
耗時:0.1 秒
關係:依序執行
結果:完成
12. 發布公開頁面
工具:videonote-publish(發布公開頁面)
處理:發布到公開網站與每日列表
產出:公開筆記網址、result.json(管線結果)
耗時:0.2 秒
關係:依序執行
結果:完成
手動來源字幕
- 尚未產生
自動來源字幕
Whisper 字幕
Qwen 字幕
- 尚未產生
Parakeet 字幕
- 尚未產生
MOSS 字幕
- 尚未產生
聲學時間證據(PyAnnote / WhisperX)
- 尚未產生
校正前後逐字稿
- 校正前 transcript.whisper.json 純文字 JSON
- 校正後 transcript.json 純文字 JSON
目前待解決問題與初步改善方向
- 逐字稿語言與宣告語言不一致
已保留來源字幕/Whisper 內容並繼續產生筆記;請確認影片語言。;若語音辨識輸出英文,也會被語言檢查標記,不會覆蓋日文底稿。
- 逐字稿全文快速校讀未完成
已保留自動字幕/原始逐字稿並繼續生成筆記。;未完成的全文速讀項目可在精進模式回聽確認。;RAPID_REVIEW_STATUS=REVIEW_REQUIRED_INVALID_OUTPUT
- 逐字稿可先使用,但有待校正清單
segment=45 adjacent_duplicate: 與前一段完全重複,可能是滾動字幕或 ASR 重複
- Qwen3-ASR 未完成,需確認 qwen_asr_lab 環境與音訊後重試精進模式。