使用Google Colab和OpenAi語音轉文字API(Whisper)提取並學習音訊、視訊中的單字

本文介紹如何在Google Colab中使用Open AI的Whisper語音轉文字API將音訊或視訊轉換為SRT文件並導入《簡憶生詞本》的音訊目錄,以便學習和記憶其中的單字並練習外語聽力。

1. 在瀏覽器中開啟網址 https://colab.research.google.com

2. 點選“新增筆記本”,在上方“程式碼執行程式”選單中選擇“更改運行時類別”,在“硬體加速器”中選擇GPU。

3. 在筆記本中輸入以下程式碼並點擊左側運行按鈕:

!pip install git+https://github.com/openai/whisper.git

!sudo apt update && sudo apt install ffmpeg

4. 如果要提取視訊檔案中的文本,可以在Mac上輸入以下命令將視訊轉換為mp3:

brew install ffmpeg

ffmpeg -I input.mp4 input.mp3

5. 點選Colab左側目錄圖標,將音訊檔案拖曳到Colab文件視圖中並等待上傳完成。

6. 在筆記本中輸入以下程式碼並運行:

!whisper input.mp3 —-model medium (英文語音使用)

!whisper input.mp3 —-model medium —-language ja (日語語音使用)

7. 運行完成後,在左側文件檢視中選擇input.srt,並點擊右側三個圓點,選擇“下載”。

8. 打開《簡憶生詞本》APP,點選新增目錄,並選擇“新增音訊目錄(文件)”或“新增影片目錄(文件)”,並選擇視訊或語音檔案的位置。

9. 在新添加的音頻/影片目錄中,點選右上角三個圓點的圖標,並選擇“導入歌詞、字幕文件”,並選擇剛下載的SRT文件。

進一步參考

  1. https://www.youtube.com/watch?v=8SQV-B83tPU
  2. 透過外語歌曲提高外語聽力的有效方法
  3. 透過外語電影、動畫提升外語聽力的有效方法
使用Google Colab和OpenAi語音轉文字API(Whisper)提取並學習音訊、視訊中的單字

發表回覆

必填項已用*標註

捲動到頂部