即時字幕試驗計劃

目的

透過坊間不同的即時字幕系統,幫助不同有特殊教育需要學生更有效獲得課堂資訊、減低他們參與課堂的障礙。

什麼是即時字幕?

˹即時字幕˼就是以自動化軟件,把説話内容以文字方式同步顯示出來。在課堂提供字幕有助提高影片的通達性,令有聽力障礙或在課堂接收語言信息有困難的人亦能較多獲得課堂的資訊,無論是面授課堂教學或遙距直播。

為什麼要使用即時字幕?

在2020年至2021學年,手語及聾人研究中心得到TDLEG的資助,進行了為期一年的試驗計劃,探討在課堂提供即時字幕為有特殊學習需要的學生是否帶來好處。6位有不同特殊學習需要的學生受邀參加課堂測試,在自行選擇的課堂上試用即時字幕系統,並在學期完結時回饋相關意見。根據收集回來的意見,參與實驗的學生都表示即時字幕雖然不能完全準確地把教師的説話顯示出來,但已可有效提高課堂的通達性。試驗結果亦顯示,即時字幕系統不單止對有聽力障礙的學生,尤其是輕、中度的弱聽學生有一定的幫助,對有其他有特殊學習需要,如專注力失調的學生同樣有幫助。這些參與試驗的學生都表示有意在日後課堂上繼續使用即時字幕系統作爲輔助工具,亦願意推薦其他有同樣需要的學生試用。

使用即時字幕的好處:

  • 可以減低聾人或弱聽學生在課堂中的溝通障礙,對其他有特殊教育需要學生亦有幫助。
  • 可以讓學生能追溯錯失的課堂內容,提升因課堂內容缺失而降低的課堂參與度。
  • 同時使用聽覺與視覺接收教學內容,可以增強對學習内容的記憶,提升在上課時的專注力。

使用即時字幕的限制:

  • 經人手產出的即時字幕準確率可接近100%,但成本昂貴,而且本地的相關人才亦相當匱乏。
  • 現時應用在大學的即時字幕服務主要是透過自動語音辨識系統生成的,使用成本相對較低,但無法達到完全準確的程度。
  • 一般用作聾人或弱聽學生的課堂輔助工具,對有嚴重、深度聽障學生來說,仍然需要有其他支援,如:手語傳譯、筆記服務等,以減少接收課堂內容的缺失。
  • 每種即時字幕軟件/手機程式都有其限制,如:語言、顯示方式、操作系統等。

如何在課堂上使用或提供即時字幕?

根據不同的上課模式(面授/網上),提供即時字幕的方法亦會有所不同。

1)網上授課

在市場上大部分有名的線上會議應用程式都已自動配置了即時自動字幕功能,例如Google Meet、Microsoft Teams和ZOOM。開啟自動字幕功能的操作亦十分簡單。由於ZOOM是現時經常使用的課堂教學軟件,在以下的短片中,我們示範了如何在ZOOM進行線上課堂時開啟即時自動字幕功能。

當字幕成功被啟動,處於同一個會議房間的所有參加者都能查看字幕內容。

2)面授課程

手語及聾人研究中心今年度仍然得到資助,繼續爲有特殊學習需要的學生提供即時字幕系統的支援,盡力協助在課堂上遇到困難的學生。本中心亦一直與學生事務處保持緊密的聯繫,如有同學希望在課堂上使用即時字幕系統,可以聯絡學生事務處、或直接與我們聯繫。我們會先安排見面,以了解同學的學習狀況與其遇到的困難,再聯絡相關的部門與課堂老師。在獲得老師同意之後,會安排同學在課堂試用這些系統。如學生有需要,我們會借出一套無線麥克風(圖一)和平板電腦給學生試用。無線麥克風的作用是確保清晰接收老師的聲音,以提升字幕的準確度。

麥克風會由學生自行保管,並負責在每次上課前傳遞給老師使用。老師只需要在課堂上戴上一個小型的無線麥克風作收音之用,接收器會直接連接到學生的個人裝置(電話或手提電腦)。聲音會經由裝置裏的應用程式自動生成文字,供學生閱讀。在試用一段時間過後,如同學滿意該服務並想繼續使用時,我們會聯絡學生事務處,商討如何提供長期支援。

圖一 :無線麥克風套裝

圖二: 即時字幕服務申請與使用流程

另外,相比起只有一個發送器的無線麥克風,我們更推薦使用一套中有兩個發送器的無線麥克風。在課堂上,一個發送器可以由老師長期佩戴,另一個發送器可以在問答環節或小組討論時交予其他同學互相傳遞使用。

圖三: 複數麥克風使用情境示例

市面上有許多即時字幕軟件/手機程式可供免費使用,學生可以自由選擇合適的工具。以下列出我們推薦試用的工具清單以供同學參考。

名稱 所提供語言選項(只列出常用語言) 詳情
1 Group Transcribe 廣東話、普通話及英文等
  • 手機應用程式
  • 只適用於iOS系統
  • 容許多人使用
  • 需每隔30分鐘重建房間
2 Otter.ai 英文
  • 手機應用程式/網頁版 (https://otter.ai/)
  • 免費版本有使用時間限制(每次不多於40分鐘,每月不多於600分鐘)
3 Live Transcibe 廣東話、普通話及英文等
  • 手機應用程式
  • 只適用於Android系統
  • 無法儲存轉錄內容
4 iOS 語音輪入 廣東話、普通話及英文等
  • 只適用於IOS系統

表一: 即時字幕系統推薦清單

參與服務試驗計劃的方法

如有任何疑問或想取得進一步資訊,歡迎聯絡我們。(電郵:cslds@arts.cuhk.edu.hk 電話:3943 4178)

手語雙語共融教育計劃籌款