|
高速攝影機輔助運動訓練
Professor Yuh-Renn Wu's Laboratory
Graduate Institute of Photonics and Optoelectronics, National Taiwan University
臺灣大學光電所 吳育任教授
利用多台同步高速攝影機拍攝投手動作,進行生物力學分析關節活動與肌肉發力狀況預防受傷、分析與訓練。此技術也用於拍攝投球軌跡,分析球路、球速與轉速以增進球質。
在臺灣,棒球是最受歡迎的體育競技之一,許多球員都是從國小時期開始接觸棒球並成長為職棒選手。然而若長期不當操練,選手容易造成不可逆的傷害,尤其許多高中投手因為手臂傷勢被迫調整投球姿勢,最後在畢業後已嚴重受傷被迫放棄成為職棒選手。有鑑於此,臺大、臺灣體大組成團隊,開發高速攝影機肢體辨識並整合物理治療與生物力學分析開發了輔助訓練系統,希望可以低成本方式普及傷害預防與運動科學。在團隊的分析與調整下,時年已24歲的陳柏安成功在兩個月內將球速從時速133公里提升到時速143公里,並被味全球團收為自培選手(人間福報,2024-09-10)。團隊中由吳育任教授所主導的子計畫專注於開發無標記式肢體3D重建與球路重建,採集運動數據以供專業教練與防護人員分析。
傳統上採集關節活動數據需要在關節處皮膚上貼上反光標記並在周圍架設多台紅外線攝影機追蹤標記的軌跡,然而在劇烈運動時標記可能會脫落且活動範圍越大需要越多台紅外線攝影機。本團隊採用長焦高速攝影機拍攝肢體動作後使用肢體辨識AI模型(例如YOLO),可以將攝影機架設在棒球場的觀眾席上拍攝投手且不影響比賽進行。多台攝影機從不同角度拍攝選手動作得到關節點的二維座標,兩兩組合透過三角測量(Triangulation)還原出三維座標(圖一),並從組合中選出三維位置投影至相機二維座標誤差最小的組合。然而模型經常混淆相似的關節,尤其是該關節被遮擋時尤為容易發生,且不可避免的模型判定位置會抖動。本團隊開發了超採樣去除雜訊算法(圖二),先將原始數據點透過有限脈衝響應(Finite Impulse Response, FIR)將資料速率提高後找出局部極值並從中選出正確的軌跡,排除可疑之數據點後再透過低通濾波器得到平滑穩定的軌跡。此方法對於短時間的連續抖動十分有效,也大大的改善了三維重建精度。後續透過將高品質之三維座標輸入逆運動學計算人體關節活動與肌肉發力可以得到精準的骨架運動軌跡並投影至影片上,供教練或是運動防護員分析(圖三)。
|

|

|
|
圖一、三角測量示意圖。影像中的對應點分別反投影為空間中的兩條射線。當這兩點滿足極線幾何約束時,兩條射線位於同一平面上,並於三維空間中交會於一點,此點即為重建之三維位置。
|
圖二、超採樣去除雜訊效果。原始資料點(藍點)之採樣率為270Hz。橘線為原始資料點超採樣128倍。綠線為排除可疑數據點後經過低通濾波所得最後輸出軌跡。
|
|

|
|
圖三、最終之骨架運動軌跡投影於影片。透過分析投球動力鏈,調整肌群發力時機和避免代償,可以有效提高球速與避免傷害。
|
球路重建方面,棒球投球時球的轉速(Revolutions Per Minute, RPM)與球速是影響球路表現的關鍵物理量。高轉速的球因馬格努斯效應(Magnus Effect)產生較大的氣動偏移力,是造成曲球、滑球等變化球路的主因。傳統量測方式仰賴雷達測速儀或專用旋轉感測器,設備昂貴且不易普及。本研究針對棒球場景自行訓練YOLO目標偵測模型,自動追蹤高速影片中的球體位置並裁切出每幀對應的球體影像(圖四),做為後續分析的基礎。
轉速量測基於一個核心假設:球旋轉一圈後,球表面紋路(縫線)會回到初始狀態,連續幀之間的影像差異因此達到局部最小值。系統透過分析連續幀之間的影像相似度,並以超採樣大幅提升時間解析度,從而精確估計旋轉週期並換算為每分鐘轉數(圖五)。球的旋轉軸決定了球路偏移的方向,是教練分析投球品質的重要依據。本研究將球體表面映射至單位球面,對均勻分布於候選方向的轉軸逐一計算球面旋轉後的像素預測誤差,搜尋使誤差最小的轉軸方向並進一步精確化,最終還原出投球時的旋轉軸,與使用都普勒回波測量求轉速的商用系統相比,我們成功用低成本的方式達到非常高度相關的結果(圖六)。球速量測需要將像素座標還原為真實世界的三維位置,因此須依賴相機標定所得的內參矩陣。本研究以相機焦距與球體已知半徑估計球在鏡頭前的深度,還原球的真實三維位置,進而計算出每幀之間的位移與時間間隔,最終輸出球速(km/h)。最後結合球速、轉速與出手點,計算馬格努斯力、重力與空氣阻力可以預測球的完整軌跡。與需要在本壘板前放置儀器的商用系統相比有接近的結果(圖七),且攝影機可以架設在不干擾投打之觀眾席,價格也相對親民。
|

|

|
|
圖四、球體裁切影像示意。YOLO偵測球體位置後裁切出對應的球體影像。
|
圖五、轉速週期偵測結果。藍線為經超採樣處理後的像素差異正規化均方誤差(Normalized MSE)曲線。當兩幀畫面相差17、34與56幀時畫面的像素差異為局部最小。綠點為候選週期,紅點為最終選定之旋轉週期。
|
|

|

|
|
圖六、與商用系統測得轉速比較。可以看到與使用雷達偵測之系統高度相關。
|
圖七、與商用系統測得進壘點比較。在考慮不同效應後,系統所預測的進壘點已經十分接近商用系統所測得之進壘點。
|
Reference:
[圖一] R. Hartley and A. Zisserman,“3D Reconstruction of Cameras and Structure,” in Multiple View Geometry in Computer Vision, Cambridge: Cambridge University Press, 2004, pp. 262–278.
Sidewall Optical Leakage and Scaling Limits in Sub-20 µm AlGaInP Micro-Resonant Cavity LEDs
Professor Chao-Hsin Wu
Graduate Institute of Photonics and Optoelectronics, National Taiwan University
臺灣大學光電所 吳肇欣教授
We are delighted to present some of the latest developments that have been made by us in the field of advanced AR displays and VLC systems. Our research explores the optical properties of the AlGaInP micro-RCLEDs with dimensions below 20 µm and operating at 620 nm. [1]
|

|
|
Fig. 1. (a) Cross-section schematic of the fabricated AlGaInP-based micro-RCLED. (b) TEM image of the RCLED epitaxy showing the DBR and cavity layers. (c) Photoluminescence (PL) of the MQWs and reflectance patterns for the detuning designs. (d) Optical microscope image of the micro-RCLED array under 20 mA bias current.
|
Through our experiments, we showed that micro-RCLEDs with 13×20 µm2 have strong spectral narrowing (FWHM < 10 nm) and excellent current-dependent wavelength stability. The reason why we observed unexpected high divergence in the far-field measurements turned out to be sidewall emission, which was proved by using hybrid optical model involving transfer matrix method combined with geometric optics. Indeed, as mesa size is smaller than the optical recycling length, the emitted light from lateral cavity modes cannot be absorbed any longer.
This demonstrates an inherent scaling compromise between vertical confinement of the cavity and directional emission of the beam. The essential requirement to overcome this problem is thus to implement appropriate sidewall emission control schemes for micro-RCLEDs of high-resolution applications. Our simulation results show that by using a sidewall mirror made of gold (Au), we can mitigate lateral escape and redirect photons forward, leading to a remarkable enhancement of light coupling into a ±20° acceptance cone AR waveguide, increasing the coupling efficiency (η20°) from 8.4% to 20.0%.
|

|
|
Fig. 2. (a) Measured and simulated far-field emission patterns of the micro-RCLED, highlighting the significant sidewall-emitting contribution. (b) Simulated far-field radiation patterns comparing the baseline micro-RCLED without a sidewall reflector and the modified architecture featuring an Au sidewall reflector, increasing the coupling efficiency (η20°) into the AR waveguide acceptance cone from 8.4% to 20.0%.[1]
|
Reference:
[1] N. Prechatavanich, M.-J. Wu, C.-W. Huang, C.-K. Yee, T. Sutheebanjerd, Y.-T. Tseng, Z.-A. Lin, Y.-H. Chen, K.-H. Lin, C.-C. Wu, and C.-H. Wu, "Sidewall Optical Leakage and Scaling Limits in Sub-20 µm AlGaInP Micro-Resonant Cavity LEDs," 2026.
|