無論是傳統SD影像或現在主流的HD影像,畫面的長寬比例都以4:3或16:9為主,呈現左右較長、上下較短的版面。而大家手持智慧型手機觀看影片時,往往會維持手機直立的姿態,因此不是要忍受狹小的影片畫面,就是要讓影片拉至滿版播放,而犧牲左右側的畫面,讓人頭痛不已。
影片轉正後……你在拍哪?
目前大多數的電視節目、影片,大多是以橫向16:9比例拍攝,所以要在9:16或9:21的直向智慧型手機螢幕播放時,最簡單的方式就是將手機橫置,如此一來就能顯示完整影片畫面。然而在不方便橫置時,就需在直立畫面上播放影片,如此一來就會引發畫面過小、或畫面被裁切的問題。
為了要提升影片觀賞體驗,有不少內容提供者透重新剪裁(Reframe)的方式,在將影片由橫轉直的過程中,重新指定畫面裁切的範圍,讓畫面中的主體能夠正確出現在處理過的影片內。然而這種使用這種方式處理影片,會導致另一個問題,如果固定裁切範圍可能會造無法正確鎖定主體,但使用動態裁切範圍則需要大量人力手工調整。
目前雖然有些軟體可以達到動態裁切,但效果並不一定十分理想,為了解決這個問題,Google宣佈了開源的AutoFlip影像處理框架,它建立在MediaPipe框架的基礎上,可以將任何輸入的影片轉換為橫向、直向或1:1等不同顯示比例,並在轉換過程中自動追蹤影片主體,以提供最佳化的結果影片。
▲ 直接將橫向影片轉直並剪裁,很可能會出現主體沒有出現在畫面中的狀況,AutoFlip則可解決這個問題。(圖片來源:Google,下同。GIF動圖,檔案尺寸:6.53MB)
自動鎖定裁切範圍
AutoFlip是款全自動的影片轉正處理解決方案,它會透過機器學習的協助理解影片內容,先偵測場景變化以區隔不同的場景,然後自動檢測並追蹤各場景中的主要物件,以達到最佳重新構圖的效果。
在AutoFlip運作的過程中,第1步就是偵測場景變化,系統會統計畫面中顏色出現的狀況,當顏色的數據出現劇烈變化時則視為場景已改變,並根據這些記錄將影片切分為多個片段。
接著在2步中,系統會分析各片段,並分析畫面中人物、動物或是體育活動中的球等可能是主體的物件,每種物件都有對應的權重值,權重越高代表越為重要,也代表在重新安排構圖時可以獲得更長的出現時間。
當整個片段都分析完畢後,AutoFlip會根據影片內容自動選擇靜止、平移或追踪等重新構圖方式,靜止模式會將畫面焦點鎖定在特定物件上,也順便發揮防手震的影像穩定功能,平移模式則會以固定的速度移動鏡頭,追踪模式則是跟隨物件穩定移動鏡頭,可以處理運動方式比較複雜的物件。
▲ AutoFlip將處理過成拆分為偵測場景變化、追蹤物件、重新構圖等3個步驟。
▲ 追蹤物件可依影片內容不同,自動判斷需要追蹤的物件或人物。
▲ AutoFlip也顧慮到觀賞影片的舒適度,會自動調節裁切範圍(圖中亮色區塊)以讓畫面移動較為平滑。(GIF動圖,檔案尺寸:10.7MB)
▲ AutoFlip可以自動將影片裁切為多種不同比例。(GIF動圖,檔案尺寸:7.93MB)
AutoFlip雖然不是萬能的影片處理工具,但已經能在提供理想裁切效果的前提下,大幅降低調整影片的人力需求,而且它可以透過機器學習的方式不斷提升辨識準確度與處理的成效,功能勢必隨著時間來越來越強大。
想看小編精選的3C科技情報&實用評測文,快來加入《T客邦》LINE@查看原始文章- 2020智慧型手機推薦:HTC U11、小米9、ASUS ZenFone 5Z 、OPPO R17、Sony Xperia XZ3、iPhone 11 pro
- 【開箱】CP值最高!「Google Pixel 4智慧型手機」外型美、能拍攝星空、螢幕畫質超優⋯6大亮點,用過就回不去啦!
- 三星、華為穩坐 2019 年第一季全球智慧型手機銷售冠亞軍
- 鍾文澤 盤點 2019 年最值得購買的智慧型手機與配件,同時回顧在發表會的尷尬時刻
- [開箱] 大獲小資族好評輕旗艦智慧型手機小米 9T 外觀、實拍、效能實測分享
- 別讓智慧型手機成為人和人之間的隔閡! 創意廣告發人省思...
- 有了它,你的智慧型手機就能一秒變 Game Boy !?
- 反璞歸真大挑戰?放棄智慧機改用功能手機一周可獲 1,000 美元獎金
- 大電量、三鏡頭平價手機推薦:HTC DESIRE 19+開賣
- 智慧型手機再進化?!神奇手環把你的手腕變成螢幕啦!
- 數位遊戲商城戰爭開打,關於 Steam 與 Epic Games 的崛起,他們竟如此相似
- 韓妞都在用!換張桌布,一秒提升手機質感!15張韓系質感桌布,塞爆手機容量都不嫌多~
- 想從頭到腳當個韓妞嗎?精選15張「韓系色塊桌布」給你~所有韓韓的小元素都不能放過!
- 2020必逛展覽!《再見梵谷-光影體驗展》3層樓光影巨幕,再現梵谷《向日葵》、《星夜》,搶先購票資訊看這裡~
- 底妝界黑馬!用過才知TOPFACE的好,竟然是混和肌膚的蜜糖
- 韓國藥妝店OLIVE YOUNG太好買,尤其沒買到TOP6明星商品真的會哭哭~
- 買得到算你幸運!韓妞推爆的3款刷具,去韓國絕對不要錯過啊~
- 出門記得戴口罩!流感、武漢肺炎太可怕~關於寶寶戴口罩的相關知識要記得!
- 跟著MOMA找熱點-泰晤士河邊人氣餐廳COPPA CLUB
- 選對塵蟎吸塵器,跟過敏說掰掰!比較市售塵蹣機差異
- 手寫的文字更有溫度!IG必追的手寫字藝術家,光看著就療癒!
- 日本女生都在用的染髮劑?!BEAUTYLABO濃密泡泡染髮杯,任何人都可以輕易上手的染髮產品~
- 挽救毛孔作戰!2019開架保濕化妝水推薦,CP值最高是這款!
- 4款減肥期間超推介的「健康小食」不但健康又能飽肚!
- 機能材質衣物怎麼洗?壓力褲、束褲清潔妙招與洗衣精推薦!
- 這些星座超難追的!排名前3名的最難追的星座女~你有份上榜嗎?
- 日本爆紅的心測!一個人時會想去哪靜一靜?看看老天何時要讓你「脫單」!
- 這麼多人都愛他不是沒有原因!看玄彬私底下對粉絲就知道~這「摸頭殺」實在是太暖了啊!
- 簡約的唯美星座紋身~以簡單的線條刻上你的專屬星座!超適合怕痛的你哦~
- 走出迷宮~告訴你近期要特別小心身邊的哪些事情?
- 新手必學的打亮技巧~打造立體的裸妝透明感,原來打亮要上在這個位置!
- 你知道你自己適合幾歲的另一半嗎??快讓心測結果告訴你答案!!
- 停止繼續把你的生活搞爛!最近宇宙想要給你什麼訊息?好好清理一下自己的人生吧~