前不久iPhone Xs發(fā)布會上,A12憑借超強機器學習能力再次吸睛。雖然芯片上的超強迭代極大提升手機性能,但對于iPhone用戶而言,搭載A12能獲得更優(yōu)質(zhì)的圖像是更為深刻的體驗。比如 “Smart HDR”能讓照片高光和陰影的細節(jié)更豐富出色; iPhone Xs的景深攝像頭,能針對焦外作出優(yōu)化,拍完照片后再調(diào)整景深,形成精美的人像照片等等。
事實上,以iPhone等代表的智能終端出現(xiàn),一直在推動視頻和圖片等圖像技術(shù)由高清向超高清演進。為滿足人們對高品質(zhì)信息的需求,內(nèi)容平臺企業(yè)一直積極探索新技術(shù),但仍面臨諸多問題。首先,目前網(wǎng)絡上傳輸?shù)膱D片尺寸與用戶屏幕尺寸不匹配,當?shù)唾|(zhì)量圖片在高分辨率屏幕下展示時,會引起視覺效果的損失。其次,網(wǎng)絡上的圖片經(jīng)過層層壓縮,內(nèi)容平臺企業(yè)難以從網(wǎng)絡上獲取到高清高質(zhì)量的圖片。第三,隨著業(yè)務的發(fā)展,而提升圖像質(zhì)量提升勢必會引起帶寬成本的提升,高額的帶寬成本的提升不可忽略。
為此,金山云推出讓圖片變清晰的“神器”—— KIE(Kingsoft Image &AI Enhancement),它基于AI技術(shù)對畫質(zhì)進行重建增強,為用戶帶來超清的圖像視覺體驗。除了支持移動端,還新增服務端方案,以支持更多應用場景,讓畫質(zhì)更清晰。
服務端圖片處理 一種更高清的實現(xiàn)方式
金山云KIE服務端解決方案,是在服務端,利用超分辨率和畫質(zhì)修復等技術(shù),修復圖像的噪點、馬賽克等損失,并重構(gòu)圖像的局部與細節(jié),大大提升用戶的觀看體驗。與移動端處理方式不同的是,服務端方案以計算能力更高的服務器為載體,并通過分層多模型處理,來實現(xiàn)圖片畫質(zhì)的優(yōu)化和增強。
不僅如此,服務端解決方案具備更強的畫質(zhì)增強能力。在網(wǎng)絡結(jié)構(gòu)方面,服務端的KIE模型采用了DenseNet和倒殘差網(wǎng)絡結(jié)構(gòu),通過特征圖的升維(信息冗余)和降維,可以讓網(wǎng)絡自動尋找起主要作用的特征信息。為了進一步提升服務端模型的效果,該網(wǎng)絡中巧妙的堆疊了更多的基礎(chǔ)構(gòu)建塊,網(wǎng)絡深度達到50層之多,在訓練時通過采用學習率自適應衰減技術(shù),可進一步縮短訓練時間,提高擬合精度。在訓練數(shù)據(jù)方面,在原數(shù)據(jù)集的基礎(chǔ)上,又對部分場景進行了數(shù)據(jù)補充,進而達到更好的效果。
可以說,金山云KIE服務端解決方案具備更深層的網(wǎng)絡結(jié)構(gòu),因而在去噪、平滑等方面均能達到更好的效果,可以給用戶帶來更清晰、干凈的視覺體驗。經(jīng)主觀評測,目前服務端方案處理的有效率可達95%以上。在人物類、文字類、靜物類等具體場景,服務端方案均有較好的優(yōu)化效果。
更多場景覆蓋 讓企業(yè)“一勞永逸”
一般來說,在移動端的畫質(zhì)增強是將分發(fā)至手機上的圖片做實時渲染??捎捎谑謾C的計算能力有限,且不同終端的計算能力差別較大,移動端方案的應用場景和處理效果受到諸多限制。
為此,相比于要考慮不同終端的性能配置,在服務端進行圖片處理則更顯”便捷”,它可直接將處理好的高質(zhì)量圖片分發(fā)至用戶,而不用考慮不同終端的差異化,可以做到一次優(yōu)化,N處適配,真正做到一勞永逸。目前,KIE服務端解決方案可以覆蓋到各類圖片場景,可對新聞資訊類插圖、瀏覽器feed流圖片、社交平臺圖片、長/短視頻封面、直播封面、老照片、Gif動圖等進行優(yōu)化。
從左至右分別是原圖、KIE移動端方案、KIE服務端方案
值得一提的是,金山云KIE服務端解決方案支持私有化部署和云服務兩種方式,前者擁有簡單易操作的部署方案,并能以接口的方式供客戶在本地服務器上調(diào)用,無需做資源遷移。而云服務方案則可以直接在云上對客戶圖片進行畫質(zhì)增強處理,操作簡單,且不需客戶維護本地服務器,極大提高效率!
事實上,以iPhone等代表的智能終端出現(xiàn),一直在推動視頻和圖片等圖像技術(shù)由高清向超高清演進。為滿足人們對高品質(zhì)信息的需求,內(nèi)容平臺企業(yè)一直積極探索新技術(shù),但仍面臨諸多問題。首先,目前網(wǎng)絡上傳輸?shù)膱D片尺寸與用戶屏幕尺寸不匹配,當?shù)唾|(zhì)量圖片在高分辨率屏幕下展示時,會引起視覺效果的損失。其次,網(wǎng)絡上的圖片經(jīng)過層層壓縮,內(nèi)容平臺企業(yè)難以從網(wǎng)絡上獲取到高清高質(zhì)量的圖片。第三,隨著業(yè)務的發(fā)展,而提升圖像質(zhì)量提升勢必會引起帶寬成本的提升,高額的帶寬成本的提升不可忽略。
為此,金山云推出讓圖片變清晰的“神器”—— KIE(Kingsoft Image &AI Enhancement),它基于AI技術(shù)對畫質(zhì)進行重建增強,為用戶帶來超清的圖像視覺體驗。除了支持移動端,還新增服務端方案,以支持更多應用場景,讓畫質(zhì)更清晰。
服務端圖片處理 一種更高清的實現(xiàn)方式
金山云KIE服務端解決方案,是在服務端,利用超分辨率和畫質(zhì)修復等技術(shù),修復圖像的噪點、馬賽克等損失,并重構(gòu)圖像的局部與細節(jié),大大提升用戶的觀看體驗。與移動端處理方式不同的是,服務端方案以計算能力更高的服務器為載體,并通過分層多模型處理,來實現(xiàn)圖片畫質(zhì)的優(yōu)化和增強。

采用KIE解決方案圖片對比
從左至右分別是原圖、KIE移動端方案、KIE服務端方案
不僅如此,服務端解決方案具備更強的畫質(zhì)增強能力。在網(wǎng)絡結(jié)構(gòu)方面,服務端的KIE模型采用了DenseNet和倒殘差網(wǎng)絡結(jié)構(gòu),通過特征圖的升維(信息冗余)和降維,可以讓網(wǎng)絡自動尋找起主要作用的特征信息。為了進一步提升服務端模型的效果,該網(wǎng)絡中巧妙的堆疊了更多的基礎(chǔ)構(gòu)建塊,網(wǎng)絡深度達到50層之多,在訓練時通過采用學習率自適應衰減技術(shù),可進一步縮短訓練時間,提高擬合精度。在訓練數(shù)據(jù)方面,在原數(shù)據(jù)集的基礎(chǔ)上,又對部分場景進行了數(shù)據(jù)補充,進而達到更好的效果。
可以說,金山云KIE服務端解決方案具備更深層的網(wǎng)絡結(jié)構(gòu),因而在去噪、平滑等方面均能達到更好的效果,可以給用戶帶來更清晰、干凈的視覺體驗。經(jīng)主觀評測,目前服務端方案處理的有效率可達95%以上。在人物類、文字類、靜物類等具體場景,服務端方案均有較好的優(yōu)化效果。
更多場景覆蓋 讓企業(yè)“一勞永逸”
一般來說,在移動端的畫質(zhì)增強是將分發(fā)至手機上的圖片做實時渲染??捎捎谑謾C的計算能力有限,且不同終端的計算能力差別較大,移動端方案的應用場景和處理效果受到諸多限制。
為此,相比于要考慮不同終端的性能配置,在服務端進行圖片處理則更顯”便捷”,它可直接將處理好的高質(zhì)量圖片分發(fā)至用戶,而不用考慮不同終端的差異化,可以做到一次優(yōu)化,N處適配,真正做到一勞永逸。目前,KIE服務端解決方案可以覆蓋到各類圖片場景,可對新聞資訊類插圖、瀏覽器feed流圖片、社交平臺圖片、長/短視頻封面、直播封面、老照片、Gif動圖等進行優(yōu)化。

采用KIE解決方案圖片細節(jié)對比
從左至右分別是原圖、KIE移動端方案、KIE服務端方案
值得一提的是,金山云KIE服務端解決方案支持私有化部署和云服務兩種方式,前者擁有簡單易操作的部署方案,并能以接口的方式供客戶在本地服務器上調(diào)用,無需做資源遷移。而云服務方案則可以直接在云上對客戶圖片進行畫質(zhì)增強處理,操作簡單,且不需客戶維護本地服務器,極大提高效率!
責任編輯:吳昊