羅春姝
IT之家7月28日消息,中國(guó)科學(xué)院深圳先進(jìn)技術(shù)研究院數(shù)字所董超研究員團(tuán)隊(duì)今日發(fā)布了一項(xiàng)名為HYPIR的圖像復(fù)原大模型,不僅比現(xiàn)有的圖像復(fù)原技術(shù)快數(shù)十倍,更在高清分辨率、文字保真、理解能力、用戶(hù)控制靈活性等方面展現(xiàn)出了優(yōu)異性能。
傳統(tǒng)方法中,基于預(yù)訓(xùn)練擴(kuò)散模型的復(fù)原技術(shù)顯著提升了圖像復(fù)原效果,但存在計(jì)算復(fù)雜度高、推理速度慢、訓(xùn)練資源消耗大以及生成結(jié)果可控性不足等問(wèn)題,成為了限制圖像復(fù)原技術(shù)發(fā)展的瓶頸問(wèn)題。
▲1927年第五屆索爾維會(huì)議合影修復(fù)
去年,董超團(tuán)隊(duì)提出了智能畫(huà)質(zhì)增強(qiáng)大模型SUPIR,將低質(zhì)量的圖像恢復(fù)到接近原始狀態(tài)的高清圖像,修復(fù)多種退化類(lèi)型的圖像。而此次圖像大模型HYPIR作為升級(jí)版,舍棄了迭代式的擴(kuò)散模型訓(xùn)練,改用單步的對(duì)抗生成模型訓(xùn)練方式,將原有的算法速度提升了數(shù)倍,同時(shí)采用更新的文生圖基模型進(jìn)一步提升算法效果,實(shí)現(xiàn)了8K級(jí)別的細(xì)節(jié)生成,在生成圖像的穩(wěn)定性和可控性方面遠(yuǎn)超SUPIR大模型。
▲HYPIR大模型修復(fù)圖像效果展示
“以往圖像復(fù)原方法中往往包括擴(kuò)散模型蒸餾、ControlNet適配器或者多步推理過(guò)程。而HYPIR則不需要依賴(lài)這些步驟,使用方法更加簡(jiǎn)單。在訓(xùn)練和推理速度上較傳統(tǒng)方法提升了一個(gè)數(shù)量級(jí)以上,且性能更優(yōu)?!倍榻B,HYPIR主要有兩個(gè)創(chuàng)新點(diǎn),一是使用預(yù)訓(xùn)練擴(kuò)散模型初始化復(fù)原網(wǎng)絡(luò);二是從理論角度出發(fā)解釋這一簡(jiǎn)單方法背后蘊(yùn)含的深刻原理。
實(shí)驗(yàn)數(shù)據(jù)顯示,在單張顯卡(圖像處理器)上,HYPIR僅需1.7秒即可完成一張1024x1024分辨率圖像的復(fù)原。相比現(xiàn)有的圖像復(fù)原方法,研究人員提出的HYPIR在復(fù)原圖像的質(zhì)量上性能更優(yōu),且能夠適用于各種尺寸的預(yù)訓(xùn)練擴(kuò)散模型,為不同應(yīng)用場(chǎng)景提供了靈活性。
▲HYPIR大模型處理圖片紋理細(xì)節(jié)的效果展示
在應(yīng)用層面,研究人員介紹,HYPIR在圖像高清分辨率、文字保真、理解能力、用戶(hù)控制靈活性等方面均展現(xiàn)出了優(yōu)異的性能。
例如,在老照片修復(fù)方面,研究人員運(yùn)用HYPIR修復(fù)了國(guó)內(nèi)外經(jīng)典電影、電視劇老照片,讓模糊的影像重現(xiàn)清晰的細(xì)節(jié),為文化記憶傳承提供了技術(shù)支持。在高分辨率圖像修復(fù)領(lǐng)域,HYPIR同樣表現(xiàn)出色,因其兼具速度與效果,HYPIR成功攻克了傳統(tǒng)方法在生成8K分辨率圖像時(shí)往往面臨速度慢或效果不佳的難題。
▲HYPIR大模型在高分辨率圖像超分復(fù)原方面的效果展示
在文字保真方面,傳統(tǒng)基于擴(kuò)散模型的方法常導(dǎo)致復(fù)原出的文字模糊或扭曲,缺乏精確性,而HYPIR則能夠使復(fù)原出的文字保持高保真度和清晰度,無(wú)論是簡(jiǎn)單的標(biāo)識(shí)還是復(fù)雜的文檔,HYPIR都能精準(zhǔn)地還原其原始形態(tài),使圖像中的文字清晰可讀。
值得一提的是,HYPIR還具備了突出的自然語(yǔ)言理解能力,能夠精準(zhǔn)捕捉和理解用戶(hù)的輸入指令,在圖像復(fù)原過(guò)程中準(zhǔn)確地反映用戶(hù)的意圖。此外,用戶(hù)可以根據(jù)需求靈活調(diào)節(jié)生成與復(fù)原的平衡,或精細(xì)控制圖像細(xì)節(jié)程度,從而獲得符合自身偏好的結(jié)果。
HYPIR不僅展示了圖像修復(fù)技術(shù)上的創(chuàng)新性,也體現(xiàn)了對(duì)實(shí)際應(yīng)用需求的理解。通過(guò)打破傳統(tǒng)思維定式,該技術(shù)在文化傳承與保護(hù)、影視修復(fù)、高分辨率圖像生成等領(lǐng)域提供了解決方案。
IT之家附HYPIR項(xiàng)目官網(wǎng)鏈接:
拒絕養(yǎng)娃焦慮,在家自測(cè)0-3歲寶寶發(fā)育商
②對(duì)可能有問(wèn)題的小兒可用GDDS篩查予以證實(shí)或否定-——。③對(duì)有高危因素的小兒可進(jìn)行發(fā)育監(jiān)測(cè)——|。二、測(cè)驗(yàn)說(shuō)明(1)測(cè)驗(yàn)?zāi)康模褐荚谶M(jìn)行智力篩選,以便對(duì)可疑者作進(jìn)一步診斷性的檢查。2)適用范圍:0~3歲嬰幼兒_。3)測(cè)驗(yàn)時(shí)間:15分鐘左右——-。(4)量表構(gòu)成:量表由多個(gè)不同的測(cè)試項(xiàng)目組成,根據(jù)嬰幼兒智能發(fā)育的次序先后不同,..
從“遲緩” 到 “追趕”:3 歲前做好這幾點(diǎn),逆轉(zhuǎn)孩子智力差距
韋氏兒童智力量表(WPPSI):這是一種標(biāo)準(zhǔn)化的智力測(cè)試量表,適用于3 - 6歲半的兒童__。測(cè)試內(nèi)容包括言語(yǔ)量表和操作量表兩部分,言語(yǔ)量表主要評(píng)估寶寶的語(yǔ)言理解、詞匯、常識(shí)等能力;操作量表則評(píng)估寶寶的空間感知、圖形識(shí)別、動(dòng)手操作等能力。測(cè)試需要由專(zhuān)業(yè)的心理測(cè)評(píng)人員進(jìn)行,測(cè)試時(shí)間較長(zhǎng),結(jié)果也較為準(zhǔn)確。拼圖、搭后面會(huì)介紹。
兒童智力發(fā)育測(cè)評(píng)有了新量表
以下是世界衛(wèi)生組織(WHO)推薦的兒童智力發(fā)育簡(jiǎn)易評(píng)估表,適用于3-12 歲孩子,家長(zhǎng)可以對(duì)照孩子的實(shí)際表現(xiàn)進(jìn)行初步篩查。《兒童智力檢查測(cè)試量表》3-4 歲:? 不會(huì)用剪刀剪直線(xiàn)? 不認(rèn)識(shí)常見(jiàn)顏色(紅/ 黃/ 藍(lán))? 不能模仿畫(huà)“○”“△”? 無(wú)法說(shuō)出自己的姓名和年齡? 聽(tīng)不懂“先等我繼續(xù)說(shuō)。 等我繼續(xù)說(shuō)。
來(lái)源:紅網(wǎng)
作者:牛晨辰
編輯:雀飛煙
本文為紅辣椒評(píng)論 原創(chuàng)文章,僅系作者個(gè)人觀(guān)點(diǎn),不代表紅網(wǎng)立場(chǎng)。轉(zhuǎn)載請(qǐng)附原文出處鏈接和本聲明。