大家好，我是波導(dǎo)終結(jié)者。

首先想跟大家聊聊最近發(fā)展甚快的AI。想必大部分人都不曾想到，AI的發(fā)展會(huì)如此之快，以至于真的可能影響我們的生活方式。比如最近官媒通報(bào)過(guò)，AI炸片泛濫，要求大家警惕?，F(xiàn)在的技術(shù)已經(jīng)可以做到實(shí)時(shí)換臉、換聲，也就是說(shuō)陌生人通過(guò)AI技術(shù)，可以換臉、換聲成你認(rèn)識(shí)的人。以前說(shuō)的要打電話確認(rèn)已經(jīng)不管用，甚至視頻通話都不管用了。早幾年，AI換臉就已經(jīng)在挑戰(zhàn)著司法和倫理的底限，現(xiàn)在只會(huì)更糟，因?yàn)槿f(wàn)一有什么糾紛，照片甚至是視頻都不再可信。

鑒于此情況，NVIDIA也是再次大火，市值一度突破萬(wàn)億美元?，F(xiàn)在已經(jīng)有不少的AI項(xiàng)目已經(jīng)頗為成熟，甚至可以本地?cái)嗑W(wǎng)只用一張民用顯卡來(lái)運(yùn)行。今天就跟大家分享一下最近新入手的顯卡，以及一些可以本地利用顯卡加速運(yùn)行的AI項(xiàng)目。事先聲明，本文內(nèi)容側(cè)重于顯卡對(duì)生產(chǎn)力的加速，不涉及任何不良內(nèi)容、不良用途的產(chǎn)生和教學(xué)。

趁著這次618入手了技嘉4070風(fēng)魔，主要用來(lái)做生產(chǎn)力。挑選理由也比較簡(jiǎn)單：1.它有12G顯存，上代的3080Ti也才12G，至于傳說(shuō)中的4060Ti 16G版，后面再說(shuō)；2.標(biāo)準(zhǔn)版普遍使用8pin電源接口，更適合部分老機(jī)升級(jí)；3.功耗比、性?xún)r(jià)比很高。

先來(lái)看看賬面數(shù)據(jù)。4070使用了最新的Ada Lovelace架構(gòu)，采用AD104-250核心，有5888個(gè)CUDA核心，并且L2高速緩存從個(gè)前代的4MB提升至36MB，擁有184個(gè)TMUS、60個(gè)ROPS以及46個(gè)光追單元。同時(shí)RTX 4070的基礎(chǔ)頻率達(dá)到了1920MHz，Boost頻率可達(dá)2475MHz。 在顯存方面，RTX 4070擁有12GB 192bit位寬的GDDR6X顯存，顯存速率達(dá)到了21Gbps。

規(guī)格上，4070最大的優(yōu)勢(shì)是架構(gòu)和功耗，光追、DLSS3等方面都有優(yōu)化。游戲性能已經(jīng)有不少媒體做過(guò)實(shí)測(cè)，這里簡(jiǎn)單的跑一下3DMARK，TIME SPY 17955分，TIME SPY EXTREME 8360分，F(xiàn)IRE STRIKE EXTREME 20567分，F(xiàn)IRE STRIKE ULTRA 10233分。由于游戲的部分很多人都測(cè)過(guò)，我打算直奔生產(chǎn)力和AI軟件了，畢竟NVIDIA市值暴漲就是因?yàn)锳I使用顯卡加速的普及。而一般理論上來(lái)說(shuō)，干活用的應(yīng)該上最好的，但現(xiàn)實(shí)情況就是，大半的個(gè)人甚至公司還是希望捏緊一下預(yù)算，挑性?xún)r(jià)比高的。

正好手上有一塊3080Ti，紙面性能肯定是要高于4070的，但考慮到差了好幾倍的原價(jià)以及功耗，若能達(dá)到差不多的生產(chǎn)力效果，4070反而可能是上選。這次的測(cè)試平臺(tái)是：10700K+Z490+3080Ti，WIN10最新版，531.41 Game Ready（懶得重裝）；以及12700K+Z690+4070，WIN11最新版，531.41 Studio。

AI語(yǔ)音轉(zhuǎn)文字

關(guān)于語(yǔ)音轉(zhuǎn)文字的應(yīng)用可以追溯到很久很久以前，對(duì)于大部分人來(lái)說(shuō)，手機(jī)語(yǔ)音轉(zhuǎn)文字是最臉熟的。在干活領(lǐng)域，真正進(jìn)入大眾視野以及實(shí)用，還是和短視頻分不開(kāi)，簡(jiǎn)單來(lái)說(shuō)就是沒(méi)字幕不看。然而，打過(guò)字幕的人都知道，麻煩，耗時(shí)。

相關(guān)的工具我從很早也就開(kāi)始用了，比如X易見(jiàn)外，以及民間調(diào)用X度API的工具等。但是當(dāng)大廠進(jìn)軍之后，就沒(méi)這些工具什么事了。目前就VLOG來(lái)說(shuō)，如果你不擔(dān)心聯(lián)網(wǎng)導(dǎo)致的隱密性問(wèn)題，剪映用起來(lái)還是很不錯(cuò)的。

第二個(gè)是PR，2022之后的版本也支持語(yǔ)音轉(zhuǎn)文字了，但個(gè)人用下來(lái)感覺(jué)不是很好用。首先它是需要本地模型的，安裝包要大上10來(lái)G（可精簡(jiǎn)至剩中英文）；其次，斷句不舒服，還要比較多的二次操作；第三，離最后生成內(nèi)嵌或者外掛字幕都還需要額外步驟。

而且目前它的速度還是偏慢，根據(jù)資源占用情況可以看到，CPU沒(méi)有吃滿，顯卡基本沒(méi)用到。用我之前自己錄的游戲視頻實(shí)測(cè)，1小時(shí)的視頻需要將近20分鐘，速度僅為3倍。

以上2個(gè)工具更適合VLOG視頻編輯時(shí)集成使用，那么如果只是單純的想要把視頻轉(zhuǎn)換成文字，然后輸出文本或者SRT字幕，有沒(méi)有更佳的方案呢？當(dāng)然是有的。經(jīng)過(guò)我自己一番嘗試，由OpenAI開(kāi)源的Whisper是很不錯(cuò)的方案。首先它是完全離線，依靠本地模型，并且第三方封裝的Whisper支持GPU加速，效果也非常不錯(cuò)。

實(shí)際操作下來(lái)，將近55分鐘的視頻在3080Ti上僅用時(shí)2分26秒轉(zhuǎn)換完成，而4070用時(shí)2分39秒，兩者都達(dá)到了20倍以上的速度。這么一小點(diǎn)的差距，在性?xún)r(jià)比和能耗比面前不值一提。

效果方面，一般推薦使用medium模型，但不知為何，出來(lái)的文字是繁體中文，使用工具轉(zhuǎn)成簡(jiǎn)體即可。如果覺(jué)得還不滿意，可以試試使用large模型，耗時(shí)約為medium的2倍，實(shí)測(cè)速度在12倍速左右。中文medium模型1.5G，large在3G左右，對(duì)于生產(chǎn)力來(lái)說(shuō)不痛不癢。而且實(shí)際操作的時(shí)候，我發(fā)現(xiàn)中文里夾雜的英文其實(shí)也可以識(shí)別出來(lái)，比如圖里的“LB+B”，是我在實(shí)況解說(shuō)時(shí)說(shuō)到的手柄操作，其他的常用單詞，比如F開(kāi)頭或者S開(kāi)頭的基本也可以識(shí)別出來(lái)。

實(shí)際占用方面，雖然官方推薦16GB顯存，但我用的時(shí)候分別只吃掉了3.7G和2.5G顯存，12G應(yīng)該是夠的，兩張顯卡的3D占用都在90%左右浮動(dòng)。

令我覺(jué)得有點(diǎn)驚喜的是4070的溫度，我看任務(wù)管理器，在50和60多度之間來(lái)回跳，一開(kāi)始以為是顯示錯(cuò)誤。用手摸了一下，背板竟然也不是很燙，可以把手指一直放在上面。仔細(xì)一想，又看了一下風(fēng)扇，恍然大悟?，F(xiàn)在的顯卡都有風(fēng)扇智能啟停，默認(rèn)好像是50度以下不轉(zhuǎn)，而4070的功耗和發(fā)熱控制得更出色，剛好卡在50度左右，不轉(zhuǎn)的時(shí)候溫度迅速上升，然后風(fēng)扇轉(zhuǎn)起來(lái)又降到了50度以下，又不轉(zhuǎn)了。哦，還有一點(diǎn)忘了提，這卡只需單8pin供電。

另外，我還試了一下純CPU識(shí)別，不知道是不是這個(gè)工具封裝的時(shí)候只做了GPU的部分。如果強(qiáng)制只使用CPU的話，速度極慢，出不了結(jié)果，我甚至弄了個(gè)幾分鐘的小視頻進(jìn)去，也一直卡著進(jìn)度條，而CPU占用率一直是滿的。最后我又去弄了原始的python程序試了一下，10分鐘的視頻花了我差不多1小時(shí)，人直接傻了。簡(jiǎn)單換算的話，顯卡的速度為CPU的120倍左右。

總結(jié)一下，如果你只是做VLOG，幾分鐘視頻打打字幕，不介意聯(lián)網(wǎng)，那么直接扔剪映里面就行。而如果有生產(chǎn)力需求，有比較大數(shù)量或者時(shí)長(zhǎng)的資源需要處理，那么Whisper是目前的首選。它不僅可以通過(guò)腳本單獨(dú)運(yùn)行，或者使用封裝好的EXE，也可以直接集成源代碼實(shí)現(xiàn)更多復(fù)雜的功能。顯卡加速效果明顯，在4070上可以以1:20以上的速度運(yùn)行。

AI繪畫(huà)

對(duì)于更多老……朋友來(lái)說(shuō)，可能最蠢蠢欲動(dòng)的是AI繪畫(huà)了。鑒于用途不同，本文不使用額外的模型，不生成真人照片，只討論顯卡加速效果。這里偷懶，直接使用了基于stable diffusion的第三方整合包，可以自由切換CPU或者顯卡。

這東西的參數(shù)非常多的，本文并非AI繪畫(huà)效果教程，所以不多贅述。模型貌似是以塊為單獨(dú)生成的，所以分辨率并不能任意設(shè)置。

實(shí)測(cè)的時(shí)候，CPU工作時(shí)資源吃到70%-80%左右，并未跑滿。顯卡只有3D吃到25%左右，顯存還剩一半有余，甚至連風(fēng)扇都懶得轉(zhuǎn)。AI繪畫(huà)是多次迭代的，出現(xiàn)這種情況并不意外。

我讓引擎生成一張顯卡，10700K耗時(shí)5分57秒，3080Ti耗時(shí)6秒72，12700K耗時(shí)5分24秒，4070耗時(shí)6秒29。請(qǐng)注意，本次主要探討的是顯卡在同等設(shè)置和質(zhì)量下的速度優(yōu)勢(shì)，所以并未使用額外的模型，也不生成真人圖片。

總的來(lái)看，在AI繪畫(huà)時(shí)，4070/3080Ti的速度都在CPU的50倍以上，如果是生產(chǎn)力用途的話，往往需要生成非常大量的圖片從中挑選，這時(shí)候提升還是相當(dāng)可觀的。不過(guò)，在嘗試生成1920級(jí)別分辨率的時(shí)候，兩張12GB顯存的顯卡都爆了顯存，雖然可以通過(guò)--lowvram參數(shù)緩解，但是速度又慢了。所以對(duì)這方面生產(chǎn)力要求高的用戶(hù)，還得挑選更大顯存的型號(hào)，比如24GB顯存的4090。

AI人聲分離/消音伴奏

如果是玩電腦比較早的朋友，又有稍微玩一下音頻處理之類(lèi)的，可能會(huì)對(duì)“消音伴奏”有點(diǎn)印象。以前，一首歌曲，如果沒(méi)有官方的伴奏，而一般人又沒(méi)有足夠的樂(lè)理能力，是無(wú)法弄出質(zhì)量好點(diǎn)的伴奏的。普通用戶(hù)只能用消音的方式，說(shuō)白了就是把歌曲的左右聲道反相，那么一般來(lái)說(shuō)，人聲左右聲道均勻，反相之后抵消，留下大部分伴奏。然而，這種方式的效果全看臉，有的歌曲能達(dá)到90%的效果，也有的人聲基本還在，主要伴奏卻被消得參差不齊了。如果你去KTV有唱過(guò)所謂的盜版歌曲，感覺(jué)伴奏很怪，那有很大概率就是老式的消音伴奏弄的。

然而，隨著近幾年AI的流行，使用AI配合模型對(duì)音頻進(jìn)行人聲與伴奏的高質(zhì)量分離成為了可能。UVR5這款軟件現(xiàn)在的效果已經(jīng)非常不錯(cuò)，并且不管有沒(méi)有顯卡，都可以使用。這里先使用CPU進(jìn)行處理，耗時(shí)1分29秒。

如果僅是對(duì)一首3-5分鐘的歌曲進(jìn)行處理，那么CPU的速度也還可以忍受，當(dāng)然有顯卡的話快4-5倍那是更好的。而嚴(yán)格來(lái)說(shuō)，UVR5不僅僅是對(duì)歌曲進(jìn)行處理，而是分離人聲。舉個(gè)例子，比如現(xiàn)在有部動(dòng)畫(huà)，你想給它做配音，但是找得到背景音源嗎？幾乎找不到。不用說(shuō)個(gè)人了，以前我就看過(guò)不少因?yàn)闆](méi)有靠譜音源而效果極其糟糕的國(guó)配動(dòng)畫(huà)，比如七龍珠Z和灌籃高手的其中某些集數(shù)，相信看過(guò)的朋友都有印象。

關(guān)于效果，我只使用了默認(rèn)的UVR-MDX-NET 1模型，結(jié)論就是兩個(gè)字：牛逼！伴奏干干凈凈，一點(diǎn)人聲都沒(méi)有。而人聲部分一樣干干凈凈，連混音和和聲都全在。如果硬要說(shuō)缺點(diǎn)的話，那就是伴奏沒(méi)和聲了，這種基于模型的分離人聲與樂(lè)器很容易，但分離主唱與和聲卻很難。如果你有比較大批量或者時(shí)長(zhǎng)的音頻需要分離人聲，搞塊顯卡能把速度快5倍也是很舒服的事情。

AI歌手/換臉

因?yàn)樯婕暗桨鏅?quán)和炸片風(fēng)險(xiǎn)，這里只粗淺聊聊。目前AI歌手的做法就是先用剛才提到的UVR5之類(lèi)的把人聲分離出來(lái)，作為模型訓(xùn)練，再用模型去唱歌，擬真度已經(jīng)可以達(dá)到95%，除了“沒(méi)感情”之外，真的是隨便暴打初音洛天依。并且整合在一起的話，就可以實(shí)時(shí)換聲。而換臉的前身，比如Facerig之類(lèi)的以前也流行過(guò)，前幾年也已經(jīng)有非實(shí)時(shí)換臉技術(shù)出現(xiàn)，也經(jīng)常被用到動(dòng)作片上，你看到的“XX明星流出”基本上都是換臉的。但最近技術(shù)繼續(xù)發(fā)展，已經(jīng)可以實(shí)現(xiàn)實(shí)時(shí)換臉甚至“換人”，也即連全身肢體動(dòng)作一起換。

我只能說(shuō)，我很擔(dān)心，但無(wú)能為力。這技術(shù)被濫用的后果非常嚴(yán)重，而目前全球行業(yè)內(nèi)都缺乏有效的技術(shù)和法律手段去應(yīng)對(duì)。我不擔(dān)心顯卡漲價(jià)，我很擔(dān)心炸片泛濫，偽造的圖片和視頻泛濫。

AI視頻放大

AI視頻放大本質(zhì)上和AI圖片放大是同一回事，所以放到一起說(shuō)。那些AI舊照片修復(fù)啥的同理。以前，在DLSS出現(xiàn)之前，有人問(wèn)我說(shuō)視頻能放大嗎，馬賽克能去除嗎，我都很肯定的說(shuō)：不能，因?yàn)槿笔У募?xì)節(jié)是什么，誰(shuí)也不知道。

現(xiàn)在，這個(gè)說(shuō)法仍然沒(méi)有問(wèn)題，但是，AI可以把細(xì)節(jié)補(bǔ)齊到，讓人看起來(lái)“覺(jué)得就是原片”。也即AI放大補(bǔ)齊的當(dāng)然不是原始細(xì)節(jié)，但是合情合理，讓人類(lèi)看起來(lái)覺(jué)得沒(méi)有差別。

這方面目前最流行的軟件是Topaz Video AI，最新版本3.0.5，支持各類(lèi)顯卡加速。

這里我用自己錄的塞爾達(dá)1080P視頻來(lái)試，放大到3840x2160，默認(rèn)模型和效果，不做其他處理?？梢钥吹?，純CPU干活時(shí)，每秒只有0.2幀，這個(gè)速度非常簡(jiǎn)直無(wú)語(yǔ)。而且可以看到，大核沒(méi)干滿，小核沒(méi)在干。

使用4070干活時(shí)，速度“飆升”了20多倍來(lái)到3幀左右，在2.5-3.3范圍內(nèi)浮動(dòng)，真是可喜可賀。軟件也提供“All GPUs”的選項(xiàng)，但想也知道CPU核顯獨(dú)顯同時(shí)干到滿幾乎不可能，實(shí)測(cè)與獨(dú)顯加速并無(wú)區(qū)別。鑒于速度太慢，我覺(jué)得AI視頻放大目前并不具有民用意義上的泛用性，更多的是用來(lái)偶爾給什么老舊MV或者你懂的視頻翻個(gè)新，或者商業(yè)上砸一堆機(jī)器來(lái)翻新個(gè)什么4K電視劇之類(lèi)的。

AV1硬編碼

之前我夸過(guò)開(kāi)源軟件的生命力與更新速度，這不，F(xiàn)Fmpeg與OBS已經(jīng)第一時(shí)間跟進(jìn)了AV1的顯卡編碼加速。目前40系的N卡，INTEL的Arc獨(dú)顯和最新的AMD 7000系均已搭載支持AV1硬編碼（注意不是解碼）。根據(jù)眾多測(cè)試，目前N卡的Ada Lovelace架構(gòu)搭載的第八代NVENC效果最好。

我用最新版OBS試了一下，首先H265和AV1編碼在國(guó)內(nèi)無(wú)法開(kāi)啟，只有某404直播站支持。這里我用本地錄像做測(cè)試，只需要把輸出模式設(shè)為高級(jí)，錄像里選擇自定義輸出，編碼器找到av1_nvenc即可。

測(cè)試時(shí)接的是2560x1440顯示器，OBS的分辨率也基于此，編碼占用顯卡Video Encode約30%，實(shí)時(shí)編碼4K肯定也是綽綽有余。此時(shí)CPU占用僅2%，約等于放假。錄完之后播放視頻驗(yàn)證，無(wú)任何問(wèn)題。

至于非直播的AV1編碼，也即視頻壓制，首先我使用最新版本的FFmpeg進(jìn)行CPU軟壓，速度不到0.1倍，可以認(rèn)為基本不可用。其實(shí)諸多編碼器初期不完善時(shí)都是這樣，包括H264早期用CPU軟壓也是這么慢，當(dāng)時(shí)不少的壓片大佬也經(jīng)歷過(guò)0.1倍速壓片的日子，向壓片前輩們致敬。

使用av1_nvenc壓制時(shí)，可喜可賀，速度直接上了9倍，并且從任務(wù)管理器中可以看到，3D和Video Encode基本都吃滿了。生產(chǎn)力的時(shí)候，吃越滿當(dāng)然是越高興的了。

那么，目前AV1硬編碼已經(jīng)完全可用，但目前只有命令行最靠譜，只待各個(gè)GUI跟進(jìn)。當(dāng)然，在網(wǎng)上我也看到一些營(yíng)銷(xiāo)號(hào)亂吹，說(shuō)什么市面上的GUI有多少多少都已經(jīng)支持AV1硬編碼，還特地拿我常用的ShanaEncoder舉例。那么我要打臉了：ShanaEncoder最新版本5.3.1.1是去年2月發(fā)布的，根本不可能支持，試都不用試（當(dāng)然我試過(guò)）。

其他AI項(xiàng)目

在新技術(shù)的探索上，NVIDIA確實(shí)一直都處于領(lǐng)先的地位，包括之前3D游戲里的抗鋸齒、DSR等方案，以及G-Sync、DLSS、Reflex等。這其中也有一些比較輕度的AI應(yīng)用，這里也跟大家盤(pán)點(diǎn)一下。最近30和40系的顯卡是支持了VSR視頻增強(qiáng)技術(shù)，說(shuō)白了就是插值分辨率，目前Chrome和Edge瀏覽器，以及VLC本地播放支持。我實(shí)測(cè)觀感確實(shí)有所提升，但是并不大，優(yōu)于單純的銳化，劣于DLSS和Topaz Video AI（廢話），并且對(duì)顯卡的占用也不小，個(gè)人覺(jué)得沒(méi)啥用，不推薦開(kāi)。

第二個(gè)是NVIDIA Canvas，AI風(fēng)景畫(huà)。用戶(hù)簡(jiǎn)單的畫(huà)上幾筆，由AI來(lái)生成相應(yīng)的風(fēng)景畫(huà)。由于只能輸出風(fēng)景畫(huà)，沒(méi)什么人用，但如果有需求并且有一定繪畫(huà)功底的人用可能有奇效。最近1.4版本甚至還更新了導(dǎo)出3D環(huán)境貼圖的功能……

比較實(shí)用的是BROADCAST，包括很實(shí)用的麥克風(fēng)AI降噪和相機(jī)智能摳圖。值得表?yè)P(yáng)的是，NVIDIA將SDK做了開(kāi)放，OBS以及很多外設(shè)廠商都在自己的軟件內(nèi)集成了這些功能。

總的來(lái)看，電子產(chǎn)品買(mǎi)新不買(mǎi)舊的說(shuō)法還是有一定道理的。4070新的架構(gòu)和工藝使得它比前代準(zhǔn)旗艦卡更有性?xún)r(jià)比，這張技嘉風(fēng)魔4070是系列最基礎(chǔ)的版本，然而無(wú)論是做工用料還是實(shí)際表現(xiàn)都很出色。

正逆3風(fēng)扇加上非常下料的散熱配置，本身卻只需要單8pin供電以及不到200W的功耗，干活時(shí)安靜又省電，溫度也壓得很理想，風(fēng)扇經(jīng)常都懶得轉(zhuǎn)。想像一下，如果不是一臺(tái)機(jī)子，而是有一定需求的公司采購(gòu)40臺(tái)，一天24小時(shí)不停地干活（比如轉(zhuǎn)碼之類(lèi)的，不是挖礦哦），那么一年省下的電費(fèi)都能買(mǎi)多少?gòu)堬@卡了。

擋板這里也是有個(gè)小設(shè)計(jì)，可以看到做了一個(gè)小彎折，這樣螺絲擰下去之后固定性很好。再加上4070本身大小和重量適中，應(yīng)該不需要顯卡支架。其他的角度拍了拍，感覺(jué)也沒(méi)啥好看的了，就是插上，干活！

感謝大家的點(diǎn)贊，專(zhuān)業(yè)硬核內(nèi)容，請(qǐng)關(guān)注波導(dǎo)終結(jié)者，有些正文不方便展示的內(nèi)容，可以評(píng)論里聊聊。我們下期再見(jiàn)。

PS：你關(guān)注或者喜歡的萌妹或者大乃Vtuber有99%都是摳腳大漢通過(guò)AI之類(lèi)的技術(shù)變的。別問(wèn)我為什么知道，一般人我不告訴他……