但是，如果您將這些進(jìn)步追溯到摩爾的定律，並真正解開(kāi)了增量倍增功能的方式，則圖片變得清晰。

回想一下智者的寓言（有時(shí)說(shuō)是國(guó)際象棋的發(fā)明者），他要求國(guó)王吃一粒米飯，在董事會(huì)的每個(gè)正方形上翻了一番64次。這個(gè)故事完美地說(shuō)明了指數(shù)級(jí)的增長(zhǎng)是如何適度開(kāi)始的，即1、2、2、4、8、16、32-然後突然突然爆炸成如此龐大的數(shù)字，無(wú)視想像力。到了最後的廣場(chǎng)，您要處理18千萬(wàn)億，446億億，744萬(wàn)億粒的大米，這是不可理解的。

這是簡(jiǎn)單的數(shù)學(xué)，但感覺(jué)就像是巫術(shù)。我喜歡Wikipedia關(guān)於這個(gè)故事的起源的腳註：“根據(jù)版本，聰明的發(fā)明家要么成為值得信賴的皇家顧問(wèn)，要么迅速被執(zhí)行?！?/p>

現(xiàn)在，同樣的原則正在今天的AI繁榮中發(fā)揮作用。實(shí)際上，AI有遠(yuǎn)見(jiàn)的雷·庫(kù)茲維爾（Ray Kurzweil）創(chuàng)造了“棋盤(pán)的後半部分”一詞，以描述指數(shù)進(jìn)步從幾乎沒(méi)有引人注目的變?yōu)橥耆兏锏哪且豢?。上半年看起?lái)很易於管理。下半年重塑現(xiàn)實(shí)。那是曲線不僅上升的時(shí)候，它會(huì)向上旋轉(zhuǎn)，突破了我們?cè)?jīng)認(rèn)為永久性的天花板。

硬件創(chuàng)新的突破速度

我之前寫(xiě)過(guò)關(guān)於腦WSE芯片的文章 - 一種矽死亡的餐盤(pán)大小，裡面裝有大約90,000個(gè)核心。

根據(jù)IEEE Spectrum等來(lái)源的報(bào)導(dǎo)，WSE-2（在小腦CS-2系統(tǒng)中使用）可實(shí)現(xiàn)約7.5 petaflops的FP16計(jì)算機(jī) - 每秒7500萬(wàn)億美元的操作。較新的WSE-3？它跳到了驚人的125 petaflops。

拿著這些籌碼之一就像持續(xù)一部分。它體現(xiàn)了巨大的平行性的原始力量。不久前，我們慶祝了雙核處理器。然後是四核，八核 - 每個(gè)步驟都感到革命?，F(xiàn)在，我們進(jìn)入了一個(gè)領(lǐng)域，其中成千上萬(wàn)的核心一致運(yùn)作。

然後是像華為cloudmatrix這樣的系統(tǒng)，在該系統(tǒng)中，確切的規(guī)格受到密切保護(hù)，但是基本消息是無(wú)誤的：計(jì)算能力已經(jīng)超出了大多數(shù)人甚至可以概念化的內(nèi)容。

硬件作為生態(tài)系統(tǒng)

在最近的一次TED活動(dòng)中，年輕的技術(shù)專家Caleb Sirak發(fā)表了引人入勝的演講，將硬件作為“矽監(jiān)獄”。

他瀏覽了硬件加速度的發(fā)展 - 從早期機(jī)器處理每秒數(shù)百萬(wàn)次操作，到當(dāng)今的系統(tǒng)，甚至四億。他指出，儘管遊戲有助於提前創(chuàng)新，但真正的突破就實(shí)現(xiàn)了，當(dāng)時(shí)Nvidia的Cuda這樣的平臺(tái)為通用GPU計(jì)算打開(kāi)了大門(mén)。

他認(rèn)為，現(xiàn)在是時(shí)候進(jìn)行新的範(fàn)式了。

“我們需要重新考慮整個(gè)建築，” Sirak說(shuō)。

聲稱硬件優(yōu)勢(shì)

他強(qiáng)調(diào)，解鎖下一代GPU性能的一個(gè)關(guān)鍵是量化。

例如，一個(gè)4位乘數(shù)比其32位對(duì)應(yīng)物更有效地更有效，這會(huì)減少功率，空間和時(shí)間。

他將諸如小腦WSE之類的芯片列為最小化數(shù)據(jù)移動(dòng)可以提高AI效率的主要例子。

他解釋說(shuō)：“當(dāng)參數(shù)較小時(shí)，我們可以在整個(gè)系統(tǒng)上移動(dòng)更多的參數(shù)，從而大大減少內(nèi)存和網(wǎng)絡(luò)互連的瓶頸?！?/p>

他提到了Xai的巨像項(xiàng)目及其雄心勃勃的“路線圖”，以擴(kuò)展到一百萬(wàn)個(gè)GPU。然而，即使在這個(gè)規(guī)模上，效率仍然是國(guó)王。

他說(shuō)：“您可以設(shè)計(jì)一個(gè)有蜿蜒的街道和混血交通的城市，也可以建造一個(gè)F1賽道。在那條軌道上，F(xiàn)1汽車不僅速度快，而且占主導(dǎo)地位。”

他強(qiáng)調(diào)了幾家公司為創(chuàng)建協(xié)調(diào)的硬件單元（他稱之為“智能殖民地”）的努力，例如像工程精神的群體一樣。

Sirak補(bǔ)充說(shuō)：“我們通過(guò)AI芯片和建築飛躍所解鎖的功能具有變革性。” “為了使這場(chǎng)革命受益，必須開(kāi)放，可訪問(wèn)並在全球範(fàn)圍內(nèi)共享創(chuàng)新。這一切的核心都是驚人的複雜性的供應(yīng)鏈：在一個(gè)大陸上開(kāi)采的稀土元素，從另一個(gè)大陸上挖掘出來(lái)的化學(xué)物質(zhì)，而最終的製造是三分之一的?！?/p>

為了說(shuō)明全球相互依存，他指出，在到達(dá)最終目的地之前，一個(gè)籌碼可能會(huì)越過(guò)十幾個(gè)國(guó)家。這對(duì)任何人都意識(shí)到TSMC（泰旺半導(dǎo)體製造公司）生產(chǎn)了全球大部分高級(jí)半導(dǎo)體芯片。

可以肯定的是：我們現(xiàn)在深入曲棍球曲線曲線的垂直激增，這是一波歷史性的硬件加速浪潮。未來(lái)不僅僅是來(lái)了。已經(jīng)在這裡了。

以上是硬件加速推動(dòng)了未來(lái)的詳細(xì)內(nèi)容。更多資訊請(qǐng)關(guān)注PHP中文網(wǎng)其他相關(guān)文章！