過去半個世紀,集成電路產業在摩爾定律的指引下飛速發展,算法效率一直保持著大跨度提升。2018年世界上最快的計算機IBMSummit比1945年世界第一臺電子計算機ENIAC計算速度提高了近30萬億倍。
然而,隨著摩爾定律接近物理極限,芯片研發和生產成本大幅上升,未來依靠算力提升計算性能的空間有限。靠提升計算機硬件性能可能越發難以滿足海量計算的需要,未來的解決之道在于提升算法的效率。
MIT的這篇新論文總結了過去80年來,算法效率的提升究竟有多快。
提起算法,它有點像計算機的父母,它會告訴計算機如何理解信息,而計算機反過來可以從算法中獲得有用的東西。
算法的效率越高,計算機要做的工作就越少。對于計算機硬件的所有技術進步,以及備受爭議的摩爾定律的壽命問題來說,計算機硬件的性能只是問題的一方面。
加密貨幣初創公司本周總計籌集了超過9000萬美元:金色財經報道,加密貨幣初創公司本周總計籌集了超過9000萬美元。其中最大的一筆融資為Web3游戲工作室Mythical Games籌集了3700萬美元,據新聞稿稱,Mythical的3700萬美元融資維持了其獨角獸地位,也將成為12個月內實現盈利的關鍵。[2023/7/3 22:14:11]
而問題另一方面則在硬件之外:算法的效率問題。如果算法的效率提升了,對同一計算任務需要的算力就會降低。
雖然算法效率問題可能不太受關注,但你是否注意到,經常使用的搜索引擎是否突然變快了十分之一,而在大型數據集中活動,就感覺就像在泥濘中跋涉一樣艱難緩慢。
這些都與算法效率有關。
Dash Core v19激活期間出現問題,Binance礦池暫停挖礦獎勵:金色財經報道,Dash Core Group首席技術官Samuel Westrich稱,Dash Core v19激活期間出現問題,幾個小時后,Dash Core開發人員Pasta在推特上表示,開發人員已發現問題并正在努力解決問題。我們正在研究兩個選項,每個人都專注于及時解決這個問題,最新的Dash Core客戶端更新 v19 的計劃發布可能會延遲,以便首先解決問題。
根據Pasta的說法,在部署更新之前,Dash區塊鏈上的區塊和交易不會被視為最終交易。一位Dash Discord表示,更新可能會推遲到6月14日。在過去的 10 個小時里,開發團隊沒有任何新的更新。
截止目前,Binance宣布其DASH礦池將暫停挖礦獎勵的分配,直到區塊鏈恢復區塊生產。[2023/5/23 15:19:31]
近日,麻省理工學院計算機科學與人工智能實驗室(CSAIL)的科學家提出疑問:算法效率的提升速度到底有多快?
七國集團將在峰會期間討論生成式人工智能并制定治理計劃:金色財經報道,周三的一份公報草案顯示,七國集團(G7)數字部長將在本月晚些時候的一次會議上呼吁加快對生成式人工智能系統(如ChatGPT)的研究,因為此類工具的迅速擴散引起了人們對其對社會潛在影響的擔憂。根據該草案,從4月29日起,在群馬縣高崎市舉行的為期兩天的會談中,部長們旨在制定一項關于人工智能治理的行動計劃。由于日本政府還考慮在5月于廣島舉行的七國集團峰會上討論生成式人工智能,預計該議題也將在領導人的聯合聲明中被提及。[2023/4/20 14:14:59]
關于這個問題,現有數據大部分是敘事性的,其中很大一部分是面向特定算法的案例研究,再把這些研究結果加以推廣。
面對實證研究數據的不足,研究團隊主要利用了來自57部教科書和1110多篇研究論文的數據,以追溯算法效率提升的歷史。
幣安收購FTX或需通知歐盟委員會:金色財經報道,據律師事務所 Shearman & Sterling 反壟斷業務合伙人詹姆斯·韋伯透露,幣安收購FTX或需通知歐盟委員會,該組織是歐盟的反壟斷機構,因為如果在歐盟內營業額超過 2.5 億歐元的大公司發生收購交易就必須通知歐盟委員會,即便營業額沒有超過 2.5 億歐元,歐盟也會通過某種方式獲得對此類交易的管轄權。
不過歐盟委員會一位發言人表示尚未收到有關幣安收購 FTX 的通知,因為目前幣安只表示“有意購買”。(coindesk)[2022/11/10 12:40:31]
其中有些論文的結論中直接給出了新的算法有多高效,有的論文則需要作者使用“偽代碼”進行重構。
研究人員總共研究了113個“算法系”,即解決計算機科學教科書中最重要的同一問題的算法集。他們對每個算法族的歷史進行了回顧,跟蹤每次針對某一問題提出的新算法,并特別注意更高效的算法。
掉期交易顯示,美聯儲7月加息100個基點的可能性增加至近75%:7月14日消息,掉期交易顯示,美聯儲7月加息100個基點的可能性增加至近75%。(財聯社)[2022/7/14 2:11:59]
圖1算法發現和改進。(a)每十年發現的新算法系的數量。(b)已知算法系的比例每十年都有所提高。(c)首次發現時算法系的漸近時間復雜度分類。(d)同一時間復雜度的算法轉換到另一個時間復雜度的每年平均概率。在和中“>n3”的時間復雜度表示超過多項式級,但不到指數級。
最早的算法系可追溯到上世紀40年代,每個算法系平均有8個算法,按時間順序效率逐步提升。為了共享這一發現,團隊還創建了“算法維基”頁面。
研究人員繪制了圖表,標識這些算法族效率提升的速度,重點關注算法分析最多的特征——這些特征往往決定了解決問題的速度有多快。
圖2算法系的相對效率提升,使用漸近時間復雜度的變化計算。參考線是SPECInt基準性能。(a)與該系列中的第一個算法相比,四個算法系的歷史改進。(b)算法改進對“最近鄰搜索”算法系列的輸入大小(n)的敏感度。為了便于比較算法改進效果隨時間的變化,在圖(b)中將算法系和硬件基準的起始時間段對齊。
結果顯示,變數很大,但也發現了關于計算機科學變革性算法效率提升的重要信息。即:
1、對于大型計算問題,43%的算法系的效率提升帶來的收益,不低于摩爾定律帶來的收益。
2、在14%的問題中,算法效率提升的收益遠超硬件性能提升的收益。
3、對于大數據問題,算法效率提升收益特別大,因此近年來,這一效果與摩爾定律相比越來越明顯。
當算法系從指數復雜度過渡到多項式復雜度時,情況出現了最大的變化。
所謂指數復雜度算法,就像一個人猜密碼鎖的密碼一樣。如果密碼盤上只有一位數,那么任務很簡單。如果像自行車鎖一樣,表盤是4位數,估計你的自行車很難有人偷得走,但仍然可以一個個試。如果是表盤是50位的,就幾乎不可能破解了,需要的步驟太多了。
圖3基于漸近時間復雜度計算的110個算法系效率提升的年平均速度分布,其中問題規模為:(a)n=1000,(b)n=100萬,(c)n=10億。硬件性能提升線表示從1978年到2017年,SPECInt基準性能的平均年增長率
這類問題也是計算機面對的難題,隨著問題的規模越來越大,很快就會超過計算機的處理能力,這個問題光靠摩爾定律是解決不了的。
解決之道在于找到多項式復雜度的算法。
研究人員表示,隨著摩爾定律終結這個話題越來越多地被提及,我們需要將未來的解決方案的重點放在算法的效率提升上。
圖4前導常數在算法性能提升中的重要性評價
研究結果表明,從歷史上看,算法效率的提升帶來的收益是巨大的。不過二者之間存在著頻度的差異,摩爾定律帶來的提升是平滑而緩慢的,而算法效率的提升是階梯式的躍進,但出現沒那么頻繁。
本文通訊作者尼爾·湯普森說:
這是業界第一篇說明算法效率提升速度的論文。通過我們的分析,可以得出算法改進后,使用同樣的算力可以完成多少任務。
隨著問題的規模不斷增大,比如達到數十億或數萬億個數據點,算法效率的提升帶來的收益,比硬件性能的提升更重要,而且重要得多。
在我們開始逐步為算力不足發愁的時代,在摩爾定律越來越顯出疲態的今天,這一發現可能為未來解決超大型計算問題開辟一條新的思路。
參考鏈接:
https://news.mit.edu/2021/how-quickly-do-algorithms-improve-0920
https://ieeexplore.ieee.org/stamp/stamp.jsp?tp=&arnumber=9540991
編輯:星際視界Sue
撰文:Footprint分析師Vincy(vincy@footprint.network)日期:2021年10月26日數據來源:Cross-ChainBridgeDashboard(https:.
1900/1/1 0:00:00金融業通過對區塊鏈技術進行大量投資以及擴大其使用范圍,繼續在區塊鏈應用方面處于領先地位。德勤2020年3月關于區塊鏈趨勢的報告顯示,38%的金融服務公司預計在未來一年內對區塊鏈技術投資500萬美.
1900/1/1 0:00:00WorldMobile首席執行官MickyWatkins介紹:很高興我們有機會來展示我們在桑給巴爾拍攝的新紀錄片系列“連接的力量”。這個特別的視頻系列深深的觸動了我的心.
1900/1/1 0:00:00Polkadot生態研究院出品,必屬精品 背景 對于區塊鏈的發展來說,究竟是什么推動了其迅速普及以及各類應用的落地,是技術的便捷?是某些藍海一般的紅利效用.
1900/1/1 0:00:00特別感謝KarlFloersch和HaonanLi的反饋和評論,以及JinglanWang的討論.
1900/1/1 0:00:00Jessica:歡迎來到WorldMobile特別節目,和我一起了解WorldMobile的更多訊息。我是Jessica\nWalker.
1900/1/1 0:00:00