• <track id="j9a41"><code id="j9a41"></code></track><menu id="j9a41"></menu>
  • <menuitem id="j9a41"><table id="j9a41"></table></menuitem>

      三个好媳妇中字头是什么,禁忌4年转一,《房顶工》拉拉电影免费观看高清 ,美国式保罗21原版,《女律师的坠落》大结局剧情解析 ,爱我几何在线观看,美味飞行1—12,《金牌女销售的秘密》

      國內(nèi)外企業(yè)超節(jié)點(diǎn)布局進(jìn)展如何?

      國內(nèi)外企業(yè)超節(jié)點(diǎn)布局進(jìn)展如何?

      最佳答案 匿名用戶編輯于2025/11/12 16:37

      昇騰 384 超節(jié)點(diǎn)(Atlas 900 A3 SuperPoD),華為 CloudMatrix 的核心愿景是構(gòu)建一個(gè)「萬物 皆可池化、平等對(duì)待、自由組合」的 AI 原生數(shù)據(jù)中心。

      一、國外超節(jié)點(diǎn)布局案例

      (1)英偉達(dá):專用網(wǎng)絡(luò)支持,單節(jié)點(diǎn)密度提升

      英偉達(dá)在 Hopper GPU 一代嘗試突破服務(wù)器架構(gòu)、在機(jī)柜層級(jí)拓展 Scale Up 系統(tǒng)。英偉達(dá) 2023 年 發(fā)布 DGX GH200 系統(tǒng)是較早的“超節(jié)點(diǎn)”嘗試,同過去 A100 和 H100 系列服務(wù)器最大區(qū)別在于,將 Grace CPU 和 Hopper GPU 封裝在同一塊板卡上,連同其他部件形成 1U 大小的“刀片服務(wù)器”,并將其 通過內(nèi)部線纜(cable cartridge)和光模塊的方式和 2 層專門設(shè)計(jì)的 NVLink 交換機(jī)連接在一起。預(yù)計(jì), 早期成本和節(jié)點(diǎn)規(guī)模設(shè)計(jì)等因素影響了 GH200 的實(shí)際推廣。

      2024 年 3 月,英偉達(dá)推出基于 Blackwell GPU 打造的 GB200 NVL72 超節(jié)點(diǎn)產(chǎn)品,NVL72 是較 為成熟的超節(jié)點(diǎn)產(chǎn)品。借助第五代 NVLink,GB200 系統(tǒng)最大可 576 個(gè) GPU 擴(kuò)容,目前商用方案在柜 層面連接 72 個(gè) GPU,相較此前 GH200 系統(tǒng),Scale Up 的帶寬與尋址性能大幅提升。 Scale-up 方案:NVL72 中 72 個(gè) B200 GPU 分布于 18 個(gè) Compute Tray 中;18 個(gè) NVSwitch 交換機(jī)芯 片分布于 9 個(gè) Switch Tray 中。72 個(gè) GPU 通過盲插高速背板(blindmate backplane)實(shí)現(xiàn) Scale-up, 銅線為主。NVL72 中所有 Tray 部署在單個(gè)機(jī)柜中,可視為一個(gè)超節(jié)點(diǎn)。 Scale-out 為光通信方案:依靠 InfiniBand 或以太網(wǎng),對(duì)應(yīng) ConnectX-7 的 400G(800G)網(wǎng)卡與交 換機(jī),或未來升級(jí)的 ConnectX-8 的 800G(1.6T)網(wǎng)絡(luò),帶動(dòng) 800G 至 1.6T 光模塊、交換機(jī)的放量。

      拓?fù)浣Y(jié)構(gòu)上,72 個(gè) B200 通過單層的 NVSwitch(圖 7 中橙色部分)實(shí)現(xiàn)全互聯(lián),每個(gè) B200 對(duì)超節(jié)點(diǎn) 內(nèi)其他 71 個(gè) GPU 的通信帶寬均達(dá)到 1800GB/s,應(yīng)對(duì)通信峰值的能力顯著提升。

      (2)AMD:IF128 探索超節(jié)點(diǎn)新路徑

      Infinity Fabric 是 AMD 的互聯(lián)總線技術(shù),既用于芯片內(nèi)部的不同模組,也用于外部互聯(lián)。IF 的總線 結(jié)構(gòu)包含兩個(gè)部分:負(fù)責(zé)數(shù)據(jù)傳輸?shù)?Scalable Data Fabric(SDF)、負(fù)責(zé)控制的 Scalable Control Fabric(SCF),分別類比為血管和神經(jīng)。IF 的設(shè)計(jì)目標(biāo)是將不同芯片納入同一控制下的系統(tǒng)并確保數(shù) 據(jù)傳輸?shù)母咄卣剐裕ó悩?gòu)芯片(如 CPU 和 GPU)以及同個(gè)芯片上的不同 Die。 Infinity Fabric 演進(jìn)路徑:第一代:用于 CPU-CPU 通信,①實(shí)現(xiàn)雙路或多路服務(wù)器中多個(gè) CPU 間頻 繁交換數(shù)據(jù)和同步任務(wù);避免傳統(tǒng) PCIe 總線的瓶頸;②支持全局地址空間,使多個(gè) CPU 可共享內(nèi)存資源。第二代:4 個(gè) GPU 間形成環(huán)形連接,但 CPU-GPU 通信仍為傳統(tǒng) PCIe。第三代:8 個(gè) GPU 通過 IF 連接形成網(wǎng)狀拓?fù)洌瑫r(shí) CPU-GPU 間通過 IF 連接,IF 實(shí)現(xiàn) CPU 與 GPU 的統(tǒng)一內(nèi)存尋址;CPU 可直 接訪問 GPU 顯存,避免數(shù)據(jù)遷移開銷,加速 AI 推理中的模型參數(shù)傳遞。

      根據(jù) TechPowerUp,AMD 將在 26H2 推出搭載 128 個(gè) MI450X 的超節(jié)點(diǎn)產(chǎn)品。AMD 或?qū)沓?jié)點(diǎn) 新的融合技術(shù)路徑,MI450X IF128 通過實(shí)現(xiàn)以太網(wǎng) Scale-up。 與 NVL72 類似,4 個(gè) MI450X 與 1 個(gè) EPYC CPU 組成 1U 的 Compute Tray,32 個(gè) Compute Tray 分 布于 2 個(gè)機(jī)柜中,由 Switch Tray 中的定制 IFoE 交換芯片實(shí)現(xiàn)互聯(lián),兩個(gè)機(jī)柜通過銅背板實(shí)現(xiàn)連接。

      與 NVL72 不同的是,IF128 內(nèi) GPU 的連接通過 IFoE(Infinity Fabric over Ethernet)連接,可以理 解為基于以太網(wǎng)技術(shù)的打造了新的超節(jié)點(diǎn)互聯(lián)方式,對(duì)標(biāo) UB 互聯(lián)網(wǎng)絡(luò)及 NVLink,一定程度地打破 Scale-up 和 Scale-out 界限。能夠認(rèn)為,在當(dāng)前大模型和超節(jié)點(diǎn)趨勢(shì)下,集群 Scaling 采用 Clos 類拓 撲的確定性較高,而 Scale-up 的技術(shù)路徑將受到工程、通信協(xié)議優(yōu)化等因素影響。

      二、國內(nèi)超節(jié)點(diǎn)布局

      1、華為以開創(chuàng)的超節(jié)點(diǎn)互聯(lián)引領(lǐng) AI 基礎(chǔ)設(shè)施新范式

      (1)昇騰 Atlas 900 AI 集群:打造首個(gè)萬卡 AI 集群

      昇騰 384 超節(jié)點(diǎn)(Atlas 900 A3 SuperPoD),華為 CloudMatrix 的核心愿景是構(gòu)建一個(gè)「萬物 皆可池化、平等對(duì)待、自由組合」的 AI 原生數(shù)據(jù)中心。2025 年 4 月,華為正式推出基于 384 個(gè)昇騰 NPU 構(gòu)建的 CloudMatrix 384 超節(jié)點(diǎn)。產(chǎn)品形態(tài)上,384 個(gè) NPU 分布于 48 臺(tái) 8 卡服務(wù)器中,48 臺(tái)服 務(wù)器分布于 12 個(gè)計(jì)算機(jī)柜內(nèi);通過 4 個(gè)交換機(jī)柜實(shí)現(xiàn) 384 個(gè) NPU 的全互聯(lián)。該超節(jié)點(diǎn)可進(jìn)一步擴(kuò)展為 包含 10 萬卡的 Atlas 900 Super Cluster 超節(jié)點(diǎn)集群,為未來更大規(guī)模的模型演進(jìn)提供有力支撐。 截至 2025 年 9 月 18 日,華為 Atlas 900 A3 SuperPoD 超節(jié)點(diǎn)累計(jì)部署 300 多套,服務(wù)于互聯(lián)網(wǎng)、 金融、運(yùn)營商、電力、制造等行業(yè)的 20 多個(gè)客戶。

      拓?fù)浣Y(jié)構(gòu)上,計(jì)算機(jī)柜內(nèi)的所有處理器通過 UB 鏈路連接到板載的 UB Switch 交換芯片上,形成單層的 UB 平面。這些板載交換機(jī)(L1 層)再通過高速鏈路連接到位于通信機(jī)柜中的第二層(L2)UB 交換機(jī)。 整個(gè) UB 交換系統(tǒng)被精心設(shè)計(jì)成一個(gè)兩級(jí)、無阻塞的 Clos 網(wǎng)絡(luò)拓?fù)洹2 交換機(jī)被劃分為 7 個(gè)獨(dú)立的子 平面,每個(gè) L1 交換芯片精確地連接到對(duì)應(yīng)子平面的所有 L2 交換機(jī)。這種設(shè)計(jì)保證了從任何一個(gè)節(jié)點(diǎn)到 L2 交換矩陣的上行總帶寬與其內(nèi)部 UB 容量完全匹配,從而在整個(gè) 384-NPU 的超級(jí)節(jié)點(diǎn)范圍內(nèi)實(shí)現(xiàn)了 無帶寬收斂,確保了任意 NPU 之間都能獲得穩(wěn)定、高帶寬的通信能力。

      而在信號(hào)和數(shù)據(jù)傳輸層面,CM384 包含三大通路: 1)UB 平面:核心的 Scale-Up 網(wǎng)絡(luò),以全互聯(lián)(All-to-All)拓?fù)溥B接所有 NPU 和 CPU。每顆昇騰 910C 貢獻(xiàn)超過 392GB/s 的單向帶寬。它專為 TP、EP 等細(xì)粒度并行以及內(nèi)存池的快速訪問而設(shè)計(jì)。 2)RDMA 平面:用于超級(jí)節(jié)點(diǎn)間的 Scale-Out 通信,采用 RoCE 協(xié)議,確保與現(xiàn)有生態(tài)兼容。NPU 是 該平面的唯一參與者,用于 KV Cache 在 Prefill 和 Decode 節(jié)點(diǎn)間的傳輸、分布式訓(xùn)練等。 3)VPC 平面:通過華為自研的擎天卡連接到數(shù)據(jù)中心網(wǎng)絡(luò),負(fù)責(zé)管理、控制、訪問持久化存儲(chǔ)等。 對(duì)于一個(gè) AI 推理任務(wù),其在 CM384 網(wǎng)絡(luò)中的流轉(zhuǎn)大致可抽象為:CPU 通過 VPC 平面讀取內(nèi)存/硬 盤數(shù)據(jù),通過 UB 平面將任務(wù)分發(fā)到各 NPU,NPU 進(jìn)行計(jì)算,并通過 UB 平面同步模型權(quán)重及 KV Cache,再通過 RDMA 平面與另一機(jī)柜間進(jìn)行 KV Cache 交換。 CloudMatrix 384 超節(jié)點(diǎn)核心:UB 網(wǎng)絡(luò)保證節(jié)點(diǎn)間通信。CloudMatrix 384 通過兩層 UB Switch 實(shí) 現(xiàn) Scale-up。分層看,第一層 UB 網(wǎng)絡(luò)(圖 19 紅線)實(shí)現(xiàn)了小節(jié)點(diǎn)內(nèi) 8 張 NPU 的全互聯(lián),而二層 UB 網(wǎng)絡(luò)實(shí)現(xiàn)了 48 個(gè)小節(jié)點(diǎn)的無收斂全互聯(lián)。兩層 Scale-up 網(wǎng)絡(luò)結(jié)構(gòu)與英偉達(dá)此前推出的 DGX H100 256 Pod 類似,而由于熱功耗、穩(wěn)定性等工程問題,雙層 NVLink 的 Scale-up 并未大面積推廣。

      從實(shí)測(cè)數(shù)據(jù)看,CloudMatrix 384 兩層網(wǎng)絡(luò)對(duì)性能影響較小。如圖 20,Intra-node 表示最小節(jié)點(diǎn)內(nèi) 的 GPU 通信(即 8 卡服務(wù)器內(nèi)),Inter-node 表示不同服務(wù)器中的 GPU 通信;由于 Inter-node 通信 需要經(jīng)過 L2 UB Switch(多一跳)因此通信性能有小幅影響。節(jié)點(diǎn)間帶寬衰減低于 3%,節(jié)點(diǎn)間延遲增 加低于 1µs。鑒于現(xiàn)代 AI 工作負(fù)載主要依賴帶寬而非延遲,這種邊際延遲開銷對(duì) AI 任務(wù)的端到端性能 的影響微乎其微,因此 CloudMatrix 384 可以理解為超大規(guī)模、緊密耦合的超節(jié)點(diǎn)。

      CloudMatrix 384 核心進(jìn)展在于 UB 網(wǎng)絡(luò)的工程能力突破,彌補(bǔ)單卡性能短板。與過去網(wǎng)狀 8 卡互聯(lián) 相比,UB 網(wǎng)絡(luò)將通信壓力更多轉(zhuǎn)移到 UB Switch 上,提升 NPU 間一對(duì)一通信帶寬和超節(jié)點(diǎn)內(nèi)應(yīng)對(duì)通信 峰值的能力,疊加優(yōu)化的通信協(xié)議顯著提升通信效率。能夠認(rèn)為,在國產(chǎn)算力單卡性能仍有差距的情況 下,通過光互聯(lián)組建大規(guī)模 Scale-up 超節(jié)點(diǎn)將成為趨勢(shì)。 大規(guī)模超節(jié)點(diǎn)將更適合未來 AI 工作負(fù)載。與 NVL72 相比,CloudMatrix 384 超節(jié)點(diǎn)的算力達(dá)到 300P, 為 NVL72 的 1.7 倍;內(nèi)存為 NVL72 的 3.6 倍。隨著模型參數(shù)量、MoE 模型趨勢(shì)下專家數(shù)量的增加,推 理對(duì)計(jì)算、內(nèi)存和互連帶寬的要求將繼續(xù)提升。 新興的架構(gòu)模式,如用于專門推理的模塊化子網(wǎng)絡(luò)、檢索增強(qiáng)生成或混合密集/稀疏計(jì)算,要求模型組 件之間更緊密的耦合,從而增加模型內(nèi)部的通信和同步。這些工作負(fù)載需要將計(jì)算和內(nèi)存共置在一個(gè)緊 密集成的超級(jí)節(jié)點(diǎn)內(nèi),以減少通信延遲并保持高吞吐量。 因此,超節(jié)點(diǎn)的容量對(duì)維持 MoE 模型所需的細(xì)粒度局部性和性能特性較為重要。更大的資源池可以為 非均勻大小的作業(yè)提供更大的部署靈活性,在實(shí)際工作負(fù)載分布下,擴(kuò)展超級(jí)節(jié)點(diǎn)規(guī)模可顯著提高系統(tǒng) 吞吐量和效率。 此外,擴(kuò)大超節(jié)點(diǎn)規(guī)模并不會(huì)必然導(dǎo)致每個(gè) NPU 的網(wǎng)絡(luò)成本增加。假設(shè)網(wǎng)絡(luò)架構(gòu)相同,例如雙層 Clos 類交換拓?fù)洌灰渲脤?shí)現(xiàn)交換機(jī)端口充分利用,每個(gè) NPU 的網(wǎng)絡(luò)基礎(chǔ)設(shè)施攤銷成本在不同規(guī)模間幾 乎保持不變。給定交換層數(shù)下,超節(jié)點(diǎn)規(guī)模的擴(kuò)展不會(huì)帶來額外的成本開銷,因此從網(wǎng)絡(luò)角度來看,這 是一種經(jīng)濟(jì)高效的策略。

      (2)昇騰 Atlas 950/960 SuperPoD 計(jì)劃于 2026/2027 年上市

      1)Atlas 950 超節(jié)點(diǎn):華為預(yù)計(jì) 2026Q4 上市,滿配支持 8192 顆 Ascend 950DT 芯片,F(xiàn)P8 算力達(dá) 8EFLOPS,F(xiàn)P4 算力達(dá) 16EFLOPS。互聯(lián)帶寬達(dá)到 16PB/s,超過今天全球互聯(lián)網(wǎng)峰值帶寬的 10 倍有余。 相比英偉達(dá) NVL144,Atlas 950 超節(jié)點(diǎn)卡的規(guī)模是其 56.8 倍,總算力是其 6.7 倍,內(nèi)存容量是其 15 倍, 達(dá)到 1152TB;互聯(lián)帶寬是其 62 倍。即使是與英偉達(dá)計(jì)劃 2027 年上市的 NVL576 相比,Atlas 950 超節(jié) 點(diǎn)在各方面依然是領(lǐng)先的。

      2)Atlas960 超節(jié)點(diǎn):華為預(yù)計(jì) 2027Q4 上市,滿配支持 15488 顆 Ascend 960 芯片,F(xiàn)P8 算力將達(dá) 30EFLOPS,F(xiàn)P4 算力將達(dá) 60EFLOPS,內(nèi)存容量達(dá) 4460TB,互聯(lián)帶寬達(dá) 34PB/s。大模型訓(xùn)練和推 理的性能相比 Atlas 950 超節(jié)點(diǎn),將分別提升 3 倍和 4 倍以上,達(dá)到 15.9MTPS 和 80.5MTPS。

      (3)基于超節(jié)點(diǎn),華為發(fā)布全球最強(qiáng)超節(jié)點(diǎn)集群:Atlas 950 SuperCluster 和 Atlas 960 SuperCluster

      1)Atlas 950 SuperCluster 50 萬卡集群:華為預(yù)計(jì)于 2026Q4,由 64 個(gè) Atlas 950 超節(jié)點(diǎn)互聯(lián)組成, FP8 算力達(dá) 524EFLOPS,同時(shí)支持 UBoE 與 RoCE 兩種協(xié)議。Atlas 950 SuperCluster 集群相比當(dāng)前世 界上最大的集群 xAIColossus,規(guī)模是其 2.5 倍,算力是其 1.3 倍。

      2)Atlas 960 SuperCluster 百萬卡集群:華為預(yù)計(jì)于 2027Q4 上市,F(xiàn)P8 算力達(dá) 2 ZFLOPS,F(xiàn)P4 算力達(dá) 4ZFLOPS,同樣也支持 UBoE 與 RoCE 兩種協(xié)議。

      (4)昇騰 Taishan 950 SuperPoD:業(yè)界首款通算超節(jié)點(diǎn)

      Taishan 950 SuperPoD——華為推出的業(yè)界首款通算超節(jié)點(diǎn),為通算性能提升開辟全新路徑。預(yù)計(jì) 2026Q1 上市,基于 Kunpeng950 打造,最大支持 16 節(jié)點(diǎn),32 個(gè)處理器,最大內(nèi)存 48TB,同時(shí)支持 內(nèi)存、SSD、DPU 池化。未來還有望基于 TaiShan 950 和 Atlas 950 打造成混合超節(jié)點(diǎn),為下一代生成 式推薦系統(tǒng)打開全新架構(gòu)方向。

      (5)昇騰 Atlas850:首款企業(yè)級(jí)風(fēng)冷 AI 超節(jié)點(diǎn)

      Atlas 850——業(yè)界首個(gè)企業(yè)級(jí)風(fēng)冷 AI 超節(jié)點(diǎn)服務(wù)器。該產(chǎn)品搭載 8 張昇騰 NPU,有效滿足企業(yè)模型 后訓(xùn)練、多場景推理等需求。Atlas 850 支持多柜靈活部署,最大可形成 128 臺(tái) 1024 卡的超節(jié)點(diǎn)集群, 是目前業(yè)內(nèi)唯一可在風(fēng)冷機(jī)房實(shí)現(xiàn)超節(jié)點(diǎn)架構(gòu)的算力集群。

      (6)華為靈衢:面向超節(jié)點(diǎn)的互聯(lián)協(xié)議

      靈衢是一種面向超節(jié)點(diǎn)的互聯(lián)協(xié)議,將 I/O、內(nèi)存訪問和各類處理單元間的通信統(tǒng)一在同一互聯(lián)技術(shù)體 系,實(shí)現(xiàn)數(shù)據(jù)高性能傳輸、算力高效協(xié)同、資源統(tǒng)一管理和靈活組合,是超節(jié)點(diǎn)參考架構(gòu)的基礎(chǔ)。基于 靈衢(UnifiedBus,簡稱 UB)的超節(jié)點(diǎn)架構(gòu),支持 CPU、NPU、GPU、MEM、DPU、SSU(Scalable Storage Unit)和 Switch 中的一種或者多種組件資源池化和平等協(xié)同,構(gòu)建邏輯上的一臺(tái)計(jì)算機(jī)。 華為于 2019 年開始研究靈衢技術(shù),2025 年靈衢 1.0 正式在 Atlas 900 A3 SuperPoD 上商用驗(yàn)證, 2025 年 9 月,華為正式開放靈衢 2.0 協(xié)議。

      靈衢提供分層的協(xié)議棧,從下到上由物理層、數(shù)據(jù)鏈路層、網(wǎng)絡(luò)層、傳輸層、事務(wù)層、功能層以及 UMMU、UBFM(UB Fabric Manager)組成。其中,Entity 為功能實(shí)體,是全局通信的基本單元; URMA(Unified Remote Memory Access)為統(tǒng)一遠(yuǎn)程內(nèi)存訪問。

      2、阿里云發(fā)布全新一代磐久 128 超節(jié)點(diǎn) AI 服務(wù)器

      阿里云正式發(fā)布全新一代磐久 128 超節(jié)點(diǎn) AI 服務(wù)器。該服務(wù)器由阿里云自主研發(fā)設(shè)計(jì),具備強(qiáng)大的兼 容性,可支持多種 AI 芯片,單個(gè)機(jī)柜能夠容納 128 個(gè) AI 計(jì)算芯片。值得一提的是,磐久超節(jié)點(diǎn)集成了 阿里自研的 CIPU2.0 芯片以及 EIC/MOC 高性能網(wǎng)卡,并采用開放架構(gòu)。這一設(shè)計(jì)使得其能夠?qū)崿F(xiàn) Pb/s 級(jí)別 Scale-Up 帶寬和百 ns 極低延遲。與傳統(tǒng)架構(gòu)相比,在同等 AI 算力的情況下,磐久 128 超節(jié) 點(diǎn) AI 服務(wù)器的推理性能可提升 50%。 磐久 128 超節(jié)點(diǎn)采用模塊化設(shè)計(jì),單機(jī)柜支持 128 個(gè) AI 計(jì)算芯片,密度刷新業(yè)界紀(jì)錄。通過正交架構(gòu) 優(yōu)化空間布局,機(jī)柜功率密度可達(dá) 350kW,支持單芯片 2000W 高負(fù)載運(yùn)行,同時(shí)實(shí)現(xiàn) 99%的硬件故 障預(yù)測(cè)準(zhǔn)確率。這一設(shè)計(jì)顯著提升了數(shù)據(jù)中心的算力集中度,尤其適合萬億參數(shù)級(jí)大模型的分布式訓(xùn)練。

      正交設(shè)計(jì)運(yùn)維更便捷:Compute-Tray 采用橫放的結(jié)構(gòu),支持單個(gè) Compute Tray 4 顆 GPU,SwitchTray 采用豎放的結(jié)構(gòu),這樣整個(gè)機(jī)柜本身沒有任何 Cable Tray(電纜橋架)。

      CPU 和 GPU 分離設(shè)計(jì):更靈活也容易迭代升級(jí),支持 8 卡/OS,16 卡/OS,CPU 節(jié)點(diǎn)可以獨(dú)立演進(jìn), 支持不同 CPU 平臺(tái)、代次,GPU 節(jié)點(diǎn)支持多種 GPU 芯片方案,滿足不同業(yè)務(wù)需求。

      磐久 128 超節(jié)點(diǎn)為既華為 CloudMatrix 384 之后,又一國產(chǎn)超節(jié)點(diǎn)范式。磐久采用了單機(jī)柜+無中背 板的正交結(jié)構(gòu),而 CM384 采用 16 機(jī)柜+機(jī)柜內(nèi)銅互+機(jī)柜間光互連。與 CM384 相比,磐久為單機(jī)柜產(chǎn) 品,節(jié)點(diǎn)內(nèi)互聯(lián)距離較短,Scale-up 網(wǎng)絡(luò)不使用光互連,單芯片互聯(lián)網(wǎng)絡(luò)的成本或相對(duì)較低;但 Scaleup 網(wǎng)絡(luò)拓?fù)漕A(yù)計(jì)仍為雙層 CLOS 架構(gòu)。 考慮到其計(jì)算模塊與 CPU、交換模塊分開等通用性設(shè)計(jì),預(yù)計(jì)磐久 128 超節(jié)點(diǎn)將會(huì)成為 CM384 之后 國產(chǎn)超節(jié)點(diǎn)的又一通用范式。一方面,可以降低在推理場景部署國產(chǎn)卡的適配難度;另一方面,這一方 案或?qū)⒈徊糠謬a(chǎn) AI 芯片廠商采用。

      3、中科曙光發(fā)布 AI 超集群系統(tǒng)

      中科曙光發(fā)布國內(nèi)首個(gè)基于 AI 計(jì)算開放架構(gòu)設(shè)計(jì)的曙光 AI 超集群系統(tǒng)。根據(jù)中科曙光公眾號(hào),9 月 5 日,中科曙光在 2025 重慶世界智能產(chǎn)業(yè)博覽會(huì)發(fā)布了國內(nèi)首個(gè)基于 AI 計(jì)算開放架構(gòu)設(shè)計(jì)的產(chǎn)品——曙 光 AI 超集群系統(tǒng)。除了緊耦合設(shè)計(jì),該集群系統(tǒng)還支持多品牌 AI 加速卡以及兼容 CUDA 等主流軟件生 態(tài),為用戶提供更多開放性選擇,大幅降低硬件成本和軟件開發(fā)適配成本。

      海光系統(tǒng)互聯(lián)總線協(xié)議(HSL)開放,打造國產(chǎn)算力核心基座。2025 年 9 月 13 日,海光面向 GPU、 IO、OS、OEM 等產(chǎn)業(yè)全棧,宣布開放 CPU 互聯(lián)總線協(xié)議(HSL),核心內(nèi)容包括開放完整的總線協(xié) 議、提供 IP 參考設(shè)計(jì)、開放指令集等。產(chǎn)業(yè)上下游伙伴可通過海光系統(tǒng)互聯(lián)總線,實(shí)現(xiàn)更高效的系統(tǒng) 連接。比如降低訪問延遲、自定義簡化協(xié)議棧、提升鏈路利用率、支持緩存一致性和自由的多鏈路擴(kuò)展。 同時(shí)也將較大程度有助于部件及整機(jī)研制廠商快速設(shè)計(jì)不同品牌的 GPU 產(chǎn)品并推向市場,釋放國產(chǎn)算 力的產(chǎn)業(yè)協(xié)同效能。當(dāng)前,加入 HSL 協(xié)議的參與者包括寒武紀(jì)、沐曦、摩爾線程等。

      4、浪潮信息發(fā)布超節(jié)點(diǎn) AI 服務(wù)器“元腦 SD200”

      浪潮信息發(fā)布面向萬億參數(shù)大模型的超節(jié)點(diǎn) AI 服務(wù)器“元腦 SD200”。根據(jù)元腦服務(wù)器公眾號(hào),8 月 7 日,浪潮信息發(fā)布面向萬億參數(shù)大模型的超節(jié)點(diǎn) AI 服務(wù)器“元腦 SD200”。該產(chǎn)品基于自主研發(fā)的開放 總線交換技術(shù)首創(chuàng)多主機(jī)三維網(wǎng)格系統(tǒng)架構(gòu),實(shí)現(xiàn) 64 路本土 GPU 芯片高速互連;通過創(chuàng)新遠(yuǎn)端 GPU 虛擬映射技術(shù),突破多主機(jī)交換域統(tǒng)一編址難題,實(shí)現(xiàn)顯存統(tǒng)一地址空間擴(kuò)增 8 倍,單機(jī)可以提供最大 4TB 顯存和 64TB 內(nèi)存,為萬億參數(shù)、超長序列大模型提供充足鍵值緩存空間。

      5、沐曦股份創(chuàng)新多種超節(jié)點(diǎn)形態(tài)

      2025 年 7 月,沐曦股份發(fā)布多種超節(jié)點(diǎn)形態(tài)。(1)曦云 C500X 光互連 64x GPU 超節(jié)點(diǎn)(16-64x GPU),通過光模塊技術(shù)降低延遲,提升跨節(jié)點(diǎn)通信效率,適用于分布式訓(xùn)練場景;(2)耀龍 S8000 G2 超節(jié)點(diǎn)(32/64x GPU),業(yè)界首創(chuàng) 3DMesh 互聯(lián)技術(shù),實(shí)現(xiàn) 64 張曦云 C550 通用 GPU 高速互聯(lián)的超節(jié)點(diǎn),通信性能提升 4 倍,支持 DeepSeek、Qwen、Kimi-K2、階躍 Step3 等主流大模型 全場景應(yīng)用;(3)Shanghai Cube 國產(chǎn)高密度液冷整機(jī)柜(128xGPU),采用 47U 單機(jī)柜 4 組超 節(jié)點(diǎn)(1 組超節(jié)點(diǎn) 32xGPU、單機(jī)柜 128xGPU)高密度液冷部署,8 機(jī)柜并排組成千卡集群,算力密度 與能效比達(dá)到行業(yè)領(lǐng)先水平;(4)高密度液冷算力 POD,采用創(chuàng)新技術(shù)架構(gòu),與沐曦算力集群深度適 配,可高效支撐 AI 訓(xùn)練、推理及通用計(jì)算等多樣化場景,為高性能算力需求提供穩(wěn)定、高效、靈活擴(kuò) 展的實(shí)時(shí)保障。

      6、曦智科技發(fā)布國內(nèi)首個(gè)光互連光交換 GPU 超節(jié)點(diǎn)

      曦智科技在今年 7 月世界人工智能大會(huì)(WAIC)發(fā)布了國內(nèi)首個(gè)光互連光交換 GPU 超節(jié)點(diǎn)光躍 LightSphereX,并聯(lián)合壁仞科技、中興通訊首次進(jìn)行示范應(yīng)用,即將于上海儀電國產(chǎn)超節(jié)點(diǎn)算力集群落 地。

      參考報(bào)告REPORT

      超節(jié)點(diǎn)行業(yè)深度:驅(qū)動(dòng)因素、規(guī)模選擇、產(chǎn)業(yè)鏈影響及相關(guān)公司深度梳理.pdf

      超節(jié)點(diǎn)行業(yè)深度:驅(qū)動(dòng)因素、規(guī)模選擇、產(chǎn)業(yè)鏈影響及相關(guān)公司深度梳理。在人工智能技術(shù)飛速發(fā)展的當(dāng)下,大模型訓(xùn)練與推理對(duì)算力的需求呈爆發(fā)式增長,超節(jié)點(diǎn)(SuperPod)應(yīng)運(yùn)而生并迅速崛起。作為新型算力基礎(chǔ)設(shè)施的關(guān)鍵組成部分,超節(jié)點(diǎn)憑借卓越的性能和高效的互聯(lián)架構(gòu),成為推動(dòng)算力升級(jí)的核心力量,代表著算力技術(shù)的前沿方向,更是未來智能社會(huì)發(fā)展的重要支撐。超節(jié)點(diǎn)的概念由英偉達(dá)率先提出,其核心在于通過高效的互聯(lián)協(xié)議和架構(gòu)設(shè)計(jì),實(shí)現(xiàn)大規(guī)模GPU集群的緊密耦合與協(xié)同工作。這種架構(gòu)在模型訓(xùn)練和推理過程中展現(xiàn)出顯著優(yōu)勢(shì),能夠有效提升算力的整體性能。如今,全球科技巨頭紛紛布局,國內(nèi)企業(yè)也在加速追趕,超節(jié)點(diǎn)行業(yè)正站在時(shí)代...

      我來回答

      快速提問

      海量報(bào)告支持,行業(yè)專家解讀

      海量文庫支持,行業(yè)專家解答

      • 相關(guān)問題
      • 最新問題
      用戶解答榜
      分享至
      主站蜘蛛池模板: 宜昌保卫战电视剧全集| 炉火纯青是什么工艺| 50岁阿姨大人电视剧免费观看 | 李多海资料| 武朝迷案| 林正英的僵尸电影| 蝴蝶行动电视剧全集| 冰球坏小子| 好姑娘4电视剧在线观看| 我的妈妈免费完整高清电视剧 | 风流女管家最新电视剧全集| 青岛一酒店疑闪爆| 日剧电影维修工人的艳遇| 富江动画12集| 狄仁杰断案传奇96版第二部| 水晶鞋与玫瑰花| 刺激大片| 律政俏佳人| 水手服饲育电影高清完整版在线观看| 辛十四娘全集| 啄木鸟《女拳击手2满天星版》| 龙者罗拉| 海之声如如理论| 热带雨电影| 村上沙兽皇电影在线观| 银河护卫队2百度云资源| 斯巴达第4季全集免费| 武神主宰在线观看全集免费播放| 啄木鸟:女满天星《壮志凌云》电免费| 天际浩劫国语| HD版《激战丛林》演员| 贵妇人街电影版免费观看中文| 特别酒店美国1983| 她是神短剧免费观看全集高清| 越南电影《性的暴行完整版在线播放 | 高清《周年纪念日》电影| 《漂白》电视剧在线播放| 《丈夫不在家维修工人上门维修》电 | 结婚进行曲| 高清放射危机未删减| 易经风水涣| 吴健农民伯伯下乡2全集免费观看| 甄嬛传全集百度影音| 娘家的故事上部| 天若有情之天长地久| 法国空姐看完整免费高清原声奔跑吧 | 丈夫的朋友| 黑暗荣耀第一季无删减在线观看 | 我的爷爷和奶奶的故事| 2对1:女性3对1体检| 乡村爱情故事第5部| 不良义姐在线播放 | 人民的名义48| 妈妈的女儿2字ID| 海魂电视剧| 牙医姐妹1986年日本| 这里的黎明静悄悄 电影| 电视剧大码头| 法国酒店实生3完整版| 变异巨蟒在线播放| 金瓶梅电影5完整版无删减| 《女超人-麦乐迪》| 岁月电视剧| 美奈雀替夫还债免费电影观看| 樱桃红红| 暮光之城四| 公的浮之手中完整版免费观看| 私人瑜伽教练电影| 免费夫妻生活片AV| 电视剧《三十而立》| 意大利满天星电影有哪些?八尺夫人免费| 最后一枪百度影音| 女律师的堕落电影免费观看| 回复术士的重来人生在线观看| 蜡像馆丧尸| 《快递员4:特殊待遇》| 《迷案奇踪》电影| 军情解码直播| 《21世纪爱情指南》视频| 善良的姐夫| 四大天王演唱会| 决战刹马镇| 花开如梦电视剧免费播放40集 | 主君的太阳人人影视| 年轻的嫂2| 播放 - 女律师的堕落高清 - 剧情电影 - 973影视 | 上司交换夫妇木下凛凛子| 女人魂免费观看| 善良的婶婶1中文字幕| 公浮3| 开放性成人交友网站| 高清黄泉的使者未删减| 美国特别酒店3| 高清《堕落》| 西游记张卫健版国语| 尖叫之夜免费直播| 阿庆讲故事| 银瓶梅电视剧第5集电视剧| 带队横扫全球:电竞女王短剧全集| 古剑奇谭免费全集观看| 色戒完整版| 空姐5免费观看完整版电视剧| 西瓜烂了是什么梗| 美国忌讳1~7| 帮帮我爱神 下载| 玉林市| 巴萨对曼联| 五月小说| 年轻气盛| 《麦乐迪女超人》正在播放| 法版风女管家2008版电影| 星期五的寝室| 电影《招待外卖员》免费播放| 《开端》| 日本电影趁丈夫不在的5天| 爱情与灵药迅雷下载| 西城男孩最好听的歌| 紫钗奇缘电视剧全集| 中文字Dl幕岳 在线观看| 血战到底川军团| 看了下面会流水的视频| 大学生特殊按摩| 黑金电影完整版| 流氓大亨粤语| 我要爸爸的种子电影完整版| 一元一串的钵钵鸡是什么梗| 朝夕录电视剧| 禁忌的诱惑电影| 徐少强 金瓶梅| 电视剧非常有喜| 一酷到底| 小樱桃动画片| 终极一班3部第一集| 夏目友人帐第一季| 《奇怪的美容院2》的完整演员表| 高清《僵尸先生3》免费观看| 乱理片 最新乱理片2018| 小爸爸电视剧插曲| 反恐特战队全集免费观看| 笑傲江湖2025| 四周恋人第二季| 灭火宝贝2美版罗丽莎的启蒙| 上海上海电视剧| 魔力宝贝监狱 电影 完整版| 国家队第二季| 像风一样离去 电视剧免费观看| 流星花园泰剧在线高清免费观看| 西游降魔篇免费| 《暗宅之谜》电视剧| 奈克瑟斯奥特曼| 《永不磨灭的番号》电视剧| 怒海潜沙秦岭神树演员表| 少年包青天第二部免费版在线观看| 年轻女教师5高潮| 侯玉洁牧师讲道全集1| 敢死队1| 插式治疗专业医院1-5集| 决胜21天在线观看| 锦衣之下免费观看全集芒果TV| 李月华15部电影大全| 天巡者电视剧在线观看免费 | 玄女心经2免费观看全集高清| 网球王子电视剧版| 三年免费观看大全国语电影大全| 食客国语| 勾魂绮梦完整版| 《分娩特写》电影免费观看| 三打白骨精电影| 杰克逊最经典演唱会| 茉莉特别酒店3| 战地花开| 空中蛇灾2| 庆余年第二季欧美剧犯罪片| 欧美战狼10电影免费完整版| 秋蝉免费全集| 初体验5| 电影唐伯虎点秋香| 年轻的瘦子最新版免费观看| 蜜桃成熟时33d ed2k| 安斋拉拉出演的电影| 一枪三姐妹高清观看| 日本战狼6| 蜜桃成熟时2在线看| 五月天情色电影| 《反击》在线观看完整版| 徐良小凌演唱会| 《隔壁女邻居3》BD高清| 瑞奇宝宝动画片全集免费观看| 蒙古电影《销售女孩》的导演是谁| 泰安市英雄山中学| 天堂韩国电视剧| 播放电影孕妇在线观看免费| 营救徐九| 木子凛凛子在线电影| 诺曼影视| 吉星拱照国语| 情深深雨蒙蒙48集全集免费看| 《善良的女邻居》4| 2002电影高清完整版在线观看| 三年电影在线观看免费大全| 电视剧几度夕阳红| 纳妾记电视剧| 花子vs倔强驱魔师真人| 后浪免费观看完整版视频| 妻子成为临时模特的日本电影| 成人电影维修工的艳遇| 田教授家的二十八个保姆| 黑狱圣女国语在线播放免费| 飞机上的性服务| 新妹魔王的契约者在线观看| 碟中谍在线观看| 外出的目的| 豫剧三哭殿| 迷夜惨遇| 曼谷保镖1国语| 高清《食物链》电影在线观看| 我的好妈妈5高清在线观看| 黑川健儿| 百变小樱国语版| 三年中国免费观看高清电影| 温柔的杀死龙| 疯狂历史补习社粤语| 高清纯真年代的爱情| 韩国电影和部长一起出差| 原来我很爱你电视剧免费观看| 《甲种公牛》1976意大利| 国足大连备战仅不到20名记者到场| 坎贝奇第二部曲《品味人生》下载| 影碟机维修| 《特殊诊所》完整版| 夏日诱惑无删减版| 公安局长第二部| 花与蛇5之牙医| 怎样包粽子简单步骤图| 高清《潜艇行动》电影| 漂亮妈妈7字头| 雨花石mv| 吴奇隆前妻| 骨语2在线观看| 铿锵锵锵锵锵好多少| 凝固的爱 试戏现场| 插曲30免费观看| 德凯奥特曼第7集| 林妙可歌唱祖国| 电影《时间静止器》免费观看全集| 流金岁月电视剧免费观看全集| 团鬼六:绳责| 六个字歌名| 《法国航空》3| 庆余年2免费观看| 硝烟散尽电视剧免费观看| 欧式少女大16集全集更新进度| 请不要离我而去| 王杰2001香港演唱会| 我的性感女老师| 青春期一| 女鼓手电影在线观看| 安吉县| 美味的妻子| 《愤怒的小鸟》| 美国禁忌结局- 3| 被甩继承:亿万家产短剧全集| 售楼员的秘密韩剧免费观看| 嗜血狂魔| 女教师の爆乳BD在线观看| 韩国电影讲一个厨师和助理| 千金小姐| 归去来剧情| 我推的孩子动漫| 电视诗歌散文| 无颜之月完整版| 玉山县| 炸天小姐电影免费观看| 且行且珍惜 电视剧| 花与蛇3电影| 商务旅行戴绿色的帽子| 杨乃武与小白菜粤语版| 夜上海广场舞| 美乃雀 替夫还债的电影免费观看 行政助理满天星法版免费观看 | 麻豆AV《修车艳遇》在线观看| 歪星撞地球| 安娜贝尔3| 《甲种公牛》1976意大利| 决战猩球1973| 合伙人在线观看| 嘉峪关市| 冲上云霄第一部粤语| 神马兄弟全集| 播放阿宝| 追风行动| 他是谁免费观看| 《善良的妻子》| 岳母的幸福生活电视剧| 小东西我们站着做| 粉嫩小女生| 奇袭白虎团快板| 急诊科医生 电视剧| 情逆三世缘结局| 美容院特殊待遇5| 钢铁侠 电影| 横撇的写法| 冬暖花会开电视剧全集免费观看| 林俊杰成都演唱会| 商务旅行戴帽子的同行免费观看电影 | 插曲的痛60集全集免费| 浪漫满屋全集| 新金瓶梅2在线观看| 《白鹿原》电影完整版免费观看| 斗罗大陆免费观看完整版高清在线| 杰西简壮志凌云免费观看影视大全 | 北上电视剧全集在线| 爱在冰雪纷飞时| 吉星高照第二季短剧| 地震发生前有哪些预兆| 《茉莉花酱的好感度正在崩坏》| 去有风的地方电视剧免费观看 | 现世因果教育| 超碰进入离开| 小伙子爱上隔壁女邻居电视剧| xl司令第一季免费全集在线观看| 太极张三丰电影下载| 韩剧我的女孩国语版| 跟部长出差的日子在线免费| 盛易传奇| 秋瓷炫《生死决断》精彩片段| 王牌特工2:黄金圈| 隋唐英雄传第四部| 《交换夫婦》木下凛凛子| 《夕颜》动漫番剧全集| 美式忌讳6-10| 女儿的朋友视频| 私人航空2法国电影| 保定市| 致命游戏在线观看| 难得一身好本领| 法国高压监狱3完整版| 大耳朵图图动漫| 《炸天小姐》电影免费| 女皇陵下的风流娘们| 海角七号电影下载| 电影《金悔瓶》免费观看徐少强国语 | 温柔的背叛杨桃| 刻晴大战史莱姆外服免费观看高清动漫 | 唐人街探案3在线| 明年今日mv| 隋唐英雄张卫健版2| 日本电影生活中的玛丽| 王祖贤潘金莲之前世今生| xl司令在线观看免费高清全集无删减| 雪中悍刀行50全集观看第二季| 欧美伦理电影,精彩程度满天星!《V酒店第一季》1 - 3集 | 天生爱情狂国语| 电影美式忌保罗讳| 大头儿子小头爸爸1| 盛唐风流电影在线观看高清国语影视| 邵氏电影| 漂亮路人每天都被主角看上| 韩国三级片控制女上司 | 《家庭矛盾》麦乐迪| 王牌特工2:黄金圈| 来自妈妈绣感2在线看电视剧| 为人民服务免费完整版中文翻译| 公之孚之中字8| rio ed2k| 强心脏yg| 郭士强面临被姚明重罚| 霜花店免费观看完整版视频| 牙医姊妹电影未删减在线观看网站 | 高智能方程式国语| 一路向西电影完整篇| 电影木下凛凛子瑜伽HD| 楚汉传奇80集免费观看完整版高清 | 包青天93版免费观看西瓜影院| 顶尖飞行员2021完整版满天星| 男生操男生动漫| 男生和女生在一起愁愁愁电视剧在线观看30集 | 三年大片在线观看免费| 喜爱夜蒲2所有歌曲| 啄木鸟壮志凌云在线| 都市之最强系统全集免费| 清十二楼房得锦江免费| 大考免费观看完整版电视剧| 电影《空姐4》完整版| 《侦探先生,你的背包开着呢》| 风暴免费在线观看| 血恋3在线观看完整免费高清原声满天星奔跑吧| 心宅猎人电视剧在线观看免费高清 | 你给我的喜欢电视剧免费观看全集| 男生女生在一起愁愁愁电视剧在线观看| 四项公投是哪四项| 一个好妈妈的HD3中字| 埃丽·诺娃《纯粹》满天星 | 徐锦江电影| 私人医院的特殊待遇2| 电视剧重生之门免费观看完整版| 布兰迪《不当军事行为》| 电视剧《轻年》32集完整版| 与父同行泰剧| 快乐星球第2部| 更好的生活| 韩剧控制老板| 我是特种兵3之狼牙| 需要爸爸播种的视频| 隔世相逢| 最高的爱人诏不干涉工作和家庭| 电视剧神探狄仁杰第一部| 红衣美女| 韩国女主播艾琳| 朋友别哭刘芳| 孟川动漫全集免费观看| 星辰变超前点播| 神秘的旅伴电影| 斯巴达第四季24集剧情详解| 私人监狱电影全集免费资源| 三傻大闹宝莱坞国语版| 我的好妈妈BD在线观看免费高清| 可疑的美容院中文字幕| 满天星陈宝莲版| 契魔者装备| 《售楼小姐》的秘密视频| 都市欺诈| 浴室情欲2交换暴露| 我家有喜全集在线观看| 水之年代全集观看| 一边亲一边下奶免费视频| 惊天时速| 快乐到死电影在线观看| 《激战丛林》海泽摩尔电影在线观看 | 酒店1-50集在线观看| 追妻场:天价前妻全集免费| 情欲色香味| 爱在日落之前吻戏| 吸血鬼检察官| 第二陷阱| 胶原蛋白粉的作用| 夺命奇兵| 金瓶梅2爱的奴隶在线观看| 海贼战队豪快者45| yellow视频在线观看免费高清无吗 | 妈妈辅导作业气到痉挛| 火蓝刀锋电视剧百度影音| 聊斋艳谭艳梅在线观看| 新疆| 维修师傅的遇艳在线观看伦理片 | 白峰美羽《被讨厌的上司》完整版| 泌尿科电影| 甲午风云电影| 火影剧场版7| 《卖百科全书的女人》法国| 我爱下电影3d| 陈浩民版西游记1| 电视剧扫黑风暴高清在线| 法国版《女超人》在线播放| 新妈妈在线观看完整电视剧免费| 缘之空03| 袁阔成三国演义评书下载| 战狼6在线观看完整版| 八零军嫂:糙汉老公超宠我短剧全集| 潜规则 电影| 无极在线观看| 白蛇传说之法海| 倚天屠龙记之九阳神功 电影| 满天星2电影免费播放| 妈妈的绣感儿子中字二年级下册| 少妇献身HD中字| 我的老婆是学生会长第二季无修| 修理工的艳福在线观看| 苍井空演的电影| 下属的妻子去社长家吃饭在线| 时光沙漏在线观看免费完整版| 麦盖提县| 分手大师完整版| 古惑仔友情岁月演唱会| 我同学的妈妈双字ID全集免费| 仙逆第98集完整版播放| 艾莎公主动画片全集免费观看中文| 电影《需要爸爸播种美国》在线观看 | 麦蒂自抛自扣| 擦枪走火 电影| 地狱之歌ova高清| 杰西.简壮志凌云| 沈阳天空聊天室| 就想赖着你吻戏| 日韩入室强奸,免费观看| 百团大战 电影| 一树梨花压海棠完整版电影免费| 蔷薇风暴电视剧免费观看| 为时已是寿司!?| 绿岛电影海报堂| 秘密搜查官在线观看完整版免费| 李卫当官第一部免费版央视网 | 西游 降魔篇粤语| 高h乱np甄宓| 高清唐顿庄园3未删减| 《牙医姐妹》在线观看| 无人观看高清电视剧免费| 雷军自曝37岁已财务自由| 一个女人韩剧全集免费观看| 韩剧部长来家做客| 莫非这就是爱情| 四十不惑电影| 年少有为不自卑| 公之浮之手电影免费播放完整版| 龙潭之战越南战争片正片| 唐凯vs丹勒| 赶尸艳谈恐怖电影免费观看高清版 | 科学怪妓电影免费| 《妻子6》在线观看免费版电视剧| 知几未来| 中国2020年龄划分新标准| 游泳教练的湿润教育电影在线观看| 我的最爱粤语高清| 女版战狼6免费播放高清| 兰若寺电影| 甘联珠大破红莲寺| 中国双航母首同框| 中华小厨神| 夫妻那些事在线| 美人电影| 《军事不当行为》布兰迪在线观看 | 女员工的付出中字1230| 司藤结局什么意思| 精瓶梅电影在线观看| 《幸福来敲门》| 换脸明星电影免费| 昨晚湖南卫视| 爱逢时短剧免费播放| 二龙湖爱情故事2021在线观看| 超女麦乐迪完整版免费观看| 无性不爱| 请成为我的家人免费全集在线观看| 高清《厨房》韩剧视频在线观看| 苍井空电影网| 战狼九欧式少女高清| 肛门犯罪电影在线观看| 我是特种兵之火凤凰在线观看| 《overflower》第一季动漫| 豪门弃妇:翻身成商业女王短剧全集| 封神榜全集| 倔强驱魔师1-5集免费动漫| 《浴血黑帮:不朽传奇》| 孙静雅 快播| 张云熙无码a| 韩剧求婚国语版| 古惑仔2高清| 金婚50集完整版免费观看 | 老家有喜| 变形计山呼海唤| 免费看办公室秘密全集| 赛文21奥特曼全集| 克莱尔的迷宫在线免费播放| 我朋友的老婆3中文| 家有一老全集| 《越南妹》99号电影在线观看免费| 菠萝蜜菠萝菠萝| 神勇武工队传奇主题曲| 善良的小姨子在线播放| 女学生被强伦轩无删减| 肛门犯罪电影在线观看| 网上购物社区| 冰锋电视剧| 妻子8免费全集高清观看在线| 意大利电影护士转正| 沸腾人生电视剧40集免费观看| 98古惑仔在线观看粤语版 | 壮志凌云 满天星在线观看| 影音先锋资源 彼女系| 安徽卫视甄嬛传首映礼完整版| 维修工的艳遇电影免费| 国乒女单无缘亚锦赛四强| 彝良县| 女老师电影在线观看| 澳门回归22周年| 波动女郎| 菠萝蜜电影免费看。| 沉默的羔羊香港版| 天海翼女教师在线播放| 花非花雾非雾下载mp4| 《农场保卫战》满天星| 西安到昆明的火车事故| 抗日奇侠全集播放| 年轻妈妈| r片| 坏女孩2满天星| 非常突然| 韩剧蓝色隐身帽子| 侏罗纪公园4电影免费完整版观看| 郡守与里长| 澄城县| 胜女的代价2结局| 爱我就别想太多免费全集电视剧全 | 杀破狼1免费观看完整| 铜铜铜铿铿铿锵锵锵锵免费观看| 性感乳房裸体电影按摩| 《以爱为营》| 北越《性的暴行》播放| 第一炉香电影完整版观看| 《私人航空》免费观看在线观看| 商丘新闻| 原始武器 国语| 濮阳市| 十八岁的天空第二部| 游龙惊凤电视剧| 女子私人监狱完整版免费观看| 闯荡30集电视剧免费观看| 终极三国2017| 电影需要爸爸的种子免费观看| 大街上强?在线观看| 保姆的特殊待遇2诊疗室:特殊待遇| 湘西诡案| 阿凡达3免费完整观看| 美国式保罗2| 《爱欲告白》韩国电影免费播放| 保姆全集| 人猿泰山1995版中文版| 我爱男保姆电视剧| 美女化妆前后对比| 豫剧名家名段唱段| 新包青天全集| 《女律师替夫还债》剧情介绍| 隋唐英雄108| 伺候者2| 帕那索斯博士奇幻秀| 流浪汉电影| 黑白配高清国语观看| 爱情进化论| 斩服少女完整版在线观看| 哇嘎嘎免费观看在线播放 | 科学怪妓在线观看| 《私人家教》1983版又叫什么版本| 假面骑士创骑免费观看完整版中文| 格力空调制热正确调法| 巨人族的新娘樱花动漫| 人猿泰山1995意大利在线观看完整满天星| 何家驹快播| 看电影免费观看完整版| let美人| 姊妹牙医完整版在线看免费| 3d肉铺团在线播放| 上阳赋电视剧全集免费观看| 日本电影女律师的坠落| 爱情故事| 听不见的爱短剧免费观看| 女性私人监狱| 竹马是消防| 阿浅来了在线观看| 公妇借种林娇H| 美味快递电影在线观看| 《花间提壶方大厨第二季》电视剧| 仙剑奇侠传3 优酷| 需要爸爸的种子第二季免费观看全集| 无人区电影免费完整观看| 女婿有劲枪枪到底岳峰扮演者| 凌云壮志女版(法国)满天星在线| 沙漠战争| 大象席地而坐| 法国版《女超人| 春光灿烂周三强| 西顿学院| 魔镜号中文在线播放| 后营露营无增减2季| 心跳比我先认出你免费全集| honeygirl| 学生的妈妈| 潜龙风云| 木下檀檩子电影2024免费观看| 混血女学生按摩电影合集| 五等分的新娘特别篇| 台剧榜2025最新热播剧| 《淫の方程式》动漫| 老兵插曲| 道士出山| 完美女人满天星完整版| 角斗士2完整版免费观看| 《原始人》电影免费观看| 学生的妈妈在线播放| 中国荷尔蒙6中文版普通话| 璀璨人生第一集| 暖暖的国语版全集观看| 最后的真相免费观看电影| 老公从外地回来一晚上不让我睡觉| 酷酷动漫| 指尖传出的真挚热情未增减第一季| 清流租房| 女保险公司推销员8| 烟袋斜街10号| 潘金莲荡秋千吃葡萄是谁演的| 经典电影《香水》| 学生的母亲5字ID| 束缚游戏完整版| 解密在线观看免费高清完整版| 因为爱情有幸福之一电视剧| 电影失乐园在线观看| 周弘版《村枝2》观看| 苍月女战士H版成人版| 高清《向魔王伊布罗贾献身吧》| 普门品全文念诵及回向全文| 史前巨鳄2| 陈小春版鹿鼎记| 奥利维亚斯帕克满天星禁忌日记短剧| 剃刀边缘全集| 我邻居的老婆3韩国电影| 我的错误电影在线观看免费| 高清96分钟:列车爆炸案未删减| 法国空姐6大结局| 《巨乳女教师波多野吉衣电影 | 峰爆 电影| 邻居也疯狂32集完整版免费看| 美国小蜜桃| 好姑娘1全集观看免费高清| 《墓道》电视剧| 暗格里的秘密电视剧在线观看西瓜| 小菊的春天电视剧全集免费观看| 战狼10高清国语免费观看影视| 加勒比海女海盗电影完整版| 奥特曼全集免费观看完整版| 角头大姐| 善良的女儿| 张伟丽vs苏亚雷斯回放| 甜美姐姐动漫全集| 袁隆平微博| 糖葫芦西施| 摇滚七十年代| 亡命抢劫| 爸爸的种子免费观看电视剧美国| 满天星版《黑鹰坠落》女主| 蜜桃成熟时日韩| 缘分 电影| 麻雀电视剧免费全集观看| 甜蜜惩罚3未增删带翻译整集| 做aj的电视剧大全| 电影《在丈夫面前被劫匪欺负》电影 | 海派甜心舞蹈| 《裙子下有野兽》| 北上在线观看完整版免费高清 | 宝贝我跟你老公比谁的更大| 春满宫185集免费观看| 锵锵锵锵锵锵锵免费看电视剧| 魔兽 电影 下载| 满江红电影张艺谋免费观看? | 2008金瓶梅在线观看| 钻石王牌 第四季电视剧| 周密周芯竹宣布分手| 西瓜影音播放器官方下载| 黑人大战俄罗斯妞| 一生一世电视剧完整版| 空姐日记第6集| 印度电影免费观看| 少女的绣感| 《打黑风暴》22集全| 恋人是消防员2未删减| 女子在足浴店被技师弄晕| 致我们单纯的小美好在线观看| 《女超人麦乐迪》完整版 | 《渔夫的荒野史记》在线观看免费中| 朴妮唛迅雷种子| 天行者高清| 武汉军运会开幕式直播| 爱情朴诗妍在线观看免费全集高清| 从离婚开始恋爱电视剧免费观看| 《王昭君》| 十万个冷笑话2在线观看| 保科真美| 正在播放:中文本幕-亿万富翁的女儿 Anissa Kate,Sienn... - 17 | 林青霞白发魔女| 古田美穗作品| 海霞免费| 学校怪谈 动漫| 《法国灭火宝贝2》演员表介绍大全| 私密按摩师免费高清电影| 亲爱的妈妈4韩国在线看| 婚姻告急短剧在线观看免费| 我和房东| 维修工的艳遇在线观看完整版免费| 短剧妥协完整版在线播放| 人类星球 电影| 禁止的爱:善良的小峓子在钱止| 高压监狱1小时43分| 无心法师全集免费观看| 韩国电影办公室 免费| 湄公河行动电影| 秘密押运| 铿铿锵锵锵免费观看高清| 电影猛龙过江| 维生素爱香水| 电影赤壁| 里沙村电影免费观看| 金瓶风月宝鉴电影免费观看国语版| 姜汉娜的《二对一》| 从结婚开始恋爱免费播放电视剧| 超级玛丽电影| 和部长一起去出差旅电影完整版| 与我同眠百度影音| 最后的希望| 奈曼旗| 小密桃5| 相川步美| 猪猪侠泡泡糖| 猎犬 第二季| 一二三电影| 一诺倾情泰剧电视剧在线观看免费| 小时代1电影在线观看| 日本公妇里乱片A片在线播放保姆| 我们永不言弃免费观看| 天启 二战| 侵犯高傲女教师在线观看| 忽悠女老板| 底线 电视剧| 昭然若揭的意思| 中国三年免费下载观看 | 霍比特人主题曲| 战狼6国语版高清下载| 后宫露营 第一季 未增减 0.0.0.| 李胜素京剧唱段| 终极谍匪| 北京地铁电视剧| 兵变1929| 《妈妈爱上儿子同学》李采潭 | 易经讲解| 断箭行动免费| 男子不用洗发水从秃顶到满头黑发| 两个世界高清完整版免费观看| wwwbbb565com| 二胡美女谁最漂亮| 永不磨灭的番号大结局| 塔日酒店电影完整版在线观看| 《活着》电影完整版| 满清极乐酷刑| 过气明星:复出即顶流全集免费 | 神探1900电影免费观看| 乡村爱情13部全集免费刘能| 盯住你不放| 站着再来一次26集全在线看| 被公公操怀孕白峰美羽在线免费观看| 罗志祥2013演唱会| 地火电视剧40全集播放| 陀地驱魔人结局| 她妈的公主| 日韩激情小说| 两个人免费观看日本的完整版| 地味变2未增删樱花米粒米粒| 总之就是非常可爱第二季免费观看| 白峰高清在线观看免费| 恨锁金瓶梅| 悲伤比更悲伤的故事| 高清尼诺未删减| 《高压监狱2》HD无删减| 我会好好的电影免费观看| 熊出没之狂野大陆| 一拳超人最强之男觉醒| 浪客剑心国语版|