$亚马逊(AMZN.US) $谷歌-A(GOOGL.US) 谷歌能用直连做到近万卡,AWS 为什么不沿着这条路走下去?
答案是,AWS 的 3D torus 是「拼」出来的,缺了谷歌让它做大的条件。3D torus(芯片排成立方体、只连相邻芯片)不需要交换芯片。Trn2-Ultra 把 4 台 16 卡服务器首尾相接,排成 4×4×4,连线全部走铜。谷歌的方案与它形似,核心是回绕链路(首尾相接的那圈连线)的走线介质不同:谷歌走光纤接入 OCS,AWS 走铜。
直接后果是规模上限仅 64 卡。谷歌靠 OCS 与软件栈,可以把一个个立方体灵活拼到近万卡。Trn2 没有交换元件,背板铜缆是固定的,有源铜缆(AEC,带 Retimer,传得更远)又有长度上限,连不了更多机柜。
总的来说,Trn2 全部用铜且无交换,组网规模受限。AWS 要补的课太多,又急着投用,因此转向了交换式:Trn3 引入交换芯片,一个域扩到 144 卡,跳数(中转次数)不再随规模增加。

