异动
登录注册
谷歌Gemini史诗级碾压GPT-4,谷歌TPU有望迎来大爆发
一路高歌
老股民
2023-12-07 14:01:29

·谷歌宣布推出其规模最大、功能最强大的新大型语言模型Gemini,其最强大的TPU“Cloud TPU v5p”以及来自谷歌云的人工智能超级计算机。
·“谷歌运行了32个完善的基准测试来比较Gemini和GPT-4,从广泛的整体测试(如多任务语言理解基准测试)到比较两个模型生成Python代码的能力。”谷歌DeepMind首席执行官德米斯·哈萨比斯表示,“我认为我们在32项基准中的30项中大幅领先。


12月7日凌晨,谷歌(Google)在发布多模态大模型Gemini的同时,还推出了全新的面向云端AI加速的TPU v5p ,这也是谷歌迄今为止功能最强大且最具成本效益的 TPU(云张量处理单元)。

据介绍,每个 TPU v5p Pod 由多达 8,960 个芯片组成,使用最高带宽的芯片间连接(每芯片 4,800 Gbps)进行互连,确保快速传输速度和最佳性能。

在AI性能方面,TPU v5p能够提供459 teraFLOPS(每秒可执行459万亿次浮点运算)的bfloat16(16位浮点数格式)性能或918 teraOPS(每秒可执行918万亿次整数运算)的Int8(执行8位整数)性能,支持95GB的高带宽内存,能够以2.76 TB/s的速度传输数据。

与TPU v4相比,新发布的TPU v5p具有两倍的FLOPS(每秒浮点运算)和三倍的高内存带宽提升,这在人工智能领域是令人惊叹的。

此外,在模型训练方面,TPU v5p 在 LLM(大语言模型)训练速度上显示出 2.8 倍的代际提升,即使相比TPU v5e也有约50%的提升。Google还挤出更多的计算能力,因为 TPU v5p“就每个 Pod 的总可用 FLOP 而言,可扩展性比 TPU v4 高 4 倍”。

总结来说,TPU v5p与 TPU v4 相比:

浮点运算次数增加了 2 倍(459 TFLOPs Bf16 / 918 TOPs INT8)

内存容量比 TPU v4 (95 GB HBM) 高出 3 倍

LLM 培训速度提高 2.8 倍

嵌入密集模型训练速度提高 1.9 倍

带宽增加 2.25 倍(2765 GB/秒 vs 1228 GB/秒)

芯片间互连带宽是原来的 2 倍(4800 Gbps 与 2400 Gbps)

谷歌已经认识到在拥有最好的硬件和软件资源方面取得了明显的成功,这就是该公司拥有人工智能超级计算机的原因,它是一组旨在协作工作以实现现代人工智能工作负载的元素。谷歌集成了性能优化计算、最佳存储和液体冷却等功能,以充分利用巨大的功能,输出的性能确实是行业领                                                         


【科德教育】参股8%的中昊芯英为国内自主AI芯片龙头,不排除未来进一步合作可能


核心AI训练芯片刹那TM算力可达204TFLOPS/396TOPS以上,自主研发的多至1024片的片间互联构架,为大型模型训练提供了支撑,核心AI推理芯片祝融系列内核设计源于自研训练芯片深厚的技术储备,算力可达10TOPS以上,中昊芯英的祝融CLM-ZQ训练GPTPU芯片及祝融CLM-ZR推理TPU芯片的性能基本接近英伟达同类产品


公司成立当年即完成了数千万业务收入,其核心芯片已经成熟应用于数据中心、无人驾驶、元宇宙等多个场景,获得了国内多个知名大客户的大量采购,7月24日发布AI训练服务器及计算集群产品,8月1日即斩获青海丝绸云谷绿色算力项目数亿采购订单,未来AI训练推理芯片空间巨大


中昊芯英做出承诺,2023-2024年两年合计销售总收入不得低于7.6亿元,其中2023年销售总收入不得低于2.08亿元,2024年不低于5亿元,从2023年开始,目标公司“自研AI芯片及系统”的收入占比将超过90%,公司未来AI芯片及系统收入预期持续大幅增长


科德教育目前市值30亿左右,中昊芯英目前一级市场估值30亿,基于A股AI芯片的稀缺性给50X PS,对应2024年估值为250亿,中昊芯英是市场忽略的国内AI芯片潜在龙头,预期收入增长实现后,公司不排除与其进一步合作可能

(来自韭研公社APP)

作者利益披露:转载,不作为证券推荐或投资建议,旨在提供更多信息,作者不保证其内容准确性。
声明:文章观点来自网友,仅为作者个人研究意见,不代表韭研公社观点及立场,站内所有文章均不构成投资建议,请投资者注意风险,独立审慎决策。
S
科德教育
工分
3.12
转发
收藏
投诉
复制链接
分享到微信
有用 3
打赏作者
无用
真知无价,用钱说话
0个人打赏
同时转发
评论(3)
只看楼主
热度排序
最新发布
最新互动
  • 归鞘
    超短追板
    只看TA
    2023-12-07 14:05
    谷歌深度合作战略伙伴蓝色光
    0
    0
    打赏
    回复
    投诉
  • 归鞘
    超短追板
    只看TA
    2023-12-07 14:04
    谷歌深度合作战略伙伴蓝色光
    0
    0
    打赏
    回复
    投诉
  • 1
前往