当大模型Scaling Law继续,万卡集群算力释放在「百舸」这里找到一条通途
当大模型Scaling Law继续,万卡集群算力释放在「百舸」这里找到一条通途在电影《天下无贼》中,葛优扮演的黎叔有这样一句经典的台词,「二十一世纪什么最贵?人才!」而随着人工智能行业进入到大模型时代,这一问题的答案已然变成了「算力」。
来自主题: AI资讯
8501 点击 2024-09-25 20:12
在电影《天下无贼》中,葛优扮演的黎叔有这样一句经典的台词,「二十一世纪什么最贵?人才!」而随着人工智能行业进入到大模型时代,这一问题的答案已然变成了「算力」。
OpenAI的新模型o1,可谓是开启了Scaling Law的新篇章——
现在的大模型仍旧是算力杀手,想要让它真达到操作系统的使用规模,可能在硬件上、推理架构上还有一段路要走,但其前景是显而易见的。
云+AI基础设施已成为企业智能化转型的关键支撑,但企业在尝试AI时,也面临包括算力、算法开发和专业人才的挑战。
最近一直在想一个问题。为什么我们的图像 AI 模型那么耗算力?比如,现在多模态图文理解 AI 模型本地化部署一个节点,动不动就需要十几个 G 的显存资源。
OpenAI用o1开启推理算力Scaling Law,能走多远?
哪里有最多GPU?哪里又是GPU荒漠?
全网 OpenAI o1 的测试基本跑完,大家基本认可这是一个独立思考智商超高的模型,智商测试120,高考数学全对。
以前最宝贵的资源是黄金,现在最宝贵的资源是算力。
在美国田纳西州东部的山区,一台名为Frontier的破纪录超算为科学家提供了前所未有的机会,让他们得以研究从原子到星系的一切。