人工智能（AI）工具正在改变科学研究的方式。AlphaFold基本解决了蛋白质结构预测难题；DeepMD大大提高了分子模拟的效率和精度；而新兴的大型语言模型，如ChatGPT等，也正在科学研究领域开疆拓土。
大型语言模型（LLM）往往会追求更长的「上下文窗口」，但由于微调成本高、长文本稀缺以及新token位置引入的灾难值（catastrophic values）等问题，目前模型的上下文窗口大多不超过128k个token
开源最近成了 AI 圈绕不开的高频热门词汇。 先有 Mistral 8x22B 闷声干大事，后有 Meta Llama 3 模型深夜炸场，现在连苹果也要下场参加这场激烈的开源争霸赛。
自Alpha Go起至今，AI已在资本市场浮沉近10年。围绕这一概念展开的资本游戏亦愈发扑朔迷离。
开源最近成了 AI 圈绕不开的高频热门词汇。
自Alpha Go起至今，AI已在资本市场浮沉近10年。围绕这一概念展开的资本游戏亦愈发扑朔迷离。
从Llama 3到Phi-3，蹭着开源热乎劲儿，苹果也来搞事情了。
刚刚，Adobe 正式宣布推出新的图像生成模型 Firefly Image 3，即日起在 Firefly Web 应用程序、Adobe Photoshop 和 Adobe InDesign 中提供测试版，并在「今年晚些时候」全面上市，旨在让创作者能够提高工作效率，生成更高质量、更详细的图像。
似乎所有的手机都已经用上了 AI 功能，但唯独少了 iPhone。 今年 2 月底，知名科技记者 Mark Gurman 爆料称，苹果决定取消电动车项目，并转向生成式人工智能项目。这一消息令外界哗然，默默经营了十年的智能汽车项目不做了，反而去做 AI。苹果有拿的出手的 AI 手机吗？
Llama-3 刚发布没多久，竞争对手就来了，而且是可以在手机上运行的小体量模型。
