「有效上下文」提升20倍！DeepMind发布ReadAgent框架
「有效上下文」提升20倍！DeepMind发布ReadAgent框架模仿人类阅读过程，先分段摘要再回忆，谷歌新框架ReadAgent在三个长文档阅读理解数据集上取得了更强的性能，有效上下文提升了3-20倍。
来自主题: AI技术研报
7539 点击 2024-04-06 14:48
# 热门搜索 #
大模型
人工智能
openai
融资
chatGPT
模仿人类阅读过程，先分段摘要再回忆，谷歌新框架ReadAgent在三个长文档阅读理解数据集上取得了更强的性能，有效上下文提升了3-20倍。
谷歌终于更新了Transformer架构。最新发布的Mixture-of-Depths（MoD），改变了以往Transformer计算模式。它通过动态分配大模型中的计算资源，跳过一些不必要计算，显著提高训练效率和推理速度。
据 ADWEEK 报道，最近刚完成 7000 万美元 B 轮融资（英伟达和杰夫·贝佐斯领投），旨在挑战谷歌搜索的 AI 搜索引擎 Perplexity 宣布计划开始销售广告。
要不他们可能就跳槽到 OpenAI 了。当全球首富埃隆・马斯克（Elon Musk）建立 xAI，准备与 OpenAI、谷歌竞争大模型时，他必须与众多科技巨头、初创公司争夺人才。不过，他使用了一些取巧的办法：从自家的特斯拉挖来了几名优秀工程师。
鄙视谷歌、理解谷歌、成为谷歌。
AI人才争夺战拉响！谷歌四大高管挖走了OpenAI前开发者关系负责人Logan Kilpatrick。他将AI Studio产品，并为Gemini API提供支持。网友纷纷看好谷歌。
解决最短路径算法，也能被扩散模型完成。
OpenAI这份愚人节礼物，实在是太大了：今天起，ChatGPT不用注册，可以直接使用。用户狂欢，竞品颤抖，我们仿佛已经听到，谷歌搜索引擎这位巨人轰然倒地的巨响。
JAX在最近的基准测试中的性能已经不声不响地超过了Pytorch和TensorFlow，也许未来会有更多的大模型诞生在这个平台上。谷歌在背后的默默付出终于得到了回报。
【新智元导读】在英伟达统治AI时代硬件的当下，谷歌的TPU却开辟了另一条道路。今天，小编带你了解第一块TPU的前世今生，同时揭开TPU架构的神秘面纱。