AI资讯新闻榜单内容搜索-分词器

关键词: AI新闻,MiniMax,海螺视频,VPT

MiniMax海螺视频团队不藏了！首次开源就揭晓了一个困扰行业已久的问题的答案——为什么往第一阶段的视觉分词器里砸再多算力，也无法提升第二阶段的生成效果？翻译成大白话就是，虽然图像/视频生成模型的参数越做越大、算力越堆越猛，但用户实际体验下来总有一种微妙的感受——这些庞大的投入与产出似乎不成正比，模型离完全真正可用总是差一段距离。

关键词: AI新闻,DeepSeek,DeepSeek-OCR,人工智能

AI新突破！DeepSeek-OCR以像素处理文本，压缩率小于1/10，基准测试领跑。开源一夜4.4k星，Karpathy技痒难耐，展望视觉输入的通用性。

关键词: AI,模型训练,Selftok,扩散模型

自回归（AR）范式凭借将语言转化为离散 token 的核心技术，在大语言模型领域大获成功 —— 从 GPT-3 到 GPT-4o，「next-token prediction」以简单粗暴的因果建模横扫语言领域。

关键词: AI,世界模型,AI挑战赛,人工智能

近日，人形机器人公司1X公布了世界模型挑战赛的二阶段：Sampling。一同登场的还有合作伙伴英伟达新发布的Cosmos视频分词器，超高质量和压缩率助力构建虚拟世界。

关键词: AI,GPT-4o,Claude 3.5,大模型

大模型做奥赛题游刃有余，简单的数数却屡屡翻车的原因找到了。

关键词: Karpathy,AI课程,LLM分词

「从头开始构建GPT分词器」文字版来了。

关键词: Karpathy,GPT Tokenizer,token,分词器

技术大神卡帕西离职OpenAI以后，营业可谓相当积极啊。