Skip to main content

AI Daily Digest: Aleph Alpha 开源 Kolibri 主权模型、FLUX 3 像素级控制、antirez 的 ds4 本地推理引擎 - 2026/10/03

· 7 min read
Yi Wang
Full Stack & AI Engineer

昨天的 Hacker News 首页被三条"去中心化"的 AI 新闻占满:欧洲的 Aleph Alpha 在德国统一日开源了主权模型 Kolibri(312 分),Black Forest Labs 发布了 FLUX 3 Image(413 分),Redis 作者 antirez 则交出了让前沿模型跑进笔记本的本地推理引擎 ds4/DwarfStar(321 分)。三条线各不相同,却指向同一个判断:当 API 巨头们在价格和监管上纠缠时,开源权重 + 本地部署 + 精细控制正在成为另一条快速成熟的主航道。

Kolibri:欧洲用"流水线"回答主权问题​

Kolibri 是一个英德双语的 MoE Transformer:78B 总参数、3B 激活、1M token 上下文,Apache 2.0 协议在 Hugging Face 开放全部权重。它瞄准的是公共行政、工业、航空航天这些监管密集场景——数据不出域、部署自由、知识产权安全作为"继承属性"直接随模型交付。

比模型本身更值得读的是它的发布博客里"怎么造出来"的部分:Aleph Alpha 先造了一条模型训练流水线(model-training-as-code),用 30B-A3B、65K 上下文的 Kolibri Origin 验证流水线可靠性——硬件故障、断连无需人工介入,数百次消融实验自动跑完——然后才让正式的 Kolibri 走完同一条管线。结果是 Kolibri 显著强于 Origin,且两者发布间隔很短。这和 Anthropic IPO 招股书里"博通提供 420 亿美元融资绑定芯片供应"形成有趣对照:主权 AI 的两种实现路径——一种靠资本和芯片深度绑定,一种靠可复制的工程流水线 + 开放权重。Kolibri 声称在质量/服务成本 Pareto 前沿上,数学、编码、长上下文任务对标四倍激活参数量的模型(如 Nemotron 3 Super),并提供了详细基准表。对中文开发者的直接价值:又多了一个 vLLM 一条命令就能起服务的开源 MoE 参照物。

FLUX 3 Image:从"prompt 祈祷"到"布局工程"​

图像生成长期有个痛点:你能描述"要什么",却控制不了"放哪里"。FLUX 3 的答案是把空间控制做成一等公民接口——全局 caption + JSON 元素表,每个元素带 id、包围盒和描述,caption 按 id 引用元素。几个设计决策颇为老练:

  • 手画的包围盒原样直达模型:prompt upsampler 只在盒外补充文案,你画的每个盒子的坐标和语义 id 不被改写;
  • 未被触碰的元素跨多轮编辑保持不动——改一个盒子不会牵动全身,图片在一轮轮修改中保持连贯;
  • 布局本身可以外包给 LLM:给一句话和宽高比,模型自动生成 caption 和元素表,你不满意的盒子再手动调整。

这本质上是给生成模型加了一层结构化控制协议,和 Agent 领域的结构化输出是同一个方向:把"祈祷式生成"变成"工程式生成"。排版、拼贴、多面板网格这类严格空间关系场景是它的主场。

ds4/DwarfStar:一台笔记本跑前沿模型的工程宣言​

antirez(Salvatore Sanfilippo)用一周 14 小时/天的节奏写出了 ds4,并自称这是他第一次"用本地模型干原本要问 Claude/GPT 的正经活"。工程上它做了几个激进选择:

  1. 2-bit 量化只打在 MoE 专家权重上,把 284B 参数的 DeepSeek V4 Flash 压进 128GB 统一内存——M5 Max 上约 500 t/s prefill、35-40 t/s 解码,AMD Strix Halo 平台也已跑通;
  2. KV cache 持久化到磁盘、权重从 SSD 流式加载——长上下文从内存上限问题变成存储问题;
  3. DSpark 投机解码:DeepSeek 官方 draft 模型直接读取主模型隐状态、一次提议最多 5 个未来 token,主模型只提交验证通过的前缀;
  4. Coding agent 与推理同进程:没有 socket/API 边界,会话状态就是磁盘上的 KV cache,工具与系统提示全部为 V4 Flash 垂直调优。

最反共识的是它刻意不做通用——不是 GGUF runner,只服务少数模型,换取全栈垂直优化。当"通用抽象的税"在本地推理场景下大到不可忽略时,做窄本身就是架构决策。这对所有做 Agent harness 的人都是一个提醒:抽象的便利与性能的代价,值得重新算一遍账。

其他值得一眼​

  • Pop!_OS 禁止 AI 生成代码进入大部分代码库:System76 出于许可与审查考虑对 Cosmic 相关代码库说"不"——开源社区对 AI 代码从默认接受转向默认拒绝的第一个标志性信号,与 Greg Kroah-Hartman 的《LLM 时代的内核安全》演讲(HN 306 分)同周出现。
  • AI 在 Stratego 上击败历史最佳人类选手,且训练预算有限:不完全信息博弈的又一堡垒陷落。
  • Gemini 4 Argon 内部分歧:据新浪/经济日报报道,尽管基准领先,内部人士称员工实际使用(尤其编程任务)体验不如跑分——"基准 vs 实用"的裂缝在新旗舰上依然存在。

arXiv 今日拾贝​

  • Hierarchical Continuous Diffusion LMs(2610.02193):分层连续扩散语言模型,用层级结构缓解扩散 LM 长序列生成难题——非自回归路线的扎实推进。
  • AutoCompact(2610.02163):长程 coding agent 的上下文压缩时机从启发式变成可学习策略,"何时 compact"本身可以训练。
  • Keyword Harnesses Fail Open(2610.02142):小模型的工具使用声明在关键词评测下"全部通过"、实际能力不存在——一套廉价诊断阶梯教你识别"声称会用工具"与"真会用工具"。
  • Finetuning with Sampling(2610.02140):SFT 的能力保留被系统性低估,"SFT 已死"叙事需要修正。
  • Language Drift during RLVR(2610.02015):英文可验证奖励训练会侵蚀其他语言能力,多语言 RLVR 需要显式语言平衡。
  • CARM(2610.02039):RL 训练流里的用户取消响应需要专门掩蔽,否则污染训练信号——生产级 RL 数据工程的细节拼图。

今日 takeaway​

  1. 开源权重的"第二梯队"已经成型:Kolibri(主权合规)、DeepSeek + ds4(本地前沿)、FLUX 3(可控生成)——不开源的模型正在从"能力领先"滑向"便利性竞争";
  2. 控制接口是生成模型的下一个战场:FLUX 3 的包围盒协议说明,用户要的不是更强的祈祷,而是可编辑、可保持、可声明空间意图的接口;
  3. 垂直做窄是性能时代的合法策略:ds4 用"只服务少数模型"换全栈优化,通用抽象的隐性成本正在被重新定价。

本日要点综合自 Aleph Alpha Blog、BFL、ds4 GitHub、antirez、Hacker News 首页及 arXiv cs.AI/cs.CL 最新论文。