多模态

XSKILL 不更新模型参数,而是从多模态 Agent 的历史执行轨迹中抽取 Experience 和 Skill,构建外部知识库,让 Agent 在新任务中通过检索、改写和注入持续提升工具使用效率与工具编排能力。
多模态 24 分钟
模型学习新东西时,很容易忘掉旧东西;多模态模型不仅会忘旧任务,还可能忘掉“图像和文字原本怎么对应”,“不同模态哪个更可靠”,“预训练模型原本会的零样本能力”等更复杂的知识。
多模态 27 分钟