跳到正文
11月12日周四
  1. Hugging Face Blog47

    Hugging Face 发布 3D 生成模型 TRELLIS.2 微调指南

    Hugging Face 发布面向 3D 生成模型的微调指南,用 LoRA 和 PEFT 库微调 TRELLIS.2,并提供可本地或 Hugging Face Jobs 运行的脚本与容器。实验以 GSO 数据集中 188 个鞋类对象为子集,仅对 sparse-structure flow DiT 和 shape flow DiT 加 LoRA 适配器,以改善鞋底几何精度,材质生成阶段不微调。

11月11日周三
11月9日周一
  1. Hugging Face Blog41

    Hugging Face 提出 HOPE:MoE 模型的专家高阶剪枝方法

    Hugging Face 博客介绍 HOPE(Higher-Order Pruning of Experts),一种考虑专家两两交互的二阶 MoE 剪枝方法,替代按独立重要性打分的一阶方法。在 50% 剪枝率下,HOPE 平均排名优于所有方法,在智能体编程任务上相比次优方法最高提升 +6.1%。该方法无需训练,可与量化组合使用,用于缓解专家 MLP 占用的推理内存。

11月6日周五
11月5日周四
10月15日周四
7月29日周三
3月13日周五
  1. Berkeley AI Research49

    面向 LLM 的大规模交互识别:SPEX 与 ProxySPEX 算法

    伯克利 AI 研究团队介绍了 SPEX 与 ProxySPEX 两种算法,用于在特征归因、数据归因与机制可解释性中大规模识别关键交互。SPEX 利用稀疏性与低阶性把交互搜索转化为稀疏恢复问题;ProxySPEX 进一步利用层次结构,在约少 10 倍消融次数下达到 SPEX 的性能。在情感分析与 RAG 等任务上,SPEX 在上下文扩展到数千特征时仍保持高忠实度。