lora

标签

Cards List
#lora

隐式学习结构的动力学

arXiv cs.LG ↗ · 2026-10-22 缓存

该论文提出 Fiber Regulation Theory (FRT) 与 Fiber Acquisition Theory (FAT) 两个理论框架,刻画受保护的功能修复与可训练结构的形成/续期动力学,并在 Qwen2.5-32B 上通过受保护头修复与固定容量 LoRA 续期验证联合策略优于单独策略。

0 人收藏 0 人点赞
#lora

llama.cpp 中的快速 LoRA

Reddit r/LocalLLaMA ↗ · 2026-10-21

一位开发者为 llama.cpp 分享了自定义的通用与融合 LoRA 内核,在 Strix Halo 上运行 LoRA 适配器时,提示词处理吞吐量从约 300 t/s 恢复到约 1400 t/s,并邀请其他人协助将这些改动推入上游。

0 人收藏 0 人点赞
#lora

多方言与适配策略下的藏语语音识别评估:一项多粒度分析

arXiv cs.CL ↗ · 2026-10-21 缓存

该论文提出一个多粒度评估框架,结合字符错误率、音节错误率和分词错误率,评估藏语语音识别在多方言与不同适配策略下的表现,发现低字符错误率并不总带来更优的高层级指标,且 LoRA 适配在测试范围内仍逊于全量微调。

0 人收藏 0 人点赞
#lora

基于音素专家混合的 Conformer 模型低秩适配用于带口音英语语音识别

arXiv cs.CL ↗ · 2026-10-21 缓存

该论文提出 MoPE-LoRA,一种基于音素类别(发音方式)而非口音身份组织低秩专家的参数高效适配框架,用于带口音的英语语音识别;在 L2-ARCTIC 上零样本口音评估中相对单 LoRA 提升 12.3%。

0 人收藏 0 人点赞
#lora

LSA-PAST:面向组合式增量学习的层级特异性适配与原型迁移

arXiv cs.AI ↗ · 2026-10-21 缓存

论文提出 LSA-PAST,一种面向组合式增量学习(composition-IL)的参数高效方法,通过在冻结的 ViT 中注入深度特化的 LoRA 适配器,并利用无需复习的仿射变换将旧原型映射到新的适配器空间,实现了在精度—遗忘权衡上的 state-of-the-art 表现。

0 人收藏 0 人点赞
#lora

SolarRenderer:少步生成式参考渲染

Hugging Face Daily Papers ↗ · 2026-10-20 缓存

SolarRenderer 将任意引擎的无纹理结构通道结合参考首帧,生成风格化完整视频,基于 MiniMax-H3 构建,通过控制 LoRA 与少步蒸馏 LoRA 实现实时逐帧结构一致的渲染,无需按游戏训练。

0 人收藏 0 人点赞
#lora

Herbert 玩贪吃蛇(open Jev)

Reddit r/LocalLLaMA ↗ · 2026-10-19

使用 Jev(基于 Qwen 3.8 27B 的 LoRA 决策模型)驱动的贪吃蛇游戏。 模型在每一步操作时,根据棋盘状态的文本描述进行决策,延迟约为 600ms,运行在 llama.cpp 环境中。

0 人收藏 0 人点赞
#lora

Show HN:训练去除了AI写作口癖的 Qwen3-4B

Hacker News Top ↗ · 2026-10-19 缓存

一个小型开放模型 `qwen3-4b-deslop`,是基于 `Qwen3-4B-Instruct` 微调而来的模型,在一台 MacBook Air 上训练完成,用于消除常见的 AI 写作惯用手法(如破折号、"不是 X,而是 Y"句式、三项并列列表等)。它将每千字的 AI 味评分从 121 降至 12.5,同时保持事实准确性,并可通过 Ollama 在本地运行。

0 人收藏 0 人点赞
#lora

@_avichawla:我微调大语言模型已经超过3年了。以下是5种LLM微调技术,配合图解说明:传统微调……

X AI KOLs Timeline ↗ · 2026-10-19 缓存

一篇教育性帖子,详细拆解了5种大语言模型参数高效微调(PEFT)技术——LoRA、LoRA-FA、VeRA、Delta-LoRA和LoRA+,并配以可视化说明,展示每种技术如何通过低秩适配来降低显存和训练成本。

0 人收藏 0 人点赞
#lora

@javawock7618:Moss-Image 的 Turbo LoRA 好像已经发布了

X AI KOLs Timeline ↗ · 2026-10-19 缓存

MOSS-Image Turbo LoRA(4 步)v2.0 已在 Hugging Face 上发布,现已原生支持 Euler 采样器,可在任意标准 LoRA 加载器中使用默认 flow-matching 采样器运行,无需 CFG 或自定义管线文件,即可实现快速、高保真的中英双语文字渲染。

0 人收藏 0 人点赞
#lora

lodestones/Kromoss

Hugging Face Models Trending ↗ · 2026-10-19 缓存

Kromoss 是 MOSS-Image-Base 在 1024px 分辨率下的全量微调模型,附带两个 8 步加速 LoRA(DMD 与 DMD2 蒸馏版),并支持 diffusers 和 ComfyUI 即插即用,同时提供 int8 量化版本。

0 人收藏 0 人点赞
#lora

面向脑编码的参数高效微调扩展

Hugging Face Daily Papers ↗ · 2026-10-19 缓存

该论文提出使用参数高效微调(PEFT/低秩适配器)来适配超大多模态骨干网络进行脑编码,Brain LoRA 在 Algonauts 2025 挑战赛中取得最佳公开成绩,并通过 multi-LoRA kernel 支持 200+ 模型集成。

0 人收藏 0 人点赞
#lora

[P] asmsense:228k 个去符号的 x86-64 函数,带源码感知标签,以及一份我们仍缺失数据的地图。[P]

Reddit r/MachineLearning ↗ · 2026-10-18

asmsense 是一个包含 228k 个去符号 x86-64 函数的数据集,带有源码感知标签,并配套一个 Qwen3-8B+LoRA 模型,用于对去符号二进制文件中的函数进行命名和描述;同时提供一份详细的缺失数据路线图,包括 ARM64/RISC-V 支持以及 GCC/ELF 构建等内容。

0 人收藏 0 人点赞
#lora

通过 LoRA 实现无审查模型

Reddit r/LocalLLaMA ↗ · 2026-10-17

讨论使用 LoRA 适配器作为比 Heretic 等工具更便宜、更灵活的方案,从大语言模型中移除拒绝回答和内容审查,涉及 weightless 这个 GitHub 项目,以及类似的针对图像模型文本编码器的 LoRA。

0 人收藏 0 人点赞
#lora

微调后的 d3-edge(0.6B)优于 d3(27B)决策模型

Reddit r/LocalLLaMA ↗ · 2026-10-16

一个拥有 6 亿参数的 d3-edge 模型,在数千个示例上通过 SFT + LoRA 进行微调后,在类型化决策任务上超越了拥有 270 亿参数的 d3 决策模型,并在 Banking77 上取得了几乎与之持平的表现,凸显了微调小型专用模型相较于使用大型通用模型的价值。

0 人收藏 0 人点赞
#lora

lodestones/MOSS-Image-SFT-8-steps-dmd

Hugging Face Models Trending ↗ · 2026-10-16 缓存

已在 Hugging Face 上发布 lodestones/MOSS-Image-SFT-8-steps-dmd,这是一个工作进展检查点,通过 data-space DMD 方法将 MOSS-Image-SFT(50 步、CFG 3)蒸馏为 8 步、无需 CFG 的版本,可作为 LoRA 在 ComfyUI 中使用。

0 人收藏 0 人点赞
#lora

个性化是否会破坏信任?少样本端侧意图适配下的开放集拒识校准

arXiv cs.CL ↗ · 2026-10-16 缓存

本文表明,在设备端直接进行少样本 LoRA 个性化会降低五个意图分类基准上的范围外(OOS)拒识 AUROC,同时保持范围内准确率,并提出了一种无需训练的修正方法,通过基于马氏距离的拒识评分,在五个数据集中的三个上恢复了大部分损失的性能。

0 人收藏 0 人点赞
#lora

@linoy_tsaban:阿里巴巴 TaoLive AIGC 推出全新 3 步(!)H3 LoRA,持续被不断涌现的 H3 LoRA 数量所震撼

X AI KOLs Timeline ↗ · 2026-10-15 缓存

阿里巴巴 TaoLive AIGC 团队发布了 TaoMate-H3-FL2VA,据称是首个实时流式首尾帧控制的音频-视频生成(FL2VA)模型,基于 MiniMax H3 的三步 LoRA,支持低延迟分块生成与 480p/768p/1080p 分辨率。

0 人收藏 0 人点赞
#lora

AcrossVAM2.0:用于参数高效视频扩散适配的冲突感知点监督

arXiv cs.AI ↗ · 2026-10-15 缓存

AcrossVAM2.0 提出一种冲突感知的点对应监督方法,用于参数高效的视频扩散模型适配,通过置信度加权跟踪头、零初始化残差反馈和非对称 PCGrad,在保持预训练外观先验的同时提升对应一致性,但并不均匀改善视频质量。

0 人收藏 0 人点赞
#lora

在大语言模型上迭代,在小语言模型上部署服务

arXiv cs.AI ↗ · 2026-10-15 缓存

提出「在前沿LLM上迭代开发行为,再蒸馏到小模型(SLM)上线」的两阶段方法:用LoRA微调的Qwen3-8B在家庭护理排班智能体的生产决策上达到0.913一致率,优于教师模型GPT-5.4-nano自身重跑时72.7%的自我一致性,且延迟降低约2.5倍、成本大幅下降。论文已被NeurIPS 2026第二届企业任务智能体基准与应用研讨会(AABA4ET)接收。

0 人收藏 0 人点赞
← Previous
Next →
← 返回首页

提交意见反馈