新闻详情

新闻详情

首页 / 资讯中心 / 详情

MSRS: Adaptive Multi-Subspace Representation Steering for Attribute Alignment in Large Language M...

发布时间:2026/9/26 2:59:47来源:尧图网络
MSRS: Adaptive Multi-Subspace Representation Steering for Attribute Alignment in Large Language M...
MSRS论文总结与关键部分翻译一、文章主要内容该研究聚焦于大型语言模型(LLMs)的多属性行为控制问题,提出了多子空间表示引导(MSRS)框架,旨在解决现有激活引导方法在联合引导多个属性时存在的干扰和权衡问题。研究背景LLMs在文本生成、问答等领域应用广泛,但在真实场景中,确保其行为符合真实性、公平性等属性面临挑战,常出现毒性、偏见、事实不准确等问题。现有激活引导方法多针对单一属性,简单组合不同属性的引导向量会破坏无关特征,导致生成质量下降或属性间冲突(如增强真实性可能削弱公平性)。已有多属性引导方法(如ACT、MAT-STEER、ReFT)存在不足:或难以保证细粒度方向、无法避免干扰,或忽视属性间共享特征,或子空间分配不合理(不同属性对空间大小需求不同)。核心方法(MSRS框架)多属性引导方向提取属性激活聚合:计算每个属性数据集的平均激活值,构建组合激活矩阵。共享与专属子空间提取:对组合激活矩阵进行奇异值分解(SVD),提取共享子空间(捕捉所有属性的主导共享方向);将各属性平均激活值投影到共享子空间并计算残差,对残差SVD提取属性专属子空间(确保与共享子空间正交,保留属性特有语义),且通过SVD自适应分配子空间大小(复杂属性分配更大空
网站建设高端定制企业官网
RELATED

相关资讯

更多精彩内容,欢迎继续阅读

较早相关资讯

最新相关资讯

芯片烧录自制还是外发?算清成本、质量、效率三笔账(附nRF51822实操) 2026/9/26 3:40:08

芯片烧录自制还是外发?算清成本、质量、效率三笔账(附nRF51822实操)

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

阅读更多 →
2025最新盘点:国内可用的8款AI写小说工具,TaoToken统一Key接入配置指南 2026/9/26 3:39:55

2025最新盘点:国内可用的8款AI写小说工具,TaoToken统一Key接入配置指南

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

阅读更多 →
Word中格式与行距相同却显示不同?剖析字体、网格与样式等隐性变量 2026/9/26 3:39:55

Word中格式与行距相同却显示不同?剖析字体、网格与样式等隐性变量

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

阅读更多 →
构建 DevOps 辅助 Agent Harness:用 TaoToken 统一 Key 打通多 Agent 协作链路 2026/9/26 3:39:36

构建 DevOps 辅助 Agent Harness:用 TaoToken 统一 Key 打通多 Agent 协作链路

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

阅读更多 →
Spring AI 2.0 Agent进阶:Memory、State与Context Engineering实战 2026/9/26 3:39:35

Spring AI 2.0 Agent进阶:Memory、State与Context Engineering实战

1. 从"能跑通"到"能记住":Agent 开发的分水岭在哪如果你已经用 Spring AI 2.0 搭过一个能对话、能调工具的 Agent,大概率会经历这样一个阶段:Demo 演示时一切正常,一旦放进真实业务里连续跑上十几轮&#xff…

阅读更多 →
AI Agent Harness Engineering 入门:用 TaoToken 统一 Key 打通 Agent 落地第一步 2026/9/26 3:39:22

AI Agent Harness Engineering 入门:用 TaoToken 统一 Key 打通 Agent 落地第一步

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

阅读更多 →

今日资讯

本周资讯

本月资讯

看完文章仍有疑问?

联系尧图顾问,获取一对一建站咨询

立即免费咨询 📞 400-888-8888
📞 ✉