表征引导的驱动机制：基于拒绝行为的案例研究

本研究针对表征引导技术的内在机制黑箱问题，以拒绝行为为案例，通过多token激活补丁框架揭示：表征引导向量主要通过OV电路与注意力机制交互，可实现90-99%稀疏化同时保持性能。研究为模型对齐提供了机制理解与实用指导。

表征引导是大语言模型对齐领域的高效技术，无需微调即可通过中间层激活添加方向向量改变模型行为（如诚实、有用）。但其黑箱特性限制优化、带来可靠性风险与安全隐患。拒绝行为因二元性、明确神经基础及对齐意义，成为理想研究对象。

研究团队扩展传统激活补丁至多token场景，核心操作包括：层级干预（不同模型深度应用向量）、组件分解（分离QK与OV电路测试影响）、跨模型验证（Llama/Qwen等模型重复实验），系统性探测表征引导对内部计算的影响。

实验表明：冻结QK电路（注意力权重）仅使性能下降8.75%，而干预OV电路（信息聚合）显著影响效果，说明表征引导通过改变"如何处理关注信息"而非"关注什么"发挥作用。此外，不同steering方法在同层利用功能可互换电路。

OV电路数学分解揭示语义组件（如安全考虑、用户意图识别）；仅保留1-10%关键维度即可维持steering效果，实现90-99%稀疏化，提升存储/计算效率与可解释性。不同方法对关键维度的识别高度一致。

研究强调机制理解的工程价值（如稀疏化），电路视角为对齐研究提供方法论，理解组件交互为细粒度控制（如针对性优化OV电路）开辟道路。

局限：仅聚焦拒绝行为，依赖激活补丁方法。未来需验证其他行为机制、结合探针学习/因果抽象等方法、探索最优稀疏化策略。