Activation Steering for Masked Diffusion Language Models

该论文提出了一种针对掩码扩散语言模型(MDLMs)的激活导向机制,通过提取单一低维方向并在去噪过程中施加全局干预,实现了无需优化即可高效、系统地控制模型行为(如安全拒绝),并揭示了该机制在扩散模型中特有的可访问性及跨语言迁移能力,同时指出其难以直接迁移至自回归架构。

Adi Shnaidman, Erin Feiglin, Osher Yaari + 3 more2026-03-04💬 cs.CL

A Zipf-preserving, long-range correlated surrogate for written language and other symbolic sequences

该论文提出了一种新的代理模型,通过分形高斯噪声映射到经验直方图的方法,成功生成了同时保留原始符号序列(如文本和基因组 DNA)词频分布(符合齐普夫定律)和长程相关性的合成序列,从而为研究这些系统的结构特征及标度律起源提供了有效工具。

Marcelo A. Montemurro, Mirko Degli Esposti2026-03-04🧬 q-bio