伯克利AI研究推出SPEX与ProxySPEX，用于识别LLM大规模交互

伯克利AI研究的研究人员介绍了SPEX和ProxySPEX，这两种算法能够在远超以往方法的规模上识别LLM中具有影响力的特征、数据和模型组件交互。SPEX将交互搜索重新表述为利用稀疏性和低度性的稀疏恢复，而ProxySPEX利用层次结构，以约10倍更少的消融实验匹配SPEX。在情感分析上，SPEX在短输入上与Faith-Shap和Faith-Banzhaf忠实度相当，并在上下文扩展到数千个特征时保持这一表现。