苹果的学习型支撑函数加速RAG检索
苹果研究人员在ICML 2026上发表了"Amortizing Maximum Inner Product Search with Learned Support Functions",通过离线训练小型神经网络,将查询更快地路由到最匹配的键。SupportNet通过输入凸神经网络(ICNN)学习支撑函数以改进聚类路由,而KeyNet直接输出最佳匹配的键向量,并通过欧拉定理的一致性损失保持其几何基础。两者均在真实查询分布上训练,以预先的摊销成本换取推理时更快、更准确的检索。