OpenAI 发现 CLIP 中的多模态神经元

OpenAI 发现 CLIP 中存在多模态神经元，无论概念以字面、符号还是概念形式呈现，这些神经元都会响应同一概念。这可能解释了 CLIP 在分类概念的各种出人意料的视觉呈现时的准确性，也是理解 CLIP 及类似模型所学到的关联与偏差的重要一步。