人工智能 · 读懂模型的心思
为什么很难看清语言模型的内部?
你将看到
语言模型由数十亿个数字组成,每一个我们都知道。可我们还是读不懂它为什么这样回答。每个神经元都会同时为许多不相关的概念激活,猫、汽车、诗歌,因为模型装下的概念比它的神经元还多。研究者们现在正把这些混合拆解成一个个独立的特征,一根线一根线地理清。
人工智能 · 读懂模型的心思
语言模型由数十亿个数字组成,每一个我们都知道。可我们还是读不懂它为什么这样回答。每个神经元都会同时为许多不相关的概念激活,猫、汽车、诗歌,因为模型装下的概念比它的神经元还多。研究者们现在正把这些混合拆解成一个个独立的特征,一根线一根线地理清。