【资料图】

大语言模型的参数规模有多快呢？我们不妨来看一下有网友统计的大语言模型的参数量。据说现在功能最强大的大语言模型GPT-4的参数规模已经超过了万亿，短短4、5年的时间就增长了超100倍。

大语言模型为什么能力这么强大？本质的原因在于超大规模的参数。每个神经网络单元都有简单、可描述的运算规则，然而大量的神经网络单元连接在一起，就涌现出组成其的神经网络单元、层所不具备的能力。那么为什么是语言模型的规模会出现暴涨，并且受到业内乃至社会的广泛关注呢？