工信部数据显示，截止到 2023Q3 中国已部署 318.9 万个。信通院结合人口数据，可算出中国 5G 的基站密度从 2022Q3 的每万人 15.7 个基站提升到了 2023Q3 的每万人 22.6 个。

可认为一年时间 5G 基站密度提升了 44%。

当前，30 亿参数的 “小模型“ 的性能已经达到最开始 ChatGPT 所使用的 1750 亿参数模型的效果。这得益于更好的压缩技术（distillation 蒸馏、quantization 量化等），以及更高质量的训练数据。

这个小型化过程会带来显著的好处：边缘侧和端侧通常算力是有限的，没办法部署大模型，但小型的模型如果性能够，就可以用的起来。（而边缘和端侧等低延迟特性就可以发挥起来了）。

与此同时，我们也想到了另一个问题，甲方企业 CIO 的难题。通常一个 IT 项目从立项招标到部署应用，起码要耗费几个月，甚至更久的时间。而模型改进（如下图所示）是以月为单位进步的，很可能甲方企业根据标书购买的大模型还没有部署上线，就已经落后，而且落后很多。

大模型时代的 IT 投资保护是一个值得思考的话题。

根据工业信息安全发展中心在 2021 年针对 1,445 家企业调研，中国制造业企业中 45% 的企业不具备在生产现场边缘端上云的处理能力。

有 35% 的企业工业通信网络覆盖率低于 20%，工业网络覆盖率低直接影响到企业生产现场的边缘处理能力。