清华陈丹琦:如何让「大模型」变小(2)
2022-08-30 18:48来源:未知编辑:admin
扫一扫
分享文章到微信
扫一扫
关注99科技网微信公众号
大型语言模型如今取得了非常喜人的实际应用价值,但是由于昂贵的环境和经济成本,隐私和公平性方面的困扰以及难以实时更新的问题,导致大型语言模型仍有很多待改进之处。陈丹琦认为,未来的语言模型或许可以用作大型的知识库,同时在未来语言模型的规模需要大幅度削减,或许可以利用基于检索的语言模型或者稀疏语言模型来代替稠密检索,模型压缩的工作也需要研究者们重点关注。
更多优质文章和资源干货!>>99科技网:http://www.99it.com.cn
相关推荐
