万字长文:ChatGPT能否成为互联网后下一个系统性机会?(13)
扫一扫
分享文章到微信
扫一扫
关注99科技网微信公众号
今天ChatGPT的潜力大概只发挥了百分之几,就已经创造出超过了万亿的市场,未来这个规模可能是几十万亿。
ChatGPT 正在对 哪些工 作岗位 造成影响?
险峰: 这个问题是帮别人问的,他是个很早期的NLP从业者,想问大模型出来以后, 其他的模型可能就成为历史了,他们这些人未来应该怎么办?
龙波: 这个问题的答案还是比较清晰的,以前那些传统的NLP的手段,在这个时代肯定是不会再有用了,比如大量的语法树之类,非常繁琐,过去开发过程很痛苦,要一支很大的团队才能做出一个很小的东西,我们肯定不会再回到那个年代,老的技术基本都可以用大型语言模型(LLM,large language model)替代。
对于ChatGPT的未来,我非常同意陶博士刚才说的,如果只是一味地增加数据或增加参数,不一定还能得到好的ROI,因为你给了更多的数据,就意味着有更多的噪音,最后信噪比可能反而更差,这也是为什么我们有时觉得ChatGPT会回答错的原因,所以还是要关注如何提高数据的质量。
与数据质量同样重要的,可能是跟大模型的互动。 举个例子,如果我们真的要让ChatGPT变成某个领域的专家,不再犯什么错误, 可以想想我们培养一个PHD的过程是什么样的? 他需要和他的导师、行业大牛反复地交互讨论学习,才能最终成为专家,而不是说简单的筛选高质量数据喂给他就完了。
如果再进一步,我们要让ChatGPT成为真正的通用人工智能,在每个领域都很精深,也需要有一个方法能够让AI迭代高质量数据, 所以我觉得未来在算法层面可能会有一些突破 ,比如说让RL和大语言模型更完美的结合,能够更好地筛选出高质量数据,甚至是自动采集这种数据,这些都会跟人学习的过程越来越像。
到那时,我不知道是不是只靠现在的统计模型或者大型语言模型就够了,还是会跟其他新技术绑定在一起,比如现在也有人在研究,怎么把真正的推理能力和神经网络相结合,这是我看到一些未来可能发生的事情。
99科技网:http://www.99it.com.cn
