嘉宾畅谈:未来的5~10年,其他技术领域的重要性要往AI之后排
大家期待已久的 GOTC 2023 召开在即
组委会广邀各个论坛嘉宾讲师
畅谈开源与各技术领域的发展趋势
一:过去一年 / 几年,你所关注的开源与技术领域发生了哪些重大变化?
二:预测该领域将会有什么样的发展趋势?
一方面,头部科技巨头公司在不断增加模型的复杂度和规模,以及提高创造力,将会出现上亿甚至上十亿参数的大语言模型。未来的搜索引擎将逐步被类似产品替代。
另一方面,开源技术领域发展,大语言模型会在效果差不多的情况下,模式参数越来越小,以便于更低配的显卡中运行。在开源领域,基于公开开源大模型的 Fine-Tune 会越来越普遍,并用于多个垂直行业。基于私有数据级的行业大语言模型会逐步走向这个方向。
三:开源或你所关注的技术领域当前亟待解决的问题是什么?whatever.
LLM 大语言模型如何平衡模型的参数大小和创造力。一方面希望结果更丰富更具创造力,希望参数更大;但一方面希望控制算力成本和性能,希望参数变小,以便于更低端显卡可以流畅推理。如何平衡这个问题,需要更多技术层面的突破。
如何提高 LLM 的可解释性。由于 LLM 的复杂性,很难理解它们如何做出决策。因此,如何提高 LLM 的可解释性也是一个重要的问题。
模型安全和隐私计算,随着 AIGC 的发展,越来越多的行业会用私有数据来 Fine-tune 或者训练专用模型,然后大规模部署模型用于推理;但是在推理的时候需要考虑,如何低成本部署在廉价的节点上,且又能保证模型的安全,不被泄漏,不被外盗,就是非常关键的需求,这里就需要突破模型的隐私计算技术。
微信扫码关注该文公众号作者
戳这里提交新闻线索和高质量文章给我们。
来源: qq
点击查看作者最近其他文章