【AI科技前沿】历时两年深耕,这家以深度学习闻名的AI机构近日宣布,在自然语言处理领域取得重大突破。他们研发的新系统在多个标准化测试中展现出惊人的综合性能,不仅超越了现有所有模型架构,在数据效率和泛化能力方面也创下行业新标杆。
随着大语言模型在2023年迎来第三个技术迭代周期,全球AI研究正经历从追求规模向注重效能的转折。过去三年间,transformer架构已成为自然语言处理的标准解决方案,但其依赖海量标注数据的特性始终是制约因素。本次公布的突破性成果表明:通过创新的数据使用策略,AI性能提升潜力远超当前主流认知。
该团队的核心发现揭示了一项颠覆性方法——将监督学习与无监督预训练相结合。具体而言,他们采用了一种