阿里达摩院包揽AI领域六大权威榜单冠军:用人类的学习方式超越人类
2020-08-26 14:51:52爱云资讯
让AI模仿人类的学习方式,结果会怎样?
8月26日,阿里达摩院语言技术实验室取得一系列突破,斩获自然语言处理(NLP)领域6大权威技术榜单冠军。据介绍,参与竞赛的6项自研AI技术均采用模仿人类的学习模式,全方位提升了机器的语言理解能力,部分能力甚至已超越人类。目前,这些技术均已大规模应用于阅读理解、机器翻译、人机交互等场景。
据悉,过去几年,AI在图像识别、语音识别等方面已逐步超越人类水平,但在复杂文本语义的理解上,AI与人类尚有差距,其主要原因就是传统AI学习文本知识效率较低。
为此,业界提出了一种模仿人类的学习思路,即先让AI在大规模的网页和书籍文字中进行训练,学习基本的词法、语法和语义知识,然后再在固定领域内的文本上进行训练,学习领域专有知识。
这一思想就是预训练语言模型的核心创新。自提出模仿人类注意力机制的BERT模型以来,预训练语言模型已成为NLP领域的热点研究方向。
达摩院早在2018年就开始布局通用的预训练语言模型,并逐渐将该思路拓展到了多语言、多模态、结构化和篇章文本理解和文本生成领域,如今已建立一套系统化的深度语言模型体系,其自研通用语言模型StructBERT、多语言模型VECO、多模态语言模型StructVBERT、生成式语言模型PALM等6大自研模型分别刷新了世界纪录。
达摩院自研模型位居GLUE榜单第一名
其中,StructBERT能让机器更好地掌握人类语法,使机器在面对语序错乱或不符合语法习惯的词句时,仍能准确理解并给出正确的表达和回应,大大提高机器对词语、句子以及语言整体的理解力。该模型以平均分90.6分在自然语言处理领域权威数据集GLUE Benchmark中位居第一,显著超越人类水平(87.1分)。
达摩院语言技术实验室团队表示:“实验室的目标是让AI掌握人类知识的基础技术,预训练语言模型的诞生使得AI像人一样学习新知识成为可能,未来达摩院会全面对外开放这些技术,让特定领域的AI变得更加智能。”
过去两年,阿里获得了30多项NLP领域顶级赛事世界冠军,有100多篇相关顶会论文; 阿里自然语言技术已在金融、新零售、通讯、互联网、医疗、电力、客服等领域服务超十亿用户和数万企业客户。
- 拼多多:去年赚了600亿,市值赶超阿里
- 阿里达摩院院长、知乎创始人等多位大咖力荐,国内首本AIGC金融应用著作首发
- 阿里全面拥抱鸿蒙,旗下热门应用将推出鸿蒙版
- 阿里旗下新增11款应用启动鸿蒙原生应用开发
- 阿里云和蚂蚁数科合作开发的实人认证产品适配华为HarmonyOS NEXT
- 阿里巴巴CEO吴泳铭:通义千问正加快追赶 GPT-4
- 2024国际元宇宙博览会:阿里元境以元宇宙数字内容助力文旅数字化发展
- 联合阿里云,首批诚邀 30 家!Alibaba Cloud Linux 伙伴招募计划发布
- 阿里云“云创月汇,数智营销Go!”开启,带你玩转数字化营销
- 安徽文交所、田园东方与阿里资产共同成立长三角乡村文旅资产交易服务中心
- 阿里钉钉与华为达成合作,正式启动鸿蒙原生应用开发
- MongoDB和阿里云携手驱动WeLab,引领超千万用户迈向智能金融未来
- 阿里云能耗宝:助力企业算碳节能
- 阿里巴巴“AI驱动”战略提速 夸克发布自研大模型
- 云栖大会:阿里元境抢抓新一轮科技创新机遇,夯实元宇宙发展基础
- 运用科技手段讲好历史故事,阿里元境与西安博物院联手打造元宇宙展馆