自然言语处理十问!独家福利

图灵汇官网

近期,自然语言处理(NLP)领域迎来了前所未有的繁荣景象,预训练模型频繁刷新榜单,令众多研究者和开发者既兴奋又忙碌。

自2018年10月谷歌推出BERT以来,NLP领域的预训练模型发展迅猛,仿佛坐上了火箭,势头难以抑制。在BERT问世之前,大家主要关注基于Word Embedding的Word2Vec方法。2017年6月,谷歌提出了Transformer网络,2018年2月推出的ELMO并未采用Transformer架构。四个月后,OpenAI基于Transformer架构的GPT预训练模型引起了业界的广泛关注。直到2018年10月,BERT的横空出世震惊了整个NLP领域,一举刷新了11项NLP任务记录,成为NLP技术发展史上的一个重要里程碑。自此,NLP预训练模型的技术“屠榜”之路便一发不可收拾。

BERT之后,2019年2月,OpenAI发布了GPT2.0,再次引爆NLP圈。同年ICML会议上,微软提出了一个新的通用预训练方法MASS,在序列到序列的自然语言生成任务中全面超越了BERT和GPT。2019年6月,谷歌联合CMU发布了碾压BERT的XLNet模型。同年7月,榜单再度刷新,Facebook AI提出的RoBERTa荣登榜首。

国内学术界和产业界也在迅速跟进NLP预训练模型技术。2019年3月,百度首次发布了适用于中文任务的预训练模型ERNIE,7月31日,百度发布了升级版ERNIE 2.0,在英文任务中也取得了突破性进展,并在16项中英文任务上超越了BERT和XLNet,取得了当前最佳结果(SOTA)。

BERT之后,预训练模型技术迅速发展,不断有新成果涌现,许多学习者感叹“这速度几乎跟不上”。这些新技术将对NLP领域产生怎样的影响?它们在实际应用中的表现如何?未来的路又在哪里?

也许,BERT的出现,让很多人看到了NLP发展的新希望,吸引了更多开发者投身其中。然而,也有一些开发者持观望态度,担心这一切是否只是泡沫。但有疑问并不是坏事,因为正是在不断的探索中,我们才得以前进。

也许你心中有许多疑问,却无处可问,无人可答。这次,AI科技大本营联合AI ProCon 2019(AI开发者大会)为大家准备了独家福利!

什么福利?

说出你的问题,我们将邀请AI开发者大会(AI ProCon)NLP论坛的重量级嘉宾为你答疑解惑。

嘉宾阵容 - 张俊林:新浪微博机器学习团队AI Lab负责人(专题出品人) - 刘群:华为诺亚方舟实验室语音语义首席科学家 - 初敏:思必驰副总裁、北京研发院院长 - 周力:微软小冰全球首席架构师及研发总监 - 邵浩:上海瓦歌智能有限公司总经理,狗尾草科技人工智能研究院院长 - 崔一鸣:科大讯飞AI研究院资深研究员

更多嘉宾正在确认中……

如何参与?

如何提问?扫描下方二维码,加入大会福利交流群,在群里@小助手,提出你的问题即可。提问格式如下:

问题:xxxxx

提问者:(群内昵称)

社群福利

扫码添加小助手,回复“大会”,加入2019 AI开发者大会福利群,即可参与提问活动!程序员们还可以在群内参与七夕拼团活动~

问题征集时间:2019年8月5日—8月12日

问题解答时间:2019年8月12日—8月18日

答案公布时间:2019年8月19日—8月25日

答案公布,敬请期待AI科技大本营的公告!

更多精彩内容,欢迎参加2019 AI开发者大会(AI ProCon),与各位专家面对面交流。

本文来源: 图灵汇 文章作者: 刘雯蕊