小编采访

苹果平板电脑,鬼火,古风歌曲-草莓商店内容中心

几十年来,机器一直在努力学习人类言语的奇妙之处,深度学习的呈现加快了这一进程。

本年2月,OpenAI发布了一款令人形象深入的言语模型GPT-2,它能够写短篇小说、诗篇,乃至轻松区分《哈利波特》和《指环王》中的人物。最近,一位加拿大工程师用它创立了一个向大众敞开的文本生成器,只需供给一个语句,机器便能主动生成一则完好的新闻、故事、歌词、诗篇、食谱和代码等文本。

咱们用吴亦凡在综艺节目《七十二层奇楼》中的一段freestyle(即兴说唱)——“你看这个面它又长又宽,就像这个碗它又大又圆”进行了创造。一起来看看人工智能的freestyle水平吧。

芒果TV综艺《七十二层奇楼》

人工智能版《大碗宽面》

这个名为talktotransformer的文本生成器由加拿大工程师亚当·金(Adam King)创立,它脱胎于OpenAI的大规模无监督言语模型GPT-2。talktotransformer运用的是GPT-2的精简版别,这个版别曩昔只敞开给特定的科学家和记者。

在talktotransformer中输入文本“你看这个面它又长又宽,就像这个碗它又大又圆”后,人工智能创造出的歌词大意为:

你看这个面它又长又宽,

就像这个碗它又大又圆。

只需尝一口,你就知道是面条。

我的脸上,显露置疑的表情。

这是真的,我的碗它变成了面条。

这简直太棒了。

当我回到家,我得到一些鸡翅。

我怎么会变得这么好?谁知道呢?

我从朋友和家人那里得到满足的爱,

我的味蕾开端变大。

当我要吃饭的时分,

它不再仅仅食物,它是我的主意。

我想要吃好喝好的日子。

talktotransformer模型的输出成果

经过阅览上述由人工智能模型输出的文字,咱们很简单发现,机器输出了一些看似语义完好的语句,但其间的意思却让人摸不着头脑。这便是自然言语处理(NLP)的难题——因为缺少知识,机器并不真实了解言语的意义。

就如2018年图灵奖获得者约书亚·本吉奥(Yoshua Bengio)在承受汹涌新闻(www.thepaper.cn)采访时所言,现在的自然言语体系其实并不了解语句的真实意义,机器“会犯一些十分愚笨的过错,乃至没有两岁小孩的了解才能”。

talktotransformer.com页面

文思泉涌的OpenAI GPT-2言语模型

2019年2月,OpenAI发布了具有15亿参数的大规模无监督言语模型GPT-2,它拿手处理言语建模和文本猜测使命,还具有阅览了解、总结、翻译等才能。只需给出一个最初的语句,GPT-2就能生成一篇小文章、一则新闻故事,乃至在文本中运用引语和统计数据。假如给出的语句是一个短篇小说的最初,它会通知你接下来在这些人物身上会发作什么事。

OpenAI 加利福尼亚州实验室工程副总裁David Luan对美国科技媒体《边际》(THE VERGE)表明,GPT-2能写出“十分合理的”、“胜任的”论文,“是能够提交给美国大学入学资格考试(SAT)并获得好成绩的东西”。

GPT-2在人工智能社区引起了不小的重视,但OpenAI其时并没有开源这个体系。一方面,研究人员对该算法能做什么、不能做什么尚不清晰;另一方面,他们忧虑这项技能被乱用——开源之后,假如有人向GPT-2供给种族主义、暴力、轻视女人或许谩骂性的文本,GPT-2将主动学习并继续地输入相似的内容。

不开源的决议引发了人工智能社区的不满,究竟,开源是人工智能范畴的优良传统。也许是对立的声响太大,OpenAI在5月初表明将逐渐揭露GPT-2,并开源了345M的预练习模型。后续,OpenAI将剖析该言语模型对社会的影响。

相关文章