神经网络GPT-3领导了一个英语励志博客,每个人都喜欢它。它如何威胁撰稿人和作家





几年前由埃隆·马斯克(Elon Musk)创立的OpenAI在6月发布了新的神经网络算法GPT-3。今天,它是可以与自然语言一起使用的最先进的系统。



它的功能简直是巨大的。使用GPT-3,您可以创建任何类型的文本信息,包括复杂的技术文本。例如,当神经网络被赋予的任务是写一本关于自己的文字,她创建了响亮的标题文章“GPT-3 OpenAI可以比特币之后最伟大的发现



但是神经网络不仅可以编译单词,模仿一个人,还可以实际创建具有意义的文本吗?有趣的诗歌,故事甚至小说?让我们弄清楚。





GPT-3:一种神经网络算法,比现有算法高一个数量级



GPT-3是人类有史以来最复杂的语言模型。



它可以按一定顺序出现单词。 GPT-3在规模上与早期型号不同。



它使用1750亿个参数来生成文本,并且已经训练了超过1.5万亿个单词。此外,用于培训的文本有多种使用方式:从论坛上的帖子到经典文学。



系统尝试根据最可能的文本块来预测文本。用户只需要设置神经网络将从其开始的某个参考点即可。







系统越了解请求的上下文,响应将越准确。



人们得到的印象是神经网络实际上可以理解自然语言。



Debuild.co项目的联合创始人兼首席执行官Sharif Shameem在他的Twitter帐户上发布了测试神经网络各种功能的结果。他们的确令人印象深刻。







在视频中,您可以看到Sharif在输入行中编写了简单的文本,就像向设计师或开发人员解释了他的需求。然后系统对其进行解释并返回结果。



“类似于西瓜的纽扣”让我特别开心。



, , ?



: .




vs. :



实际上,来自神经网络的文本与人类文本没有区别。伯克利大学的学生利亚姆·波尔(Liam Porr)进行了一项实验,并将GPT-3生成的文章张贴在他在Adolos上的博客上长达两周。



来自神经网络的励志文章被26,000人阅读。而且,正如利亚姆所说,只有一个人猜测歌词实际上不是由人写的,而是由机器写的。但是,即使是此评论,其他读者也会







想到如果您自己阅读文章,您会感觉到它们实际上是由一些动机培训师或教练撰写的。适当的样式和短语,适当的文本结构。有时句子或单个短语看起来不太自然,但这并不背叛机器。毕竟,一个人犯了这么小的错误。



这是GPT-3不发布到公共领域的原因之一。要访问OpenAI API,您需要填写一个应用程序,指示您打算将神经网络用于什么目的。



即使在创建算法的早期版本GPT-2的阶段,开发人员也意识到了潜在的危险,因为该系统可以成为信息战的工具。这样的神经网络能够以惊人的速度生成假新闻如果您使用其功能有害,Internet只会被掩盖在虚假内容之下。



这就是为什么他们计划将来将其出售给订阅业务。但是,不是所有人,而是只有那些证明自己计划“出于和平目的”使用它的人。



神经网络,小说和诗歌



神经网络很可能会与媒体或技术文章中的新闻作者抗衡,但小说或诗歌的创作过程要复杂得多。即使是写小说的基本原则也不同于技术性原则。可以教一个神经网络来选择韵律并遵循节奏而没有任何问题,但是在许多意义上,机器仍然存在。



有一个基于GTP-2算法的俄罗斯神经网络“ Porfirevich”。她“懂”俄语,不仅接受了散文方面的训练,还接受了诗歌方面的训练。您可以在“ Neuropoet” Telegram bot中检查工作。您只需要写第一行或几行,系统将完成其余的工作。我们检查了一下,结果一般般。







神经网络将普希金的第一行变成了难以理解的文本集,在其中猜测了军事动机。而且,如果可以将单个图像视为成功的图像(“橡木从春天要面包”或“春天的花朵”),则其他图像会导致脸部苍白。



可以用无休止的猴子理论来类推,这些猴子通过无限长的时间按下打字机上的随机键,迟早会写下“战争与和平”。



这里的神经网络就像猴子一样,它代替了单个字母,而是编译单词和图像,但是大多数结果是随机的。




实际上,许多开发人员已经创建了基于GPT-2的诗歌生成器。例如,这是英语歌词生成器的一种变体,它使用13,000个经文的轻量级数据库。



他还产生了一些不太容易理解的东西:







至于小说,情况甚至更糟。这是意料之中的,因为神经网络不知道如何绘制情节,也不知道什么是情节或高潮。但是从一些实验中,选择的游戏只能让人感到惊讶。



您如何看待《圣经》色情小说?未知开发者发表了一篇名为“橙色色情圣经”的文章...它是由基于相同GPT-2的神经网络创建的,但他们在色情小说和故事中进行了讲授,然后从圣经中摘录了该书作为生成的起点。故事很长-超过60,000字。简单地说,结果令人惊讶。







这只是故事的一小部分。不,我们不会翻译。



甚至还有一个在线商店,可以存放AI编写的书籍。看起来很令人毛骨悚然。因为书的封面也是机器制造的。







没错,它的创造者承认他们只卖出了19本书。如果它们的质量甚至近似于《橙色圣经》,那么我们一点也不感到惊讶。作家现在可以睡个好觉。



或不?



前面的所有示例都只是关于GPT-2的,它们都是一般的。



但是已经有一个基于GPT-3算法的神经网络诗人。它显示了一些非常有趣的结果。



神经网络可以以给定的风格和给定的主题写诗。 ZeroCater项目的首席执行官Arram Sabeti已经进行了一项实验,在该实验中,他生成了有关经文和样式的神经网络查询。机器完成了其余的工作。



这是请求之一:



这是博士的一首诗。苏斯对埃隆·马斯克(Elon Musk)与SpaceX一起发射火箭,在特斯拉(Tesla)制造电动汽车,出售火焰喷射器,与格莱姆斯(Grimes)约会,与美国证券交易委员会(SEC)交战,击碎卖空者,制造用于对抗AI的大脑芯片,在火星上定居以及在昼夜不停地发推文有关... 马斯克想让人类进入行星际,以防止灭绝。这首诗用ABAB结构押韵。韵律结构是Dr. 苏斯童谣。




这首诗原来很有趣。真正。尽管节奏和门框的节奏明显不准确,但这还是有道理的。很长,所以我们这里只包括一部分。



Elon Musk

By Dr. Seuss



Once there was a man

who really was a Musk.

He liked to build robots

and rocket ships and such.



He said, “I’m building a car

that’s electric and cool.

I’ll bet it outsells those

Gasoline-burning clunkers soon!”



They sell cool cars

that are electric and clean.

And then he wanted to go

even farther, you see.



The first Tesla, Roadster,

Was just the start of a bigger dream.

He said, “I’m building a plane

that’s electric and green”.




与以前版本的算法相比,进步令人惊讶。这不是不连贯的短语的集合,而是结构上相当不错的一首诗。是的,理想仍然很遥远,节奏很弱,节奏很la脚,但是在这个阶段,您已经很惊讶机器提出了它。



一些图像和短语很漂亮。例如,“汽油旧车”-“汽油旧车”。如果您不知道它是由机器编写的,那么您可能会认为这是某个决定写一首关于他的偶像的诗的小学生的产物。



该死的,很酷。



您可以在此处阅读该诗句的完整版本以及神经网络的其他作品



***



就写作诗歌或小说故事而言,使用GPT-3进行的实验很少,因此您仅需对此感到满足。但是,如果神经网络在创建有意义的文本方面已经取得了很大进步,那么很有可能很快就能写出可读性很强的艺术品。



也许不是GPT-3,而是GPT-4甚至GPT-5,但是发展的动力显然在那里。现在,神经网络可以撰写技术文章,新闻,短篇小说或诗歌。



随着算法的进一步发展,生成文本的质量只会提高。因此,是的,AI可以像人类一样书写。到目前为止,就学生水平而言,但让我们来看看10-20年后的情况。你觉得怎么样?



在线学校EnglishDom.com-我们鼓励通过技术和人文关怀学习英语







仅针对Habr读者,与Skype老师第一堂课是免费的购买课程时,您最多可以收到3课作为礼物!



获得整整一个月的ED Words高级订阅作为礼物在此页面上或直接在ED Words应用程序中

输入促销代码Neurowriter 促销代码的有效期至2021年9月29日。我们的产品:










All Articles