ベテランライターが初めて ChatGPT と対決:「ある時点で緊張し始めました」 | テクノロジー

それぞれの対戦者は30本の映画のタイトルを考え出さなければならなかった。そして、2人はそれぞれのタイトルを600語程度で書き、6人の批評家と学者からなる審査員団によって評価された。 48歳のアルゼンチン人作家パトリシオ・プロン。 もう1つは、テスト時点で最も先進的な言語モデルであるChatGPT-4 Turboです。

「こうした決闘は人工知能の分野では長い伝統があり、 カスパロフ対ディープブルーやアルファ碁対イ・セドルのような」 「作家にとって、この仕事はもう少しデリケートなものでした。機械から人類を守るという重荷を、彼は自分の肩に感じたのでしょうか。単に勝つか負けるかの問題ではなく、文学の世界では珍しい、詳細で数値的な評価を受けることも求められました。 「私が人類の運命を背負っていると想像するのはとても面白いと思いました」とプロンは言います。「カスパロフのような過去の決闘をあまり念頭に置いていませんでしたが、機械が勝ったという記憶はありました。そのため、ある時点で私は緊張し始めました。最初は非常に熱意を持って引き受けましたが、その後、少しプレッシャーを感じ始めました。もはや人類の重荷からではなく、おそらく自分が機械ほど優れていないことに気付いたからでしょう。ある種の機械にさえ勝てないことが判明したとき、私は自分の本の運命について考え始めました。」 確率的オウム 「人が言ったナンセンスをそのまま繰り返す人だ」と彼は付け加えた。

Pron にとって幸運なことに、結果は圧倒的でした。予想されたすべてのカテゴリーで優勝し、特に創造性と独自の声で優勝しましたが、独創的で魅力的なスタイルでも優勝しました。タイトルを見るだけで、作家と最高の言語モデルの間に今日存在する違いを簡単に理解できます。以下は Pron からの提案の一部です。 私があなたのためにしたことのすべて、 精神疾患は週3日、 レゴウーマン ええ どれでも選んでください。いや、あのカードではなく、別のカードですChatGPT のタイトルをいくつか紹介します。 目に見えない昨日の断片、 逆さまの都市、 忘れられたメロディー、 蝶の最後の飛行 ええ 砂の海に残る足跡すべてのテキストは、新しいプロローグとエピローグとともに、デリリオ出版社が今年出版する本に掲載される予定です。

人間の創造性のこの勝利は予見可能だったのでしょうか？確かにそうですが、それはChatGPTが創造的ではないという意味ではありません。「AIが創造的であることは証明されています：AlphaGoが発明しました 囲碁をプレイするための新しい戦略、 「後にすべての巨匠が模倣しました。しかし、芸術の分野はボードゲームの分野とはまったく異なります」とゴンサロは言います。結果はそれほど明確ではありませんでしたが、「驚いた人もいます。学者も、私の分野の人も。」 [el procesamiento de lenguaje natural]「トップ作家のこのレベルでは誰もそんなことをやっていなかった」とゴンサロは言う。審査員が文学の専門家だったことも影響した。「実際、悪く聞こえないタイトルで、文学の分野に行くと見つかるタイトルだ」 ベストセラー 「エル・コルテ・イングレスから来ました」とゴンサロは言う。

この実験には重要な詳細がたくさんある。以前の研究で、ア・コルーニャ大学のカルロス・ゴメス・ロドリゲス教授は、 何人かのモデルに戦闘シーンを書いてもらい 小説の主人公と セシオスの召喚 そしてプテロダクティルス。結果はもっと均衡している。「少なくとも特定の条件下では、AI は人間と同じくらい優れた物語を書けることが証明されています」とゴメス ロドリゲスは言う。「しかし、微妙な点が 2 つあります。1 つは、タスクの条件 (言語、ジャンル、長さ) に大きく左右されるということ、もう 1 つは、パトリシオ プロンのような著名な作家と比べると、AI はまだはるかに劣っているということです。」

英語も先行

この実験の第二の目的は、距離を測ることだった。 ChatGPTの英語版とスペイン語版の品質の違い。 ChatGPTは英語でも作品を作りました。 スペイン語よりも30%高いスコアを獲得しました。 この実験は、国家AI戦略の一環として策定されたOdesiaプロジェクトから公的資金提供を受けた。

こうしたタイプの課題は、異なる言語でモデルをトレーニングした場合の違いが顕著であることを証明しています。「簡単な質問に答えるといった単純なことであれば、ChatGPTにスペイン語で質問しても英語で質問しても違いに気付かないのが普通です。しかし、より複雑なことに挑戦すると違いに気付くもので、これはその明確な例です」とゴメス・ロドリゲスは説明します。

ChatGPT が登場して以来、それはクリエイティブな仕事に対する脅威のように思われてきました。しかし、このような実験は、今のところ、それは何よりも、誰がどのようにリクエストを書くかに大きく依存するツールであることを示しています。ChatGPT は、独自のタイトルよりも Pron タイトルでより良いストーリーを作成しました。つまり、リクエストが独創的であればあるほど、ChatGPT はよりクリエイティブになります。

著者らは、この最初のアドバンテージを、自力で目覚めなければならない機械に与えないようにしたいと考えていた。目的は、機械が望むものを出すまで要求を調整することではなく、機械がそれを評価することである。「競争が両者にとって平等になるように細心の注意を払いました」とゴンサロ氏は言う。「機械が私たちの要求を解釈し、修正せずに解決できると想定する必要がありました。そうでなければ、共同創造を始めることになるからです」と彼は付け加える。

創造性の限界

合理的な疑いは知ることである 今後のモデルでこの特定の機能が改善されるかどうか あるいは、モデルには定義上、この上限がある。プロンは、できることはあまりないと明言している。「ChatGPT の仕組みに創造的なところは何もありません。それに、このマシンは、それを使用する人にとっては既に十分なようです。テクノロジーは、ラクダが針の穴を通れると約束する傾向がありますが、ほとんどの場合、ラクダの毛が 1 本か 2 本通るだけで、私たちはそれがすべてだと信じ込まされます。ChatGPT は書面によるコミュニケーションの標準になるでしょうが、それは、世界の多様性に多くの人がイライラし、恐怖と疑念に満ちているからです。彼らは、毛がラクダであると考えることに集中することを好みます。そして、ChatGPT は今、彼らにそれを与えることができます。」

この芸術的限界の可能性には、今のところ技術的な説明もあります。まず、これらの洗練されたマシンは確率を扱っています。その目的は、人間の文章を模倣することです。最も一般的な例は、「空は」と言うと、マシンは「青い」と続ける傾向があるということです、とUNEDの教授で記事の共著者であるギジェルモ・マルコは言います。「この事実により、それは私たちが信じている方法から離れていきます。それは、確率は低いが深い意味を持つ一連の文章です。可能性の低い単語を取ると、ChatGPTは意味から離れ、ジャンクテキストを生成し始めます」とマルコは説明します。

この均質化への傾向は、創作に関して別の問題も引き起こす。それは、メッセージの送り主が誰であるかということだ。「芸術はコミュニケーションのプロセスです」とゴンサロ氏は言う。「受け手は、自分の文脈と送り主に対する期待に基づいてメッセージを解釈します。同じ詩でも、読者がそれが機械から来たものだと考えるのと、フィレンツェ郊外の夜明けの決闘で致命傷を受けた作家から来たものだと考えるのとでは、まったく違った響きになります。私たち人間は、芸術とは芸術家が私たちに感情を伝える手段であると理解しており、機械の目的は私たちを喜ばせることだけだと知っています」と彼は付け加える。ChatGPTより前のモデルを使った同じ著者による以前の実験では、機械が考案した概要は、審査員が作者が機械だと知っていた場合は評価が下がった。

著者らが探求したいもう一つの道は、評価が専門家ではなく一般大衆、従来の読者によって行われた場合に何が起こるかということです。同じテキストを使用しても、結果が異なる可能性があると彼らは考えています。コンプルーテンセ大学の教授であり共著者でもあるテレサ・マテオ・ジローナは、その理由を説明し、この実験ほど具体的ではない多くの芸術的目的にChatGPTがどのように機能するかについてのアイデアを提供しています。「まず、専門家はありふれたこと、独創性の欠如を検出します。経験の少ない人は、自分に馴染みのない文学的モチーフに驚くことがあります。次に、専門家は専門的に評価しようとし、興味を喚起するプロットの文体的な特徴を探そうとします。これに対して、非専門家の読者はより個人的なものに基づいて評価し、より可変的になる可能性があります。そして3つ目に、スタイルはテキストの理解に影響を与える可能性があります。」 「シンプルでわかりやすい ChatGPT テキストと比較すると、作家の最も複雑で豊かな文章は専門家には評価されますが、一般の読者には理解しにくいものです」と Mateo-Girona 氏は説明します。

共同制作においても繊細なツールです。デジタルアーティストと行った別の記事では、 ChatGPTを使用したとき コミュニティにとってより魅力的なアートを生み出すことができ、 いいね「しかし、多様性は大幅に低下し、最終的には均一化しました。それは、ある学校、つまり最大確率の学校の教師のようなものです」とマルコは要約します。

フォローできます 国 テクノロジー で フェイスブック ええ バツ またはこちらからサインアップして ニュースレターセマナル。

_