レビュー：ChatGPTがTR編集チームにどのような影響を与えたか

ChatGPTは1年以上前から世界に存在し、世界を大きく揺さぶっています。MIT Technology Reviewの編集チームとして、このツールに対する期待と幻滅を振り返って評価し記録することは、まさに適切だと感じています。

TR編集長、ルカ・カラッチョロ：

編集部でChatGPTについて初めて話し合った瞬間を今でも覚えています。同僚がこれを発見し、最初のユーザーがソーシャルメディアでどれほど興奮して報告したかを伝えました。しばらくしてから、私たちはそのツールを詳しく調査しました。

未来について書くのが私たちの仕事であるため、言語モデル、特に「GPT」は長い間私たちのテーマであり、それについて何度も書いてきました。ChatGPTの迅速かつ大きな成功には、私たちも驚きました。おそらく、私たちは操作に関して少し無知で、これがGPTの非常に優れた「バージョン」であると考えていたのかもしれません。

しかし、OpenAIが「ChatGPT」のリリースで達成したことは非常に大きいものです。彼らは、何十億もの人々が毎日使用するインターフェース、つまりテキストチャットを備えた強力なGPT言語モデルを提供しました。WhatsApp、Signal、iMessageなどのメッセージングアプリは、日常のコミュニケーションに不可欠な部分です。AIと「単に」チャットすることが、何よりも優れているでしょうか。そうすることで、OpenAIは「人工知能」というまだ抽象的なトピックを多くの人が触れることができるものにし、事実上一夜にして新しい市場を創出しました。

数ヶ月後、最初の興奮が収まった後、私は息子の隣でChatGPTを使っていました。彼はMacBookでChatGPTを使って数学を学んでいました。それは彼に課題を出し、その背後にある計算のルールと方法を説明しました。彼はもう私の助けを必要としませんでした…

Andrea Hoferrichter、バイオテクノロジーと医学のTR編集者：

ChatGPTが最初にオラフ・ショルツ風の「月が昇る」ようなナンセンスを書いたとき、おそらく最初に感じたのは羨望でした。1行から1行が非常に速く画面に表示され、わずか1分で4000文字が生成されました。私の創造プロセスははるかに遅く、より難しいものです。残念ながら、私は時々音声ボットを使っていますが、これは今でも当てはまります。少なくともテキストの要約やスタイルチェックの補助ツールとしては役立ちます。しかし、完全なタスクをそれに任せるつもりはありません。少なくとも私の好みでは、結果が不安定で、時にはあまりにも流暢すぎることがあります。教育をテーマにした夏版のリサーチ

をしていた時、教師たちがChatGPTとCoに新鮮な風を期待していたことに驚きました。不正行為の可能性があるため、前世紀のような学校はもう不可能だと言われていました。授業はついに、よりプロジェクト指向に、より個別化され、より刺激的になりました。教師不足や学校の設備不足にもかかわらず、これが実際に起こるかどうかは、来年の事実確認のための素材になるでしょう。

グレゴール・ホンセル、モビリティとエネルギーを担当するTR編集者です。

実を言うと、私はチャットチャンネルにコメントを大量に投稿する傾向はありません。しかし、3月17日の午後遅く、それを行う必要がありました。特に、私はChatGPT4に、ゲーテ、シェイクスピア、ジェームズ・ジョイス、アルノ・シュミット、ビルツァイトゥングのスタイルで私の記事を書き換えてもらうよう依頼しました。その結果は、私がその時投稿したように「信じられないほど良好」でした。そして私の同僚ジェニファー・レピースはこうコメントしました。「ああ、なんて面白いのでしょうか？」

もちろん、全ては厳密に公式の実験でした。結果は、MIT Technology Reviewの2023年第4号に掲載されています。ここに小さなサンプルがあります。入力：「しかし、ハベックと彼の人々は実際、この国の人々が住んでいるところでどう考えているのでしょうか？」GoethePT4：「しかし、ハベック氏とその側近たちは周囲で何を考えているのでしょうか？人々はこの国のどこに住んでいて、住居はどこにあるのでしょうか？」

ChatGPTに何時間もかけてますます理解しにくいタスクを送信することもできました。それは6メートル単位の説明書です。俳句としての天気予報。中高ドイツ語の基本法。ギャングスターラップとしての十戒。結果が常に素晴らしいわけではありませんが、常に驚くべきもので、面白いものになります。

すぐに1つのことが明らかになりました。たとえディーター・ヒルデブラントのようなグランドマスターが依然として無類の存在であるとしても、少なくともパロディに関しては、ChatGPTは間違いなく私よりも優れていたということです。「私は今、1996年のガルリ・カスパロフのような気分です」と私は3月17日に編集チャンネルに投稿しました。

ヴォルフガング・シュティーラー、物理学と人工知能を担当するTR編集者：

私がAIについて真剣に考え始めたとき、AI研究は50周年を迎えていました。それは2006年のことでした（はい、私もその歳です）。長い間、AIはオタクのためのエキゾチックなものであり、興味深い概念やアイデアでしたが、実際に機能するものは何もありませんでした。ChatGPTが動作しているのを初めて見たとき、私の最初の自然な反応は「わあ、20年間待ち望んでいたものが今では機能するんだ」というものでした。

今年、言語モデルは目覚ましい進歩を遂げましたが、幻滅も始まっています。幻覚の問題は依然として残っています。この

問題が解決されるまで、調査、要約、検索などのアプリケーションは根本的に信頼できないままです。この問題が完全に解決できるかどうかは現時点では不明です。ある程度機能しているように見えるのは、言語モデルを狭い主題領域に特化させるアイデアです。その後、それらはより信頼できるようになりますが、専門家の愚か者のままです。

結局のところ、このテクノロジーが憎悪と偽情報の自動化と拡散に役立つのではないかという私の懸念は裏付けられていません。しかし、世界情勢を考えると、それはおそらく必要ありません。

残り物？「回し車の中のハムスター」のような感覚です。開発が少し落ち着いたと思ったら、どこかで大騒ぎが起こります。時にはそれが新型モデルであったり、大企業の内部権力争いであったり、新製品であったり、規制に関する最新の議論であったり、スキャンダルな議論であったりします。著名な研究者のインタビュー、新製品など…私は毎日少なくとも1時間はニュースを読むことに時間を費やしています。GoogleのGeminiの発表後、アメリカの同僚たちはAI開発が「誇大広告のピーク」に達したと書きました。私はそれを信じません。AIは巨大であり、インターネットはその予言者です。

TRソーシャルメディアマネージャー、アイリン・ツア・ボーグ氏：

編集チームがChatGPTにアクセスできるようになったとき、私は生産性の狂乱に陥っていました。もしAIが仕事の半分をこなしてくれるなら、Technology Reviewにさらに多くのソーシャルメディア投稿を書くことができるのではないかと考えました。しかし、ChatGPTを機能させる試みは失敗に終わりました。シンプルなタスクや要約では優れていますが、要求が高い執筆タスクになるとその限界が明らかになりました。

私を不安にさせたことは主に3つありました。まず、AIは心を読むことができないため、ソーシャルメディアのテキストをどのように書くか、AIに詳細に説明する必要がありました。構成、文字数、書き方、絵文字の使用についてなどです。ある時点では、私の標準的なプロンプトが記事とほぼ同じ長さになっていました。

二つ目は、ChatGPTが「躍進」や「革命」などのフレーズを好むことで、特定の用語を避けてもう少し中立的に書くように要求しても、AIがその陶酔的な誇張を止めないことでした。

三つ目は、同じプロンプトに対してChatGPTが同じ結果を生成しないことでした。与えられた構造は毎回同じですが、場合によってはプロンプトの一部が単に無視されたり、異なって解釈されたりします。

チャットボットの品質が突如として向上したように見えることは驚くべきですが、自分で作業をする方がはるかに速いです。もしかすると、それは喜ぶべきことかもしれません。

 

BLOG