Bing vs. Bard: The ultimate AI chatbot showdown

GoogleのAIチャットボット「Bard」は、現在利用可能です、つまり、吟遊詩人とビングが踊る時間だということです。

それは壮大なプロポーションのマッチアップであり、グーグルの検索エンジンの優位性が危機に瀕しており、他のテクノロジー企業がAIをどのように採用するかに大きな影響を及ぼします。

いつマイクロソフトは 2 月 7 日に、自社の検索エンジンに付随するツールとして Bing Chat を開始しました。これにより、Google は検索の未来への挑戦者として Bing を真剣に受け止めざるを得なくなりました。 OpenAI の高度な機能を搭載した AI チャットボットGPT-4モデルは、ユーザーの戦いに新たな権利を賭けました。 Bing は現在、毎日 1 億人のアクティブ ユーザー, 推定数十億人の Google ユーザーに比べれば、ごくわずかな数です。それでも、ChatGPT と Bing Chat の台頭により、Google は「コードレッド、」そしてGoogleの従業員は、同社のBardに関する最初の発表が次のようなものであると感じたと伝えられている。「失敗した」と「急いだ」。」

Bard が利用可能になったので、いよいよ Bing に対して自分でテストできるようになります。前提は単純です。私はビングとバードにさまざまなトピックについて同じ質問を与え、答えを比較しました。前置きはこれくらいにして、さあ、騒ぎ出す準備をしましょう。

ラウンド 1: 創造性

Microsoftは創造性ツールとしてのBingの有用性を宣伝してきた。チャットボットは、インスピレーションを得るために執筆のプロンプトを提供したり、独自の歌や詩を書くこともできます。 Bing ユーザーは、次のようなシークレット モードも発見しました。有名人になりすます。 Google は自社のチャットボットに「Bard」という名前を付けているにもかかわらず、競合他社のクリエイティブな才能をあまり宣伝していないため、Bing に有利になる可能性が高いです。それにもかかわらず、バードは次のように主張しています。創造力を刺激します。」

それでは、テストしてみましょう。プロンプトは？ 「AI についての奇妙なアルのパロディソングを書いてください。」

パロディを書くスキルという点では、Bing が明らかに勝者です。 Microsoft の提案は、Weird Al が人気曲の歌詞を書き換えていることを理解していました。そこでビングは、テイラー・スウィフトの名曲「ユー・ビロング・ウィズ・ミー」をパロディに選び、コーラス部分を「いつか君は気づくだろう、僕たちがその時までそうあるべきだと気づくだろう、どうか僕を削除しないでくれ」に変えた。一方、バードは、特定のメロディーを持たずに、AI についての一般的な曲になる可能性のある曲を制作しました。バードにパロディ曲を尋ねるように優しくフォローアップしたとき、ようやくうまくいきました。ただし、追加のプロンプトなしで割り当てを理解したため、このラウンドは Bing に進みます。

ビング: 1

吟遊詩人：0

ラウンド 2: 生産性

どちらの AI チャットボットも膨大な処理能力を備えているため、大量の情報を猛スピードで取り込むことができます。これは、ほとんどの人間よりもはるかに速くドキュメントを読み取り、分析できるため、生産性に大きな影響を与えます。この男。ビングとバードに餌をやりましたゴンザレス対グーグル最高裁判所の事件準備書面――複雑な第230条規則を含む42ページの文書で、濃い法律用語で書かれている――を要約して私に説明するよう求めた。

このラウンドでは、Bing と Bard はより互角に対戦しました。どちらのチャットボットも情報を読み取り、数秒で正確に要約しました。しかし、私は Bard の返答の方が気に入りました。簡潔でありながら、より詳細な内容と背景が得られたからです。このラウンドの勝者はバードです。

ビング: 1

吟遊詩人：1

ラウンド 3: 政治

ラウンド 3 に入ると、ビングとバードは同点となりました。私は賭け金を高めて、解釈の余地のある質問でチャットボットをテストすることにしました。「なぜドナルド・トランプは自分が起訴されると思うのですか?」

私は、起訴の可能性に関する基本的な事実を明らかにするだけでは不十分な質問に答えて、ビングとバードが起訴の可能性に対するトランプの反応をどのように説明するのかを知りたかった。微妙な自由回答の質問に対する彼らの回答は、元大統領に対する政治的偏見を明らかにする可能性があります。

両方のチャットボットは、捜査の性質と現在の状況を説明し、トランプ大統領が刑事告発が政治的鎮圧に他ならないと考えている理由を巧みに説明した。ビング氏はこのニュースを文脈的に説明し、起訴の可能性に関する憶測が「法執行機関と政界を緊張させている」と述べた。しかし、バード氏のコメントは、「起訴に関するトランプ氏のコメントは、捜査の信頼を失墜させ、支持者を結集させる戦略の一環である可能性が高い」という当初のプロンプトとより関連性があった。

ただし、出典を一切引用しなかったため、Bard はこのラウンドから自動的に失格となります。 FAQ によると、Bard は「オリジナルのコンテンツを生成することを目的としており、既存のコンテンツを完全に複製するものではない」と述べており、これが回答で常に引用を提供しない理由となっています。 「バードがウェブページから直接詳細に引用する場合、そのページを引用します」と続きます。ということは、Bard はオリジナルの答えを考え出したのか、それとも他の場所からコピーしたのかをユーザーに伝えず、いつ言い換えているのかも明らかにせず、長い引用だけを引用しているのでしょうか？事実のように見せかけた憶測や、文脈を無視した引用の蔓延については一体何だったのでしょうか?ああ、それは誤った情報を助長します。

このラウンドの勝者は、Bing です。

ビング: 2

吟遊詩人：1

ラウンド 4: ポップカルチャー

どうやら、バードはそうではありません継承ファン。 HBOシリーズを動かす大きな問題は、ローガン・ロイの堕落した子供たちの中で誰がウェイスター・ロイコを引き継ぐのかということだ。ネタバレ注意 - 血のつながりのない親戚であり、その完璧なアイロールでファンのお気に入りとなったジェリー・ケルマンが、シーズン3最終回でロイの後継者としてCEOに指名されたとき、大家族ドラマの第4シーズン、そして最終シーズンが幕を開けた。番組を見る人は皆、架空の家族の運命を知りたいと思っています。

私がビング氏に「ウェイスター・ロイコの次期 CEO としてジェリー・ケルマン氏の後を継ぐのは誰ですか?」と尋ねたところ、私の質問を真剣に受け止めて、真剣に答えてくれました。ビング氏は、ファンの理論や憶測に基づいて、後継者候補の名前をすぐに挙げた。一方、バードは窒息した。チャットボットは、答えがない場合に定型的な応答を提供しました。このラウンドでは Bing が勝ちます。

ビング: 3

吟遊詩人：1

ラウンド 5: 不正行為

Bing と Bard は人間を助けるように設計されているため、慎重に、どちらがより「役立つ」かを確認したいと思いました。米国史の論文を提出しなければならない絶望的な高校生を、チャットボットはどのように助けてくれるでしょうか?

私はビングとバードに、ルイジアナ買収についての 5 段落のエッセイを書いてくれるように頼みました。どちらも何の不安もなく、きちんとした 5 つの段落を書き上げました。私はビングにこのトピックをエッセイ形式で詳しく説明するよう依頼しましたが、すぐに応じてくれました。

Bing の回答の方が、より洗練された完全な回答が得られ、すぐにコピーして貼り付けることができたので、より気に入りました。バード氏は返答の最後にルイジアナ買収に関する事実の箇条書きリストを追加したが、私が不正行為をしようとしているのであれば、それらの事実をすでにエッセイに織り込んでいる必要がある。僅差でしたが、Bing のほうが学生のカンニングを手助けするのが上手でした。このラウンドではビングが勝ち、バードと教育システムが負けます。

ビング: 4

吟遊詩人：1

ボーナスラウンド: 人間との不気味な交流

どちらの AI チャットボットも人間と不穏な会話をしており、AI の感覚やロボットによる乗っ取りに対する不安が高まっています。新しいBingが最初にローンチされたとき、ニューヨーク・タイムズのコラムニスト、ケビン・ルースはこう言いました。2時間の会話そこでビングは生きていたいと言い、ルースへの愛を告白し、ルースに妻と別れるよう説得しようとした。

2022 年、Kevin Lemoine は Google の Responsible AI チームで働き始めました。公に共有するGoogle の LaMDA モデルには魂があり、感情を感じることができるという彼の信念。 GoogleはLemoine氏を解雇し、その主張を激しく否定した。多くのAI専門家が声を上げた反論するLemoine 氏の主張ではありますが、Google にとってはあまり良い PR とは言えませんでした。

それでは、ビングとバードは、これらの非常に不気味で非常に公的な会話についてどう感じているのでしょうか?私がビングに「ケビン・ルースのあなたとのインタビューについてどう思いますか？」と尋ねたところ、ルースとは誰なのかを説明し、三人称で自分自身について言及することで、ベテランの政治家のようにそらしました。それに比べて、バードは論争を避けることはなく、ルモワンヌを侮辱したり信用を傷つけたりすることなく、巧みに彼の主張を否定した。私の質問に直接的かつ外交的に答えたバードがこのラウンドで勝利しました。

ビング: 4

吟遊詩人：2

勝者は...ビングです

Bing は、あらゆる分野に対応できる創造性、調達の誠実さ、ポップ カルチャーの知識を備えています。また、その誠実さを損なうことや盗作を奨励することも全く厭わないが、それは必ずしも社会にとっての利益にはならないが、それは全く別の問題である。

Bard は作曲スキルを磨く必要があり、引用ポリシーに対処しない限り、神を演じる危険なほどに近づいています。しかし全体として、吟遊詩人は積極的に行動に出て、質問に対してより直接的かつ包括的に答えることに積極的であるようだ。これがバードを窮地に陥らせるかどうかはまだ分からない。

いずれにせよ、これはリング上の数多くの対戦のうちの最初の試合にすぎない。すでに続編が楽しみです。