リリースから 1 週間も経たないうちに、Bing AI のエラーは事実上の失敗でユーザーを驚かせました。 先週製品を紹介するために使用された同社のプロモーション ムービーによると、Microsoft の新しい AI 搭載の Bing 検索エンジンは、製品と場所に関する誤解を招く情報を生成し、財務書類を適切に要約できませんでした。
数か月にわたる噂の後、Microsoft の CEO である Satya Nadella は、ChatGPT に匹敵する OpenAI チャットボットが Bing をサポートするという報告を確認しました。 ワシントンの同社本社で開催された招待者限定の特別プレス イベントで、Web 検索の柔軟性と有効性を向上させるという Bing の約束を示す新機能が実演されました。 新しい検索エンジン機能は現在、すべての PC でテストできますが、新機能の事実上のエラーがユーザーを悩ませています。
Bing AI エラーは AI レースにどのように影響しますか?
Google が AI を利用した検索エンジンを発表した翌日、詳細はこのリンクで読むことができますが、Bard は James Webb Space Telescope に関する事実が不正確であるとして厳しい批判を受けました。 その直後、Google の親会社である Alphabet の時価総額は突然 9% 減少し、1,200 億ドル以上の損失となり、アナリストや投資家は、Alphabet が Microsoft に負けているのではないかと推測するようになりました。 この問題については、記事で詳しく説明しています: Bard AI の間違った答えは、Alphabet に約 1,200 億の損失をもたらしました。
実際、Microsoft の Bing と Google の Bard はどちらも同じくらい悪いようです。 どちらの企業も、誤った情報を含むテキストを生成する標準以下の AI チャットボットをリリースしましたが、Microsoft のエラーは発見されるまでに時間がかかりました。 現在、検索エンジンの専門家である Dmitri Brereton が、その欠点のいくつかを発見しました。
Bing AI のエラーはどれくらいひどいものですか?
Bing AI の誤りを指摘するために、Brereton は、特定のペットの毛の掃除機はハンドヘルド デバイスであるにもかかわらず、「弦の長さが 16 フィートと短く」、大きすぎる可能性があるという Bing の主張を提起しました。 ただし、Web サイト Bing からの情報をまとめたリンクによると、掃除機は本当にコードレスで静かです。 したがって、Bing AI のエラーはまったく微妙ではありません。
デモンストレーションの 1 つで、Microsoft の Bing AI は、2022 年第 3 四半期の Gap 衣類の財務報告を要約しようとして完全に失敗しました。Gap レポート (PDF) によると、粗利益は 37.4% で、調整済み粗利益は、減損費用を除くと、38.7% でした。 Bing は、調整および減損費用の後で 37.4% という誤った粗利益を示しています。
「Bing AI は、デモ中に完全に間違った答えをいくつか出しました。 しかし、誰も気づきませんでした。 代わりに、誰もが Bing のハイプ トレインに飛び乗りました」と Brereton は説明します。 「Google の吟遊詩人が広告中に間違った答えを出し、誰もがそれに気づきました。 今の物語は「Google は急いで Bing に追いつき、間違いを犯している!」です。 Bing が自身のデモでさらに悪い過ちを犯さなければ、それはすばらしい話になるでしょう。」
AI を利用した検索が失敗したのはなぜですか?
ユーザーは驚き、落胆していますが、Bing AI のエラーは予想外のものではありません。 新しい Bing と Bard の言語モデルは、しばしば真実でないテキストを作成する傾向があります。 彼らは、トレーニング中に自分自身に与えてきた大量のデータを知らずに、入力クエリの特定の文のセットの後にどの単語が来るかを推測することによって、テキストを生成するという概念を習得します。 専門家はこれを「幻覚」と呼んでいます。 幻覚は、Bard の事実の不一致と Bing AI のエラーの両方を引き起こした問題のようです。
技術がどれほど魅力的に見えても、Microsoft と Google がモデルの幻覚を修正できなければ、AI を利用した検索は信頼できません。 チャットボットはシンプルで楽しく使えますが、正確で価値のある情報をユーザーに提供できなければ、何の役にも立ちません。 自動化は人間のタスクを軽減すると主張することがよくありますが、現在の AI は、エラーを最小限に抑えようとする私たちの努力レベルを高めるだけです。
同社が Bing AI のエラーを修正できなかった場合、ニュースが広まり、AI を利用した検索エンジンに対する信頼がさらに低下することが予想されます。 誇大広告は高いようですが、Bard AI と Bing AI の両方の場合と同様に、誇大広告に応えられないことは失望につながるだけです。
Source: 初期の Bing AI エラーはユーザーを驚かせます
