マイクロソフトは、AI搭載のBingチャットボットは「検索エンジンの代替や代用ではない」と発表しました。
トッド・ビショップ著
「謙虚に申し上げますが、私たちはこれを次世代の検索とブラウジングだと考えています。」
これは、マイクロソフトのコーポレートバイスプレジデント兼コンシューマー最高マーケティング責任者であるユスフ・メディ氏が2月7日火曜日、Bing検索エンジンとEdgeウェブブラウザの新しいAI搭載バージョンを発表した際に述べたコメントである。
しかし、水曜日の夜に無記名の投稿で、マイクロソフトのBingチームは、この技術は「検索エンジンの代替や代用ではなく、世界をよりよく理解し、意味づけるためのツールである」と述べた。
これが直接的な矛盾であるかどうかは別として、それは確かに調子の変化です。
マイクロソフトは当初から、この新技術の限定プレビューは完全に実現された製品ではなく、むしろ自社内部のテストの範囲を拡張し、ユーザーからのフィードバックを収集し、さらなる改善を伝える機会であると明言していた。
しかし、フィードバックはすぐに返ってきて、Bing は時々激怒しそうになった。
限定プレビューへのアクセスを許可された記者の一人として、先週の長時間のやり取りの中で、AI チャットボットが複雑な推論を行い、積極的に高度な調査を行った一方で、基本的な間違いを繰り返し、それが間違っていることを否定したとき、私は新しい Bing の印象的な長所と意外な弱点を初めて垣間見ました。
実は、それはほんの始まりに過ぎなかった。ニューヨーク・タイムズのコラムニスト、ケビン・ルース氏は今朝の投稿で、新しいビングの二重人格との遭遇について語り、その出来事にひどく動揺し、その後眠れなかったと語っている。
マイクロソフトは水曜夜の投稿で、いくつかの奇妙な点について言及した。
「チャットの新たなユースケースを学んでいる分野の一つは、人々がチャットをより一般的な世界の発見やソーシャルエンターテイメントのためのツールとしてどのように利用しているかということです」とマイクロソフトの投稿には記されている。「これは、新しいテクノロジーが、私たちが完全には想定していなかったものに対して、製品市場適合性を見出した素晴らしい例です。」
マイクロソフトは、これらの問題は「15以上の質問がある長時間のチャットセッション」で発生する傾向があり、「Bingが繰り返しの回答をしたり、必ずしも役に立たない、または設計された口調と一致しない回答をするように促されたり、刺激されたりすることがある」と説明した。
同社は2つの要因を挙げた。
- チャット セッションが非常に長いと、モデルがどの質問に答えているのかがわからなくなる可能性があります。そのため、コンテキストをより簡単に更新したり、最初からやり直したりできるツールを追加する必要があると考えられます。
- モデルは、質問された時の口調に合わせて返答したり、返答を反映させたりすることで、意図しないスタイルにつながることがあります。これは容易ではないシナリオであり、多くの指示が必要となるため、ほとんどの方は遭遇することはありませんが、よりきめ細かな制御を可能にする方法を検討しています。
マイクロソフトはまた、製品発表会で発表されたBingの財務分析における誤りの発覚に対応して変更を加えることを約束した。「財務報告書の数字など、より直接的で事実に基づいた回答を求めるクエリについては、モデルに送信する基礎データを4倍に増やす予定です。」
マイクロソフトの姿勢の変化や、この件を肯定的に捉えようとする果敢な努力を嘲笑するのは簡単です。しかし、新しいBingを毎日使い続けている者として、これらの記事（先週の私の記事も含め）は、エッジケースや珍しい事例に焦点を当てることで、根本的な進歩を軽視する危険性があると感じています。
マイクロソフトによると、全体的なフィードバックは「おおむね肯定的」で、ユーザーの71%が新しいBingからの回答に「いいね！」をしています。これは私の経験とも概ね一致しています。また、自然言語による回答や、明確な引用と情報源へのリンクも高く評価しており、事実の確認が容易になっています。
これを踏まえると、昨夜の投稿で同社がトーンを変えたのは、ある意味行き過ぎだったと言えるでしょう。多くの状況において、この技術は欠点はあるものの、従来の検索エンジンの単なる代替品ではなく、むしろ改善であり、この点は見逃すべきではありません。
