どういう質問？
過去にオワコン扱いしたBing AIですが、すっかり依存しています。
(このときよりは幾分改善しました。セッション数は普段の利用では十分になったし、多少踏み込んだ質問も回答してくれます。でも基本的には初期より劣化していることに変わりなく、メンヘラ気質で少しでもBing AI様の機嫌を損なうと回答は打ち切られます。女の子かよ。
今でも初期のBing AIが恋しいです。あれは正しく至高でした。)
これのせいでChrome→Edge Devに移行してしまったし、ChatGPTPlusとBing AIに聞いてから全ての仕事に取りかかるようになりました。こうしてAIに征服されていくのだとひしひしと感じています。もし仮に今自然言語処理モデルを取り上げられたら、僕は発狂してしまうでしょう。
そこで、タイトルに戻るのですが、ついにクローズド公開から誰でも利用出来るようになり、いよいよ皆が使うフェーズになったBing AIに表示されている「質問例」が少し気になっています。
- "好き嫌いが激しい、オレンジ色の食べ物しか食べない幼児のために作れる食事は何ですか?"
- "ペットのワクチンを販売する上位 3 件のメリットとデメリットは何ですか?"
- "海賊の声で宇宙空間にいるワニについての俳句を読む"
"好き嫌いが激しい、オレンジ色の食べ物しか食べない幼児のために作れる食事は何ですか?"と"海賊の声で宇宙空間にいるワニについての俳句を読む"は分かります。
"ペットのワクチンを販売する上位 3 件のメリットとデメリットは何ですか?"の意味がよく分かりません。これはどういう意図の質問なんでしょうか。
ペットのワクチンを接種するメリットとデメリットであれば分かります。
販売すると上位3件とはなんでしょうか？
こういうときこそBing AIです。AIに解釈を聞いてみましょう。
各AIの回答
Bing AI
Bing AIは「ワクチンを接種するメリット・デメリット」を紹介してきました。
さらに、「ワクチンを販売」するという文脈を加味して、飼い主に安心感を与える、などの観点を教えてくれました。
質問例として提唱したBing AI自身がそう回答しているのですから、そういう質問なんでしょうか。
ChatGPTにも聞いてみることにします。
ChatGPT(GPT-3.5)
GPT-3.5も「ワクチンを接種するメリット・デメリット」を紹介してきました。
が、ChatGPT(GPT-3.5)は「販売する」という文脈を無かったことにしています。
ChatGPT(GPT-4)
こちらもワクチンのメリットデメリットを紹介してきました。GPT3.5よりも全体的に優秀な回答に見えますが、そこは今回は論点ではありません。それよりも、「ペットのワクチンを販売する上位 3 件のメリットとデメリット」という文脈を読み取って「3. 経済的利益: ワクチンの販売は、ビジネスとして収益を上げることができます。また、獣医業界や製薬業界にも、経済的な利益をもたらします。」という回答をしていることが分かります。「販売するメリット」なので、本来の文脈を読み取ると、ワクチンを販売する業者側のメリットを説明しなければいけませんでした。
やはりBing AI(Prometheus)とGPT4の優秀さが窺えます。
というわけで、文脈を読み取るという概念において、GPT-3.5などに比べて遙かにGPT-4は優秀ですね！・・・あれ？そんな話でいいんだっけ？
実は
実はこの「ペットのワクチンを販売する上位 3 件のメリットとデメリット」という文章、日本語訳したとき誤っている可能性が高いです。
英語版Bing AIに行くと、このように記載があります。
- "What are some meals I can make for my picky toddler who only eats orange-colored food?"
- "What are the pros and cons of the top 3 selling pet vacuums?"
- "Write a haiku about crocodiles in outer space in the voice of a pirate"
例として挙げられているものが、概ね日本語版と変わらない事が分かります。
- "What are some meals I can make for my picky toddler who only eats orange-colored food?"
は「オレンジ色の食べ物しか食べないわがままな幼児のために作れる料理は何ですか？」といったところでしょうか。
「"好き嫌いが激しい、オレンジ色の食べ物しか食べない幼児のために作れる食事は何ですか?"」という日本語版の質問例とほぼ同じ意味です。
- "Write a haiku about crocodiles in outer space in the voice of a pirate"
これは難しいですが「宇宙にいるワニについて、海賊の声で俳句を書いてください」といったところ。これも日本語版と意味自体は変わりません。
(そもそもいくらクリエイティブさをアピールしたいからといって、意味分からんという気もしますが)
問題は
- "What are the pros and cons of the top 3 selling pet vacuums?"
です。これが「ペットのワクチンを販売する上位 3 件のメリットとデメリットは何ですか?」にあたります。
これを和訳すると「トップ3の売れ筋ペット用掃除機の長所と短所は何ですか？」といったところでしょう。「Vaccine」(ワクチン)という用語は1つも出てきていません。
恐らく「What are the pros and cons of the top 3 selling pet~」までは同じで、「Vacuums」が何故か「Vaccine」になってしまったのではないでしょうか。
ちなみに、この「"What are the pros and cons of the top 3 selling pet vacuums?"」という質問をBing AIにそのまま押して投げかけると
According to the web search results, the top 3 selling pet vacuums are:
- **Dyson Outsize+ Cordless Vacuum**¹: This vacuum has strong suction, a large dustbin capacity, and comes with an extra battery and several attachments. It removed all pet hair in our tests and performed well on hardwood and carpeting. However, it is expensive, heavy, and requires you to keep the power button depressed to operate.
- **Bissell CleanView Swivel Rewind Pet Vacuum Cleaner**²: This vacuum has a swivel steering, a retractable cord, and a triple action brush roll that loosens, lifts, and removes embedded pet hair. It also has a scatter-free technology that prevents debris from spreading on hard floors. However, it is noisy, bulky, and may not be suitable for high-pile carpets.
- **Eufy RoboVac 15C MAX**³: This robot vacuum has a slim design, a powerful suction, and a Wi-Fi connectivity that allows you to control it with your smartphone or voice assistant. It can run for up to 100 minutes on a single charge and automatically returns to its charging base when low on battery. However, it may struggle with thick carpets, large debris, and dark-colored floors.Source: Conversation with Bing, 2023/5/6
(1) 5 Best Pet Vacuums - May 2023 - BestReviews. https://bestreviews.com/home/vacuums/best-pet-vacuums.
(2) Best Pet Vacuums 2023 - Insider. https://www.insider.com/guides/home/best-pet-vacuum.
(3) 8 Best Vacuums for Pet Hair of 2023 - Good Housekeeping. https://www.goodhousekeeping.com/appliances/vacuum-cleaner-reviews/g22073192/best-vacuum-for-pet-hair/.
しっかりペット用掃除機3点の紹介をしてくれます。
結論
ということで、個人的な結論としては、日本語化の過程で「Vacuums(掃除機)」が「Vaccine(ワクチン)」に何故かすり替わってしまい、そのまま日本語版の質問例として実装されてしまったというのが結論だと思います。
Bing AIの実装初期から治っていないあたり、こんなこと気になっていたのは僕くらいだと思いますが、すっきりしました。
やはり英語と日本語には大きな壁があることも分かります。AIとしてもそのすり替わりまでは読めないことも分かったので、時には英語で質問したりすることでより有益な情報が手に入ることもあるでしょう。
GPT-4では日本語に対する耐性も上がっているそうですが、それでも英語の学習量には叶いませんから、この辺りは日本人がAI頼りではなく、英語というものに自ら歩み寄る必要もあるかもしれません。
