ChatGPT vs New Bing 比一比 - 西米露煮粥實例

ChatGPT 在去年底現身，轟動武林驚動萬教，一個會聽人話，上知天文下知地理的萬事通機器人就這麼誕生了，彷佛世上的所有問題，瞬間都有了答案。

不過，多用幾次你應該會發現 ChatGPT 的問題。第一是它的訓練資料只到 2021 年 9 月，跟不上時事跟最新資訊；第二是，它是個語言模型，在回答時不知對錯，只是依訓練好模型，預測這樣的回答結果最能讓人類滿意。

於是乎，「不懂裝懂」(而且裝得超像)成為 ChatGPT 的大坑。我們不時會拿到看似頭頭是道，言之有物的錯誤答案(完全不能怪它，它也不知道答案是錯的)，得養成拿到答案先求證的習慣，才不被它誠懇有禮的態度給陰了。

相形之下，微軟結合 GPT 引擎推出的 New Bing 在查詢開放問題上，感覺再多點優勢。雖不如 ChatGPT 能言善道什麼都能聊，但它能結合搜尋引擎查詢結果，倒更符合我對 「AI 輔助查詢」的期望 - 幫我查詢即時的最新資料，提供消化後統整結果。

註：New Bing 上線初期曾一度暴走，鬧出威脅使用者、對記者瘋狂示愛的新聞。後來微軟限制了問答次數並調整設定，New Bing 變得比較無趣，但也較不會失控。(這讓我想起星際效應裡那個可以調幽默指數的機器人 - 塔斯)

照片來源

結合網路搜尋結果並加以彙整讓 GPT 有了新的應用，例如，製作前陣子「吳淡如 AI 繪圖貼文炎上事件」懶人包只在彈指間，而這是知識停在 2021 年的 ChatGPT 所辦不到的：

我覺得 New Bing 最棒的一點是會付上參考來源，有任何疑問可點擊查看原始新聞、文章，由自己查證判斷。這點確實是 ChatGPT 的軟肋，懷疑答案有誤時難以查證。

前幾天在 LINE 群組看到一起經典案例，苦主完全遵照 ChatGPT 提供的西米露食譜，煮成一鍋粥。

ChatGPT 給的食譜如下：

我自己試了一次，由於每次 Regenerate 可以得到一個版本，我點了四次拿到四份不同的食譜：

西米跟水的比例分別是 1:5、1:8、1:12、1:8，三個說要泡 30 分鐘，一個說要冷水入鍋一起煮沸... 四份不同的答案，其中一定有幾個是錯的呀! (苦主拿到的版本則是 1:6，冷水泡 15 分鐘)

但如果實際用 Google 查詢食譜，會發現西米露不該清洗或浸泡，水要煮沸再入鍋(五份食譜全錯!!)，如果要 Q 彈，煮到米心還有一點白芯關火燜熟是最佳做法。照著 ChatGPT 的方法光泡冷水這段就註定 GG...

詢問 New Bing 同樣的問題，答案正確一些：

New Bing 沒有 Regenerate，因此我換了問法，問它有沒有其他烹調做法跟注意事項：

水要放夠(建議 1:15)、千萬不要浸泡、煮沸在再下鍋、不停攪拌、中間點白點時關火悶熟、過冰水會更 Q 彈。跟我們自行 Google 的結論接近，最棒的是，有任何疑問，點開連結就見章，命運完全掌握在自己手上。

憑良心講，ChatGPT 給的答案詳細精美，語句通順流暢，品質好得讓人想起立鼓掌，但不時摻入錯誤資訊讓人頭痛。New Bing 的回答簡短，只像個半成品，完整性遠不如 ChatGPT ，但最大優點是每一句話都有所本，並附有來源連結方便查證，有時會出現參照來源根本沒有相關依據的鬼扯蛋，但至少最終決定權在使用者身上，這點很重要。我還是比較習慣相信自己的判斷，而不是閉著眼睛被 AI 牽著走，對開放性問題，我應該會優先問 New Bing。