英文:“I need to throw a dinner party for 6 people who are vegetarian. Can you suggest a 3-course menu with a chocolate dessert?”

下面是 ChatGPT 的结果,我们先对比 ChatGPT 自己中文和英文对同样问题的回答,我们可以看到英文回答和中文回答存在明显差异化,中文的信息量相比英文相对少不够丰富。这可能是语料英文比例大中文比例小导致。

下面是 NewBing 的结果,我们先对比 NewBing 自己中文和英文对同样问题的回答,我们可以看到中英文回答的整体结构一致,并且内容丰富程度相当,但是参考的文章内容不同。

对比 ChatGPT 和 NewBing 来看,同样的中文问题,NewBing 的回答信息更加丰富,同时给出的推荐菜更贴近中国本地化口味。让我们看到了引入网络数据,可以针对这类推荐或者本地化问题回答的效果更好。

同样的英文问题,ChatGPT 回答的更加细致,NewBing 回答的更加准确简洁。直观感受是 ChatGPT 的文案能力更好,这个效果差异更大是因为 ChatGPT 的语料质量相比网络搜素的数据质量更高,所以生成文案的能力相对质量更佳。

我们知道 ChatGPT 语料是到 2021 年,ChatGPT 不能联网,对于涉及 2022 年之后问题没有能力解答的,这个是 ChatGPT 发布之初存在的问题之一。NewBing 因为可以联网引用最新的数据,将这个问题的得以解决。在一些时效性问题上,ChatGPT 与 NewBing 相比没有竞争力。