实用版ChatBing论文阅读助手新测评
AI进化（更新）的速度太快了！距离我上次的【Chat嘴硬！基于NewBing的论文调研评测报告】，才四天，它已经进化到快能用的地步了！
这次是我刷B站看到热门推荐，有一个up主，分享了一个教程：新版Bing——科研人的终极解决方案
他介绍了新版的edge dev版本浏览器，可以分栏阅读你的pdf文件。
他视频做了演示，我这篇帖子，做一个详细的教程，以及测评，把上次网页版的Chat嘴硬的问题拿过来再问一次。
另外，我要检测一下，它到底是读取了pdf网页的全文内容，还是只读取了标题，然后去网络上搜索，重新生成。
教程：
- newbing排队，点击
www.bing.com/new，加入waitlist，把它推荐的那两个优先操作做了，否则时间再长都不行！ - 如果你已经排上队了，会给发一个邮件提醒你。听说最近排队周期变长了，之前是四天左右。
- 下载dev版本的edge浏览器！网址是：https://www.microsoftedgeinsider.com/zh-cn/download?ch
- 安装后，登录你排上队的邮箱
可以网页版本聊天，但这次我们测试的是侧边栏的功能。
5. 用Edge dev浏览器打开本地PDF格式的论文，会看到右上角有一个bing的案件，点开，会看到下面的图片：
- 接下来就可以让chatbing来帮你总结文章了。
重现测评：
- 根据这篇文章的内容，帮我回答下面的问题:Q1论文试图解决什么问题?Q2这是否是一个新的问题?Q3这篇文章要验证一个什么科学假设?Q4有哪些相关研究?如何归类?谁是这一课题在领域内值得关注的研究员?Q5论文中提到的解决方案之关键是什么?
- 根据这篇文章的内容，再帮我总结一下下面的问题：Q6论文中的实验是如何设计的?Q7用于定量评估的数据集是什么?代码有没有开源?Q8论文中的实验及结果有没有很好地支持需要验证的科学假设?Q9这篇论文到底有什么贡献?Q10下一步呢?有什么工作可以继续深入?
这两段文字输入进去，它并不能回答：
我将问题翻译成英文就可以了。
然后出现了诡异的问答场景：
我怀疑这次版本更新对中文数据的处理大大削弱了。
下面的提问，我换了一种prompt方式：
这次可以正常的回复了：
A10后面没有输出了，这段回答比较长，断掉了。
这段表述还是比较理想的，我把上次的问题重新再问一下：
这次回答正常了，但偶尔还会出现它把你的中文，翻译成英文的情况，非常诡异。
再次分析这段回答的正确性：
再测试一下论文细节：
直接提问，会报错，因为新版本，连续对话能力也被削弱了~~~
看来有点问题，没有结合文章内容回答，我继续尝试用英文直接提问：
看来也有问题，不知道是不是我提问的方式不对。
探讨是根据pdf内容，还是重新进行网页搜索：
实验设置，我将这个pdf只保留第一页，其他的用别的文章的内容替换掉，我想看看，它会按照谁的来。
第一页是上面那篇文章，第二页到之后都是DHER算法：
我尝试了几次，获得了下面的截图：
有点诡异，所以它是有读取PDF的功能，但是提问会经常出问题，也许是用多了，现在直接不给我回复了～～～
放弃测评~~~
本文链接：https://my.lmcjl.com/post/7035.html
4 评论