抢先GPT-4!微软Bing突然升级「识图」功能,读梗看病写代码,样样精通

什么,微软的Bing能识别图片了?还是抢在了ChatGPT之前?

和当初只画饼、不落地的GPT-4预览相比,Bing这次可谓占尽了风头。

有Reddit网友发现,Bing的界面上突然就出现了个上传图片的选项。

202307251722502228738419533f2fa3e524c26f637ee739fd37716

据说,上传一张图片之后,Bing什么都能干。

不管是编程写代码、做题作图,甚至看病,通通不在话下。

(但似乎还在小规模测试,比如小编就还没体验到)

看梗图

在大量网友发现这项功能以后,最先测试的肯定是各种各样的梗图。

把梗图输入给Bing,看看它能不能分析出笑点在哪里。

比如下面这张图片,一个男人在出租车后面熨衣服,而且车还在开着。

Bing表示,这图里不同寻常的部分太多了。首先,在出租车上熨衣服很离谱,其次,男人穿的衣服和出租车颜色一致,是不是在暗示什么?或者是某种巧合?

第三,熨衣板固定在出租车上,这样有不稳定的风险。最后,男人正在熨的衣服是蓝色的,和黄色撞色了,是不是在暗指什么?

2023072517205344eb24b186f5c4c665c819af6153749d002571114

能看出,Bing还是尽可能的捕捉到了图片中的所有细节,甚至分析的还挺有道理。

而在下图这个「为什么要给神经网络加层数?」的漫画中,Bing也给出了自己的分析。

20230725172053d31301e311045078a380497a3dda9d7f9298e8523

2023072517205339ab324416af99a9680675075bd36572a1f34c164

这个漫画夸张了统计学习和神经网络的差异,让前者使用的严肃和技术性语言与后者的简单直接建议形成对比,创造了一种幽默的并置效果。

总的来说,这个漫画利用了与机器学习这两种方法相关的刻板印象和常见看法,突显了统计学习和神经网络的不同。

当然,相同的图片也在预览版的GPT-4中展示过。

GPT-4一针见血地点出,这副漫画讽刺了统计学习和神经网络在提高模型性能方法上的差异。

20230725172054968553f909f1e06158a70865926c8afbc265ac128

但在另一组图中,Bing似乎并没有get到点。

202307251722501285ad261aeab726930115f94c82272383c1c9771

Bing还装模做样的分析了分析,它说也许是接头和包装的反差?也可能是插头的底下看着像一张脸。

甚至还没话找话的分析了三幅图片分别是什么,就是没提梗在哪里。

20230725172054844b61500c697da7d4139860a47aa9facd818e440

不过,如果让Bing去做一些客观分析的话,比如识别线材品牌,结果还是非常准确的。

2023072517225178c668511eb1c83aa7190992ee2a8da07e6525642

相比之下,GPT-4在逐个分析下面这组梗图时,可以立马反应过来——

图里的这个「Lighting充电线」,看起来就是个又大又过气的VGA接口,插在这个又小又现代的智能手机上,反差强烈。

2023072517225258b17921725187a3ca96052fdfa5254b0e5d81644

写代码

当时GPT-4在画饼的时候,最惊艳的就是它对代码的超强的理解能力。

在演示中,Greg Brockman直接在纸上画了一个草图,拍个照,发给GPT-4说,给我按照这个布局写网页代码,就写出来了。

20230725172055569c7e16615fc6ea1f783682447141a4206b85182

这个小哥也让Bing试一试,能不能搞个同款笑话网站出来。

2023072517205687b90e812b6faa23ac947938446ddd3e66c0a2672

最终效果看起来还真不错,虽然界面看起来没多美观,但是该有的都有。

20230725172057585c07b66c7b470c9dd037145dce0c99a111b9144

程序代码如下:

2023072517205777c8c63618ea287770f495e335e789b0ebc286285

20230725172057022bb06372be2c16e1130159870573e372cb41670

2023072517225281f108a79b1c57577e184072a451c3a97cb8ed937

接着,小哥让Bing继续完善代码,把对应的网页给做出来。

202307251720595480e76407f4f19a8482193a5087c935829097143

Bing表示当然可以,只需微调代码。但是指出了JavaScript并不是编译语言,而是一种解释语言。

所以不需要一个编译器,只需要浏览器或者一个JavaScript的引擎就好了。

友情科普完,Bing也是成功完成了任务。

2023072517205969f8caa97cfcded2d194798dd9607efa6c559c902

2023072517210125c7efb08b90d5d047f99467ab73c37cd350a4357

当医生

下面这个用例就比较厉害了。

小哥直接拍了一张发红手臂的图片,问Bing自己得了什么病。

Bing直接判定为瘀伤,皮下血管破裂。

2023072517210109732ce0160284cf54937630274aa975674dc1944

甚至还开出了很多方法来缓解症状:

  • 前24个小时贴冰袋,缓解肿胀和发炎。
  • 24小时以后加热,促进血液循环,清除淤血。
  • 把瘀伤的部分抬到比心脏高的位置,降低血压和血液聚集。
  • 服OTC止痛药。
  • 多吃富含维生素C、维生素K、锌,以及菠萝蛋白酶的食物,加速伤口愈合以及胶原合成。
  • 涂药膏减轻瘀伤和发炎肿胀。

2023072517210279ce6fb60aef9dfcc281169ddb8851ce620e06523

还是蛮专业的。

还有小哥发了一张组织的横切面图让Bing来断一断。

Bing不仅识别出了图片内容,还详细的讲解了一下什么叫组织,什么叫横切面。

甚至还解释了什么情况下会用到组织的横切面图。

20230725172253e90889c5736622a00586670928720d8688de19993

接着小哥追问,你觉得是什么组织的切面?

Bing分析认为,这是肌肉组织的横切面。

甚至,Bing还十分严谨地指出,自己不能单独根据一张图,来判断这个人是不是健康。

202307251721024576f71342515cee8c25576327fd90b7829fc7652

还有网友化身苦难中的大学生,让Bing当个好老师,给他讲讲图里是个什么玩意儿。

Bing表示,好好听老师说(删掉),这是肾元,主要有四个功能,分别是blah blah blah...

2023072517210226cca67322b4445742f80180ca720600b478e8417

好家伙,以后这种梳理总结类的学习任务,直接甩给AI就完事了。AI永远不会失去耐心。

甚至直接有人甩给Bing一道有关细胞减数分裂的题。

Bing表示,上传的图片是减数分裂的示意图,从一个二倍体细胞分裂成四个单倍体细胞。

然后又从减数分裂的过程、意义进行了讲解。

2023072517225245a0b784203564c2fe1659026f167b67f2c26e393

有时并不太灵光

当然,Bing的识图功能目前还有不少改进的空间。

比如,小哥问图中A框里有几个×(根据图例,A.trifida就是×)。

人眼一看是11个,可怎么Bing说的不对呢。

202307251721039606a9b76ef7501b880619b5b39a3c155bcfc1949

Bing说总共有9个,A框里5个X,B框里4个○,加起来一共9个。

说好的A框,说好的X呢!怎么又○又B框的。

20230725172104a3f9d783257879d22c8170d4f3a3b9f1df6d05409

再比如,这张《任天堂大乱斗》的游戏角色图中,Bing只认出了其中的7个角色。

2023072517210542ef41962bccaf788a19526514d333ab60b069501

然后,小哥又问一个国际象棋的问题:「在这个开局里,白棋接下来该怎么走?」

但Bing一上来就回答错了:「现在轮到黑棋走,至于白棋怎么走,取决于黑棋……」

网友赶紧更正称,不对,你先看清棋子的位置,然后我再说一遍,现在是轮到白棋走。

20230725172105661af7b45e8807faaca066d7b3b7a11960bf42863

然而,Bing这次依然没有回答正确——在给出的位置中,有好几处实际上都没有棋子……

20230725172105f155e8a45a6a3052e771617fee6ec2ba007fca449

能看出来,Bing新添的识图功能性能倒是挺强大。

开局一张图,后面全靠强大的生成能力发挥。

事实性的识别和生成感觉问题不大,就是不知道未来有点文化隐喻的那一趴能不能做到更好。

参考资料:

https://www.timesnownews.com/technology-science/snap-and-ask-microsofts-bing-chatbot-now-accepts-picture-prompts-article-100900618

© 版权声明

相关文章