关于这里的第一点,我尝试让 ChatGPT 辅助我干了一个最行活的工作,写苹果财报分析。
一、它无法准确抓取苹果的财报信息、计算增长率等数字,一大半数据都是错的;
二、它无法通过财报数据,主观评价财务表现,分析走势,只会说类似「表现强劲」的车轱辘话;
三、它无法将财报数据,与苹果的产品更新进行对应,比如无法从财报表现联想到 ARM Mac 策略有效,即便我提示后也不行;
四、它没有「抽象理解时间」的能力,对时间的理解非常机械,我问「过去 5 年」,它就给 2018 年的财报,这个能力在任何工作中都很重要。
这四个能力都没有的话,就比较尴尬了。
此外我还尝试问了他关于音乐的话题:
给一段歌词让他搜索,给出的信息是编的,模糊搜索能力更不行;
让他整理某个歌手在 Billboard 排行榜的历史表现,信息准确度不够,有遗漏、错误;
让他主观理解两首歌(都是很浅显的流行乐),能说出一些理解,但非常车轱辘话;
最关键的是,上面这些尝试,我发现,ChatGPT 和 BingChat 给到的结论,都是对已存在结论的二次加工,且完全不筛选来源。比如我问苹果财报,它并不具备从苹果官网抓取原生信息,然后整合加工的能力,而是相当于搜了一堆不同统计方式、不同口径的数据,不同的观点评价,将它们捏在一起,这必然不准确。
Post #2807
4.17K
小破不入渠🌏 这一周用 BingChat、ChatGPT 的几个感受是: 1.generative AI 还取代不了我的工作,无论是 fact check 还是 find the connection 的能力,即生成信息的准确度和深度,都不是很行。它依然是一朵概率云,不具备人类智慧里最关键的「抽象理解能力」,所以大部分时候都在说一些「看起来自然」的废话。 2.距离所谓的 AGI 有多远,我觉得无法评估。因为算法是黑箱,不能点对点地 debug,真正的难题是 edge cases。这也是为什么 Tesla 很润滑地解决了…