奥地利因斯布鲁克大学的两位研究人员开发了一种方法来确定人工智能 (AI) 系统理解“时间有效性”的程度,这一基准可能对 ChatGPT 等生成式 AI 产品的使用产生重大影响在金融科技领域。
时间有效性是指随着时间的推移,一个给定的陈述与另一个陈述的相关程度。
本质上,它指的是成对语句的基于时间的值。
正在评估预测时间有效性能力的人工智能将获得一组陈述,并被要求选择一个随时间关系最密切的陈述。在他们最近发表的题为“时间有效性变化预测”的预印本研究论文中,Georg Wenzel 和Adam Jatowt 使用了一个声明的例子,其中声明一个人正在公共汽车上读书。
在上面的例子中,最有效的上下文语句是“我只剩下几页了,然后我就完成了。”
由于目标语句表明公交车乘客当前正在读书,因此相比之下,其他两个无关紧要。
图片来源:Wenzel,Jatowt 2024。研究人员创建了一个带标签的训练示例数据集,然后用它来构建大型语言模型 (LLM) 的基准测试任务。
他们选择 ChatGPT 作为测试的基础模型,因为它在最终用户中很受欢迎,并发现与不太通用的模型相比,它的表现明显不佳。
CHATGPT 属于表现较差的模型之一,这与其他关于 TCS 理解的研究是一致的。
它的缺点可能是由于少样本学习方法和缺乏对数据集具体特征的了解。“这表明时间有效性在确定有用性或准确性方面发挥作用的情况——例如在生成新闻文章或评估金融市场时——与 ChatGPT 等更通用的服务相比,有针对性的人工智能模型可能会更好地处理这些问题。研究人员还证明,在法学硕士的训练周期中尝试时间值变化预测有可能在时间变化基准测试任务上获得更高的分数。相关:展望未来:业内人士预测 2024 年人工智能法律挑战虽然本文没有具体讨论实验本身之外的影响,但生成式人工智能系统目前的局限性之一是它们缺乏区分过去和现在事件的能力教导这些系统如何确定语料库中最相关的陈述(其中及时性是决定因素),可以彻底改变人工智能模型在加密货币和股票市场等大规模领域做出强大实时预测的能力。
什么是去中心化金融?去中心化金融可以定义为建立在区块链上的金融应用程序,其功能和基础设施可以通过智能合约公开验证,任何寻求访问权限的人都可以为应用程序提供支持。DeFi 是 web3 中一个相对较新的周期,是一个简化的术...
具体内容如下:-周一(7月8日):预计不会出现重大新闻,表明波动性较低。-星期四(7月11日):主要数据发布包括:-英国国内生产总值(月度)-美国核心CPI(月度)-美国消费者物价指数(月度和年度)-美国失业救济申请-星...
卡塔尔世界杯将在2022年11月21日开幕,揭幕战定于北京时间21日晚18点开球,东道主卡塔尔将亮相揭幕战.小组赛阶段的比赛有四个开球时间,分别是18点、21点、凌晨0点和3点(以上均为北京时间).小组赛阶段每天有4场比...
本篇研究考察了2年内 33 种不同代币空投的价格表现,从 2020 年 9 月的 Uniswap($UNI)到 2023 年 3月的Arbitrum($ARB)。这不是时间范围内所有空投的列表,但会尽可能多的尝试满足这些...