谷歌推出 BIG-Bench Mistake 数据集，可协助 AI 语言模型改善自我纠错能力

679 天前

01月15日，星期一 03:00

谷歌推出 BIG-Bench Mistake 数据集，可协助 AI 语言模型改善自我纠错能力

火讯财经讯，据IT之家1月15日报道，谷歌研究院日前使用自家BIG-Bench基准测试建立了一项“BIG-BenchMistake”数据集，并利用相关数据集对市面上流行的语言模型“出错概率”及“纠错能力”进行了一系列评估研究。谷歌研究人员表示，由于过去没有能够评估大语言模型“出错概率”及“自我纠错能力”的数据集，因此他们创建了一项名为“BIG-BenchMistake”的专用基准数据集用于评估测试。据悉，研究人员首先使用PaLM语言模型在自家BIG-Bench基准测试任务中运行了5项任务，之后将生成的“思维链（Chain-of-Thought）”轨迹修改加入“逻辑错误”部分，之后重新丢给模型判断思维链轨迹中哪些地方存在错误。谷歌研究人员声称，这一BIG-BenchMistake数据集有利于改善模型自我纠错能力，经过相关测试任务微调后的模型，“即便是小型模型表现也通常比零样本提示的大模型更好”。

BTC突破89000美元，日内涨幅 2.80%

火讯财经讯，11月25日消息，欧易OKX行情显示，BTC刚刚突破89000美元，现报89043.70美元/枚，日内涨幅2.80%。

1 小时前
ETH突破2900美元，日内涨幅 1.89%

火讯财经讯，11月25日消息，欧易OKX行情显示，ETH刚刚突破2900美元，现报2900.13美元/枚，日内涨幅1.89%。

4 小时前
BTC突破88000美元，日内涨幅 1.60%

火讯财经讯，11月25日消息，欧易OKX行情显示，BTC刚刚突破88000美元，现报88002.00美元/枚，日内涨幅1.60%。

4 小时前
彭博ETF分析师：IBIT空头比例骤降至接近4月水平

火讯财经讯，11月25日消息，彭博ETF分析师EricBalchunas在X平台发文称，BlackRock比特币现货ETF $IBIT的做空头寸已大幅下降。虽然此前空头占比仅为2%，但目前已接近4月行情启动前的低点。

5 小时前
BTC突破87000美元，日内涨幅 0.46%

火讯财经讯，11月25日消息，欧易OKX行情显示，BTC刚刚突破87000美元，现报87010.20美元/枚，日内涨幅0.46%。

5 小时前

679 天前

谷歌推出 BIG-Bench Mistake 数据集，可协助 AI 语言模型改善自我纠错能力

BTC突破89000美元，日内涨幅 2.80%

ETH突破2900美元，日内涨幅 1.89%

BTC突破88000美元，日内涨幅 1.60%

彭博ETF分析师：IBIT空头比例骤降至接近4月水平

BTC突破87000美元，日内涨幅 0.46%

友情链接：