487 天前

06月13日,星期二 12:15

阿联酋打造的 Falcon-40B 语言模型在 OpenLLM 上排名第一,持续霸榜

火讯财经讯,据IT之家6月13日报道,近日,阿联酋科技创新研究所(TII)打造出了400亿参数的语言模型Falcon-40B,在HuggingFace的OpenLLM排行榜上排名第一,并持续霸榜,赢过此前LLaMA、StableLM和RedPajama等竞争者。据称,Falcon-40B使用了384颗GPU来进行2个月的训练、利用将近5亿个Token训练而成。为提高训练过程的质量,团队还自己组建了一套工作流程来筛选出“最高质量的的资料”供给AI模型训练。经多个基准测试,表现比LLaMA、Vicuna和Alpaca更加出色。此外,团队还采用了“多重查询注意力”(Multiqeryattention)机制,来提高模型的效率。“多重查询注意力”机制即模型可以对每个Token进行多个查询,来更好表示同一序列中,不同token之间的关系,以在加速模型运算效率的同时,降低模型的复杂性,进而提高模型整体的可维护性。阿联酋科技创新研究所首席执行官RayO.Johnson博士表示:“2023年将是人工智能之年。Falcon模型对我们来说具有里程碑意义,但这仅仅是个开始”。

0
0
  • 某巨鲸再次买入200枚BTC,目前在BTC上获利约1.81亿美元

    火讯财经讯,10月12日消息,据Lookonchain监测,一位聪明巨鲸在BTC上获利约1.81亿美元,今天又买了200枚BTC(1256万美元)。 该巨鲸在2023年8月24日至9月2日期间以26,429美元的价格购买了6,000枚BTC(1.586亿美元),并在1月10日比特币ETF推出之前以44,381美元的价格又购买了2,000枚BTC(8876万美元)。他以3月份价格高点的平均价格68,398美元卖出了1,500枚BTC(1.026亿美元)。他目前持有2615枚(1.65亿美元),BTC总利润约为1.81亿美元。

    7 分钟前

  • 过去24小时全网合约爆仓约9981万美元,主爆空单

    火讯财经讯,10月12日消息,Coinglass数据显示,过去24小时加密货币市场全网合约爆仓9980.69万美元,其中多单爆仓2637.87万美元,空单爆仓7342.82万美元。BTC爆仓金额为2918.18万美元,ETH爆仓金额为1092.43万美元。

    22 分钟前

  • 英国男子因在垃圾填埋场丢失比特币起诉议会索赔6.47亿美元

    火讯财经讯,10月12日消息,据Cointelegraph报道,英国纽波特IT工程师JamesHowells因意外丢弃了存有8,000枚比特币(此前3月份有报道称是7500枚比特币)的硬盘,向英国纽波特市议会提起诉讼,要求赔偿4.95亿英镑(约合6.47亿美元)。Howells曾多次试图从当地垃圾填埋场找回该硬盘,但遭到了议会的抵制,议会一再拒绝他挖掘现场的请求。 2013年Howells在家庭大扫除时误将装有比特币的硬盘放入垃圾袋中丢弃,现在这些比特币价值近5亿英镑。2013年,他的8000枚BTC价值约为100万英镑(约合130万美元)。Howells已经组建了一个法律专家团队来向法庭提起诉讼,预计将于12月进行审理。

    37 分钟前

  • 特朗普家族加密项目WLFI在10月14日直播中介绍公售详情

    火讯财经讯,10月12日消息,据官方消息,特朗普家族加密项目WorldLibertyFinancial(WLFI)将于北京时间10月14日20:00开启直播,届时将介绍:WLF团队、顾问;特别贵宾的独家见解;公开销售详情。 据AggrNews报道称,马斯克和特朗普有望成为此场直播的潜在嘉宾。经查看,WLFI公告中海报贴出了两位特别贵宾的人像剪影,从形状看起来有点像马斯克和特朗普。

    37 分钟前

  • Vitalik已将多个Meme币卖出换成251.7枚ETH

    火讯财经讯,10月12日消息,据OnchainLens监测,VitalikButerin已将多个Meme代币卖出换成251.7枚ETH,包括卖出100万枚ETH6900换成15枚ETH(约合3.77万美元),卖出1400万枚POPCAT换成74.9枚ETH(约合18.42万美元),卖出33万枚MSTR换成114枚ETH(约合28万美元),卖出140亿枚ITO换成36.5枚ETH(约合8.97万美元),卖出540亿枚SATO换成11.3枚ETH(约合2.78万美元)。OnchainLens表示,Vitalik可能会出售更多代币并向慈善事业捐款。

    1 小时前