Nous Research推出Psyche网络,通过区块链技术汇聚全球计算资源,成功实现40B参数大模型Consilience的预训练任务,总计20万亿token,创下互联网最大规模预训练纪录。该网络采用DeepSeek V3 MLA架构,优化计算效率,并利用闲置GPU大幅降低成本。DisTrO技术解决带宽瓶颈,强化学习框架支持异步训练,推动全球协作与创新。Psyche网络计划逐步开放,为开源社区和小型团队提供与科技巨头抗衡的机会,标志着AI民主化的重要一步。
来源:https://mp.weixin.qq.com/s/KvryEjpY02GL7pGQ6eUjdQ