最新研究显示，当前主流生成式AI工具存在严重的文化偏见，其底层模型过度偏向代表"WEIRD"（西方化、高教育水平、工业化、富裕、民主）尤其是美国价值观的数据训练集。这种系统性偏差导致AI在非WEIRD文化区域的应用中...

这篇技术长文系统性地剖析了大语言模型（LLM）的后训练完整生命周期，涵盖了监督微调（SFT）、奖励建模（Reward Modeling）以及强化学习方法（如RLHF）三大核心阶段。作者不仅详细阐述了如何通过人类反馈的强化学习...

据《华尔街日报》报道，Meta CEO马克·扎克伯格近期发起了一场针对OpenAI顶尖研究人员的激烈挖角行动。消息人士透露，扎克伯格已向超过10名OpenAI研究人员提供了总额达3亿美元的四年期薪酬方案，平均每人每年可获得约...

Epoch AI最新研究显示，人工智能领域正经历前所未有的计算规模扩张。2024年全球已追踪到201个计算量超过10²³ FLOPs的AI大模型，较2017年仅有的2个实现指数级增长。尤其值得注意的是，以GPT-4为代表的顶尖模型已突破1...

Meta近期从OpenAI苏黎世办公室挖角了三名人工智能领域的研究员——Lucas Beyer、Alexander Kolesnikov和Xiaohua Zhai，以加强其超级智能研发团队。这三位专家此前曾在Google DeepMind共事，拥有深厚的AI技术背景。Meta...

Nous Research近期推出的Psyche网络是一个基于Solana区块链的分布式训练系统，该系统允许拥有兼容硬件的用户自愿贡献其GPU资源用于AI模型训练。该项目的首个计划"Consilience"旨在利用20万亿个token训练一个拥有400...

人工智能研究机构Ai2近日推出其最新研发的小型AI模型Olmo 2 1B，该模型拥有10亿参数，在关键基准测试中表现优异，超越了谷歌和Meta等科技巨头发布的同规模模型。这一突破性进展展示了小型化AI模型的巨大潜力，表明在...

McGill-NLP实验室推出的Nano Aha Moment项目在GitHub开源，该项目通过极简架构实现高性能深度学习训练——仅需单个文件和一块GPU即可完成从零开始的完整参数调优，并复现了DeepSeek R1-Zero模型的训练范式。这一突破性...