跳到正文

#数据/训练

今日 1 条
今天9月30日周三
9月29日周二
9月22日周二
9月16日周三
9月11日周五
9月4日周五
  1. Google Research49

    Google Research:利用迁移学习改善代表性不足人群的基因组预测

    Google Research 评估欧洲人群数据向日本人群的多基因风险评分迁移,发现混合训练的收益随目标人群样本增多而下降。研究覆盖八项临床性状,目标样本仅 5,000 时,加入欧洲数据有助于预测。跨人群遗传相关性较高的性状可在更大目标样本规模下保留收益,血脂和血糖的收益则较小。

9月2日周三
  1. Google Research56

    Google Research 解读 MAPL-EMIT 如何用深度学习绘制全球甲烷排放图

    Google 与 NASA JPL 合作的 MAPL-EMIT 研究发表于 PNAS,利用卫星高光谱数据检测甲烷羽流,对专家标注羽流的召回率为 84%。该框架以 3.6 million 个合成羽流训练,结合光谱与空间上下文量化甲烷增量、划分羽流边界并定位排放源,在约 1100 个 EMIT 数据颗粒中识别出约 50% 更多的可能羽流,但复杂地形中的误报仍是挑战。

8月28日周五
8月25日周二
8月21日周五
  1. Google Research46

    ME-POIs 如何利用流动数据加深语言模型对地点的理解

    Google Research 提出 ME-POIs 框架,将匿名聚合的流动模式融入文本地点表示,提升地点属性预测能力。结合先进文本模型后,访问意图预测相对提升最高达 81.9%,价格等级分类提升 75.1%,未见地点的繁忙程度估计准确率提升 24.7%。框架还利用周边地点的访问模式缓解数据稀疏问题。

  2. Hugging Face Blog73

    Hugging Face 研究量化语音识别基准优化:部分高分模型复现错误参考转写

    Hugging Face 的研究对 11 个开源 ASR 模型开展三类测试,发现部分高分模型在音频与参考文本冲突时仍复现基准答案。在 LibriSpeech 上,部分基准表现较强的模型在约 30–40% 的样本中恢复了已被静音的数字,而若干模型在新采集音频上的这一现象减弱,提示基准相关声学线索可能影响转写。

    推荐理由:通过参考错误复现、数字静音和拼写切换三类探针,研究提供了区分真实转写能力与针对公开基准优化的可迁移评估方法。

8月10日周一
  1. Hugging Face Blog49

    Hugging Face 解析如何降低知识蒸馏成本以支持规模化实验

    Hugging Face 展示离线缓存教师模型输出与融合分块 KL 损失如何降低知识蒸馏成本,让单 GPU 长上下文能力恢复训练成为可能。该方法缓存每个位置的 top-100 logits,训练时无需加载教师模型;融合分块计算避免构建完整词表与序列矩阵,示例中显存峰值从约 250GB 降至约 128GB。

7月31日周五
7月26日周日
  1. Berkeley AI Research48

    ABBEL:教大语言模型更新信念,实现高效长程交互

    ABBEL 通过监督自然语言信念状态的更新,改善大语言模型在长程交互中压缩上下文后的表现。在协作编程环境 CollabBench 中,相比不采用信念评分的摘要训练,基于重建的信念评分将与完整上下文模型的性能差距缩小约 50%,训练步数减少 50%。训练后,其峰值上下文 token 用量仍显著低于完整上下文模型。

7月16日周四
7月9日周四
7月1日周三
6月30日周二
6月17日周三
  1. Google Research41

    从像素到规划:Google Earth AI 助力自然修复

    Google 发布基于 Earth AI 的矢量化数据集,将英格兰树篱、石墙和小树林的像素地图转化为可用于自然修复规划的生态清单。团队微调 RSF 视觉模型,并结合双层标注、跨网格几何合并与形状分类,识别标准卫星检测容易遗漏的细小生态特征,为土地管理者提供测量和扩展这些特征的数据支持。

6月11日周四
6月5日周五
  1. Google Research70

    Google Research 探索用手机摄像头被动监测心脏健康

    Google Research 在 Nature 发表 PHRM 研究,利用面部解锁后的 8 秒前置摄像头视频,通过深度学习估算心率并汇总每日静息心率。在真实生活验证中,经置信度筛选后的心率平均绝对百分比误差为 6.09%,每日静息心率相对 Fitbit Charge 6 的平均绝对误差为 4.39 bpm,但较深肤色组的心率测量成功率较低。

    推荐理由:研究将真实生活场景中的误差与不同肤色的测量成功率分开呈现,为评估手机健康监测的准确性与覆盖差异提供了参考。

5月27日周三
4月22日周三
4月16日周四
  1. Google Research49

    Google Research 的 Simula 如何从第一性原理出发,以机制设计构建真实场景合成数据集

    Google Research 的 Simula 以推理优先、无需种子数据的方法构建完整合成数据集,可分别控制覆盖、多样性、复杂度与质量。研究以 Gemini 2.5 Flash 为教师、Gemma-3 4B 为学生,在五个领域评估,完整系统均优于简化基线。提高数据复杂度有益于数学推理,却损害法律推理表现,数据设计需适配模型能力。

4月9日周四
  1. Google Research50

    ConvApparel:衡量并缩小用户模拟器的真实性差距

    Google Research 的 ConvApparel 数据集与评估框架用于衡量大语言模型用户模拟器与真实用户行为的差距。数据集包含超过 4,000 段服装购物对话、近 15,000 轮交互,参与者被随机分配给有帮助或刻意不配合的 AI 智能体。框架结合群体统计、类人评分与反事实验证,检验模拟器面对陌生情境时的反应是否可信。

4月1日周三
3月25日周三
3月13日周五
3月12日周四
  1. Google Research71

    Google Research 推出 Groundsource,利用 Gemini 将新闻转为洪灾历史数据

    Google Research 推出 Groundsource 方法,利用 Gemini 从新闻提取洪灾信息,并开放包含 2.6 million 条历史事件记录、覆盖超过 150 个国家的数据集。

    推荐理由:新闻记录可补充传统监测容易遗漏的局地短时洪灾,为历史数据稀缺地区的预测模型训练与验证提供另一类数据来源。

9月1日周一
  1. Berkeley AI Research42

    word2vec 究竟学到了什么?

    新研究给出 word2vec 学习过程的定量预测理论,证明在特定近似条件下,其学习等价于对目标矩阵进行 PCA。从足够小的初始嵌入权重出发,模型逐步学习正交线性子空间,每一步增加嵌入矩阵的秩。这些特征可由语料统计与算法超参数预先计算,学习动力学的闭式解与数值实验高度吻合。