跳到正文
10月14日周三
  1. Apple Machine Learning35

    利用语音基础模型中的语言选择性维度检测语码转换

    研究者提出利用预训练语音编码器中语言选择性维度直接检测语码转换的轻量方法,无需先转写语音。该方法用单语录音识别相关维度,汇总帧级激活,并以少量语码转换样本调优判定规则。Whisper-small 编码器在 CS-FLEURS 的 14 个语言对上平均 F1 达 0.798,高于 CNN 的 0.776 和 HuBERT 线性基线的 0.751。

  2. Apple Machine Learning44

    三模态掩码扩散模型的设计空间

    研究团队提出从零预训练的三模态掩码扩散模型(MDM),并系统分析其多模态扩展规律与训练设计。基于 SDE 的重参数化将物理批大小与逻辑批大小解耦,无需调优最佳批大小。初步模型规模为 3B,预训练使用 6.4T tokens,在文本生成、T2I 和 T2S 任务中取得较强结果。