深度学习在一系列生物任务中取得了相当大的进展。然而，对于基因组学数据来说，这一进展仅限于预测基因组中序列元素和位置的特征，如转录因子结合、DNAse-I敏感性和基于组蛋白的修饰，或序列是否作为启动子。在更高层次上进行预测，例如在一系列基因组测量的层面上，因维度的诅咒而变得复杂——高维度空间使数据稀疏，并普遍促进过度拟合。

目前解决这个问题的方法包括通过特征选择手动减少维度，通过奇异值分解、负矩阵分解和各种类型的自动编码器等维度缩小技术，或使用试图减少模型权重的稀疏网络。然而，减少数据的维度或模型的容量可能会产生次优结果。

无论单个基因组测量的特征是如何生成的，目前都会进行一个简单的聚合，如和或均值，以获得样本级向量（代表一组基因组测量）。然后，将随机林或神经网络等模型应用于这些样本向量，以执行手头的样本级机器学习任务。这个过程基本上对从给定样本中得出的集合的每个基因组测量进行同等加权，而事实上，一些特定测量可能更突出。

一种更现代的注意力策略，将基因组测量动态加权到样本级特征向量中，可以识别这些特定测量。此外，根据目前的方法，所有学习都发生在样本层面，并且不可能进行“端到端”培训，这将允许由机器学习任务驱动的基因组测量的新编码策略。

这个监督薄弱的问题，即为单个措施（实例）学习特征，而监督发生在样本级别，是多实例学习（MIL）框架。MIL最近彻底改变了计算病理学领域，允许研究人员识别癌症亚型或起源组织，或预测存活率。癌症生物学领域的其他标签可能包括癌症的存在与否，或对治疗的反应，稀疏的基因组测量可能是躯体突变、循环DNA片段、新肽、RNA/蛋白质修饰、拷贝数改变或甲基化位点。

躯体突变是一个复杂但经过充分研究的基因组测量，已经了解了大部分生物学，并有足够的数据来测试新模型。在构建体细胞突变的特征时，目前对生物学的理解可以很容易地引入，例如利用有关基因或路径的信息。然而，对于给定的任务，可能并不总是清楚已知的生物学适用什么，一些措施可能具有不确定的生物学。

在这些情况下，可以使用测量的基本属性，并允许模型通过关注特定实例和/或实例的学习表示来向我们显示哪些特征是重要的。体细胞突变的一些基本特性是其局部序列上下文，之前通过查看相邻的5′和3′核苷酸来总结，以及其基因组位置，该位置表示为1 Mb bins。

2023年11月2日发表在Nature Biomedical Engineering的文章，介绍了一个用于执行注意力MIL的工具，并演示其对体细胞突变数据的应用。本文使用这个模型来计算突变的基本属性，无论是局部序列上下文还是基因组位置。使用模拟数据，本文探索了一系列任务的各种MIL实现，并将拟议的方法与该领域的传统机器学习方法进行比较。

然后，研究人员将模型应用于肿瘤分类，并学习序列和位置的显著特征，同时超越当前方法的性能。最后，本文将模型与确定微型卫星状态的最先进技术进行比较，尽管可比工具使用特定于任务的先验知识，而拟议的方法没有，但本文的模型表现良好。

在这里，本文展示了一个具有多头注意力的弱监督端到端多实例学习模型，可以训练来编码和聚合体细胞突变的局部序列上下文或基因组位置，从而允许对样本级分类的单个措施的重要性进行建模，从而提供增强的可解释性。

研究结果显示，该模型解决了传统模型失败的合成任务，并在肿瘤类型分类和预测微卫星状态方面实现了一流的性能。通过提高需要基因组数据集汇总信息的任务的性能，多实例深度学习可能会产生生物洞察力。

实例特征载体揭示了已知的癌症生物学

综上所述，许多基因组技术生成的数据可以被认为是“大p（特征），小n（样本）”，其中每个样本的可能措施/特征数量大大超过样本数量。例如，体细胞突变可以发生在基因组的任何地方，从而为每个样本创造数不数的可能独特特征。类似的考虑也适用于循环DNA片段、CHIP-SEQ峰值、甲基化位点或RNA/蛋白质修饰。注意MIL是这些问题的自然解决方案，因为它本质上转移了问题——在提取相关特征时，大量实例数据是一种好处，而不是障碍。

原文出处

Anaya, J., Sidhom, JW., Mahmood, F. et al. Multiple-instance learning of somatic mutations for the classification of tumour type and the prediction of microsatellite status.Nat. Biomed. Eng 8, 57–67 (2024). https://doi.org/10.1038/s41551-023-01120-3

Tags： Nature Biomedical Engineering：体细胞突变的多实例学习用于肿瘤类型分类和微卫星状态预测