癌细胞检测，只要0.0758秒 | 谷歌AR+AI显微镜问世

量子位·2018-04-17 15:45

目镜的图像会传给带深度学习模型的计算单元。然后AI模型将分析结果实时投到目镜的视野里。

编者按：本文来自微信公众号“量子位”（ID：QbitAI），作者：Root，36氪经授权发布。

癌症的诊断特别累人。

取材切片固定染色都还好，最耗时费神的要数看片了。

病理学家们要想从一团密密麻麻的组织细胞里，找到空间排列奇怪，细胞核形状诡异的癌细胞，就得守在显微镜后头，一张一张活检切片看过去，看到天荒地老，海枯石烂。

虽说得益于AI近期的发展，已经有相应算法可以快速处理切片的染色图像了。

但谷歌大脑团队发现，AI技术下铺到临床医院时还面临一个麻烦：得先获取切片的数字图像。

原来，医生直接看切片就好了。给AI看反而还要多加一步：先拍下来，再传给AI分析。这么麻烦，医生当然不乐意了。没办法，习惯的惯性就这样拖慢了AI下沉的脚步。

是否有其他技术可以一步到位，将算法的分析结果直接在显微镜里？

有。AR，增强现实。把计算的信息叠加到真实的视觉信息里。

不仅可以直接投在目镜上，速度上还快得让人难以置信。

只要0.0758秒。就给你揪出来癌细胞。

今天，在美国癌症研究协会年度会议（AACR）上，谷歌大脑团队提交了一篇论文An Augmented Reality Microscope for Real-time Automated Detection of Cancer，提出了一个AR显微镜的原型。目前该论文还在待审核中。

这套神奇的AR显微镜平台是怎么工作的？

首先，目镜的图像会传给带深度学习模型的计算单元。然后AI模型将分析结果实时投到目镜的视野里。

该平台原型长这样。

出结果是挺快，但贵吗？

要知道，铺开技术的关键，是低成本。

好在这套AR显微镜适配性高，可直接加装在一线医院现有的显微镜上。只需购买带得动AI算法的AR设备，就能升级医院的癌症检测技术。

实际诊断效果怎么样？

目前，谷歌大脑团队已经成功地在这套AI+AR显微镜平台原型系统里运行了两套不同的癌症检测算法。

一个是看淋巴结组织有没有乳腺癌细胞；另外一个，是找前列腺组织里的癌变区域。

△ 4倍镜到40倍镜下的影像feed，分析起来统统无压力。

可疑的癌细胞，会被一个荧光绿圈框起来。

在定位、定性癌细胞的准确率方面，这套平台都有相当优秀的表现。找出乳腺癌细胞的准确值可达0.96，位置判断精准值可达0.98。

理论上，除了画圈，AR技术可直接上文本标注，打箭头，出热点图，给段动画。只要觉得能帮助病理学家诊断，什么方式打标记都行。除此之外，AR显微镜还完成做细胞计数，细胞分类等任务。

论文中还指出，这套AR显微镜的刷新率是10FPS（帧每秒），基本上可以满足病理学家看片的需求，不管是转换40倍镜还是上下移片子，都可以做到低时延输出分析结果。时间上能做到0.0758秒，可以说是完美了。