计算机视觉的进步极大地推动了基于视频的数据研究领域的发展，使得这一从移动图像中分析和获取见解的过程得到了扩展。
医疗科技初创公司 Theator利用人工智能“读取”手术过程中捕获的视频，以寻找最佳手术实践，同时帮助识别手术可能出现错误的关键事件。
这家纯软件公司，已在 4 轮融资中筹集了总计 4250 万美元（约3.1亿人民币）的资金。中国也有公司在做类似的业务，MedRobot持续关注。
Theator 是美国加州的一家医疗科技初创公司。公司研发的AI视频平台能够实时处理外科手术视频，识别和捕捉其中的动作，生成跟操作相关的描述和建议，帮助医生提升手术效果。Theator 利用计算机视觉来扫描视频片段并识别关键时刻，以便用元标记对其进行注释。产品形态为软件。（MedRobot提示一下，这个软件工具与手术机器人没有直接关系，但其功能可以供手术机器人公司在设计培训产品、收集手术数据时参考。）
Theator 抓住了一个很有价值的市场机会。目前，Theator 已经创建了大量的外科手术视频，特别是通过微创手术中使用的摄像头探头制作的视频。
当然，大部分视频内容的主要目的是让外科医生能够实时跟踪他们正在进行中的手术。然而，Theator 认为若能够以有效的方式加以利用，这类视频对于医生及其工作的护理机构甚至工作领域（即更广泛的医疗网络）来说可能是宝贵的资源。如果可以对手术视频进行检查，并与其他地方进行的类似手术相比较，之后再与手术结果进行匹配，相信会得出一些有用的结论。
听起来这对人类来说是一项难以完成的任务。原因在于视频量太大，而且对其中一些视频进行解析也十分耗时。人工智能成为了解决这一难题的核心。
Theator 首席执行官兼联合创始人 Tamir Wolf 博士指出，事实上有数千万小时的不同类型的手术视频是通过视觉引导创建的，但是这些视频都没有被捕获、存储或分析，那么医生就无法了解手术室中发生的情况也无法确定最佳实践。Theator 的目标就是能够帮助医生确定最佳手术实践并分享出来。而这也是人工智能真正发挥作用的地方。
Wolf 博士将 Theator 的视频平台描述为“外科智能”。它花费多个小时录像，并且可以实时识别任何手术中的关键事件。因此，在六个小时的胰腺手术中，系统可以利用机器学习和计算机视觉来构建原始镜头，将该视频与同类手术的其他视频进行比较，然后将视频中发生的情况与早期手术的结果进行匹配，以进行打磨关键的“良好手术效果”特征以及情况出现分歧的地方。
之后，这些数据会与个别医生、团队及其所在的医疗机构等共享，以便更好地了解现有患者（更好地进行术后护理）和未来的手术。
Insight Partners 副总裁 Brad Fiedler 在一份声明中表示，事实证明，Theator 提供的技术是外科手术进一步发展的关键。将人工智能和计算机视觉集成到手术室可以改善手术护理，提升手术效果。Insight Partners 很高兴能够加倍投资 Theator，因为其在人工智能和计算机视觉方面的专业知识正在改善患者的治疗效果。
迄今为止，Theator 一直在与医疗服务提供者（即进行手术的医院和诊所）进行谈判。可以想象到保险公司、个人医生甚至患者都希望访问此类数据，以便更好地了解手术的具体过程。也许更重要的是，这一技术能够发挥像行车记录仪那样的作用，即在出现问题时可以查询到相关事件的记录。
Theator开发的Minutes平台能够捕获手术视频中的数据，利用AI和计算机视觉，自动分析每次手术过程，帮助外科医生了解患者预后变化的原因，同时简化手术室的程序，降低成本。该平台还提供其他数据，包括完成手术每个步骤所需的时间。根据Theator的说法，到目前为止，该平台已经获得了6项专利。
十几个医疗中心正在为theator的手术视频数据集做出贡献，目前已经成为全球最大的智能手术登记处。该数据集目前包含超过三十万个小时的手术视频，涵盖超过一百二十万个术中时刻，分析近十亿帧画面，生成可视化操作报告超过七千份。
平台的视频技术可以实时记录完整的手术过程，并提供给医疗团队全方位的患者患病部位图景。在手术过程中，平台能够实现实时性更新和通知，及时告知临床医生术中发生的关键事件，例如当检测到术中有显著出血时，及时反馈并使其能够优化手术结果。
每个用户的视频库都是根据个人手术需求以及其使用中标记的精选、共享和保存的按钮进行个性化策划的。在这之中，最为突出的功能就是按需求查看手术的关键时刻。
通过将人工智能驱动的分析应用到视频中，Theator 的平台将结果数据分解为步骤、事件、决策和里程碑，方便外科医生进行术后复查。例如在胆囊切除手术中，自动化标记出粘连溶解、胆囊管导漏、关键安全视野三个重要的步骤，供给临床医生直接查看需要的节点。
该平台还将通过自动EHR将手术视频与术后结果数据相关联，提出可供参考的意见，帮助改善后续护理过程，同时减少相关并发症的产生。
一旦一个手术的视频被上传平台进行智能化处理，外科医生可以立即集中查看智能平台选择的关键时刻突出的数据包，从而做出重要的决定。每个手术过程都会被添加到 Theator的训练数据集，扩展其模型的理解。
在该平台的数据库中，保存着数千种相似的医疗案例。平台能够通过机器学习和提供精确的医疗图像来帮助医疗团队分析患者情况，将手术与相似案例进行对比，减少手术失败的可能。
在用于培训时，外科医生能够以列表形式查看手术视频记录（例如，“减压，囊性导管泄漏”等），并跳转到他们希望学习的步骤；用户也可以获得手术表现的摘要以及KPI，分析和排名，以确定自己需要技能培训的地方。通过桌面和移动应用程序，外科医生可以访问超过40万分钟的手术视频索引库，其中包括超过8万个“术中”时刻。
在用于术中时，据Theator报道，他们的手术智能平台是世界上第一个也是唯一一个实时手术视频AI。手术开始的那一刻，Theator开始自动记录和分析并提供实时更新，以优化手术效率，并通知外科医生术中发生的关键事件，每个用户的体验都是根据他们自己的手术以及特色，共享和保存的程序来策划的，并且可以按需查看关键手术时刻，访问一系列参数（包括步骤、事件和里程碑）。
Theator的研究团队还开发了VTN（视频传输网络），这是同类产品中第一个基于Transformer的视频动作识别框架，可显著减少训练运行时间（x16.1）和加速推理过程（x5.1），同时保持最先进的性能。VTN有可能显著加快Theator平台的视频输入和审查组件，从而提高平台在全球医院大规模推出的能力。
Theator创立于2018年，总部位于美国帕洛阿尔托和以色列特拉维夫-雅法，是一家致力于打造结合人工智能和计算机视觉的外科智能平台的医疗科技公司。Theator的首款产品Minutes于2019年4月推出，是一款功能强大的卷轴和分析工具，可提供智能编辑的手术程序版本。目前，Theator正在构建一个SaaS平台，为外科医生提供AI驱动的决策支持工具。
Theator的联合创始人兼首席技术官是Dotan Asselmann，他毕业于以色列特拉维夫大学。Dotan在以色列军事情报处担任计算机视觉负责人时开始了职业生涯，六年后，他联合创办了EyeOnn，这是一家利用计算机视觉来解决游泳池中溺水事件的电子公司。另外，Dotan还领导着以色列最大的计算机视觉小组（Computer Vision Israel Meetup），这是一个大于3500人并处于持续增长中的组织。
Tamir Wolf是Theator的另一位联合创始人和首席执行官，2001年他获得以色列理工学院医学博士学位，2010年获得哈佛商学院MBA学位，出版多本医学论文著作。在联合创办Theator之前，曾在多家医疗公司担任高管职务，包括Accelmed、Digma Medical等，并在2014年联合创办NiTiNOTES Surgical，该公司提供一种帮助肥胖患者减轻体重的非手术方案。
2021年2月9日，Theator 在 A 轮融资中从 Anne Wojcicki 和其他8位投资者处筹集了1550 万美元，用于开发计算机视觉分析手术镜头。
值得注意的是此轮融资引入了妙佑医疗国际（Mayo Clinic）这一大型战略投资者。该机构正在与 Theator 开展合作，利用公司的视频分析工具。其他合作伙伴包括加拿大普通外科医生协会和其他尚未披露的合作伙伴。
标签： #31亿融资！一文了解这家
评论列表