欢迎光临小豌豆知识网!
当前位置:首页 > 电学技术 > 电通讯技术> 医疗运动图像处理系统独创技术70589字

医疗运动图像处理系统

2021-02-13 12:33:46

医疗运动图像处理系统

  技术领域

  本发明涉及一种医疗运动图像处理系统。

  背景技术

  近年来,存在如下一种医疗运动图像处理系统:为了在外科手术中记录手术内容等,使用多个摄影装置拍摄运动图像并保管到服务器中来进行管理。

  作为与这种医疗运动图像处理系统有关的现有技术,例示下述的专利文献1。

  在专利文献1中公开了一种发明,其目的在于,在存储包括要关注的图像(关注图像)的运动图像并在事后进行再现的情况下,简单且直观地掌握关注图像。

  现有技术文献

  专利文献

  专利文献1:日本特开2015-211831号公报

  发明内容

  发明要解决的问题

  专利文献1所涉及的发明具有保存功能(剪辑保存),该保持功能是指以关注图像为基准来决定保存范围,将与所决定的保存范围对应的运动图像数据同用于确定关注图像的信息一起部分地保存。另外,在该文献中公开了以下内容:在使用上述保存功能的情况下,能够以关注图像所对应的时间点为基准保存与其前后期间对应的运动图像数据,或者用规定的GUI(滑动条等)调整保存范围。

  另外,在一般的医学界的学会发表中,对发表者分配规定的可用时间,在为了学会发表而制作嵌入了拍摄手术内容得到的运动图像数据的幻灯片等的情况下,大多进行调整该运动图像数据的长度(时间长度)的编辑作业。

  在此,在使用了专利文献1所公开的上述保存功能的情况下,在用户切取包含所需要的影像内容(关注图像的前后部分)的运动图像数据的情况下,该运动图像数据的长度难以固定,需要另外进行用于时间调整的编辑作业,在这一点上与现有技术没有差异。另外,在用于制作资料的运动图像数据为多个的情况下,该问题更加显著。

  本发明是鉴于上述问题而完成的,其目的在于提供一种能够减轻医疗用的运动图像文件的编辑作业中的用户的作业负担的医疗运动图像处理系统。

  用于解决问题的方案

  根据本发明,提供一种医疗运动图像处理系统,具备:存储单元,其与以进行手术的手术期间的某个时间点为起点确定的时间码相对应地存储在所述手术期间的一部分或全部期间进行录像得到的多个运动图像文件;显示单元,其显示所述存储单元中存储的运动图像文件以及与运动图像文件有关的信息;片段设定单元,其基于用户的操作来任意地设定片段,所述片段是与所述显示单元中显示的运动图像文件对应的所述时间码上的时间段的一部分或全部;计算单元,其从所述存储单元读出与由所述片段设定单元设定的所述片段的至少一部分对应的一个或多个运动图像文件,并计算片段重复部分的时间长度,所述片段重复部分是所读出的运动图像文件所录像的一个或多个时间段中的与该片段重复的时间段;以及部分保存单元,其部分地切取与成为所述计算单元的计算对象的所述片段重复部分中包括的所述时间码相对应的运动图像文件,并使其保存到规定的存储区域,其中,所述部分保存单元进行将在由所述计算单元计算出的所述片段重复部分的时间长度超过规定时间的情况下的至少一部分的保存在所述规定的存储区域中的运动图像文件的时间长度缩短为所述规定时间以下的缩短处理。

  根据本发明,用户能够一边目视确认显示在显示单元中的运动图像文件一边进行编辑作业,因此能够可靠地切取期望的影像部分,该编辑作业是指部分地切取该运动图像文件中的与任意地指定的时间段(片段)的时间码相对应的运动图像文件并进行保存。

  另外,本发明具有在作为保存对象的运动图像文件超过规定时间的情况下缩短为规定时间以下的功能,因此不需要进行另外调整各运动图像文件的时间长度的编辑作业。

  因而,本发明能够减轻医疗用的运动图像文件的编辑作业中的用户的作业负担。

  发明的效果

  根据本发明,提供一种能够减轻医疗用的运动图像文件的编辑作业中的用户的作业负担的医疗运动图像处理系统。

  附图说明

  图1是表示本实施方式所涉及的医疗运动图像处理系统的图。

  图2是表示编码器的显示区域中显示的画面的具体例的图。

  图3是表示编码器的显示区域中显示的画面的具体例的图。

  图4是表示编码器的显示区域中显示的画面的具体例的图。

  图5是表示视听终端装置的显示区域中显示的画面的具体例的图。

  图6是表示视听终端装置的显示区域中显示的画面的具体例的图。

  图7是表示视听终端装置的显示区域中显示的画面的具体例的图。

  图8是表示视听终端装置的显示区域中显示的画面的具体例的图。

  图9是表示视听终端装置的显示区域中显示的画面的具体例的图。

  图10是将时间线显示区域的一部分放大后的放大图。

  图11是将时间线显示区域的一部分放大后的放大图。

  图12是将时间线显示区域的一部分放大后的放大图。

  图13是表示在操作了编辑器切换图标的情况下的附带显示区域的显示的一部分的具体例的图。

  图14是与将作为保存对象的运动图像文件进行合并的处理有关的概念图。

  具体实施方式

  以下使用附图来说明本发明的实施方式。此外,在全部的附图中,对同样的构成要素标注相同的标记,适当地省略说明。

  <关于医疗运动图像处理系统100中包括的各构成要素>

  图1是表示本实施方式所涉及的医疗运动图像处理系统(以下称作医疗运动图像处理系统100)的图。

  此外,图1所图示的箭头表示在各构成要素之间发送和接收的运动图像文件的输出源和输入目的地。因而,关于运动图像文件以外的信息、数据的发送和接收,未必与各箭头所示的内容一致。

  在以下的说明中,运动图像文件可以仅由影像数据构成,也可以包括影像数据和声音数据。

  医疗运动图像处理系统100具备多个摄影装置(摄像机111~摄像机114)、编码器120、服务器装置130以及视听终端装置140。

  摄像机111~摄像机114为拍摄接受手术的手术接受者(患者)及其周边并且生成运动图像文件的摄影装置。

  例如,摄像机111和摄像机113拍摄实施手术的手术区,相比于摄像机111,摄像机113拍摄的范围更大。另外,摄像机112拍摄心跳数监视器,摄像机114拍摄放映出核磁共振图像(magnetic resonance imaging:MRI)等的监视器,摄像机112和摄像机114在拍摄用于显示与手术的接受者有关的生物体信息的生物体信息监视器这一点上是通用的。

  此外,在此列举的摄像机111~摄像机114的数量、摄影对象是例示的,并不限制本发明的实施方式。

  编码器120对由摄像机111~摄像机114生成的运动图像文件实施编码处理(编码),来将该运动图像文件转换为适于向服务器装置130传送以及存储的形式。

  此外,优选的是,编码器120对运动图像文件实施压缩处理后将其存储于服务器装置130中。由此,能够削减服务器装置130中存储的运动图像文件的容量。

  编码器120基于用户的操作来进行与由摄像机111~摄像机114进行的摄影有关的控制,(按摄像机111~摄像机114)向多个输入系统分开地输入通过拍摄而生成的与手术有关的多个运动图像文件。即,编码器120构成本发明所涉及的运动图像输入单元。

  在此,在本实施方式中,“与由摄像机111~摄像机114进行的摄影有关的控制”为使摄像机111~摄像机114开始执行运动图像的录像、暂时停止录像、停止录像以及拍摄静止图像。

  此外,在此列举的与由摄像机111~摄像机114进行的摄影有关的控制的内容是例示的,并不限制本发明的实施方式。另外,编码器120只不过具备多个输入系统,在本发明的实施中,不一定需要从全部的输入系统输入运动图像文件。因而,根据正在工作的摄影装置的数量,编码器120所输入的运动图像文件的数量也减少,当然也可能存在所输入的运动图像文件为单个的情况。

  服务器装置130存储从编码器120传送来的运动图像文件。更详细地说,服务器装置130与以进行手术的手术期间的某个时间点为起点确定的时间码相对应地存储在手术期间的一部分或全部期间进行录像得到的多个运动图像文件。即,服务器装置130构成本发明所涉及的存储单元。

  在此,时间码为与运动图像文件相对应的时间序列信息(构成运动图像文件的帧的顺序信息),优选对每个帧赋予时间码。关于时间码的起点,可以由编码器120的用户(例如手术实施者、其辅助者)在进行手术的期间内任意地确定,也可以从外部装置(未图示)输入表示手术的开始时间点的信号,以该信号为触发来进行确定。

  视听终端装置140为安装有用于再现和编辑服务器装置130中存储的运动图像文件的应用软件的计算机设备。

  视听终端装置140能够访问服务器装置130中存储的运动图像文件,显示对应于共同的时间码的一个或多个运动图像文件,并且还一并显示与显示中的运动图像文件有关的信息。即,视听终端装置140构成本发明所涉及的显示单元。

  另外,视听终端装置140能够接受用户针对自身设备的操作输入,基于所接受的操作输入来执行后述的各种处理。

  此外,在以下的说明中,“运动图像文件的显示”和“运动图像文件的再现”的意义大致相同,无区别地使用。

  在图1中,视听终端装置140被图示为单个装置,但也可以在医疗运动图像处理系统100中设置有多个视听终端装置140。另外,安装于视听终端装置140的应用软件不一定由本发明专用的应用软件来实现,可以由通用的应用软件(例如网络浏览器)、将其改进或变更得到的软件来实现。

  服务器装置130能够基于视听终端装置140接受的操作输入来执行与视听终端装置140的显示区域中显示的运动图像文件有关的编辑处理。

  在此,执行编辑处理的服务器装置130与视听终端装置140(显示单元和操作输入单元)实现为单独的装置。这是因为,如果假设能够在视听终端装置140中执行编辑处理,则需要在将作为编辑对象的运动图像文件从服务器装置130传送至视听终端装置140后执行编辑处理。如果设为这样的系统结构,则难以针对医疗运动图像处理系统100(服务器装置130)中的运动图像文件的管理确保足够的安全性,还可能会导致运动图像文件的不当流出。

  医疗用的运动图像文件为保密性高的个人信息,为了防止该运动图像文件向外部流出,本实施方式中的医疗运动图像处理系统100采用了如上所述的结构。

  <关于编码器120的操作>

  接着,使用图2~图4来说明编码器120的操作。

  图2~图4是表示编码器120的显示区域中显示的画面的具体例的图。图2是表示录像前的编码器120的显示区域的图。图3是表示录像中的编码器120的显示区域的图。图4是表示在录像中显示了扩展画面的情况下的编码器120的显示区域的图。

  编码器120的显示区域作为图形用户界面(Graphical User Interface:GUI)发挥功能,用户使用附设于编码器120的未图示的输入装置(鼠标、键盘等)来操作所显示的图标等,由此能够操作编码器120。另外,在编码器120的显示区域为触摸面板的情况下,该显示区域自身作为输入装置发挥功能。

  在编码器120的显示区域中显示输入画面1201、输出画面1202以及状态显示1203。

  输入画面1201为用于再现从摄像机111~摄像机114输入的运动图像文件中的任一个运动图像文件的画面。例如,在图2~图4中图示出正在输入画面1201中再现从摄像机111输入的运动图像文件的状态。

  输出画面1202为用于再现从编码器120向服务器装置130输出的运动图像文件的画面。编码器120的输出形式包括录像形式(使输入的运动图像文件存储于服务器装置130的输出形式)、实时形式(将输入的运动图像文件以可实时传送的方式输出至视听终端装置140的形式)、以及录像形式与实时形式的组合这三种模式。此外,图3和图4中图示的编码器120的显示区域为在编码器120正以录像形式输出运动图像文件的情况下的显示区域。

  状态显示1203显示在该时间点在输出画面1202中再现的运动图像文件、即正向服务器装置130输出的运动图像文件的状态。具体地说,状态显示1203显示正以哪种输出形式输出运动图像文件、进行输出的时间、输出的运动图像文件的数据容量等。

  在编码器120的显示区域中显示录像开始按钮1204、录像停止按钮1205、静止图像摄影按钮1206以及录像暂时停止按钮1207。

  录像开始按钮1204为用于接受成为开始进行正在输入画面1201中再现的运动图像文件的录像(向服务器装置130的存储处理)的契机的操作的按钮。

  录像停止按钮1205为用于接受成为停止运动图像文件的录像(向服务器装置130的存储处理)的契机的操作的按钮。

  静止图像摄影按钮1206为用于接受成为将正在输入画面1201中再现的运动图像文件的1帧作为静止图像存储于服务器装置130的契机的操作的按钮。

  录像暂时停止按钮1207为用于接受成为暂时停止运动图像文件的录像(向服务器装置130的存储处理)的契机的操作、或者成为解除暂时停止的契机的操作的按钮。

  此外,录像开始按钮1204在进行运动图像文件的录像的期间(包括暂时停止录像的期间)不被显示,录像暂时停止按钮1207在没有进行运动图像文件的录像的期间不被显示。因而,当在没有进行录像的期间操作了录像开始按钮1204的情况下,录像开始按钮1204被置换为录像暂时停止按钮1207,当在进行录像的期间操作了录像停止按钮1205的情况下,录像暂时停止按钮1207被置换为录像开始按钮1204。

  在编码器120的显示区域中显示手术信息显示1208和输出信息显示1209。

  手术信息显示1208显示有与正在输入画面1201中再现的运动图像文件所涉及的手术相关联的信息,具体地说,显示有手术接受者(患者)的识别编号和名字、手术实施者的名字、诊疗科的名称、进行手术的场所的名称等。关于手术实施者的名字、诊疗科的名称,能够通过用户针对手术信息显示1208的操作输入来进行选择。关于手术信息显示1208中显示的信息中的不需要用户进行操作输入的信息,可以从未图示的外部系统(例如电子病例系统等)输入。

  输出信息显示1209显示有正在输出画面1202中再现的运动图像文件的文件形式、是否与运动图像文件的再现一同进行了声音输出、以哪种输出形式向服务器装置130输出。此外,关于在此列举的输出信息显示1209中显示的信息,能够通过用户针对输出信息显示1209的操作输入来进行选择。

  在编码器120的显示区域中显示扩展显示工作按钮1210和扩展显示停止按钮1214。

  扩展显示工作按钮1210为接受成为打开扩展显示区域的契机的操作的按钮,所述扩展显示区域用于将与正在输入画面1201或输出画面1202中再现的运动图像文件不同的、从输入系统输入的运动图像文件进行再现。例如,图4图示了以下状态:在扩展显示区域中,在子画面1211中显示从摄像机112输入的运动图像文件,在子画面1212中显示从摄像机113输入的运动图像文件,在子画面1213中显示从摄像机114输入的运动图像文件。在该状态下,在进行在扩展显示区域中再现的运动图像文件的录像的情况下,在该运动图像文件上重叠显示与录像暂时停止按钮1207同样的图标,当操作该图标时,录像暂时停止。另外,在该状态下,在没有进行在扩展显示区域中再现的运动图像文件的录像的情况下,在该运动图像文件上重叠显示与录像开始按钮1204同样的图标,当操作该图标时,开始录像。

  扩展显示停止按钮1214为在显示上述的扩展显示区域的情况下显示的按钮,用于接受成为关闭扩展显示区域的契机的操作。

  <关于视听终端装置140中的同步显示>

  接着,使用图5~图12来说明视听终端装置140中的同步显示。

  图5~图9是表示视听终端装置140的显示区域中显示的画面的具体例的图。更详细地说,图5是表示在同步显示区域DA1的主画面中再现一个运动图像文件且在同步显示区域DA1的子画面再现其它运动图像文件的显示方式的图。图6是表示将同步显示区域DA1进行四分割来在分割后的各个区域中再现四个运动图像文件的显示方式的图。图7是表示将光标置于同步显示区域DA1的主画面上的状态的图。图8是表示将光标置于在同步显示区域DA1的主画面的下方显示的静止图像上的状态的图。图9是表示将光标置于同步显示区域DA1的子画面上的状态的图。

  图10~图12是将时间线显示区域DA3的一部分放大后的放大图。更详细地说,图10是将时间线显示区域DA3的左侧部分放大后的放大图。图11是将时间线显示区域DA3的中央部分放大后的放大图。图12是将时间线显示区域DA3的右侧部分放大后的放大图。

  视听终端装置140的显示区域作为图形用户界面发挥功能,用户使用附设于视听终端装置140的未图示的输入装置来操作所显示的图标等,由此能够操作视听终端装置140。另外,在视听终端装置140的显示区域为触摸面板的情况下,该显示区域自身作为输入装置发挥功能。

  此外,在以下的说明中,表示输入装置的操作对象的光标称为指针1401。

  视听终端装置140的显示区域包括同步显示区域DA1、附带显示区域DA2以及时间线显示区域DA3。

  此外,在图5~图9中用虚线表示的范围表示在此列举的显示区域的范围,实际不显示于视听终端装置140的显示区域中。

  同步显示区域DA1同步显示与时间线显示区域DA3所显示的时间线对应的多个运动图像文件包括的图像中的、与时间线显示区域DA3所显示的时间线包括的某个时间点的时间码相对应的多个图像。

  例如,在通过用户的操作输入选择了分割方式选择部1425的靠左侧的图标(参照图12)的情况下,同步显示区域DA1在主画面中显示从摄像机111输入的运动图像文件,在子画面中显示从摄像机112~摄像机114输入的运动图像文件(参照图5)。

  或者,在通过用户的操作输入选择了分割方式选择部1425的靠右侧的图标的情况下,同步显示区域DA1将从摄像机111~摄像机114输入的四个运动图像文件以四分割的方式显示于均等的显示区域中(参照图6)。

  在同步显示区域DA1中,当想要同步再现多个运动图像文件时,由于各运动图像的比特率的不同,在运动图像的开始、再现时读入时间产生差异。而且,该读入时间的差异的大小受到服务器装置130、视听终端装置140以及将这些装置连接的网络线路(未图示)的处理能力等的影响,因此并不固定。因此,视听终端装置140在各画面中的再现运动图像文件的功能(在以后称作再现播放器)之间进行与缓冲时间有关的通讯,来解决上述的问题。

  例如,视听终端装置140在一个画面(例如主画面)中再现运动图像文件的情况下,在最初阶段不读入该运动图像文件的全部数据,例如仅读入最初的5秒钟的数据,在再现该5秒钟的数据的期间读入下一个5秒钟的数据。视听终端装置140依次重复上述处理,由此实现无中断的再现。

  例如在利用这样的将规定时间的数据存储于缓冲器的时间来在一个画面(例如主画面)和其它画面(例如子画面)中同时开始进行再现的情况下,构成为:在主画面的再现播放器结束运动图像文件的5秒的数据的读入的阶段,从主画面的再现播放器向子画面的再现播放器通知该意思,基于该通知使主画面和子画面这两方开始进行再现。

  此外,这样的通知不限于通过多个再现播放器同时开始进行再现的情况,还可以在以下等情况下进行:当正在一个再现播放器中再现运动图像文件时,在其它再现播放器中开始进行运动图像文件的再现;当正在多个再现播放器中再现运动图像文件时,在其中一部分再现播放器中中断运动图像文件的再现(成为没有进行录像的时间段)。

  在附带显示区域DA2中,用指针1401操作设置在该显示区域内的浏览器切换图标1428和编辑器切换图标1429,由此在该显示区域内显示的内容选择性地变化。

  在操作了浏览器切换图标1428的情况下,附带显示区域DA2从服务器装置130或未图示的其它装置(或系统)获取与在同步显示区域DA1中显示的运动图像文件相关联的信息,从而选择性地显示该信息。

  例如,当在附带显示区域DA2中选择了“事件”标签的情况(图5等图示出的状态)下,在附带显示区域DA2中显示从管理麻醉给药的未图示的外部系统输入的与手术有关的事件信息(手术的开始、麻醉给药的开始等)以及与该事件信息对应的时刻信息。

  或者,当在附带显示区域DA2中选择了“备注”标签的情况(图8中图示出的状态)下,在附带显示区域DA2中显示与通过后述的捕获处理取得的静止图像对应的时刻(时间码)以及用户对该静止图像附加的备注。

  或者,在附带显示区域DA2中选择了“手术方式”标签的情况下(未图示),在附带显示区域DA2中显示通过与正在同步显示区域DA1中同步显示的运动图像文件相同的手术方式记录在服务器装置130中的运动图像文件、与该运动图像文件关联的信息。

  或者,当在附带显示区域DA2中选择了“诊断名”标签的情况下(未图示),在附带显示区域DA2中显示通过与正在同步显示区域DA1中再现的运动图像文件相同的诊断名记录在服务器装置130中的运动图像文件、与该运动图像文件关联的信息。

  或者,当在附带显示区域DA2中选择了“同一患者的运动图像”标签的情况下(未图示),在附带显示区域DA2中显示与同正在同步显示区域DA1中再现的运动图像文件相同的患者ID相关联地记录在服务器装置130中的运动图像文件、与该运动图像文件关联的信息。

  此外,在此列举的附带显示区域DA2中显示的信息是例示的,也可以在附带显示区域DA2中显示在此列举的信息以外的其它信息,也可以不显示在此列举的信息中的至少一部分。另外,各图中图示出的附带显示区域DA2中显示各种信息时的布局也是例示的,在实施本发明时,附带显示区域DA2的布局不限于图示的那样。

  从未图示的外部系统输入的事件信息和时刻信息被输入到服务器装置130,与关于手术的运动图像文件相关联地同该运动图像文件一起被存储到服务器装置130中。

  将图5与图6进行比较后可知,在分割显示为主画面和子画面的情况下和均等地四分割的情况下,同步显示区域DA1和附带显示区域DA2在视听终端装置140占有的显示区域的比例不同,后者与前者相比,同步显示区域DA1窄,附带显示区域DA2宽。

  在操作了编辑器切换图标1429的情况下,附带显示区域DA2显示与对正在同步显示区域DA1中显示的运动图像文件的编辑处理相关联的信息、用于该编辑处理的操作图标等。

  该情况下的附带显示区域DA2的显示内容以及与编辑处理有关的操作等在后面详细地说明,因此在此省略说明。

  时间线显示区域DA3是显示时间线的显示区域,该时间线表示与正在同步显示区域DA1中显示的运动图像文件对应的时间码上的时间段。更详细地说,时间线显示区域DA3按每个输入系统(按每个摄像机111~摄像机114)分开地显示与手术有关的多个运动图像文件所对应的时间线。

  在此,时间线为线状或带状的显示,表示在哪个时间段进行了运动图像文件的录像、或者在哪个时间段没有进行运动图像文件的录像。

  优选的是,时间线显示区域DA3中显示的时间线以与该时间线所涉及的运动图像文件相对应的时间码为基准进行显示。另外,优选各时间线为各种显示方式(例如色彩各不相同等)以能够识别。

  在时间线显示区域DA3中,除了显示时间线以外,还以重叠于时间线的方式显示表示正在同步显示区域DA1中同步显示的时间点的光标1414(参照图10)。

  本实施方式中的光标1414由显示该时间点(时刻和从开始录像时起的经过时间这两方)的外框和跨多个输入系统的线状的显示构成。

  光标1414不仅具备表示正在同步显示区域DA1中进行同步显示的时间点的作用,例如还具备通过用户的操作使该光标1414沿时间轴在左右方向上滑动由此在同步显示区域DA1中同步显示用户的任意时间点的运动图像文件的功能。

  在显示于时间线显示区域DA3的时间线的上方和下方显示标签显示。

  在此,显示于时间线的上方的标签显示在时间线上示出与在选择了附带显示区域DA2的“事件”标签的情况下显示的事件信息相对应的时刻(时间码)。例如,图10中的标签显示1413为附加于与摄像机111有关的时间线(图示为“视频.1”的时间线)的上方的标签显示,与图7中图示出的“16:50:15手术开始”这个事件信息1412相对应。

  而且,显示于时间线的下方的标签显示表示与在选择了附带显示区域DA2的“备注”标签的情况下显示的备注信息相对应的时刻(时间码)。例如,图10中的标签显示1415为附加于与摄像机111有关的时间线的下方的标签显示,与图8中图示出的“17:04:08会诊1”这个备注信息1407以及同时刻的静止图像1404(通过后述的捕获处理取得的信息)相对应。

  此外,在本实施方式的各图中,附加有上述标签显示的时间线以是否仅为“视频.1”所涉及的时间线(与摄像机111有关的时间线)的方式进行图示,但也可以将其它时间线(与摄像机112~114有关的时间线)作为对象来附加标签显示。

  通过由服务器装置130进行的处理来将上述的标签显示附加于对象的时间线。

  服务器装置130以用户对视听终端装置140的操作输入(具体来说是后述的捕获图标1426的操作)为契机,与显示在时间线显示区域DA3中的时间线包括的某时间点的时间码相对应地执行对该时间线的下方附加标签显示的处理(以下称作第一标签处理)。

  另外,服务器装置130基于从未图示的外部系统输入的事件信息和时刻信息,与显示在时间线显示区域DA3中的时间线包括的某个时间点的时间码相对应地执行对该时间线的上方附加标签显示的处理(以下称作第二标签处理)。

  关于附加于时间线的上方或下方的标签显示,还能够通过利用指针1401进行指定来将同步显示区域DA1中同步显示的时间点变更为与所指定的标签显示相对应的时刻(时间码)。此时,光标1414的显示位置也移动至与该时刻对应的位置。

  关于附加于时间线的上方或下方的标签显示,还能在该标签显示所表示的时刻(时间码)与光标1414所表示的时间点(在同步显示区域DA1中进行同步显示的时间点)一致的情况下,将与该时刻相对应的事件信息或备注信息重叠显示于与附加有该标签显示的时间线对应的输入系统的运动图像文件的显示区域中。

  在分割显示为主画面和子画面的情况下,当使指针1401重叠于主画面时,在主画面中央显示全屏显示图标1402,在主画面右上角部显示表示与正在主画面中再现的运动图像对应的输入系统的输入系统显示1403,在主画面的下部显示从正在主画面中再现的运动图像文件取入的静止图像(通过后述的捕获处理取入的静止图像)(参照图7)。

  此时,通过用指针1401操作全屏显示图标1402,在主画面中全屏显示再现中的运动图像(未图示)。

  另外,在上述的情况下,当使指针1401重叠于在主画面的下部显示的静止图像(例如静止图像1404)时,在该静止图像1404的显示区域上显示备注编辑图标1405和删除图标1406。而且,在主画面上显示同与静止图像1404相对应的备注信息1407同样的备注信息1408(参照图8)。

  当用指针1401操作备注编辑图标1405时,能够对与作为对象的静止图像1404相对应的备注信息1407进行编辑(变更先前输入的备注信息)。

  当用指针1401操作删除图标1406时,作为对象的静止图像1404以及与其相对应的备注信息1407被删除,并从视听终端装置140的显示区域中消失。

  在分割显示为主画面和子画面的情况下,当使指针1401重叠于子画面时,在子画面中显示全屏显示图标1409和显示切换图标1410,在子画面右上角部显示表示与正在子画面中再现的运动图像对应的输入系统的输入系统显示1411(参照图9)。

  此时,通过用指针1401操作全屏显示图标1409,在子画面中全屏显示再现中的运动图像(未图示)。

  另外,此时,通过用指针1401操作显示切换图标1410,将正在子画面中再现的运动图像切换为正在主画面中再现的运动图像(未图示)。

  在时间线显示区域DA3的左下部配设有再现速度选择图标1416(参照图10)。

  再现速度选择图标1416为用于选择正在同步显示区域DA1中同步显示的运动图像的再现速度的操作图标。

  更详细地说,再现速度选择图标1416为用于选择从图10所图示的左侧起依次配置的“0.5倍速”、“等倍速”、“1.5倍速”、“2倍速”、“4倍速”、“6倍速”、“8倍速”的操作图标。

  此外,在此列举的再现速度的选项是一个具体例,能够在本发明的实施中适当地进行变更。

  在时间线显示区域DA3的中央下部配设有再现控制用的操作图标(参照图11)。

  前跳转图标1417为用于使光标1414的显示位置(在同步显示区域DA1中进行同步显示的时间点)跳转至比该显示位置靠前的最近的“备注”标签的显示位置的操作图标。

  30秒返回图标1418为用于将在同步显示区域DA1中同步显示的时间点变更为30秒前的时间点的操作图标。

  10秒返回图标1419为用于将在同步显示区域DA1中同步显示的时间点变更为10秒前的时间点的操作图标。

  再现图标1420为用于在同步显示区域DA1中开始运动图像文件的再现的操作图标。

  停止图标1421为用于使同步显示区域DA1中的运动图像文件的再现停止的操作图标。

  10秒前进图标1422为用于将在同步显示区域DA1中同步显示的时间点变更为10秒后的时间点的操作图标。

  30秒前进图标1423为用于将同步显示区域DA1中同步显示的时间点变更为30秒后的时间点的操作图标。

  后跳转图标1424为用于使光标1414的显示位置(在同步显示区域DA1中进行同步显示的时间点)跳转至比该显示位置靠后侧的最近的“备注”标签的显示位置的操作图标。

  此外,在此列举的再现控制用的操作图标是例示的,可以设置有在此列举的图标以外的其它再现控制用的操作图标,也可以省去在此列举的再现控制用的操作图标中的至少一部分。

  另外,与在此列举的再现控制用的操作图标有关的功能是例示的,在实施本发明时通过同样的显示方式设置的操作图标也可以实现其它功能。例如,前跳转图标1417或后跳转图标1424可以使光标1414的显示位置跳转至比该显示位置靠前或靠后的最近的“事件”标签的显示位置。

  在时间线显示区域DA3的右下部配设有如以下那样的操作图标(参照图12)。

  关于分割方式选择部1425,当操作左侧的图标时将同步显示区域DA1分割为主画面和子画面(参照图5),当操作右侧的图标时对同步显示区域DA1进行四分割(参照图6)。

  时间轴选择图标1427为用于接受将时间线显示区域DA3中的时间轴(横轴)的单位时间(在本实施方式中为1分钟)的显示宽度放大/缩小的操作的按钮。更详细地说,时间轴选择图标1427为从图12图示的左侧起依次配置的使时间线显示区域DA3中的时间轴的单位时间的显示宽度最大的操作图标、使该显示宽度扩大一级的操作图标、使该显示宽度缩小一级的操作图标、使该显示宽度最小的操作图标。

  捕获图标1426是用于接受成为捕获处理的契机的操作的按钮。在此,捕获处理是将显示在同步显示区域DA1中的运动图像文件包括的图像(具体来说是在操作捕获图标1426时显示的图像)作为静止图像来切取的处理。

  在执行上述捕获处理的情况下,服务器装置130在进行与对应于该图像的时间码相对应地对该时间线的下方附加标签显示的处理(第一标签处理)的同时,显示能够输入任意的备注信息的备注输入栏(未图示),与该图像及该标签显示所表示的时间码相对应地存储被输入到上述备注输入栏的备注信息。

  <关于同步显示的运动图像文件的编辑处理>

  接着,使用图13和图14来说明在同步显示区域DA1中同步显示的运动图像文件的编辑处理。

  图13是表示操作了编辑器切换图标1429的情况下的附带显示区域DA2的显示的一部分的具体例的图。图14是与将作为保存对象的运动图像文件进行合并的处理有关的概念图。

  在操作了编辑器切换图标1429的情况下,在附带显示区域DA2的“片段”标签中显示如下内容(参照图13)。

  片段显示部1440显示基于对后述的片段追加图标1446等操作图标的操作而先前设定的片段。在此,片段是与显示在同步显示区域DA1中的运动图像文件对应的时间码上的时间段的一部分或全部。关于具体的片段的设定方法,在对片段追加图标1446或其它操作图标进行说明时叙述,因此在此省略说明。

  如果用图13所图示的例子进行说明,则片段显示部1440用无图案的时间线表示进行录像的整个时间段,用阴影部表示所设定的各片段相当于该整个时间段中的哪个时间段。在此,“进行录像的整个时间段”是指在进行手术的期间摄像机111~114中的至少一个进行拍摄的时间段的总和。在本实施方式中,从摄像机111输入的运动图像文件是在进行手术的整个期间进行录像而得到的,因此与该运动图像文件有关的时间线(在图5等中图示为“视频.1”的时间线)表示的时间段与“录像的整个时间段”相等。即,片段显示部1440中的时间线的无图案的部分是表示与同步显示区域DA1中显示的“视频.1”的运动图像文件的录像时间同等的时间长度的部分。

  输入系统指定框1441是为了基于用户的操作任意地指定与显示在同步显示区域DA1中的运动图像文件对应的多个输入系统的一部分或全部而设置的复选框。即,输入系统指定框1441构成本发明的输入系统指定单元。

  更详细地说,输入系统指定框1441能够在片段显示部1440所显示的各片段(用阴影部表示的时间段)中指定以该片段为对象的输入系统(摄像机111~摄像机114)。例如,当勾选记载为“V1”、“V2”、“V3”、“V4”的复选框时,从摄像机111、摄像机112、摄像机113、摄像机114输入的运动图像文件分别成为对象。关于各复选框,用户能够通过利用指针1401进行的操作来任意地勾选或者取消勾选。

  此外,在本实施方式中,如后述那样(如图13所图示那样),即使在各片段中不存在与复选框对应的输入系统(例如,“V3”所涉及的输入系统)的运动图像文件的情况下,也能够指定输入系统指定框1441,但也可以构成为该复选框不能被勾选,使得无法进行无用的指定。

  片段编号显示部1436是为了基于用户的操作任意地指定以后述的片段追加图标1446的操作为契机设定的一个或多个片段(即,显示在片段显示部1440中的片段)而设置的复选框。即,片段编号显示部1436构成本发明的片段指定单元。

  更详细地说,片段编号显示部1436包括该片段的识别编号(例如记载为“#1”~“#3”等)和指定该片段的复选框。片段编号显示部1436中包括的复选框用于与后述的片段删除图标1447或下载图标1448的操作相应的处理。

  单独下载图标1438是用于接受以下操作的操作图标:使与该片段中包括的时间码相对应的运动图像文件(即,在片段显示部1440所显示的时间线中的用阴影部表示的时间段的运动图像文件)保存到指定的保存目的地(用后述的保存目的地复选框1445指定的存储区域)。根据单独下载图标1438的操作而保存的运动图像文件与片段显示部1440中显示的片段对应,并且是用输入系统指定框1441指定的输入系统的运动图像文件。

  单独再现图标1437是用于接受使与该片段中包括的时间码相对应的运动图像文件同步显示于同步显示区域DA1的操作的操作图标。响应于单独再现图标1437的操作而同步显示的运动图像文件与在片段显示部1440中显示的片段对应,并且是通过输入系统指定框1441指定的输入系统的运动图像文件。

  保存运动图像时间显示部1439显示片段重复部分的时间长度。更详细地说,保存运动图像时间显示部1439按每个输入系统显示片段重复部分的时间长度。

  在此,片段重复部分是指,在从服务器装置130读出与先前设定的片段的至少一部分(具体地说,由片段编号显示部1436指定的片段)对应的一个或多个运动图像文件的情况下,与所读出的运动图像文件所录像的一个或多个时间段中的该片段重复的时间段。此外,由于计算片段重复部分的时间长度的处理本身由服务器装置130执行,因此本发明所涉及的计算单元由服务器装置130实现。

  如果是图13的例子,则由于在输入系统指定框1441的“V1”中勾选了与“#1”~“#3”的片段对应的复选框,因此在保存运动图像时间显示部1439的“V1 Total”中显示被指定的3个片段所涉及的片段重复部分的时间长度(32分10秒),在此,关于“Vl”所涉及的输入系统(来自摄像机111的输入),由于在手术期间的整个时间段进行了录像,因此保存运动图像时间显示部1439的“V1 Total”中显示的片段重复部分的时间长度与“#1”~“#3”的片段的总时间相等。

  接着,与“V1”同样地,在输入系统指定框1441的“V2”中也勾选了与“#1”~“#3”的片段对应的复选框,因此在保存运动图像时间显示部1439的“V2 Total”中显示被指定的3个片段所涉及的片段重复部分的时间长度(22分10秒)。在此,关于“V2”所涉及的输入系统(来自摄像机112的输入),由于运动图像文件所录像的时间段在手术期间内是分散的,因此保存运动图像时间显示部1439的“V2 Total”中显示的片段重复部分的时间长度比“#1”~“#3”的片段的总时间短。

  接着,在输入系统指定框1441的“V3”中勾选了与“#2”的片段对应的复选框,在输入系统指定框1441的“V4”中勾选了与“#1”及“#2”的片段对应的复选框,因此在保存运动图像时间显示部1439的“V3 Total”和“V4Total”中分别显示对各自指定的片段所涉及的片段重复部分的时间长度(0分0秒和3分20秒)。在此,关于“V3”所涉及的输入系统(来自摄像机113的输入),由于不存在与“#2”的片段对应的运动图像文件(在该片段中未进行录像),因此保存运动图像时间显示部1439的“V3 Total”中显示的片段重复部分的时间长度为0分0秒。

  此外,如图13所图示那样,“#2”的片段和“#3”的片段有一部分时间段重复,在该情况下,关于在本实施方式的保存运动图像时间显示部1439中显示的时间长度(由计算单元计算出的时间长度),将双方的片段视为单独的片段,不将相互重复的时间段纳入考虑。该详细情况在后面说明。

  在保存运动图像时间显示部1439中显示的各输入系统所涉及的片段重复部分的时间长度的右侧,设置有用于显示规定时间的缩短目标时间显示部1449~1452,该规定时间是在对相应的输入系统执行后述的部分保存处理时执行后述的缩短处理的情况下的目标。

  缩短目标时间显示部1449~1452的详细情况在后面说明。

  开始结束输入栏1444为用于接受想要新追加的片段的开始时间点和结束时间点的输入的显示栏。开始结束输入栏1444包括从左侧起依次配置的以“小时”为单位输入数值的栏、以“分钟”为单位输入数值的栏以及以“秒”为单位输入数值的栏。基于用户针对未图示的操作单元(例如键盘等)进行的操作输入,用户能够向开始结束输入栏1444的各栏中输入任意的数值。

  开始时间点设定图标1442为用于接受将光标1414的显示位置(在同步显示区域DA1中进行同步显示的时间点)输入至开始结束输入栏1444中的开始时间点的显示栏的操作的操作图标。

  结束时间点设定图标1443为用于接受将光标1414的显示位置(在同步显示区域DA1中进行同步显示的时间点)输入至开始结束输入栏1444中的结束时间点的显示栏的操作的操作图标。

  保存目的地复选框1445为用于指定在响应于单独下载图标1438、下载图标1448的操作而进行的下载处理中成为保存目的地的存储区域的复选框。此外,在图13中记载为“我的视频”的存储区域是指为了在该时间点登录着的用户而设置于服务器装置130中的存储区域,“视听终端”是指用户在该时间点阅览的视听终端装置140中设置的存储区域。

  片段追加图标1446为用于接受根据在该时间点输入至开始结束输入栏1444中的开始时间点和结束时间点来追加要显示于片段显示部1440中的片段的操作的操作图标。

  用户能够基于在此列举的各操作图标的操作,来任意地设定片段。即,上述各操作图标接受成为本发明的片段设定单元的契机的操作。此外,片段的设定处理本身由服务器装置130执行,本发明的片段设定单元由服务器装置130构成。

  片段删除图标1447为用于接受删除(从片段显示部1440中显示的一览中去除)在该时间点在片段编号显示部1436的复选框中被勾选的片段的操作的操作图标。

  下载图标1448为用于接受成为以下处理(以下称作部分保存处理)的契机的操作的操作图标,该处理是指部分地切取与显示在保存运动图像时间显示部1439中的(成为计算单元的计算对象的)片段重复部分中包括的时间码相对应的运动图像文件,并使其保存到规定的存储区域中。即,下载图标1448接受成为本发明的部分保存单元的契机的操作。

  更详细地说,下载图标1448为用于接受将以下运动图像文件一并保存到通过保存目的地复选框1445指定的规定的存储区域中的操作的操作图标,该运动图像文件与在该时间点在片段编号显示部1436的复选框中被勾选的片段对应,并且是各片段中的通过输入系统指定框1441指定的输入系统的运动图像文件。换言之,以下载图标1448的操作为契机的部分保存处理能够一并保存与由片段编号显示部1436指定的片段中包括的时间码相对应、且从输入系统指定框1441指定的输入系统输入的运动图像文件。

  此外,关于上述的部分保存处理,根据基于在视听终端装置140中接受的下载图标1448的操作的请求,服务器装置130使作为对象的运动图像文件保存到被指定的规定的存储区域。

  在此,在将“我的视频”指定为规定的存储区域的情况下,部分保存处理可以说是将新的运动图像文件保存到服务器装置130内的其它存储区域的处理,该新的运动图像文件是通过从存储有作为视听终端装置140的同步显示区域DA1中显示的运动图像文件的源头的运动图像文件的存储区域(服务器装置130内的存储区域)读出该运动图像文件并部分地复制而得到的。

  另外,在此,在将“视听终端”指定为规定的存储区域的情况下,部分保存处理可以说是将新的运动图像文件从服务器装置130传送到视听终端装置140、并由视听终端装置140保存到自身设备内的存储区域的处理,该新的运动图像文件是通过从存储有作为视听终端装置140的同步显示区域DA1中显示的运动图像文件的源头的运动图像文件的存储区域(服务器装置130内的存储区域)读出该运动图像文件并部分地复制而得到的。

  即,可以说本发明所涉及的部分保存单元是通过服务器装置130和视听终端装置140的协同动作而构成的。

  当服务器装置130执行部分保存处理时,进行将在保存运动图像时间显示部1439中显示的时间长度(由计算单元计算出的片段重复部分的时间长度)超过规定时间(例如30分钟)的情况下的至少一部分的保存在规定的存储区域的运动图像文件缩短为规定时间以下的缩短处理。

  在此,缩短处理后的运动图像文件的时间长度只要收敛为规定时间就够了,但鉴于本发明的目的,更优选与规定时间大致一致。

  作为缩短处理的目标的规定时间按每个输入系统显示在缩短目标时间显示部1449~1552中。即,“V1”所涉及的输入系统的规定时间显示在缩短目标时间显示部1449中,“V2”所涉及的输入系统的规定时间显示在缩短目标时间显示部1450中,“V3”所涉及的输入系统的规定时间显示在缩短目标时间显示部1451中,“V4”所涉及的输入系统的规定时间显示在缩短目标时间显示部1452中。

  在此,为以下结构:如果对缩短目标时间显示部1449~1552中的任一个缩短目标时间显示部输入规定时间,则以在所有输入系统中成为相同程度的缩短比率的方式使其它三个缩短目标时间显示部中显示的规定时间自动地变动。在此,“在所有输入系统中成为相同程度的缩短比率”具体是指“V1Total”的显示时间与缩短目标时间显示部1449的显示时间的比率、“V2Total”的显示时间与缩短目标时间显示部1450的显示时间的比率、“V3Total”的显示时间与缩短目标时间显示部1451的显示时间的比率以及“V4Total”的显示时间与缩短目标时间显示部1452的显示时间的比率各自大致相等。

  此外,鉴于本发明的目的,更优选在缩短目标时间显示部1449~1552中显示的规定时间是基于用户的操作而任意地确定的时间,但有时也可以是自动地设定的时间。例如,也可以最初自动地设定默认的规定时间,根据需要基于用户的操作在事后调整该规定时间。

  优选的是,在与显示在保存运动图像时间显示部1439中显示的(成为计算单元的计算对象的)片段重复部分中包括的时间码相对应的运动图像文件为多个的情况下,确认在成为缩短处理的对象的各运动图像文件的时间相对于该片段重复部分的时间长度所占的比例与通过该缩短处理来缩短各运动图像文件的时间之间存在正的相关关系。更严格地说,优选的是,与成为缩短处理的对象的各运动图像文件的时间相对于上述总时间所占的比例大致成比例地缩短各运动图像文件。

  例如,如果为图13所图示的事例,则在将保存运动图像时间显示部1439的“V1Total”中显示的片段重复部分的时间长度(32分10秒)缩短至目标的规定时间(30分钟)的情况下,优选的是,“#1”的片段从“5分5秒”缩短至约“4分44.5秒”,“#2”的片段从“4分55秒”缩短至约“4分35.1秒”,“#3”的片段从“22分10秒”缩短至约“20分40.4秒”,从而共计缩短为30分钟。为了实现这样的缩短处理,例如考虑服务器装置130从成为缩短处理的对象的运动图像文件中每单位时间删除(间隔剔除)均等数量的图像帧。但是,这样的缩短处理的方式是一个具体例,本发明的实施方式中的缩短处理的方式不限于此。

  此外,经过如上述那样的缩短处理而被进行了部分保存处理的运动图像文件在视听终端装置140中再现时,即使以等倍速度再现,也能够在视觉上看起来再现速度变快(快进)。

  关于本实施方式的以下载图标1448的操作为契机的部分保存处理,在与显示在保存运动图像时间显示部1439中的(成为计算单元的计算对象的)片段重复部分中包括的时间码相对应的运动图像文件为多个的情况下,服务器装置130能够将作为保存对象的多个运动图像文件的至少一部分进行合并后保存到规定的存储区域中。

  例如,说明对与在保存运动图像时间显示部1439的“V2 Total”中显示的片段重复部分(22分10秒)对应的运动图像文件进行部分保存处理的情况。在该情况下,如图13所图示的那样,对于“V2”所涉及的输入系统,在输入系统指定框1441中指定了三个片段(“#1”所涉及的片段S1、“#2”所涉及的片段S2、“#3”所涉及的片段S3),这3个片段对应于3个运动图像文件(运动图像文件F1、运动图像文件F2以及运动图像文件F3)(参照图14的(a))。

  在此,片段S1和运动图像文件F1中的片段重复部分P1与片段S1同样地包括17分0秒至22分5秒的时间段的时间码。片段S2和运动图像文件F3中的片段重复部分P2与片段S2同样地包括1小时8分45秒至1小时13分40秒的时间段的时间码。片段S3和运动图像文件F2中的片段重复部分P3包括1小时8分45秒至1小时13分40秒的时间段的时间码。片段S3和运动图像文件F3中的片段重复部分P4包括从1小时5分0秒至1小时14分10秒的时间段的时间码。

  因而,该情况下的部分保存处理的对象是与片段重复部分P1~P4中包括的时间码相对应的运动图像文件。在此,将各运动图像文件合并为一个运动图像文件F4,但运动图像文件F4中的片段重复部分P1~P4的顺序设为按所对应的各片段的识别编号由小到大的顺序(“#1”→“#2”→“#3”)结合,对于与相同识别编号对应的片段重复部分P3和片段重复部分P4,以将与较早的时间码对应的前者设为先、将后者设为后的方式进行结合。

  如上所述,关于多个运动图像文件成为部分保存处理的保存对象的情况,列举以下相应的具体例来进行说明。

  第一个具体例是以下情形:在由片段编号显示部1436指定的片段单一、由输入系统指定框1441指定的输入系统也单一的情况下,多个运动图像文件成为部分保存处理的保存对象。

  例如,如通过在图5等的时间线显示区域DA3中显示的时间线的一部分(与摄像机112~114对应的时间线)所示的那样,在以在不同的时间段分散地存在运动图像文件(录像的时间段和录像中断的时间段混在一起)的输入系统为对象指定了片段的情况下,即使所指定的片段和输入系统分别是单一的,作为部分保存处理的保存对象的运动图像文件也可能为多个。

  在这种情形下执行部分保存处理的情况下,服务器装置130可以将作为保存对象的多个运动图像文件合并。

  第二个具体例是以下情形:在由片段编号显示部1436指定的片段为多个、由输入系统指定框1441指定的输入系统单一的情况下,多个运动图像文件成为部分保存处理的保存对象。此外,使用了图14的上述说明属于该情形。

  例如,如通过图5等的时间线显示区域DA3中显示的时间线的一部分(与摄像机111对应的时间线)所示的那样,在以在整个时间段存在单独的运动图像文件(在整个时间段进行了录像)的输入系统为对象指定了片段的情况下,即使所指定的输入系统单一,所指定的多个片段也被视为相互独立的片段,因此成为部分保存处理的保存对象的运动图像文件也被视为多个。

  在这样的情形下执行部分保存处理的情况下,服务器装置130可以将作为保存对象的多个运动图像文件合并。

  另外,存在以下情形(以下称作第三个具体例):即使在与由片段编号显示部1436指定的片段包括的时间码相对应的运动图像文件中的成为保存对象的运动图像文件为多个的情况下,也不希望将作为保存对象的多个运动图像文件进行合并。

  例如,在与由片段编号显示部1436指定的一个或多个片段包括的时间码相对应的运动图像文件中的成为保存对象的多个运动图像文件是从摄像机111输入的运动图像文件和从摄像机112输入的运动图像文件的情况下(即,由片段编号显示部1436指定的片段是一个或多个、由输入系统指定框1441指定的输入系统是多个的情况下),影像内容按每个输入系统而性质不同(摄像机111的运动图像是手术区影像,摄像机112的运动图像是表示生物体信息的变迁的影像),因此从管理上的观点或作为资料利用的观点出发,合并为一个运动图像文件未必是优选的。因而,在如上所述的情形下执行部分保存处理的情况下,服务器装置130可以不执行运动图像文件的合并。

  另一方面,在优先考虑减少要保存在规定的存储区域的运动图像文件的数量的情况下,即使是如上所述的情形,服务器装置130也考虑将作为保存对象的多个运动图像文件合并。

  也可以是,在如上所述的情形下,用户能够任意地选择是否将作为保存对象的运动图像文件合并。

  即使是上述的第三个具体例,例如在输入系统的至少一个输入系统中成为保存对象的运动图像文件为多个的情况下,也优选在部分保存处理中将作为保存对象的多个运动图像文件按每个输入系统合并为一个运动图像文件,并将其保存到规定的存储区域。这是由于,相同输入系统的运动图像是相同性质的影像,因此即使合并也不会产生如上述那样的管理上以及资料利用上的担心。

  另外,在像这样执行部分保存处理时,通过将与多个片段对应的各运动图像文件按每个输入系统合并为一个,能够减少要管理的运动图像文件的数量,因此预计能够减轻用户的管理上的负担。

  此外,当然,无论对于上述的被进行了缩短处理的运动图像文件,还是对于没有进行缩短处理的运动图像文件,均能够应用以上所述的多个运动图像文件的合并。

  利用医疗运动图像处理系统100的用户能够利用如上述那样的部分保存处理,因此能够容易地获得仅提取出在期望的时间段拍摄到的影像部分的新的运动图像文件,能够利用于学会发表用的资料制作等,还能够容易地进行其管理。

  <关于本发明的变形例>

  至此按照使用各图说明的实施方式说明了本发明,但本发明并不限定于上述的实施方式,还包括能够达成本发明的目的的各种变形、改进等方式。

  在上述的实施方式的说明中,以图1中图示的构成要素为前提进行了说明,但本发明的各构成要素以实现其功能的方式形成即可。因而,本发明的各构成要素无需为分别独立的存在,容许多个构成要素形成为一个构件、一个构成要素由多个构件形成、某个构成要素为其它构成要素的一部分、某个构成要素的一部分与其它构成要素的一部分重复等。

  例如,本发明所涉及的医疗运动图像处理系统可以不包括相当于摄像机111~摄像机114的摄影装置,可以对从系统外部的摄影装置输入的运动图像文件进行处理,也可以对从与摄影装置不同的装置(例如医疗用的测量装置等)输入的运动图像文件进行处理。

  在上述的实施方式中叙述的各种操作是一个具体例,本发明的实施不限于此。因而,上述的各操作可以置换为其它操作,也可以省去一部分,还可以追加实施方式中没有说明的其它操作。

  在上述的实施方式中叙述的各种显示方式是一个具体例,但本发明的实施并不限于此。因而,上述的各显示可以置换为其它显示,可以省去一部分,也可以追加实施方式中没有说明的其它显示。

  在上述的实施方式中叙述的各种编辑处理是一个具体例,但本发明的实施并不限于此。因而,上述的各编辑处理可以省去一部分,也可以追加实施方式中没有说明的其它编辑处理。

  在上述的实施方式中,设为从摄像机111输入的运动图像文件为在进行手术的整个期间中进行录像得到的,并且设为与该运动图像文件有关的时间线(在图5等中图示为“视频.1”的时间线)等同于进行手术的期间进行了说明,但本发明的实施并不限于该方式。即,在本发明的实施中,无需一定存在在进行手术的整个期间进行录像得到的运动图像文件,在视听终端装置140(同步显示区域DA1)中同步显示的全部的运动图像文件可以包括停止录像的时间段。

  在上述的实施方式中,以从多个输入系统输入运动图像文件的结构为前提进行了说明,但也可以在输入系统单一、即无法同步显示的医疗运动图像处理系统中实施本发明。此时,可以不存在相当于本发明所涉及的输入系统指定单元(输入系统指定框1441)的结构。

  在上述的实施方式中,以基于用户的操作任意地指定先前设定的(在片段显示部1440中显示的)一个或多个片段的结构为前提进行了说明,但在本发明的实施方式中,也可以不存在事后指定片段的结构、即相当于本发明所涉及的片段指定单元(片段编号显示部1436的复选框)的结构。

  在上述的实施方式中,在由本发明所涉及的计算单元进行的处理上,即使是时间段重复的片段(例如,图13所图示的“#2”的片段和“#3”的片段),也视为单独的片段,关于本实施方式的保存运动图像时间显示部1439中显示的时间长度(由计算单元计算出的时间长度),叙述了不考虑相互重复的时间段的意思,但本发明的实施不限于此。

  例如,在由片段编号显示部1436指定的多个片段的一部分或全部重复的事例中,在将在部分保存处理中合并了第一片段和第二片段所得到的时间段视为单独的片段的方式的情况下(例如,如果仿照图14所图示的事例,则在以与将片段S2(1小时8分45秒至1小时13分40秒)和片段S3(52分0秒至1小时14分10秒)即多个片段进行合并而得到的单独的片段(52分0秒至1小时14分10秒)中包括的时间码相对应的运动图像文件为对象来进行部分保存处理的情况下),保存运动图像时间显示部1439的显示时间优选为基于该单独的片段确定的片段重复部分的时间长度。这是由于这样的总时间与实际上再现的时间长度相等。

  在上述的实施方式中,关于以下载图标1448的操作为契机的部分保存处理,叙述了在成为该部分保存处理的对象的运动图像文件存在于多个输入系统的情况下优选对各个输入系统进行缩短处理,但本发明的实施方式不限于此。

  例如,在上述的情况下,也可以对与多个输入系统所涉及的片段重复部分的时间码相对应的全部运动图像文件的时间进行求和,并执行将求和得到的合计时间缩短为作为目标的规定时间以下的缩短处理。

  在上述的实施方式中叙述的各操作图标的显示位置为一个具体例,本发明的实施并不限于此。但是,关于本发明的编辑处理所涉及的操作图标,优选显示在能够一边参照时间线显示区域和同步显示区域一边进行操作的位置。换言之,优选的是,本发明的编辑处理所涉及的操作图标显示于显示本发明的时间线显示区域和同步显示区域的显示单元中。在此,“显示于显示时间线显示区域和同步显示区域的显示单元中”这个概念不限于显示于同一显示框(窗口)中,也包括如上述的实施方式那样显示于不同的显示框(参照图13、图14)中、分别显示于处于同一平台的控制下的多个显示装置(多重监视器)中等情况。

  本实施方式包括以下的技术思想。

  (1)一种医疗运动图像处理系统,其特征在于,具备:存储单元,其与以进行手术的手术期间的某个时间点为起点确定的时间码相对应地存储在所述手术期间的一部分或全部期间进行录像得到的多个运动图像文件;显示单元,其显示所述存储单元中存储的运动图像文件以及与运动图像文件有关的信息;片段设定单元,其基于用户的操作来任意地设定片段,所述片段是与所述显示单元中显示的运动图像文件相对应的所述时间码上的时间段的一部分或全部;计算单元,其从所述存储单元读出与由所述片段设定单元设定的所述片段的至少一部分对应的一个或多个运动图像文件,并计算片段重复部分的时间长度,所述片段重复部分是对所读出的运动图像文件所录像的一个或多个时间段中的与该片段重复的时间段;以及部分保存单元,其部分地切取与成为所述计算单元的计算对象的所述片段重复部分中包括的所述时间码相对应的运动图像文件,并使其保存到规定的存储区域,其中,所述部分保存单元进行将在由所述计算单元计算出的所述片段重复部分的时间长度超过规定时间的情况下的至少一部分的保存在所述规定的存储区域中的运动图像文件的时间长度缩短为所述规定时间以下的缩短处理。

  (2)根据(1)所述的医疗运动图像处理系统,所述规定时间是基于用户的操作而任意地确定的时间。

  (3)根据(1)或(2)所述的医疗运动图像处理系统,在与成为所述计算单元的计算对象的所述片段重复部分中包括的所述时间码相对应的运动图像文件为多个的情况下,所述部分保存单元使成为所述缩短处理的对象的各运动图像文件的时间相对于该片段重复部分的时间长度所占的比例与通过该缩短处理使各运动图像文件缩短的时间之间存在正的相关关系。

  (4)根据(1)至(3)中的任一项所述的医疗运动图像处理系统,在与成为所述计算单元的计算对象的所述片段重复部分中包括的所述时间码相对应的运动图像文件为多个的情况下,所述部分保存单元将作为保存对象的多个运动图像文件的至少一部分进行合并后保存到所述规定的存储区域。

  (5)根据(4)所述的医疗运动图像处理系统,还具备运动图像输入单元,所述运动图像输入单元将与所述手术有关的多个运动图像文件分开地输入到多个输入系统,在从多个所述输入系统输入了与成为所述计算单元的计算对象的所述片段重复部分中包括的所述时间码相对应的运动图像文件且在所述输入系统的至少一个输入系统中成为保存对象的运动图像文件为多个的情况下,所述部分保存单元将作为保存对象的多个运动图像文件按每个所述输入系统合并为一个运动图像文件并保存到所述规定的存储区域。

  (6)根据(5)所述的医疗运动图像处理系统,还具备:片段指定单元,其基于用户的操作来任意地指定由所述片段设定单元设定的一个或多个所述片段;以及输入系统指定单元,其基于用户的操作来任意地指定多个所述输入系统的一部分或全部,所述部分保存单元一并地保存与由所述片段指定单元指定的所述片段中包括的所述时间码相对应、且从所述输入系统指定单元指定的所述输入系统输入的运动图像文件。

  本申请主张以2018年4月6日申请的日本申请特愿2018-073877为基础的优先权,并在此并入其公开全部内容。

  附图标记说明

  100:医疗运动图像处理系统;111~114:摄像机;120:编码器;130:服务器装置;140:视听终端装置;1201:输入画面;1202:输出画面;1203:状态显示;1204:录像开始按钮;1205:录像停止按钮;1206:静止图像摄影按钮;1207:录像暂时停止按钮;1208:手术信息显示;1209:输出信息显示;1210:扩展显示工作按钮;1211:子画面;1212:子画面;1213:子画面;1214:扩展显示停止按钮;1401:指针;1402、1409:全屏显示图标;1403、1411:输入系统显示;1404:静止图像;1405:备注编辑图标;1406:删除图标;1407、1408:备注信息;1410:显示切换图标;1412:事件信息;1413:标签显示;1414:光标;1415:标签显示;1416:再现速度选择图标;1417:前跳转图标;1418:30秒返回图标;1419:10秒返回图标;1420:再现图标;1421:停止图标;1422:10秒前进图标;1423:30秒前进图标;1424:后跳转图标;1425:分割方式选择部;1426:捕获图标;1427:时间轴选择图标;1428:浏览器切换图标;1429:编辑器切换图标;1430:备注输入栏;1431:保存图标;1432:删除图标;1433:静止图像;1436:片段编号显示部;1437:单独再现图标;1438:单独下载图标;1439:保存运动图像时间显示部;1440:片段显示部;1441:输入系统指定框;1442:开始时间点设定图标;1443:结束时间点设定图标;1444:开始结束输入栏;1445:保存目的地复选框;1446:片段追加图标;1447:片段删除图标;1448:下载图标;1449~1452:缩短目标时间显示部;DA1:同步显示区域;DA2:附带显示区域;DA3:时间线显示区域。

《医疗运动图像处理系统.doc》
将本文的Word文档下载到电脑,方便收藏和打印
推荐度:
点击下载文档

文档为doc格式(或pdf格式)