申请/专利权人：富士胶片商业创新有限公司

申请日：2018-05-04

公开（公告）日：2024-03-22

公开（公告）号：CN109521835B

主分类号：G06F1/16

分类号：G06F1/16;G06F3/01

优先权：["20170920 JP 2017-180371"]

专利状态码：有效-授权

法律状态：2024.03.22#授权;2021.06.08#著录事项变更;2020.04.14#实质审查的生效;2019.03.26#公开

摘要：本申请涉及信息处理设备、信息处理系统和信息处理方法。具体地，该信息处理设备包括获取单元和命令单元。获取单元从如下图像获取容纳容纳物的容器的位置信息，该图像通过使用以交叠方式显示虚拟空间图像和真实空间且具有拍摄功能的显示装置对容器进行拍摄而被获取。命令单元命令显示装置在容器附近显示与容纳物有关的信息，该信息与位置信息关联地存储为虚拟空间图像。

主权项：1.一种信息处理设备，该信息处理设备包括：获取单元，该获取单元从如下图像获取容纳容纳物的容器的位置信息，该图像通过使用以交叠方式显示虚拟空间图像和真实空间且具有拍摄功能的显示装置对所述容器进行拍摄而被获取；命令单元，该命令单元命令所述显示装置在所述容器附近显示与所述容纳物有关的信息，该信息与所述位置信息关联地存储为所述虚拟空间图像；视线检测器，该视线检测器检测用户的视线方向；姿势检测器，该姿势检测器根据用户的手的移动来检测姿势；以及发送器，该发送器发送与由所述姿势检测器检测到的姿势对应的命令以及与由所述视线检测器检测到的视线方向对应的命令，其中，当所述容纳物是绑定文档的文件时，由所述显示装置显示的所述文件的颜色根据从所述容器取出实际文件的次数而改变。

全文数据：信息处理设备、信息处理系统和信息处理方法技术领域本发明涉及信息处理设备、信息处理系统和信息处理方法。背景技术日本未审查专利申请第2004-227462号公报提出了一种彼此对应地管理电子文档和纸质文档的文档管理设备的示例。日本未审查专利申请第2004-227462号公报中描述的文档管理设备管理电子文档和纸质文档，并且包括：文档信息存储单元，其存储纸质文档的管理位置即，箱柜；电子文档存储单元，其存储与纸质文档对应的电子文档；以及文档登记管理单元，其在文档信息存储单元中登记纸质文档，在电子文档存储单元中登记电子文档，并且搜索纸质文档和电子文档。发明内容本发明的目的是，提供在容器附近虚拟显示与该容器内所容纳的容纳物有关的信息的信息处理设备、信息处理系统和信息处理方法。根据本发明的第一方面，提供了一种包括获取单元和命令单元的信息处理设备。所述获取单元从如下图像获取容纳容纳物的容器的位置信息，该图像通过使用以交叠方式显示虚拟空间图像和真实空间且具有拍摄功能的显示装置对所述容器进行拍摄而被获取。所述命令单元命令所述显示装置在所述容器附近显示与所述容纳物有关的信息，该信息与所述位置信息关联地存储为所述虚拟空间图像。根据本发明的第二方面，在根据第一方面的信息处理设备中，所述获取单元可以获取所述显示装置与所述容器之间的距离，并且所述命令单元可以作出命令以通过如下方式显示与容纳物有关的所述信息：改变所述信息的文本尺寸，使得与对于到所述显示装置的距离更短的所述容器相比，所述文本尺寸对于到所述显示装置的距离更长的所述容器更大。根据本发明的第三方面，在根据第一方面或第二方面的信息处理设备中，所述命令单元可以基于来自所述显示装置的命令来作出命令，以改变与容纳物有关的所述信息。根据本发明的第四方面，在根据第三方面的信息处理设备中，所述命令单元可以基于来自所述显示装置的命令，而作出命令以显示所选信息的属性信息。根据本发明的第五方面，在根据第四方面的信息处理设备中，所述属性信息的显示可以被给予使用所述显示装置的用户的访问权限所限制。根据本发明的第六方面，在根据第一方面至第五方面中任意一个方面的信息处理设备中，与所述容纳物有关的所述信息可以包括根据给予使用所述显示装置的用户的访问权限的内容。根据本发明的第七方面，在根据第第一方面至第六方面中任意一个方面的信息处理设备中，与所述容纳物有关的所述信息可以根据预定时间而改变。根据本发明的第八方面，在根据第一方面至第七方面中任意一个方面的信息处理设备中，所述容纳物可以是绑定文档的文件，并且与所述容纳物有关的所述信息可以是所述文件的脊背上显示的文件名。根据本发明的第九方面，在根据第八方面的信息处理设备中，所述文件名可以以显示宽度来显示，显示宽度的尺寸对应于所述实际文件的脊背宽度，并且所述文件名的文本可以用根据所述显示宽度的尺寸来显示。根据本发明的第十方面，在根据第八方面或第九方面的信息处理设备中，所述文件的颜色可以根据从所述容器取出所述实际文件的次数而改变。根据本发明的第十一方面，在根据第八方面至第十方面中任意一个方面的信息处理设备中，所述文件可以以指示从所述容器取出所述实际文件的颜色来显示。根据本发明的第十二方面，在根据第一方面至第十一方面中任意一个方面的信息处理设备中，所述容器可以包括门和锁定控制器，如果用户具有对所述容器的访问权限，则该锁定控制器解锁所述门。根据本发明的第十三方面，在根据第一方面至第十二方面中任意一个方面的信息处理设备中，在所述容器和所述容纳物彼此关联并且容纳物被取出的情况下，或者如果所述容纳物容纳在错误容器中，所述命令单元可以命令显示通知。根据本发明的第十四方面，在根据第一方面至第十三方面中任意一个方面的信息处理设备中，如果从所述显示装置接收到所拍摄的容器的图像和登录请求，则所述命令单元可以作出命令以显示与所述容纳物有关的所述信息，作为所述虚拟空间图像，并且如果在预定时间未作出命令或者如果未接收到登出请求，则所述命令单元可以作出命令以结束显示与所述容纳物有关的所述信息作为所述虚拟空间图像。根据本发明的第十五方面，提供了一种包括显示装置、获取单元和命令单元的信息处理系统。所述显示装置以交叠方式显示虚拟空间图像和真实空间，并且具有拍摄功能。所述获取单元从如下图像获取容纳容纳物的容器的位置信息，该图像通过所述显示装置对所述容器进行拍摄而被获取。所述命令单元命令所述显示装置在所述容器附近显示与所述容纳物有关的信息，该信息与所述位置信息关联地存储为所述虚拟空间图像。根据本发明的第十六方面，提供了一种信息处理方法，包括从由于通过使用以交叠方式显示虚拟空间图像和真实空间且具有拍摄功能的显示装置对所述容器进行拍摄而获取的图像，获取容纳容纳物的容器的位置信息；并且命令所述显示装置在所述容器附近显示与容纳物有关的信息，该信息与所述位置信息关联存储为所述虚拟空间图像。根据第一方面、第十五方面和第十六方面，与容器中所容纳的物体有关的信息可以虚拟显示在容器附近。根据第二方面，与容纳物有关的信息可以用根据到容器的距离的尺寸来显示。根据第三方面和第四方面，与容纳物有关的信息可以在远离所述容器的位置处改变。根据第五方面和第六方面，所显示的内容可以根据是否具有访问权限而被限制。根据第七方面，可以在预定时间之外限制所显示的内容。根据第八方面和第九方面，虚拟图像可以以类似于实际文件的状态来显示。根据第十方面和第十一方面，可以视觉识别实际文件的所含状态。根据第十二方面，可以省略要由管理者执行的解锁过程。根据第十三方面，可以通知用户容纳物是否是重要物体。根据第十四方面，可以基于使用显示装置的用户的意图，来显示虚拟图像或结束虚拟图像的显示。附图说明将基于以下附图来详细描述本发明的示例性实施方式，附图中：图1例示了根据本发明的第一示例性实施方式的信息处理系统的构造示例；图2是例示了头戴式显示装置的示例的外观图；图3例示了头戴式显示装置的控制系统的示例；图4是例示了信息处理设备的控制系统的示例的框图；图5例示了用户属性表的示例；图6例示了箱柜表的示例；图7例示了箱柜说明信息的层级结构的示例；图8例示了虚拟图像的显示示例；图9例示了虚拟图像的显示示例；图10例示了虚拟图像的显示示例；图11是例示了根据第一示例性实施方式的信息处理设备的操作的示例的流程图；图12例示了虚拟图像的另一个显示示例；图13是例示了根据本发明的第二示例性实施方式的信息处理设备的控制系统的示例的框图；图14例示了虚拟图像的显示示例；图15例示了虚拟图像的另一个显示示例；以及图16例示了用户属性表的修改例。具体实施方式下面将参照附图来描述本发明的示例性实施方式。在附图中，具有大致相同功能的部件给予相同的附图标记，并且将省略其冗余描述。根据示例性实施方式的信息处理设备包括获取单元和命令单元。获取单元从由于通过使用以交叠方式显示虚拟空间图像和真实空间且具有拍摄功能的显示装置对所述容器进行拍摄而获取的图像，获取容纳容纳物的容器的位置信息。命令单元命令显示装置在容器附近显示与所含的物体有关的信息，该信息与位置信息关联地存储为虚拟空间图像。术语“显示装置”包括：透光头戴式显示装置，其戴在用户的头上，并且借助该显示装置用户能够直接查看真实空间背景，同时查看作为虚拟空间图像的所呈现信息；以及便携式信息终端，其以交叠方式在所拍摄的背景图像上显示所呈现信息，作为虚拟空间图像。透光头戴式显示装置可以是护目镜或眼镜的形式。便携式信息终端可以是头戴式类型。第一示例性实施方式图1例示了根据本发明的第一示例性实施方式的信息处理系统1的构造示例。信息处理设备1包括：头戴式显示装置下文中称为“HMD装置”2，和控制HMD装置2的信息处理设备3。HMD装置2和信息处理设备3以可通信方式彼此无线连接。虽然单个HMD装置2例示在图1中，但可以设置多个HMD装置2。HMD装置2是显示装置的示例。信息处理系统1可以用于例如办公室或公共设施中。图1例示了多个箱柜4A和4B可以总称为“箱柜”4设置在办公室中，并且戴着HMD装置2的人朝向箱柜4查看的状态。虽然图1中例示了两个箱柜4，但可以设置单个箱柜4或三个或更多个箱柜4。各个箱柜4是容器的示例。HMD装置2被构造为，通过以交叠方式显示虚拟空间图像下文中称为“虚拟图像”和真实空间背景，而虚拟显示所谓的虚拟图像。具体地，HMD装置2是透光头戴式显示装置，其戴在用户的头上，并且借助该显示装置，用户能够直接查看背景和虚拟图像。信息处理设备3基于箱柜4管理箱柜4中容纳的文件5参见图4，并且使用HMD装置2向用户提供与各个文件5有关的信息。虽然在该示例性实施方式中各个箱柜4设置有可锁定门，但各个箱柜可以是未设置有门的类型。在多个箱柜4中，例如，容纳重要物体的箱柜4可以在由管理者设置的特定时间例如，8：00AM解锁，并且可以在由管理者设置的特定时间例如，6：00PM锁定。另选地，所有箱柜4可以被管理者解锁和锁定，或者不必被解锁和锁定。各个文件5绑定文档，并且是容纳物的示例。要容纳在各个容器中的容纳物不限于文件5，并且可以另选地是公司、部门或组中的共享设备，诸如照相机、个人计算机、或便携式终端。图2是例示了HMD装置2的示例的外观图。HMD装置2包括显示单元22和向外照相机23A。显示单元22包括要安装到耳朵的框架220，并且还包括右透射式显示器221a和左透射式显示器221b有时总称为“透射式显示器221”。透射式显示器221可以是例如透射式液晶显示器、透射式有机电致发光EL显示器、或透射式无机EL显示器。右透射式显示器221a针对右眼显示显示图像，并且左透射式显示器221b针对左眼显示显示图像。右眼显示图像和左眼显示图像与背景交叠，并且由使用HMD装置2的用户视觉识别为虚拟图像。HMD装置的构造图2例示了HMD装置2的控制系统的示例。HMD装置2包括：控制器20，其控制HMD装置2的各个部件；存储单元21，其存储各种类型的信息；上述显示单元22；上述向外照相机23A；向内照相机23B；传感器单元24；声音输入单元25；位置检测器26；处理器27和无线通信单元28。控制器20由例如中央处理单元CPU和接口构成。CPU根据存储单元21中存储的程序210而操作，以便充当例如发送器200、接收器201和显示控制器202。后面将详细描述部件200至202。存储单元21由例如只读存储器ROM、随机存取存储器RAM和硬盘构成，并且在其中存储例如程序和数据。向外照相机23A使用HMD装置2拍摄背景以及用户的手，并且向控制器20发送所拍摄的图像。向内照相机23B使用HMD装置2拍摄用户的眼睛，并且向控制器20发送所拍摄的图像。要由向外照相机23A和向内图像23B拍摄的图像可以是静止图像或移动图像。在通过对用户的手进行拍摄来检测姿势或者要检测视线的情况下，移动图像是期望的，或者通过每秒对多个图像进行拍摄而获得的连续静止图像是期望的。传感器单元24包括距离图像传感器、加速度传感器和陀螺仪。距离图像传感器可以是例如红外距离传感器、激光距离传感器或超声距离传感器。距离图像传感器辐射红外光、激光或超声波，并且从其反射的时间差读取各个像素的距离，以便获得距离图像。加速度传感器检测施加于HMD装置2的加速度。陀螺仪检测施加于HMD装置2的角速度。声音输入单元25由麦克风构成，并且将用户使用HMD装置2输出的声音转换成作为电信号的声音信号，并且接收语音信号。处理器27处理由向外照相机23A、向内照相机23B、传感器单元24和声音输入单元25输入的信息，并且包括姿势检测器270、视线检测器271和语音识别器272。姿势检测器270检测指示用户使用HMD装置2的用户的移动的姿势。具体地，姿势检测器270从被传感器单元24的距离图像传感器检测到的距离图像，根据用户的手的移动例如，两个手指收缩放大操作，来检测预定手势。而且，姿势检测器270基于由传感器单元24的加速度传感器检测到的HMD装置2的加速度和由陀螺仪检测的HMD装置2的角速度，根据用户头部的移动例如，头向一侧摇晃，来检测预定头部姿势。姿势检测器270向控制器20发送与检测到的姿势对应的命令。视线检测器271从由向内照相机23B拍摄的用户的眼睛的图像，来检测用户的视线方向，并且向控制器20发送检测到的视线方向和与视线方向对应的命令。检测视线的方法可以涉及例如，使用视线照相机作为向内照相机23B，而基于与眼睛的内角的位置相对的虹膜的位置，来检测视线，或者使用红外照相机和红外发光二极管，作为向内照相机23B，而基于与角膜反射的位置相对的瞳孔的位置，来检测视线方向。视线方向可以代替姿势来使用。语音识别器272将由声音输入单元25接收的语音信号转换成数字语音数据，并且向控制器20发送语音数据。无线通信单元28通过使用近场通信与信息处理设备3通信，诸如WiFi无线保真，诸如Wi-Fi直连、蓝牙注册商标或红外通信这样的无线局域网LAN。无线通信单元28可以用于HMD装置2之间的通信。位置检测器26通过使用全球定位系统GPS，规律性地检测指示HMD装置2的位置的位置信息，并且向控制器20发送检测到的位置信息。另选地，可以通过使用信标信号来检测HMD装置2的位置。具体地，位置检测器26检测含有信标ID的信标信号，信标ID用于识别信标发送器，并且位置检测器26向信息处理设备3发送信标ID和关于信标信号的强度信息。信息处理设备3从与信标ID对应的信标发送器的位置信息且从信标信号的强度而获取HMD装置2的位置信息。接着，将描述HMD装置2的部件200至202。发送器200向信息处理设备3经由无线通信单元28，发送由向外照相机23A拍摄的图像、由处理器27获得的处理结果例如，与由姿势检测器270检测到的姿势对应的命令、由视线检测器271检测到的视线方向和与视线方向对应的命令，或者由语音识别器272识别的语音数据，或者由位置检测器26检测到的位置信息，以及用于识别使用HMD装置2的用户的用户ID。接收器201接收从信息处理设备3的发送器304发送的显示图像和指示显示图像要被视觉识别为虚拟图像的位置的位置信息。显示控制器202基于由接收器201接收到的显示图像和位置信息，来控制显示单元22。具体地，显示控制器202执行控制，以基于由接收器201接收到的显示图像和位置信息，来生成右眼显示图像和左眼显示图像，使右透射式显示器221a显示右眼显示图像，并且使左透射式显示器221b显示左眼显示图像，使得使用HMD装置2的用户在与位置信息对应的位置处视觉识别虚拟图像。信息处理设备的构造图4是例示了信息处理设备3的控制系统的示例的框图。信息处理设备3包括：控制器30，其控制信息处理设备3的各个部件；存储单元31，其存储各种类型的信息；无线通信单元32，其与各个HMD装置2无线通信；以及标签接口33。控制器30由例如中央处理单元CPU和接口构成。CPU根据程序310操作,从而用作例如接收器301、获取单元302、显示图像生成单元303、发送器304和管理单元305。显示图像生成单元303和发送器304是命令单元的示例。后面将详细描述部件301至305。存储单元31由例如只读存储器ROM、随机访问存储器RAM和硬盘构成，并且在其中存储例如程序310、用户属性表311参见图5、箱柜表312参见图6、地图数据313和箱柜说明信息314。在该描述中，当向表中写入信息时，使用术语“记录”或“登记”，而当向存储单元中写入信息时，使用术语“存储”。箱柜说明信息314是与容纳物有关的信息的示例。地图数据313含有设置箱柜4的建筑物或房间中的三维图形，并且还含有与箱柜ID关联的位置信息，箱柜ID用于识别各个箱柜4，并且指示建筑物或房间中设置的各个箱柜4的三维位置。三维图形与由HMD装置2的向外照相机23A拍摄的各个箱柜4的图像比较。无线通信单元32通过使用近场通信，与HMD装置2通信，诸如WiFi无线保真，诸如Wi-Fi直连、蓝牙注册商标或红外通信这样的无线局域网LAN。标签接口33连接到分别设置在箱柜4A和4B中的标签读取器7A和7B它们总称为“标签读取器7”。文件5单独设置有集成电路IC标签6。各个IC标签6在存储器中存储用于识别文件的文件ID。、用户属性表的构造图5例示了用户属性表311的示例。用户属性表311具有：“用户ID”栏，其中记录用户ID；“用户名”栏，其中记录用户名；“部门”栏，其中记录用户所属于的部门；以及“用户描述”栏，其中记录用户是全职雇员还是临时雇员以及用户是执行官员还是普通员工。用户ID、用户名、部门和用户描述是人的属性信息的示例。部门是组的示例。箱柜表的构造图6例示了箱柜表312的示例。箱柜表312具有：“箱柜ID”栏，其中记录用于识别箱柜的箱柜ID；“位置信息”栏，其中记录指示各个箱柜4的位置的位置信息；“文件ID”栏，其中记录用于识别对应箱柜4中所含有的各个文件5的文件ID；“文件名”栏，其中记录文件名；“创建时间”栏，其中记录各个文件5的创建时间和创建日期；以及“更新时间”栏，其中记录各个文件5的更新时间和日期。箱柜说明信息的层级结构图7例示了箱柜说明信息314的层级结构的示例。箱柜说明信息314说明对应箱柜4中所含有的各个文件5的概要。具体地，箱柜说明信息314由层级结构中的多个信息构成，并且与各个箱柜ID关联地存储在存储单元31中。例如，箱柜说明信息314包括与各个箱柜4的管理有关的管理信息314a参见图8、关于箱柜4中所含有的文件的特性信息314b图9、以及关于构成特性信息314b的项目的详细信息314c图10。管理信息314a、特性信息314b和详细信息314c分别位于层级结构的上层、中间层和下层。详细信息314c是所选信息的属性信息的示例。接着，将描述信息处理设备3的部件301至305。接收器301接收例如用户ID、图像、语音数据、HMD装置2的位置信息、以及从HMD装置2发送的各种类型的命令。当接收器301接收指示登录请求的命令、HMD装置2的位置信息、箱柜4的图像和用户ID时，获取单元302基于HMD装置2的位置信息、箱柜4的图像和地图数据313，来获取箱柜4的位置信息及其箱柜ID。而且，获取单元302基于HMD装置2的位置信息和箱柜4的位置信息，计算从HMD装置2到箱柜4的距离。如果图像包括多个箱柜4，则获取单元302计算到各个箱柜4的距离。另选地，各个箱柜4的表面可以设置有代码图像，诸如快速响应QR代码注册商标，其中加密有箱柜4的位置信息及其箱柜ID。在这种情况下，获取单元302可以解密由HMD装置2的向外照相机23A拍摄的图像中所包括的代码图像和箱柜ID，以便获取箱柜4的位置信息和箱柜ID。显示图像生成单元303生成要显示在HMD装置2的显示单元22上的显示图像，诸如显示图像，包括根据从HMD装置2到箱柜2的距离的箱柜说明信息314。具体地，通过改变箱柜说明信息314的文本尺寸，而使得与对于到HMD装置2的距离更短的箱柜4相比，该文本尺寸对于到HMD装置2的距离更长的箱柜4更大，显示图像生成单元303生成显示图像。在不改变文本尺寸的情况下，被显示为虚拟图像的箱柜说明信息314的文本随着从HMD装置2到箱柜4的距离增大而显得是变小。相反，该示例性实施方式可以防止文本显得变小。发送器304命令HMD装置2显示所生成的显示图像，作为虚拟图像。具体地，发送器304向HMD装置2发送：由显示图像生成单元303生成的显示图像，和显示图像要被视觉识别为虚拟图像的位置信息例如，在对应箱柜4附近，并且命令HMD装置2在箱柜4附近显示显示图像，作为虚拟图像。虚拟图像的位置信息可以是箱柜4的正面。当文件5被从箱柜4取来，并且标签读取器7不再能够从IC标签6读取信息时，管理单元305确定已经从箱柜4取来文件5。当文件5返回到箱柜4并且标签读取器7能够从IC标签6读取信息时，管理单元305确定文件5已经返回到箱柜4。第一示例性实施方式的操作接着，将根据图11的流程图，参照图7至图10描述信息处理系统1的操作的示例。登录例如，当使用HMD装置2的用户移动他她的手以执行用于命令对箱柜4拍摄的姿势第一姿势时，HMD装置2的姿势检测器270从由传感器单元24的距离图像传感器获取的距离图像，来检测第一姿势，并且向控制器20发送与第一姿势对应的第一命令。基于来自姿势检测器270的第一命令，控制器20控制向外照相机23A，以便对箱柜4进行拍摄。控制器20将所拍的图像与拍摄图像时由位置检测器26检测到的位置信息一起存储到存储单元21中。随后，当使用HMD装置2的用户移动他她的手以执行用于命令登录的姿势第二姿势时，HMD装置2的姿势检测器270从由传感器单元24的距离图像传感器获取的距离图像，来检测第二姿势，并且向控制器20发送与第二姿势对应的第二命令。HMD装置2的发送器200向信息处理设备3发送登录请求和图像、HMD装置2的位置信息、和用于识别使用HMD装置2的用户的用户ID。信息处理设备3的接收器301接收从HMD装置2发送的登录请求、图像、HMD装置2的位置信息和用户ID步骤S1中为是。2.箱柜的位置信息的获取从由接收器301接收的图像和HMD装置2的位置信息，还从地图数据313，获取单元302获取图像中所包括的位置信息和各个箱柜4的箱柜ID。而且，基于HMD装置2的位置信息和箱柜4的位置信息，来计算从HMD装置2到箱柜4的距离步骤S2。在后面要描述的图8所示的情况下，计算到箱柜4A的距离L1和到箱柜4B的距离L2。3.显示图像的生成基于由获取单元302获取的箱柜ID和由获取单元302计算得的从HMD装置2到箱柜4的距离，显示图像生成单元303生成显示图像步骤S3。具体地，显示图像生成单元303从存储单元31读取与箱柜ID对应的箱柜说明信息314的上层管理信息314a，并且通过根据从HMD装置2到箱柜4的距离改变文本尺寸来生成显示图像。4.显示图像和位置信息的发送发送器34向HMD装置2发送由显示图像生成单元303生成的显示图像和由获取单元302获取的箱柜4的位置信息步骤S4。HMD装置2的显示控制器202基于显示图像和位置信息，来控制显示单元22，使得显示图像在箱柜4附近被视觉识别为虚拟图像。图8例示了虚拟图像的显示示例。例如，图8所示的虚拟图像110a和110b包括使用箱柜4的部门、箱柜4中容纳的文件5的类型、和诸如访问相关信息这样的管理信息314a。访问相关信息包括密钥管理者、给予访问权限的人等。虚拟图像110a和110b中的每一个是包括管理信息314a的二维图像。具体地，如图8所示，使用HMD装置2的用户在位于远离HMD装置2距离L1的远侧箱柜4A附近视觉识别虚拟图像110a，虚拟图像110a包括“设计部门中的箱柜有设计规格文档。关于密钥，询问___先生女士。THEREISDESIGNSPECIFICATIONDOCUMENTINCABINETOFDESIGNDEPARTMENT.ASKMR.MS.__FORKEY”的管理信息314a。用户还在位于远离HMD装置2距离L2的近侧箱柜4B附近视觉识别虚拟图像110b，虚拟图像110b包括“知识产权部门中的箱柜有申请相关文档。仅限知识产权部门的成员访问。THEREISAPPLICATION-RELATEDDOCUMENTINCABINETOFINTELLECTUALPROPERTYDEPARTMENT.ACCESSISRESTRICTEDTOMEMBERSOFINTELLECTUALPROPERTYDEPARTMENT.”的管理信息314a。管理信息314a位于层级结构的上层。虽然被显示为虚拟图像的管理信息314a的文本可能随着从HMD装置2到各个箱柜4的距离增大而显得变小，但是通过改变文本尺寸，防止文本显得变小，从而与不改变文本尺寸的情况相比，实现管理信息314a的更好的读取性。另选地，可以显示根据给予使用HMD装置2的用户的访问权限的虚拟图像。例如，获取单元302基于用户ID，而从用户属性表311获取部门信息，并且从箱柜说明信息314的管理信息314a获取使用箱柜4的部门。如果使用HMD装置2的用户是不属于使用箱柜4的部门的外人，则确定该用户不具有访问信息的权限，以便不生成显示图像或不显示信息为虚拟图像。作为另一个替换，上层管理信息314a单独可以向外人显示为虚拟图像，使得中间层特性信息314b和下层详细信息314c不显示为虚拟图像。而且，可以根据预定时间段来改变要被视觉显示为虚拟图像的信息。例如，箱柜说明信息314可以在预定时间段例如，8：00AM至6：00PM被完全访问，而不允许外人在预定时间段之外访问整个箱柜说明信息314或特性信息314b和详细信息314c，这意味着信息不被显示为虚拟图像。5.操作的接收如图9所示，当使用HMD装置2的用户在相对于箱柜4A附近显示的虚拟图像110a远离箱柜4A的位置处移动他她的手并且执行用于做出中间层显示命令的姿势第三姿势时，HMD装置2的姿势检测器270从由传感器单元24的距离图像传感器获取的距离图像检测第三姿势，并且向控制器20发送与第三姿势对应的第三命令。发送器200向信息处理设备3发送来自姿势检测器270的第三命令和用户ID。当信息处理设备3的接收器301接收从HMD装置2发送的第三命令和用户ID时步骤S5，获取单元302基于第三命令而从存储单元31获取箱柜说明信息314的中间层特性信息314b。显示图像生成单元303生成包括从获取单元302获取的特性信息314b的显示图像步骤S6。发送器304向HMD装置2发送由显示图像生成单元303生成的显示图像和由获取单元302获取的箱柜4的位置信息步骤S7。HMD装置2的显示控制器202基于显示图像和位置信息，来控制显示单元22，使得显示图像在箱柜4附近被视觉识别为虚拟图像。图9例示了虚拟图像的显示示例。图9所示的虚拟图像111a包括箱柜4中所容纳的文件5的特性信息314b。如图9所示，特性信息314b包括例如文件名、数据格式、和各个所含文件5的数据创建时间。虚拟图像111a是包括特性信息314b的二维图像。如图9所示，使用HMD装置2的用户能够从位于远离箱柜4A的位置处查看上层管理信息314a和中间层特性信息314b。随后，如图10所示，当使用HMD装置2的用户相对于箱柜4A附近显示的虚拟图像111a移动他她的手，并且执行用于显示用于从虚拟图像111a中包括的特性信息314b选择项目的图标120且用于操作图标120的姿势第四姿势时，HMD装置2的姿势检测器270从由传感器单元24的距离图像传感器获取的距离图像来检测第四姿势，并且向控制器20发送与第四姿势对应的第四命令和该项目的位置信息。发送器200向信息处理设备3发送来自姿势检测器270的第四命令和项目的位置信息以及用户ID。当信息处理设备3的接收器301接收从HMD装置2发送的第四命令、项目的位置信息、和用户ID时步骤S5，获取单元302基于第四命令和项目的位置信息从存储单元31获取与箱柜说明信息314的中间层项目对应的详细信息314c。显示图像生成单元303生成包括从获取单元302获取的详细信息314c的显示图像步骤S6。发送器304向HMD装置2发送由显示图像生成单元303生成的显示图像和由获取单元302获取的项目的位置信息步骤S7。HMD装置2的显示控制器202基于显示图像和项目的位置信息，来控制显示单元22，使得显示图像在箱柜4附近被视觉识别为虚拟图像。图10例示了虚拟图像的显示示例。图10中所示的虚拟图像112a和113a各包括构成特性信息314b的项目的详细信息314c。当与管理者的姓名例如，TaroFuji对应的项目通过使用图标120而被从特性信息314b选择时，视觉显示包括详细信息314c的虚拟图像112a即，TaroFuji的联系信息。当与图形列表对应的项目通过使用图标120而被从特性信息314b选择时，视觉显示包括关于图形列表的详细信息314c例如，创建时间和更新时间的虚拟图像113a。详细信息314c位于特性信息314b的下层。虚拟图像112a和113a中的每一个是包括详细信息314c的二维图像。通过使得可以使用图标120选择项目，可以从远离箱柜4A的位置查看特性信息314b和详细信息314c。如果在上述步骤S5中的预定时间段之后，未接收指示操作的命令步骤S8中为是，则执行从HMD装置2的强制登出过程步骤S9。另选地，可以基于来自使用HMD装置2的用户的登出请求来执行登出过程。虚拟图像的另一个显示示例图12例示了虚拟图像的另一个显示示例。如图12所示，可以根据从HMD装置2到箱柜4的距离来虚拟显示具有不同信息量的虚拟图像。具体地，如图12所示，与具有更少信息量的数字标识类似的虚拟图像110a可以对于远侧箱柜4A被虚拟显示，并且比虚拟图像110a具有更大信息量的虚拟图像111b可以对于近侧箱柜4B被虚拟显示。虚拟图像110a包括管理信息314a。虚拟图像111b包括特性信息314b。虽然近侧箱柜4B处显示的虚拟图像111b具有大信息量，但虚拟图像111b可读，因为到箱柜4B的距离短。在图12所示的情况下，显示图像生成单元303可以通过改变文本尺寸，而使得与对于到HMD装置2的距离更短的箱柜4相比，该文本尺寸对于到HMD装置2的距离更长的箱柜4更大，来生成显示图像。第二示例性实施方式图13是例示了根据本发明的第二示例性实施方式的信息处理设备的控制系统的示例的框图。与箱柜说明信息314被虚拟显示为与容纳物有关的信息的第一示例性实施方式相比，在第二示例性实施方式中视觉显示箱柜内部图像315。以下描述聚焦于与第一示例性实施方式的区别。具体地，代替箱柜说明信息314，根据该示例性实施方式的信息处理设备3的存储单元31在内部存储箱柜内部图像315。箱柜内部信息315是与容纳物有关的信息的示例。显示图像生成单元303生成要显示在HMD装置2的显示单元22上的显示图像，诸如显示图像，其包括根据从HMD装置2到各个箱柜4的距离的箱柜内部信息315。箱柜内部图像315是在打开箱柜4的门时可以查看的图像。箱柜内部图像315与各个箱柜ID关联地存储在存储单元31中。图14例示了虚拟图像的显示示例。图14例示了虚拟图像114a虚拟显示在远侧箱柜4A的正面上，并且虚拟图像114b虚拟显示在近侧箱柜4B的正面上的状态。虚拟图像114a和114b中的每一个是基于箱柜内部图像315生成的虚拟显示的显示图像。虚拟图像114a和114b分别是打开箱柜4A和4B的门时可以查看的图像。具体地，虚拟图像114a包括箱柜4A中容纳的文件5的脊背315a和文件名315b。虚拟图像114b包括箱柜4B中容纳的文件5的脊背315a和文件名315b。虚拟图像114a和114b是二维图像。虽然被显示为虚拟图像的文件名315b的文本可能实际上随着从HMD装置2到各个箱柜4的距离增大而显得实际上变小，但是通过改变文本尺寸，防止文本显得变小，从而与不改变文本尺寸的情况相比，实现文件名315b的更好的读取性。各个文件名315b的显示宽度对应于实际文件5的脊背宽度，并且以根据显示宽度的尺寸来显示文件名315b的文本。脊背315a的颜色或文件5的文件名315b可以根据从箱柜4取出实际文件5的次数来改变。例如，所显示的颜色可以随着从对应箱柜4取出文件5的次数增大，而改变成更亮颜色或高度可视颜色。与不改变其颜色的情况相比，这允许容易看到频繁使用的文件5。另选地，文件5的脊背315a或文件名315b可以以指示从箱柜4取出实际文件5的颜色来显示。这容易使得从对应箱柜4取出文件5显而易见。在箱柜ID和文件ID彼此关联地存储并且文件5要容纳在错误箱柜4中的情况下，可以根据特定方法，提供通知，诸如HMD装置2的显示单元22显示文件5的目的地错误的通知。虚拟图像的另一个显示示例图15例示了虚拟图像的另一个显示示例。图15例示了虚拟图像114a和114b分别被虚拟显示在箱柜4A和4B的正面上的状态。虚拟图像114a和114b分别是打开箱柜4A和4B的门时可以查看的图像。因为箱柜4A和4B与使用HMD装置2的用户分开相同距离，所以用相同尺寸显示虚拟图像114a和114b。如以上参照图10描述的，在使用HMD装置2的用户操作图标120来选择虚拟图像114b中包括的文件例如，脊背315a的情况下，与文件5相关的详细信息可以显示为虚拟图像。用户属性表的修改例图16例示了用户属性表的修改例。通过向图5所示的用户属性表311添加“对特定箱柜的访问权限”栏而获得图16所示的用户属性表311a。在“对特定箱柜的访问权限”栏中，记录了指示是否对特定箱柜具有访问权限的信息。在这种情况下，在图6所示的箱柜表312的“箱柜ID”栏中，在正常箱柜4的情况下，可以添加在头部具有字符“C”的ID，并且在可以获取访问权限的特定箱柜4的情况下，字符“S”可以添加到正常ID的头部。因此，根据箱柜ID，对应的箱柜4是否是特定箱柜4是清楚的。在图像中包括的箱柜4是特定箱柜4的情况下，获取单元302参照图16中所示的用户属性表311a，以便基于用户ID来确定使用HMD装置2的用户是否具有对特定箱柜4的访问权限。显示图像生成单元303根据用户是否具有访问权限，而生成显示图像。如果用户不具有访问权限，则不必生成显示图像。在图15所示的情况下，如参照图10描述的，如果使用HMD装置2的用户操作图标120以选择虚拟图像114b中包括的文件例如，脊背315a，则只有使用HMD装置2的用户具有对箱柜4B的访问权限，与文件5有关的详细信息才可以显示为虚拟图像。各个箱柜4可以具有门和锁定控制器，如果使用HMD装置2的用户具有对箱柜4的访问权限，则锁定控制器解锁门。在这种情况下，信息处理设备3的获取单元302基于用户属性表311a，确定用户是否具有访问权限，并且向锁定控制器通知确定结果，从而去除要由管理者执行的锁定过程。虽然上面已经描述了本发明的示例性实施方式，但本发明的示例性实施方式不限于上述示例性实施方式，并且本发明的范围内允许各种修改例。例如，虽然在各个示例性实施方式中，透光头戴式显示装置被描述为显示装置，但是本发明的示例性实施方式可以类似地应用于便携式信息终端，诸如智能电话，其以交叠方式在真实空间背景的所拍摄的图像上显示显示图像作为虚拟图像。而且，信息处理设备3的功能中的至少一个功能可以向HMD装置2转移，并且HMD装置2的功能中的至少一个功能可以向信息处理设备3转移。例如，HMD装置2的语音识别功能可以向信息处理设备3转移，使得语音信号从HMD装置向信息处理设备3发送，并且通过使用信息处理设备3的语音识别功能，而被转换成语音数据。控制器20和30中包括的各个部件可以部分或全部由硬件电路构成，诸如场可编程门阵列FPGA或专用集成电路ASIC。上述每一个示例性实施方式的部件中的一个或一些部件可以省略，或在本发明的范围内修改。而且，在以上各个示例性实施方式的流程图中，例如，可以在本发明的范围内添加、删除、改变或互换一个或多个步骤。而且，各个上述示例性实施方式中使用的程序可以通过记录在计算机可读记录介质上来提供，诸如光盘只读存储器CD-ROM。另选地，各个上述示例性实施方式中使用的程序可以存储在外部服务器中，诸如云服务器，并且可以经由网络使用。对本发明的示例性实施方式的上述说明是为了例示和说明的目的而提供的。并非旨在对本发明进行穷尽，或者将本发明限于所公开的精确形式。显而易见的是，很多修改例和变型例对于本领域技术人员是明显的。选择了这些实施方式进行说明以最好地解释本发明的原理及其实际应用，以使本领域其它技术人员能够理解本发明的各种实施方式，以及适合于所设想的具体用途的各种变型。本发明的范围旨在由所附权利要求及其等同物来限定。

权利要求：1.一种信息处理设备，该信息处理设备包括：获取单元，该获取单元从如下图像获取容纳容纳物的容器的位置信息，该图像通过使用以交叠方式显示虚拟空间图像和真实空间且具有拍摄功能的显示装置对所述容器进行拍摄而被获取；以及命令单元，该命令单元命令所述显示装置在所述容器附近显示与所述容纳物有关的信息，该信息与所述位置信息关联地存储为所述虚拟空间图像。2.根据权利要求1所述的信息处理设备，其中，所述获取单元获取所述显示装置与所述容器之间的距离，并且其中，所述命令单元作出命令，以通过如下方式来显示与所述容纳物有关的所述信息：改变所述信息的文本尺寸，使得与对于到所述显示装置的距离更短的所述容器相比，所述文本尺寸对于到所述显示装置的距离更长的所述容器更大。3.根据权利要求1或2所述的信息处理设备，其中，所述命令单元基于来自所述显示装置的命令来作出命令，以改变与所述容纳物有关的所述信息。4.根据权利要求3所述的信息处理设备，其中，所述命令单元基于来自所述显示装置的命令来作出命令，以显示所选信息的属性信息。5.根据权利要求4所述的信息处理设备，其中，所述属性信息的显示被给予使用所述显示装置的用户的访问权限所限制。6.根据权利要求1至5中任意一项所述的信息处理设备，其中，与所述容纳物有关的所述信息包括根据给予使用所述显示装置的用户的访问权限的内容。7.根据权利要求1至6中任意一项所述的信息处理设备，其中，与所述容纳物有关的所述信息根据预定时间而改变。8.根据权利要求1至7中任意一项所述的信息处理设备，其中，所述容纳物是绑定文档的文件，并且其中，与所述容纳物有关的所述信息是在所述文件的脊背上显示的文件名。9.根据权利要求8所述的信息处理设备，其中，所述文件名以显示宽度来显示，该显示宽度的尺寸对应于所述实际文件的脊背宽度，并且所述文件名的文本以根据所述显示宽度的尺寸来显示。10.根据权利要求8或9所述的信息处理设备，其中，所述文件的颜色根据从所述容器取出所述实际文件的次数而改变。11.根据权利要求8至10中任意一项所述的信息处理设备，其中，所述文件以指示从所述容器取出所述实际文件的颜色来显示。12.根据权利要求1至11中任意一项所述的信息处理设备，其中，所述容器包括门和锁定控制器，如果用户具有对所述容器的访问权限，则该锁定控制器解锁所述门。13.根据权利要求1至12中任意一项所述的信息处理设备，其中，在所述容器和所述容纳物彼此关联并且所述容纳物被取出的情况下，或者如果所述容纳物容纳在错误容器中，所述命令单元作出命令以显示通知。14.根据权利要求1至13中任意一项所述的信息处理设备，其中，如果从所述显示装置接收到登录请求和所拍摄的所述容器的图像，则所述命令单元作出命令以显示与所述容纳物相关的所述信息作为所述虚拟空间图像，并且其中，如果在预定时间未作出命令或者如果未接收到登出请求，则所述命令单元作出命令以结束显示与所述容纳物有关的所述信息作为所述虚拟空间图像。15.一种信息处理系统，该信息处理系统包括：显示装置，该显示装置以交叠方式显示虚拟空间图像和真实空间，并且具有拍摄功能；获取单元，该获取单元从如下图像获取容纳容纳物的容器的位置信息，该图像通过所述显示装置对所述容器进行拍摄而被获取；以及命令单元，该命令单元命令所述显示装置在所述容器附近显示与所述容纳物有关的信息，该信息与所述位置信息关联地存储为所述虚拟空间图像。16.一种信息处理方法，该信息处理方法包括如下步骤：从如下图像获取容纳容纳物的容器的位置信息，该图像通过使用以交叠方式显示虚拟空间图像和真实空间且具有拍摄功能的显示装置对所述容器进行拍摄而被获取；以及命令所述显示装置在所述容器附近显示与所述容纳物有关的信息，该信息与所述位置信息关联地存储为所述虚拟空间图像。

百度查询： 富士胶片商业创新有限公司 信息处理设备、信息处理系统和信息处理方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD