申请/专利权人：索尼公司

申请日：2017-03-08

公开（公告）日：2020-11-24

公开（公告）号：CN108781255B

主分类号：H04N5/232(20060101)

分类号：H04N5/232(20060101);G03B15/00(20060101);G03B17/00(20060101)

优先权：["20160308 US 62/305,313"]

专利状态码：有效-授权

法律状态：2020.11.24#授权;2019.03.29#实质审查的生效;2018.11.09#公开

摘要：本公开涉及一种当控制多个自动摄像机时，能够实现与各种状况的变化对应的摄像机作业的信息处理设备、信息处理方法和程序。获取被摄对象的位置信息，获取指示时间的经过的计时信息，并根据所述计时信息和被摄对象的位置信息，生成用于控制对被摄对象成像的成像设备的摄像机作业的摄像机作业控制信息。本公开可适用于控制多个自动摄像机的切换器设备。

主权项：1.一种信息处理设备，包括：处理电路，被配置为：获得包括彼此关联的计时信息、指示被摄对象在计时信息中指定的各个计时的各个可能位置的位置信息以及摄像机作业控制信息的表集合；为特定图像拍摄设备从所述表集合中识别一条摄像机作业控制信息，所述一条摄像机作业控制信息与对应于当前时间的计时信息中指定的特定计时和对应于被摄对象的当前位置的位置信息中指示的该特定计时的特定位置相关联地登记在所述表集合中；以及根据所识别的所述一条摄像机作业控制信息，控制所述特定图像拍摄设备来拍摄被摄对象的图像。

全文数据：信息处理设备、信息处理方法和程序技术领域[0001]本公开涉及信息处理设备、信息处理方法和程序，更具体地，涉及能够在控制多个自动摄像机时，实现与各种状况的变化对应的摄像机作业camerawork的信息处理设备、信息处理方法和程序。背景技术[0002]在拍摄电视节目记录、现场音乐演出转播、体育转播等的图像的情况下，必需从多个视点，利用多个摄像机拍摄图像。[0003]—般，利用许多摄像机拍摄图像需要大量的摄像人员，从而与图像拍摄关联的成本增大。[0004]因而，提出了通过把用于图像拍摄的摄像机变换成不需要摄像人员的远程操作的自动摄像机，减少摄像人员的数量，从而降低与图像拍摄关联的成本。[0005]关于这类自动摄像机控制技术，提出了获取被摄对象的位置信息，并根据被摄对象的位置信息，在切换自动摄像机的图像拍摄方向和操作模式的同时，拍摄图像的技术参见专利文献1。[0006]另外，提出了如下技术:其中在记录电视节目的排演中，在与被摄对象的位置信息关联地记录控制自动摄像机中的和图像拍摄相关的操作的参数的同时，拍摄图像，并且之后在录制镜头时，获取被摄对象的位置信息，并校正利用在排演期间记录的参数进行的操作，从而即使当在录制镜头时，被摄对象进行与排演不同的移动，也可适当地拍摄图像参见专利文献2。[0007]引用列表[0008]专利文献[0009]专利文献1:JP2005-277845A[0010]专利文献2:JP2003-348384A发明内容[0011]技术问题[0012]然而，在音乐节目的演播室录制、现场音乐演出的转播等期间，利用按照上述专利文献1和2的技术实现的摄像机作业不对音乐的推移作出反应。[0013]另外，当拍摄体育转播等的图像时，利用按照上述专利文献1和2的技术实现的摄像机作业不是对例如随着比赛的推移的得分的变化、运动员的活跃程度等作出反应的摄像机作业。[0014]换句话说，利用按照上述专利文献1和2的技术实现的摄像机作业在继续利用自动摄像机拍摄图像的时候，能够根据被摄对象的位置信息，对摄像机作业进行修改，但是在继续拍摄图像的时候，所述摄像机作业不对除被摄对象的位置信息以外的状况的变化作出反应。[0015]鉴于这样的情况，提出了本公开，特别地，使得能够在控制多个自动摄像机时，实现与各种状况的变化对应的摄像机作业。[0016]问题的解决方案[0017]按照本公开的一个方面的信息处理设备是一种信息处理设备，包括:控制部分，所述控制部分根据其中关联计时信息、指示被摄对象的位置的位置信息和指示摄像机作业的摄像机作业信息的表集合，指定与指示图像拍摄的当前时间的当前计时信息和指示被摄对象的当前位置的当前位置信息对应的摄像机作业，并按照指定的摄像机作业，控制拍摄被摄对象的图像拍摄设备的摄像机作业。[0018]可以与多个图像拍摄设备中的每个图像拍摄设备对应地提供表集合。可以使控制部分通过利用多个图像拍摄设备中的每个图像拍摄设备的表集合，控制每个图像拍摄设备的摄像机作业。[0019]可以为每个图像拍摄对象，提供表集合。可以使控制部分有选择地使用对应于图像拍摄对象的表集合。[0020]可以使控制部分根据指示图像拍摄对象的状况的状况信息，有选择地使用对于同一图像拍摄对象设定的多个表集合中的任意表集合。[0021]状况信息在其中图像拍摄对象是体育转播的情况下，可以是统计stats信息，在其中图像拍摄对象是现场音乐演出的情况下，可以是乐谱。[0022]在其中对应于当前位置信息的位置信息不存在于表集合中的情况下，可以使控制部分利用与邻近当前位置信息的位置对应的多个位置信息，对与当前位置信息对应的位置信息进行插值。[0023]位置信息可以是指示三维空间中的位置的信息。[0024]摄像机作业控制信息可以是控制图像拍摄设备的摇移、俯仰和变焦zoom任意之一的信息。[0025]在其中从由图像拍摄设备拍摄的图像中，识别出被摄对象，并且由摄像机作业信息指示的被摄对象的位置和识别的被摄对象的位置不一致的情况下，可以使控制部分根据由图像拍摄设备拍摄的图像，校正指定的摄像机作业。[0026]按照本公开的一个方面的信息处理方法是一种信息处理方法，包括:根据其中关联计时信息、指示被摄对象的位置的位置信息和指示摄像机作业的摄像机作业信息的表集合，指定与指示图像拍摄的当前时间的当前计时信息和指示被摄对象的当前位置的当前位置信息对应的摄像机作业，并按照指定的摄像机作业，控制拍摄被摄对象的图像拍摄设备的摄像机作业的步骤。[0027]按照本公开的一个方面的程序是一种使计算机执行处理的程序，所述处理包括：根据其中关联计时信息、指示被摄对象的位置的位置信息和指示摄像机作业的摄像机作业信息的表集合，指定与指示图像拍摄的当前时间的当前计时信息和指示被摄对象的当前位置的当前位置信息对应的摄像机作业，并按照指定的摄像机作业，控制拍摄被摄对象的图像拍摄设备的摄像机作业的控制部分。[0028]按照本公开的一个方面，根据其中关联指示被摄对象的位置的位置信息、摄像机作业信息以及指示摄像机作业的摄像机作业信息的表集合，指定与指示图像拍摄的当前时间的当前计时信息和指示被摄对象的当前位置的当前位置信息对应的摄像机作业，并按照指定的摄像机作业，控制拍摄被摄对象的图像拍摄设备的摄像机作业。[0029]发明的有益效果[0030]按照本公开的一个方面，能够在多个自动摄像机的图像拍摄期间，实现与各种状况的变化对应的摄像机作业。附图说明[0031]图1是图解说明按照本公开的自动摄像机控制系统的例证构成的方框图。[0032]图2是图解说明切换器设备的第一实施例的例证构成的示图。[0033]图3是图解说明自动摄像机的例证构成的示图。[0034]图4是图解说明手动摄像机的例证构成的示图。[0035]图5是图解说明传感器设备的例证构成的示图。[0036]图6是说明摄像机作业信息表集合tableset的示图。[0037]图7是说明摄像机作业信息的示图。[0038]图8是说明三维空间中的被摄对象的位置与由自动摄像机拍摄的图像内的二维空间中的像素位置之间的关系的示图。[0039]图9是说明三维空间中的被摄对象的位置与由自动摄像机拍摄的图像内的二维空间中的像素位置之间的关系的示图。[0040]图10是说明第一实施例的摄像机作业控制处理的流程图。[0041]图11是说明第一实施例的摄像机作业控制处理的流程图。[0042]图12是说明第一实施例的摄像机作业控制处理的示图。[0043]图13是说明第一实施例的摄像机作业控制处理的示图。[0044]图14是说明第一实施例的摄像机作业控制处理的示图。[0045]图15是图解说明切换器设备的第二实施例的例证构成的示图。[0046]图16是说明第二实施例的摄像机作业控制处理的流程图。[0047]图17是说明第二实施例的摄像机作业控制处理的示图。[0048]图18是说明第二实施例的摄像机作业控制处理的示图。[0049]图19是说明第二实施例的摄像机作业控制处理的示图。[0050]图20是图解说明切换器设备的第三实施例的例证构成的示图。[0051]图21是说明第三实施例的摄影机作业控制处理的流程图。[0052]图22是说明第三实施例的校正处理的流程图。[0053]图23是说明通用个人计算机的例证构成的示图。具体实施方式[0054]下面参考附图，详细说明本公开的优选实施例。注意在说明书和附图中，功能和结构基本相同的构成元件用相同的附图标记表示，这些构成元件的重复说明被省略。[0055]另外，将按照以下顺序进行说明。[0056]1.第一实施例[0057]2.第二实施例[0058]3.第三实施例[0059]〈〈1.第一实施例》[0060]〈自动摄像机控制系统的例证构成〉[0061]参考图1，说明应用本公开的技术的自动摄像机控制系统。图1的自动摄像机控制系统是用于利用多个自动摄像机，记录电视节目、现场音乐演出、体育转播等等的系统，其中按照电视节目、现场音乐演出或体育转播的推移，控制利用远程操作的自动摄像机进行的被视为被摄对象的演出者、艺术家或体育运动员的图像拍摄。[0062]注意在下面，作为自动摄像机控制系统的用途，将以拍摄电视节目录制、现场音乐演出和体育转播的图像的情况为例，进行说明，不过，该用途仅仅是一个例子，显然也可拍摄除用于记录电视节目、现场音乐演出和体育转播以外的图像拍摄对象。[0063]更具体地，自动摄像机控制系统1包括切换器设备11、接收部分12、外部信息供给部分13、自动摄像机14-1〜14-η、手动摄像机15、和传感器设备16-1〜16-m。注意在下面，在不必单独区分它们的情况下，自动摄像机14-1〜14-n和传感器设备16-1〜16-m将被简单地称为自动摄像机14和传感器设备16，并且将类似的提及除此之外的构成。[0064]如在图中的被摄对象侧的虚线框内所组织似地，传感器设备16-1〜16-m由被视为被摄对象的表演者、艺术家、体育运动员等携带，获取位置信息，并利用无线通信功能，把位置信息发送给接收部分12。[0065]注意，传感器设备16可由不限于人的各种物体携带，只要携带者被视为被摄对象即可，特别地，是运动物体。例如，在篮球比赛等的转播中，传感器设备16由篮球等携带，以使得能够获取篮球的位置信息。另外，在这个例子中，作为例子，说明了利用无线通信功能，把位置信息发送给接收部分12,不过在其中携带传感器设备16的对象被摄对象）的运动受到限制的情况下（在其中被摄对象例如是在舞台布景等上，在固定范围中移动的木偶等的情况下），也可利用有线通信功能，把位置信息发送给接收部分12。[0066]接收部分12接收由传感器设备16-1〜16-m发送的各项位置信息，并利用有线或无线通信功能，发送给切换器设备11。[0067]如在图中的图像拍摄侧的虚线框内所组织似地，在摄像机作业由切换器设备11控制的情况下，自动摄像机14-1〜14-n例如拍摄被视为被摄对象的表演者、艺术家或体育运动员，并把拍摄的图像发送给切换器设备11。[0068]手动摄像机15是在由摄像人员操作的时候，拍摄图像的摄像机，利用与摄像人员的操作相应的摄像机作业，拍摄被摄对象，并把拍摄的图像发送给切换器设备11。[0069]外部信息供给部分13通过网络，从信息递送用服务器等未图示获得包含节目进展信息在电视节目的情况下）、乐谱信息（在现场音乐演出的情况下）、或者也被称为统计信息的包括得分、运动员活动数据等的体育数据在体育转播的情况下）的外部信息，并把所述外部信息提供给切换器设备11。[0070]切换器设备11接收由充当输入系统的自动摄像机14-1〜14-n拍摄的图像，并通过切换到未图示的一个或多个输出系统进行输出。切换器设备11根据由接收部分12供给的传感器设备16-1〜16-m的各项位置信息、由外部信息获取部分13供给的外部信息、和指示图像拍摄的经过时间的计时信息，控制自动摄像机14-1〜14-n的摄像机作业的操作，从而使被摄对象被拍摄，并从自动摄像机14-1〜14-n接收拍摄的图像。注意，计时信息可以是绝对时间信息，或者指示经过的时间的某种其他参数。[0071]〈图1中的切换器设备的例证构成〉[0072]下面参考图2中的方框图，说明切换器设备11的例证构成。[0073]切换器设备11包括控制部分31、位置信息获取部分32、外部信息获取部分33、存储部分34、摄像机作业控制信息发送部分35、图像接收部分36、和计时信息获取部分37。[0074]控制部分31控制切换器设备11的全部操作，具备摄像机作业控制信息生成部分51和图像获取管理部分52。[0075]摄像机作业控制信息生成部分51通过计时信息获取部分37获取计时信息，并通过位置信息获取部分32获取传感器设备16-1〜16-m的各项位置信息。另外，摄像机作业控制信息生成部分51读出保存在存储部分34的摄像机作业信息表集合存储部分71中的、为每个图像拍摄对象保存的摄像机作业信息表集合之中的与待拍摄的图像拍摄对象对应的摄像机作业信息表集合。[0076]这里，摄像机作业信息表集合是用于指定与被摄对象的位置和表示图像拍摄的经过时间的计时信息对应的摄像机作业信息的表格。摄像机作业信息指的是指定用于控制自动摄像机14在利用计时信息指定的各个计时利用特定的摄像机作业拍摄特定被摄对象的摇移俯仰变焦值的信息。[0077]在按照待拍摄的图像拍摄对象读出的摄像机作业信息表集合之中，根据与计时信息对应的摄像机作业信息的关于摇移、俯仰和变焦的信息，摄像机作业控制信息生成部分51按各个自动摄像机14-1〜14-n可识别的格式，生成摄像机作业控制信息Control。[0078]另外，摄像机作业控制信息生成部分51使生成的摄像机作业控制信息由摄像机作业控制信息发送部分35发送给各个自动摄像机14-1〜14-n。[0079]图像获取管理部分52控制图像接收部分36把由自动摄像机14-1〜14-n拍摄的图像Video，与识别自动摄像机14-1〜14-n的标识符关联地相继保存在存储部分34的图像数据存储部分72中。[0080]位置信息获取部分32获取由接收部分12发送的关于各个传感器设备16-1〜16-m的位置信息，并把所述位置信息提供给控制部分31。[0081]外部信息获取部分33获取由外部信息供给部分13供给的外部信息，并把所述外部信息提供给控制部分31。[0082]存储部分34具备摄像机作业信息表集合存储部分71和图像数据存储部分72。保存在摄像机作业信息表集合存储部分71中的摄像机作业信息表集合将在后面参考图6说明。另外，图像数据存储部分72与分别对应的标识符关联地保存由各个自动摄像机14-1〜14-n拍摄的图像。[0083]这里，将在保存在图像数据存储部分72中的由各个自动摄像机14-1〜14-n拍摄的图像是包括音频的运动图像的前提下，进行说明，不过显然图像也可以是静止图像，或者仅仅是运动图像。[0084]计时信息获取部分37获取从外部供给的计时信息，并把所述计时信息提供给控制部分31。[0085]〈自动摄像机的例证构成〉[0086]下面参考图3中的方框图，说明自动摄像机14的例证构成。[0087]根据来自切换器设备11的摄像机作业控制信息，自动摄像机14调整视角，并把利用以调整后的视角为基础的构图拍摄的图像输出给切换器设备11。从而，自动摄像机14能够在不需要摄像人员的情况下，无人地调整视角。[0088]更具体地，自动摄像机14具备摄像机作业控制信息接收部分91、控制部分92、图像拍摄控制部分93、图像拍摄部分94、图像获取部分95和图像发送部分96。[0089]摄像机作业控制信息接收部分91接收从切换器设备11发送的摄像机作业控制信息，并把所述摄像机作业控制信息提供给控制部分92。[0090]控制部分92控制自动摄像机14的全部操作，另外，根据由摄像机作业控制信息接收部分91提供的摄像机作业控制信息，生成控制图像拍摄控制部分93的控制信号，并控制图像拍摄控制部分93。[0091]图像拍摄控制部分93根据来自控制部分92的控制信号，控制图像拍摄部分94的摇移、俯仰和变焦。[0092]图像拍摄部分94包括图像传感器和光学部件。图像拍摄部分94具备摇移、俯仰和变焦机构，并在图像拍摄控制部分93的控制下，拍摄图像并输出给图像获取部分95。这里提到的变焦机构可以是由利用光学部件的光学变焦实现的机构和由电子变焦实现的机构的组合，或者可以仅仅由这些机构之一实现。[0093]在控制部分92的控制下，图像获取部分95获取并临时保存由图像拍摄部分94供给的图像，并且当图像将在下游的图像发送部分96中被发送时，图像获取部分95进行调整，以致不会发生下溢和上溢，并把图像输出给图像发送部分96。[0094]图像发送部分96由控制部分92控制，并把由图像获取部分95供给的图像数据发送给切换器设备11。[0095]〈手动摄像机的例证构成〉[0096]下面参考图4中的流程图，说明手动摄像机15的例证构成。[0097]手动摄像机15按照摄像人员的操作，拍摄图像，并把拍摄的图像发送给切换器设备11〇[0098]更具体地，手动摄像机15具备操作部分111、控制部分112、图像拍摄控制部分113、图像拍摄部分114、图像获取部分115和图像发送部分116。[0099]操作部分111接收摄像人员的用于控制图像拍摄部分114的摇移、俯仰和变焦的操作，并把与操作内容对应的操作信号输出给控制部分112。[0100]控制部分112控制手动摄像机15的全部操作，另外，根据操作部分111供给的操作信号，生成并供给控制图像拍摄控制部分93的控制信号。注意，除了使控制部分112控制调整图像拍摄部分114的姿态的致动器等之外，通过使摄像人员通过直接摆动安装在云台panandtilthead上的图像拍摄部分114,实现摇移和俯仰，和通过手动操作实现变焦，还能够实现手动摄像机15中的摇移、俯仰和变焦。[0101]注意，由于图像拍摄控制部分113、图像拍摄部分114、图像获取部分115和图像发送部分116分别具有与图像拍摄控制部分93、图像拍摄部分94、图像获取部分95和图像发送部分96相同的构成，因此说明被省略。[0102]〈传感器设备的例证构成〉[0103]下面参考图5中的方框图，说明传感器设备16的例证构成。[0104]传感器设备16具备位置信息检测部分131、存储部分132、位置计算部分133和通信部分134。[0105]位置信息检测部分131例如是利用全球导航卫星系统GNSS的位置检测设备，根据来自卫星未图示）的信号，检测关于在地球上的位置的信息，并把所述位置信息输出给位置计算部分133。[0106]存储部分132保存用于校正每个位置信息检测部分131固有的误差的校准信息，并把校准信息输出给位置计算部分133。[0107]位置计算部分133根据校准信息，校正由位置信息检测部分131供给的位置信息，以计算适当的位置信息，并提供给通信部分134。注意，由位置信息检测部分131检测的位置信息也可被直接提供给通信部分134,而不提供给位置计算部分133。[0108]通信部分134获取由位置计算部分133供给的位置信息，并把位置信息发送给接收部分12。[0109]〈摄像机作业信息表集合〉[0110]下面参考图6,说明摄像机作业信息表集合。[0111]摄像机作业信息表集合是关于每个自动摄像机14的集合，例如，如图6中图解所示，是对于被摄对象所存在于的三维空间中的每个坐标位置设定的摄像机作业信息的表集合。图6中，对于各个待拍摄的图像拍摄对象，包括摄像机作业表集合TSl〜TSx。[0112]注意，对于各个自动摄像机14，也可分别设定摄像机作业信息表集合TSl〜TSn。另夕卜，摄像机作业信息表集合TSl〜TSn例如是与各个待拍摄的图像拍摄对象（比如电视节目录制、现场音乐演出和体育转播对应地设定的。注意，在不必单独区分它们的情况下，表集合TSl〜TSx将被简单地称为表集合TS。[0113]对于每个自动摄像机14,每个表集合TS包括对于被摄对象的三维空间内的每个位置设定的摄像机作业信息。注意，例如，像表示存在于二维地表示的网球场内的运动员的位置似的，也可对于二维空间内的每个位置，设定摄像机作业信息。[0114]摄像机作业信息是对于每个自动摄像机14,指定在由计时信息指示的各个计时，将利用何种摄像机作业，拍摄哪个被摄对象的信息。[0115]更具体地，摄像机作业信息是指定被摄对象的位置，并且还指定在各个计时，变焦、摇移和俯仰的大小和方向，以及上述各项的大小的变化的信息。[0116]例如，图6中的表集合TS1是在现场音乐演出的图像拍摄中使用的表集合TS的例子。表集合TSl是其中登记在与沿图中的向下方向经过的时间对应的各个计时T的，关于被摄对象何时存在于三维空间内的坐标xl，yl，zl、（x2，y2，z2、（x3，y3，z3，...，（xn，yn,zn的各个位置处的摄像机作业信息的表格。[0117]换句话说，在图6的表集合TSl中，例如，在其中被摄对象151的位置信息是坐标xl，yl，zl的情况下，在计时T=t0〜t3,存在指定利用使被摄对象在垂直方向的全身被包含在其中拍摄被摄对象151的图像Fll内，并且另外，被摄对象位于水平方向的左侧位置处的构图（摄像机作业），进行图像拍摄的登记摄像机作业信息。[0118]另外，在其中被摄对象151的位置信息是坐标xl，yl，zl的情况下，在计时T=t3〜t5,存在指定利用使被摄对象在垂直方向的上半身被包含在其中拍摄被摄对象151的图像Fll内，并且另外，被摄对象位于水平方向的中央位置处的构图（摄像机作业），进行图像拍摄的登记摄像机作业信息。[0119]此外，在其中被摄对象151的位置信息是坐标x2，y2，z2的情况下，在计时T=tO〜t2，存在指定利用使被摄对象在垂直方向的全身被包含在其中拍摄被摄对象151的图像F21内，并且另外，被摄对象位于水平方向的中央位置处的构图（摄像机作业），进行图像拍摄的登记摄像机作业信息。[0120]另外，在其中被摄对象151的位置信息存在于坐标X2，y2，z2处的情况下，在计时T=t2〜t5,存在指定利用使被摄对象在垂直方向的上半身被包含在其中拍摄被摄对象151的图像F21内，并且另外，被摄对象位于水平方向的中央位置处的构图（摄像机作业），进行图像拍摄的登记摄像机作业信息。[0121]类似地，在其中被摄对象151的位置信息存在于坐标X3，y3，z3处的情况下，在计时T=t0〜tl，存在指定利用使被摄对象在垂直方向的全身被包含在其中拍摄被摄对象151的图像F31内，并且另外，被摄对象位于水平方向的右侧位置处的构图（摄像机作业），进行图像拍摄的登记摄像机作业信息。[0122]另外，在其中被摄对象151的位置信息存在于坐标X3，y3，z3处的情况下，在计时T=tl〜t3,存在指定利用使被摄对象在垂直方向的全身被包含在其中拍摄被摄对象151的图像F31内，并且另外，被摄对象位于水平方向的左侧位置处的构图（摄像机作业），进行图像拍摄的登记摄像机作业信息。[0123]此外，在其中被摄对象151的位置信息存在于坐标X3，y3，z3处的情况下，在计时T=t3〜t5，存在指定利用使被摄对象在垂直方向的全身被包含在其中拍摄被摄对象151的图像F31内，并且另外，被摄对象位于水平方向的右侧位置处的构图（摄像机作业），进行图像拍摄的登记摄像机作业信息。[0124]注意，保存在图6中的表格中的各项摄像机作业信息被表示成利用各个自动摄像机14拍摄的被摄对象的构图，不过，实际的摄像机作业信息是指定用于实现在利用自动摄像机14的图像拍摄期间所需的摄像机作业的摇移俯仰变焦的信息。[0125]被摄对象151的位置可以用由被摄对象151携带的传感器设备16所发送的位置信息指定。因而，例如，在其中被摄对象151的位置信息存在于坐标Xl，yl，zl处的情况下，在计时T=t0〜t3,自动摄像机控制信息生成部分51根据被摄对象151的位置信息和摄像机作业信息，从摄像机作业信息表集合TS，生成自动摄像机控制信息，所述摄像机作业信息表集合TS指示包括用于控制能够实现使被摄对象151在垂直方向的全身被包含在图像Fll内，并且另外，被摄对象151位于水平方向的中间偏左位置的构图（摄像机作业的自动摄像机14的摇移俯仰变焦信息的摄像机作业信息，并使生成的自动摄像机控制信息从摄像机作业控制信息发送部分35被发送给自动摄像机14。[0126]另外，例如，在拍摄现场音乐演出的情况下，摄像机作业信息是按照在预定计时的被摄对象151在举办现场音乐演出的舞台171上的位置，指示被摄对象的构图（视角）的指定的信息。[0127]换句话说，如图7的左部所示，在预定计时T，在现场音乐演出的舞台171上，例如，在其中充当被摄对象151的艺术家位于面向舞台171的左侧位置PL处的情况下，摄像机作业信息是指示以致被摄对象在垂直方向的全身被包含在由自动摄像机14拍摄的图像F111内的构图的控制，并且另外，以致被摄对象位于图像Fill的左侧的构图的控制的信息。[0128]另外，如图7的中部所示，在预定计时T，例如，在其中充当被摄对象151的艺术家位于在舞台171的正面中央的位置PC处的情况下，如利用自动摄像机14拍摄的图像F112所示，摄像机作业信息是指示以致被摄对象在垂直方向的上半身被包含在图像F112内的构图的控制，并且另外，以致被摄对象位于图像F112的水平方向的中央的构图的控制的信息。[0129]类似地，如图7的右部所示，在预定计时T，例如，在其中充当被摄对象151的艺术家位于面向舞台171的右侧位置PR处的情况下，如拍摄的图像F113所示，摄像机作业信息是指示以致被摄对象在垂直方向的上半身被包含在图像F113内的构图的控制，并且另外，以致被摄对象位于图像Fl13的水平方向的右侧的构图的控制的信息。[0130]通过按照这种方式发出指令，能够实现取决于被摄对象的位置的各种摄像机作业。[0131]注意在图7中，在各个上部中，例示了被摄对象151在舞台171上的各个位置PL、PC和PR，以及利用自动摄像机14拍摄的图像F111-F113的对应范围，而在下部中，例示了图像F111-F113。[0132]〈拍摄图像中的二维空间中的像素位置与被摄对象的三维空间中的位置之间的关系〉[0133]下面参考图8和9,说明拍摄图像中的二维空间中的像素位置与被摄对象的三维空间中的位置之间的关系。[0134]如图8中图解所示，当利用自动摄像机14拍摄的被摄对象151在三维空间内的点的坐标位置用坐标x，y，z，l的转置矩阵表示，并且利用自动摄像机14拍摄的图像内的对应点的坐标位置用坐标u，v，l的转置矩阵表示时，利用包含以下矩阵公式的式（1，表现基于透视投影模型的摄像机模型。[0135][式1][0137]这里，fu和fV是表示自动摄像机14的焦距的参数，u和V是表示拍摄图像内的被摄对象151的中心位置携带传感器设备16的位置的参数，s是表示偏斜skew的参数，而其中i，j=〇，1，2和ti其中i=0，1，2分别是表示旋转和平移的参数。[0138]换句话说，存在于三维空间内的坐标x，y，z，l处的点被投影到二维图像空间内的坐标u，v，l上。[0139]这里，关于摇移、俯仰和变焦，摇移P俯仰T用rij表示，而变焦系数Z用fu、fv表示。[0140]因而，通过把摇移P俯仰T定义成rij=Rx，y，z，把变焦系数Z=fu+fv2定义成Fx，y，z，并且预先指定摇移P俯仰T=Rx，y，z和变焦系数Z=Fx，y，z，自动摄像机14的摄像机作业被指定。[0141]例如，如图9的右部所示，当以利用自动摄像机14拍摄的图像Fl11的中心位置作为坐标中心，定义像素位置坐标x，y时，在其中用图9的左上部所示的舞台171上的位置PL处的被摄对象151被表示成在坐标x，y，z，l处的点的情况下，通过利用上述式（I，对应被摄对象151被投影成在图像Fill内的像素位置FPLu，v，l处的点。[0142]通过利用这种关系，根据摄像机作业信息，使三维空间内的被摄对象151的坐标位置位置信息与由自动摄像机14拍摄的图像内的像素位置关联，摄像机作业控制信息生成部分51能够计算控制自动摄像机14的摇移、俯仰和变焦的摄像机作业控制信息，从而能够设定各种摄像机作业。[0143]摄像机作业信息是指定将在各个自动摄像机14中拍摄的被摄对象，以及与该被摄对象相关的构图的信息。具体地，摄像机作业信息是用于利用与被摄对象相关的构图，拍摄所述被摄对象的摇移俯仰变焦的信息。摄像机作业控制信息是通过把由摄像机作业信息指定的摇移俯仰变焦的信息变换成自动摄像机14可识别的信息而获得的信息。从而，在其中自动摄像机14能够识别摄像机作业信息的情况下，到摄像机作业控制信息的变换不是必需的。[0144]另外，摄像机作业信息是对于被摄对象151可能存在于的三维空间内的每项坐标信息设定的，不过，也可对于具有一定范围的各个区域，设定摄像机作业信息。[0145]另外，不必为被摄对象的所有位置，都准备表集合。这种情况下，通过根据与接近被摄对象的位置的多项位置信息对应的摄像机作业信息进行插值，可生成摄像机作业信息。[0146]〈摄像机作业控制处理〉[0M7]下面，参考图10和11中的流程图，说明图1的自动摄像机控制系统1进行的摄像机作业控制处理。[0148]在步骤Sll，传感器设备16的位置信息检测部分131接收来自GNSS卫星未图示）的信号，检测当前位置信息，并把当前位置信息提供给位置计算部分133。[0149]在步骤S12,位置计算部分133读出保存在存储部分132中的校准信息。[0150]在步骤S13,位置计算部分133根据校准信息，校正由位置信息检测部分131供给的位置信息，并把校正后的位置信息输出给通信部分134。[0151]在步骤S14,通信部分134把校正后的位置信息传送给接收部分12。[0152]由通信部分134发送的位置信息是包括识别传感器设备16的标识符（id、关于携带传感器设备16的携带者的类型信息type、和指示所述位置的坐标信息x，y，z的信息。关于携带传感器设备16的携带者的类型信息（type例如在其中待拍摄的图像拍摄对象是体育转播的情况下，是“A队中的选手”或“B队中的选手”，或者例如在现场音乐演出或音乐会的情况下，是“歌手”、“吉他手”、“贝斯手”、“跳舞者”等。从而，可以像位置信息Sid=id，type，X，y，z似地表示位置信息。[0153]在步骤S15,位置计算部分133判定是否发出了终止处理的指令，在未发出终止指令的情况下，处理返回步骤S11。另外在步骤S15,在发出了终止处理的指令的情况下，处理终止。换句话说，传感器设备16反复生成位置信息，并发送给接收部分12,直到被指令终止处理为止。[0154]利用上述处理，传感器设备16-1〜16-n重复单独生成位置信息SicU并把位置信息Sid发送给接收部分12的处理，直到被指令终止该处理为止。随后，接收部分12接收由传感器设备16-1〜16-n发送的位置信息，并输出给切换器设备11。[0155]另一方面，在切换器设备11中，在步骤S31，控制部分31控制摄像机作业控制信息生成部分51读出保存在存储部分34的摄像机作业信息表集合存储部分71中的摄像机作业信息表集合TS之中的、与待拍摄的图像拍摄对象对应的摄像机作业信息表集合TS。注意，摄像机作业信息表集合TS也可被配置成在开始摄像机作业控制处理之前的计时，被预先读出。[0156]在步骤S32,控制部分31控制计时信息获取部分37获取由外部计时生成设备未图示生成的计时信息T。[0157]在步骤S33,控制部分31控制摄像机作业控制信息生成部分51把未处理的自动摄像机14之一，设定为处理对象自动摄像机14。[0158]在步骤S34,摄像机作业控制信息生成部分51从读出的摄像机作业信息表集合中的处理对象自动摄像机14的摄像机作业信息表中，读出对应于计时信息T的摄像机作业信息。[0159]在步骤S35,摄像机作业控制信息生成部分51判定是否使用来自传感器设备16的位置信息。换句话说，关于来自传感器设备16的位置信息，能够按照是否预先使用位置信息的设定或者位置信息是否可获取进行切换。在步骤S34,在判定使用位置信息的情况下，处理进入步骤S36。[0160]在步骤S36,摄像机作业控制信息生成部分51控制位置信息获取部分32获取来自传感器设备16的位置信息。[0161]在步骤S37,摄像机作业控制信息生成部分51根据摄像机作业信息和位置信息，生成摄像机作业控制信息，处理进入步骤S39。更具体地，摄像机作业控制信息生成部分51计算按照下面的式2计算的三维空间内的坐标信息Ctrln，从摄像机作业信息表集合中，读出对应自动摄像机14的摇移、俯仰和变焦，生成摄像机作业控制信息，并输出给摄像机作业控制信息发送部分35。[0162][式2][0164]这里，wid是充当携带传感器设备16的携带者或载体的被摄对象的权重，Sid是传感器设备16的位置信息。另外，λ是关于由传感器设备16指定的被摄对象在三维空间内的位置的权重，（l-λ是关于由摄像机作业信息指定的被摄对象在三维空间内的位置的权重，Qn是由摄像机作业信息指定的当不使用传感器设备16时，或者在不能检测到位置信息的状态下，假定被摄对象存在于三维空间内的位置。另外，m是传感器设备16的数目，id是识别传感器设备16的标识符。[0165]式2中的第一项成为与传感器设备16-1〜16-m的各个权重相应的位置信息的重心位置乘以权重λ的值，而第二项成为按照摄像机作业信息的在不使用位置信息或者未检测到位置信息的状态下，假定被摄对象存在于的三维空间内的位置乘以权重l-λ的值。[0166]这里，三维空间内的位置Qn是在不使用传感器设备16或者不能检测到位置信息的状态下，假定被摄对象151存在于的三维空间内的位置信息。[0167]从而，在式（2中，Ctrln成为利用多个传感器设备16指定的三维空间内的用自动摄像机14拍摄的被摄对象的位置，与在不使用传感器设备16或者不能检测到位置信息的状态下，假定被摄对象151存在于的三维空间内的位置之间的利用权重λ的重心位置。达到权重λ较大的程度的自适应控制成为可能。[0168]另一方面，在步骤S35,在判定不使用位置信息的情况下，处理进入步骤S38。[0169]在步骤S38,摄像机作业控制信息生成部分51根据摄像机作业信息，生成摄像机作业控制信息，然后处理进入步骤S39。更具体地，摄像机作业控制信息生成部分51按照在下式（3中例示的计算，生成摄像机作业控制信息，并输出给摄像机作业控制信息发送部分35〇[0170][式3][0171]Ctrln=Qn...3[0172]换句话说，在不使用位置信息的情况下，生成以假定被摄对象存在于的三维空间内的位置Qn为基础的自动摄像机控制信息。[0173]在步骤S39,摄像机作业控制信息发送部分35把摄像机作业控制信息发送给处理对象自动摄像机14。[0174]在步骤S40,摄像机作业控制信息生成部分51判定是否存在未处理的自动摄像机14,在存在未处理的自动摄像机14的情况下，处理返回步骤S33。换句话说，重复从步骤S33至IJS40的处理，直到不存在未处理的自动摄像机14为止。[0175]随后，在步骤S40，在认为不存在未处理的自动摄像机14的情况下，处理进入步骤S41〇[0176]响应该处理，在步骤S71图11，自动摄像机14控制摄像机作业控制信息接收部分91接收并获取摄像机作业控制信息。[0177]在步骤S72,根据获取的摄像机作业控制信息，控制部分92控制图像拍摄控制部分93,以通过图像拍摄部分94的摇移俯仰变焦，控制构图。[0178]在步骤S73,根据获取的摄像机作业控制信息，控制部分92控制图像拍摄控制部分93,以利用图像拍摄部分94拍摄图像。利用该处理，图像拍摄部分94通过基于摄像机作业控制信息的摇移俯仰变焦，控制构图，用受控的构图拍摄图像，并输出给图像获取部分95。[0179]在步骤S74,控制部分92控制图像获取部分95获取并临时保存由图像拍摄部分94拍摄的图像，并在进行调整，以致不会发生上溢和下溢时，使图像被输出给图像发送部分96〇[0180]在步骤S75,控制部分92控制图像发送部分96,把图像获取部分95供给的图像发送给切换器设备11。[0181]在步骤S76,控制部分92判定是否发出了终止处理的指令，在未发出终止指令的情况下，处理返回步骤S71，然后重复步骤S71-S76的处理，直到发出终止指令为止。[0182]随后，在步骤S76，当发出终止处理的指令时，处理终止。[0183]注意，对于手动摄像机15，代替步骤S71和S72中的处理，控制部分112按照响应摄像人员的操作，来自操作部分111的操作信号，控制图像拍摄部分114,所述操作信号对应于摄像机作业控制信息。由于之后的处理类似于步骤S73-S76的处理，因此其说明被省略。[0184]利用上述处理，由自动摄像机14和手动摄像机15拍摄的图像被发送给切换器设备11〇[0185]按照该处理，在步骤S41，控制部分31控制图像接收部分36接收由所有的自动摄像机14和手动摄像机15发送的图像。[0186]在步骤S42，控制部分31控制图像接收部分36，使存储部分34把接收的图像与自动摄像机14的标识符关联地保存在图像数据存储部分72中。[0187]在步骤S43,控制部分31判定是否发出了终止的指令，在未发出终止的指令的情况下，处理返回步骤S31。换句话说，重复从步骤S31到S43的处理，直到发出了终止处理的指令为止。[0188]随后，在步骤S43，当发出终止处理的指令时，处理终止。[0189]利用上述处理，例如，将考虑不使用传感器设备16的位置信息的情况，例如，图12中图解所示的使用包括摄像机作业信息的摄像机作业信息表集合TS的情况。[0190]在图12中，在计时T=11〜t3，存在其中设定摇移、俯仰和变焦，以致利用使得在由自动摄像机14拍摄的图像Fl12内，假定存在于舞台171上的中心位置PC处的被摄对象151的上半身沿垂直方向被包含在该图像内，并且另外，该被摄对象位于水平方向的中央位置处的构图，进行图像拍摄的登记摄像机作业信息。[0191]另外，在计时T=t3〜t5,存在其中设定摇移、俯仰和变焦，以致利用使得在由自动摄像机14拍摄的图像Fl12内，假定存在于舞台171上的中心位置PC处的被摄对象151的全身沿垂直方向被包含在该帧内，并且另外，该被摄对象位于水平方向的中央位置处的构图，进行图像拍摄的登记摄像机作业信息。[0192]此外，在计时T=t5〜t7,存在其中设定摇移、俯仰和变焦，以致利用使得在由自动摄像机14拍摄的图像Fl12内，假定存在于舞台171上的中心位置PC处的被摄对象151的上半身沿垂直方向被包含在该帧内，并且另外，该被摄对象位于水平方向的中央位置处的构图，进行图像拍摄的登记摄像机作业信息。[0193]这里，由于图12的摄像机作业信息表集合是假定被摄对象151存在于在舞台171的中心的位置PC处的摄像机作业信息，因此如果被摄对象151正确地存在于位置PC处，那么能够生成适当的图像。[0194]然而，当被摄对象151的位置不是位置PC时，存在不能拍摄适当图像的可能性。[0195]对此，在利用位置信息的情况下，如图13中图解所示，按照被摄对象151的位置的自适应图像拍摄成为可能。[0196]换句话说，如图13中图解所示，例如，在计时T=11〜13，在其中被摄对象151实际存在于的位置PC’和假定的位置PC—致的情况下，类似于参考图12说明的情况，可以利用被摄对象的预期构图（视角），拍摄被摄对象151。[0197]然而，在图13的计时T=t3〜t5,在其中实际被摄对象151’存在于偏离假定被摄对象151存在于的位置PC的位置PC’处的情况下，根据位置PC’的位置信息，按照如式2所示的计算（比如当λ=1时拍摄的图像变成不是由在假定被摄对象151存在于位置PC处的情况下的图像F112’例示，而是由与被摄对象151’实际存在于的位置PC’的位置信息对应的图像F131例示的构图的图像。[0198]此外，在图13的计时T=t5〜t7，在其中被摄对象151作为被摄对象15Γ，实际存在于偏离假定位置PC的位置PC”处的情况下，根据位置PC”的位置信息，按照如式2所示的计算比如当λ=1时）拍摄的图像变成不是由在被摄对象151实际存在于位置PC处的情况下的图像F112例示，而是由与被摄对象151”存在于的位置PC”的位置信息对应的图像F132例示的构图的图像。[0199]这样，通过利用位置信息，能够把与位置信息关联的校正加入在摄像机作业信息表集合中预先设定的摄像机作业信息中。注意在图13中，作为例子给出了权重λ=1，不过，通过在0〜1的范围内，改变权重λ，能够调整介于利用假定被摄对象151存在于的位置信息的摄像机作业信息拍摄的构图的图像，和利用依据当前位置信息捕捉的摄像机作业信息拍摄的构图的图像之间的位置。从而，能够实现达到权重λ较大的程度的自适应处理。[0200]注意，图13中的用虚线例示的图像F112和F112’对应于图12中的图像F112和F112，。[0201]另外，例如，在其中图像拍摄对象是篮球比赛的体育转播的情况下，对于第一自动摄像机14,可准备控制构图，以致选手存在于的整个范围被包含在图像内的摄像机作业信息表集合，并且对于第二自动摄像机14,可准备控制构图，以致篮球周围的区域被包含的摄像机作业信息表集合。[0202]这种情况下，如图14中所示，在计时T=tl〜t3,根据关于包括篮球选手的被摄对象151-1〜151-5和151-11〜151-15存在于何处的位置信息，利用第一自动摄像机14拍摄以致所有选手都被包含在图像内的构图的图像F141。同时，根据篮球B的位置信息，利用第二自动摄像机14拍摄在包括篮球B的被摄对象151-B周围的区域被放大的图像Fl51。[0203]另外，如图14中所示，在计时T=t3〜t5,根据关于包括篮球选手的被摄对象151-1〜151-5和151-11〜151-15存在于何处的位置信息，利用第一自动摄像机14拍摄以致所有选手都被包含在图像内的构图的图像F132。同时，根据篮球B的位置信息，利用第二自动摄像机14拍摄在包括篮球B的被摄对象151-B周围的区域被放大的构图的图像Fl52。[0204]类似地，如图14中所示，在计时T=t5〜t7,根据关于包括篮球选手的被摄对象151-1〜151-5和151-11〜151-15存在于何处的位置信息，利用第一自动摄像机14拍摄以致所有选手都被包含在图像内的构图的图像F143。同时，根据篮球B的位置信息，利用第二自动摄像机14拍摄以致在包括篮球B的被摄对象151-B周围的区域被包含的构图的图像Fl53。[0205]然而，在参考图14说明的体育转播中，选手被摄对象151-1〜151-5和151-11〜151-15以及篮球B被摄对象151-B中的每一个的位置都不能被假定为特定位置。因此，在不使用位置信息的情况下，对于第一和第二自动摄像机14的摄像机作业信息表集合中的各项摄像机作业信息需要被设定成例如以致拍摄整个篮球场的构图的图像。[0206]另外，在不使用位置信息的状态下，使整个篮球场被拍摄的情况下，当使用位置信息时，在式2中，必须把权重λ设定成接近于1的值。[0207]利用上述处理，通过选择保存在摄像机作业信息表集合存储部分71中的摄像机作业信息表集合之中的、与待拍摄的图像拍摄对象对应的摄像机作业信息表集合，进行图像拍摄，能够在按照从开始图像拍摄以来经过的时间，切换预先设定的摄像机作业信息，或者换句话说，改变对应的摇移俯仰变焦，以变更构图时，拍摄图像。另外，通过除了摄像机作业信息之外，还利用被摄对象位置信息，能够按照与图像拍摄相关的时间的流逝跟随拍摄的图像拍摄对象的与时间的流逝关联的推移），拍摄与被摄对象的运动对应的构图的图像。[0208]结果，当控制多个自动摄像机时，能够实现与各种状况下的变化对应的摄像机作业。[0209]〈〈2·第二实施例》[0210]上面说明了按照待拍摄的图像拍摄对象，利用固定的摄像机作业信息表集合的例子，不过，也可准备用于同一图像拍摄对象的图像拍摄的多个不同的摄像机作业信息表集合，并按照外部信息切换使用。[0211]图15图解说明其中准备用于同一图像拍摄对象的图像拍摄的多个不同的摄像机作业信息表集合，并按照外部信息切换使用的切换器设备11的例证构成。[0212]在图15的切换器设备11中，与图2的切换器设备11的不同之处在于在控制部分31中，代替摄像机作业控制信息生成部分51，设置了摄像机作业控制信息生成部分191，并且代替摄像机作业信息表集合存储部分71，保存对于同一图像拍摄对象的多个摄像机作业信息表集合的摄像机作业信息表集合存储部分201被保存在存储部分34中。[0213]换句话说，摄像机作业控制信息生成部分191具有与摄像机作业控制信息生成部分51相同的基本功能，不过另外，例如，在从开始摄像机作业控制处理以来过去预定时间之后，摄像机作业控制信息生成部分191根据由外部信息获取部分33供给的外部信息，切换保存在存储于存储部分34中的摄像机作业信息表集合存储部分201中的、对于同一图像拍摄对象设定的摄像机作业信息表集合。[0214]注意，由于接收部分12、外部信息供给部分13、自动摄像机14、手动摄像机15和传感器设备16的构成与第一实施例相同，因此其说明被省略。[0215]〈图15的切换器设备进行的摄像机作业控制处理〉[0216]下面参考图16中的流程图，说明图15的切换器设备11进行的摄像机作业控制处理。[0217]注意在图16中的流程图之中，由于步骤S91-S102的处理类似于图10的步骤S31-S43的处理，因此其说明被省略。[0218]换句话说，在步骤S104,摄像机作业控制信息生成部分191判定预定时间是否已过去，在所述预定时间还未过去的情况下，处理返回步骤S91中的处理。另外，在步骤S104,在所述预定时间已过去的情况下，处理进入步骤S105。[0219]在步骤S105,摄像机作业控制信息生成部分191控制外部信息获取部分33,获取由外部信息供给部分13供给的外部信息。[0220]在步骤S106,根据获取的外部信息，摄像机作业控制信息生成部分191切换保存在存储于存储部分34中的摄像机作业信息表集合存储部分201中的、对于同一图像拍摄对象设定的摄像机作业信息表集合，然后处理返回步骤S91。[0221]换句话说，例如，如图17中图解所示，在第一摄像机作业信息表集合中，在从tl到t4的计时T，根据包括篮球选手的被摄对象151-1〜151-5和151-11〜151-15存在于何处的位置信息，拍摄以致所有选手都被包含在图像内的构图的图像F171。[0222]相反，当在计时T为t4的时候，过去预定时间之时，例如，在自从开始比赛以来时间已过去，比赛的上半场结束，和下半场开始的计时，根据外部信息，当对应于被摄对象151-5的选手在比赛的上半场中得分最多时，摄像机作业信息表集合被切换到控制构图，以致包含被摄对象151-5即得分最多的突出选手周围的区域的摄像机作业信息表集合。利用这种安排，在从t4到t7的计时T，可进行以致拍摄具有由图像F181图解所示的构图的图像的控制。[0223]注意，在其中不能切换摄像机作业信息表集合的情况下，在从t4到t7的计时T，根据包括篮球选手的被摄对象151-1〜151-5和151-11〜151-15存在于何处的位置信息，拍摄具有用虚线例示的构图的图像F172,以致所有选手都被包含在该图像内，并且即使所述突出选手正在打球，也无法一眼就找出该突出球员在图像中的位置。[0224]从而，通过按照这种方式，切换摄像机作业信息表集合，在比赛的上半场中，能够控制构图，以致包含所有的选手，而在比赛的下半场中，能够控制构图，以致以在比赛的上半场中，得分最多的非常突出的选手为中心，使得能够拍摄吸引观众的构图的图像。[0225]利用上述处理，通过随着比赛的进行，按照外部信息，切换摄像机作业信息表集合，能够按照比赛的进展和外部信息，对摄像机作业进行各种改变。[0226]上面说明了其中图像拍摄对象被认为是体育转播，并且利用图1中的自动摄像机控制系统拍摄篮球比赛的例子，不过，所述比赛也可以是不同的运动，比如排球、足球、棒球，等等。另外，赛马、自行车比赛、赛艇等的转播也是可能的，并且例如，可分别对于比赛刚开始后、比赛中和比赛结尾，切换摄像机作业信息表集合。换句话说，在刚开始之后，摄像机作业信息表集合可被设定成其中控制构图，以致包括所有参赛选手的所有被摄对象都被包含的摄像机作业信息表集合，而在比赛中，摄像机作业信息表集合可被设定成其中控制构图，以致包括领先集团中的参赛选手的被摄对象被包含的摄像机作业信息表集合，然后在比赛结尾时，摄像机作业信息表集合可被设定成其中控制构图，以致包括竞争第一位置的几个参赛选手的被摄对象被包含的摄像机作业信息表集合。[0227]另外，上面说明了当预定时间过去时，根据外部信息，切换摄像机作业信息表集合的例子，不过，当在外部信息中发生变化时，也可切换摄像机作业信息表集合。换句话说，在转播篮球比赛的情况下，按照外部信息，每当比分被逆转时，摄像机作业信息表集合可被切换，以使用控制构图，以致以获胜球队的活跃选手为中心的摄像机作业信息表集合。[0228]注意，上面说明了利用从开始摄像机作业控制处理，直到过去预定时间为止的选手活跃记录例如，统计信息），作为外部信息的例子，不过，其他外部信息也是可以接受的，例如，在现场音乐演出等的情况下，当包括多个艺术家的群体被视为被摄对象时，可根据乐谱控制构图，以致只有包括正在唱歌的艺术家的被摄对象被包含在图像中。[0229]换句话说，在图像拍摄对象是现场音乐演出的情况下，在初始的摄像机作业信息表集合中，如图18中图解所示，假定根据舞台171上的包括艺术家的被摄对象151-31〜151-34存在于何处的位置信息，拍摄以致全体都被包含的构图的图像F211。[0230]另外，根据乐谱，当达到被摄对象151-31〜151-33唱歌，而被摄对象151-34不唱歌的计时之时，可以切换摄像机作业信息表集合，之后，如图19中所示，根据作为正在舞台171上唱歌的艺术家的被摄对象151-31〜151-33存在于何处的位置信息，可控制构图，以拍摄以致包含被摄对象151-31〜151-33这3个艺术家的构图的图像F212。[0231]利用这种安排，能够匹配音乐演出的进展，控制图像拍摄，以致拍摄以包括正在舞台171上唱歌的非常显眼的艺术家的被摄对象151-31〜151-33为中心的构图的图像。[0232]上面说明了在现场音乐演出中，根据乐谱，切换摄像机作业信息表集合的例子，不过，例如，也可以分别在现场音乐演出的刚开始之后、中间和结束，切换摄像机作业信息表集合。[0233]上面说明了根据外部信息，切换摄像机作业信息表集合的例子，不过，也可根据除外部信息之外的信息，切换摄像机作业信息表集合。例如，代替外部信息，可以参考由手动摄像机15拍摄的图像，并且对于拍摄构图与由手动摄像机15拍摄的图像的构图类似的图像的自动摄像机14,可以选择包括与利用手动摄像机15拍摄的构图不同的摄像机作业信息，并且也不是其他自动摄像机14的摄像机作业信息表集合的摄像机作业信息表集合。利用这种安排，可以防止利用手动摄像机15和自动摄像机14，重复拍摄构图相似的图像。[0234]〈〈3.第三实施例》[0235]上面说明了其中与外部信息关联地准备多个摄像机作业信息表集合，并且按照伴随时间的流逝的外部信息的变化，切换摄像机作业信息表集合的例子，不过，由于被摄对象的位置基于由传感器设备16检测的位置信息，因此存在构图不是用于拍摄实际被摄对象的预期构图的可能性。因而，在其中拍摄这类非预期构图的图像的情况下，可以进行校正，以使构图更接近于预期构图。[0236]换句话说，例如，在现场音乐演出的情况下，根据由被视为被摄对象的艺术家携带的传感器设备16的位置信息，和摄像机作业信息，生成控制摇移俯仰变焦的摄像机作业控制信息，但是只有被摄对象的位置信息，未考虑作为被摄对象的艺术家的身高等。因此，即使生成摄像机作业控制信号，以拍摄以致在拍摄图像的垂直方向，包含被摄对象的全身的构图的图像，例如，在高个子艺术家的情况下，可以想到的是实际拍摄的图像可能处于作为被摄对象的艺术家的头和脚未被包含在图像内的状态，从而不能实现利用预期构图的图像拍摄。[0237]因而，可以从实际拍摄的图像中，识别被摄对象，可以验证是否实现了利用预期构图的图像拍摄，并在非预期构图的情况下，可以校正摄像机作业控制信息，以致能够适当地实现利用预期构图的图像拍摄。[0238]图20图解说明被配置成从拍摄的图像中检测被摄对象，验证是否实现了利用预期构图的图像拍摄，并在具有非预期构图的图像的情况下，校正摄像机作业控制信息，以致能够适当地实现利用预期构图的图像拍摄的切换器设备11的例证构成。[0239]在图20的切换器设备11中，与图2的切换器设备11的不同之处在于在控制部分31中，代替摄像机作业控制信息生成部分51，设置了摄像机作业控制信息生成部分211。[0240]基本构成类似于摄像机作业控制信息生成部分51，不过，摄像机作业控制信息生成部分211读出保存在存储部分34的图像数据存储部分72中的先前拍摄的图像，判定在各个自动摄像机14中拍摄的图像是否是具有预期构图的图像，在未利用预期的构图拍摄图像的情况下，在随后的处理中，摄像机作业控制信息生成部分211校正摄像机作业控制信息，以致能够拍摄具有预期构图的图像。[0241]具体地，摄像机作业控制信息生成部分211读出指定的图像拍摄对象的摄像机作业信息表集合之中的、在先前的图像拍摄中使用的摄像机作业信息，并且例如当作为具有预期构图的图像，控制被指定，以实现以致被摄对象在垂直方向的全身或上半身被包含在待拍摄的图像中的构图时，摄像机作业控制信息生成部分211根据在待拍摄的图像的垂直方向，被摄对象的全身或上半身是否被拍摄，判定图像是否具有预期构图。[0242]另外，例如，当作为具有预期构图的图像，摄像机作业信息指定在待拍摄的图像内的右侧位置、中央位置或左侧位置处，拍摄被摄对象时，摄像机作业控制信息生成部分211根据是否在待拍摄的图像内的右侧位置、中央位置或左侧位置处，拍摄被摄对象，判定图像是否具有预期构图。[0243]此外，例如，当作为具有预期构图的图像，指定在待拍摄的整个图像中，拍摄所有多个被摄对象或者特定被摄对象时，摄像机作业控制信息生成部分211根据是否在待拍摄的图像内，拍摄所有多个被摄对象或或者特定被摄对象，判定图像是否具有预期构图。[0244]〈图20的切换器设备进行的摄像机作业控制处理〉[0245]下面参考图21中的流程图，说明图20的切换器设备11进行的摄像机作业控制处理。[0246]注意在图21中的流程图中，由于步骤S131-S142和Sl44的处理类似于图10的步骤S31-S43的处理，因此其说明被省略。不过，关于步骤S137和S138的处理，在存在利用后面说明的校正处理计算的校正值的情况下，生成考虑到所述校正值的摄像机作业控制信息。[0247]换句话说，图21的处理与图10的处理的不同之处在于设置了步骤S143的处理。[0248]在步骤S143,摄像机作业控制信息生成部分211执行校正处理，从拍摄的图像中检测被摄对象，验证是否实现了利用预期构图的图像拍摄，并在非预期图像的情况下，摄像机作业控制信息生成部分211生成用于校正摄像机作业控制信息的校正值，并在后面的处理中，利用所述校正值计算摇移、俯仰和变焦。[0249]〈校正处理〉[0250]下面参考图22中的流程图，说明校正处理。[0251]在步骤S161，摄像机作业控制信息生成部分211把自动摄像机14之中的未处理的自动摄像机14，设定为处理对象自动摄像机14。[0252]在步骤S162,摄像机作业控制信息生成部分211读出保存在存储部分34中的图像数据存储部分72中的图像之中的、由处理对象自动摄像机14拍摄的最新图像，并识别被摄对象。[0253]在步骤S163,摄像机作业控制信息生成部分211从摄像机作业信息表集合存储部分71中，读出与读出的图像对应的处理对象自动摄像机14的摄像机作业信息，并且根据读出的图像内的被摄对象的位置，判定该图像是否是具有预期构图的图像。[0254]在步骤S163,在判定读出的最新图像不是具有预期构图的图像的情况下，处理进入步骤S164。[0255]在步骤S164,摄像机作业控制信息生成部分211计算把该图像校正成具有预期构图的图像的校正值，并且与识别自动摄像机14的标识符关联地保存所述校正值。[0256]更具体地，例如，在指定使得在待拍摄的图像的垂直方向，包含被摄对象的全身的构图，但是图像拍摄是利用使得在待拍摄的图像的垂直方向，不包含被摄对象的全身的构图控制的情况下，摄像机作业控制信息生成部分211根据被摄对象的位置信息和自身位置之间的关系，计算按预定倍率，稍微改变变焦系数，以致整个被摄对象被包含在图像内的校正值。注意在下面的处理中，在生成摄像机作业控制信息的处理中，生成包括计算的校正值的变焦系数的摄像机作业控制信息。[0257]在步骤S165,摄像机作业控制信息生成部分211判定在保存在存储部分34中的图像数据存储部分72中的最新图像之中、是否存在由未处理的自动摄像机14拍摄的最新图像，在存在由未处理的自动摄像机14拍摄的图像的情况下，处理返回步骤S161。换句话说，重复步骤S161-S165的处理，直到对保存在存储部分34中的图像数据存储部分72中的由所有的自动摄像机14拍摄的图像，进行了该处理为止。[0258]另外，在步骤S165，在认为已对保存在存储部分34中的图像数据存储部分72中的由所有的自动摄像机14拍摄的最新图像，都进行了该处理的情况下，处理终止。[°259]在利用上述处理，计算校正值的时候，当在步骤S137和S138的处理中，生成摄像机作业控制信息之际，摄像机作业控制信息生成部分211利用与识别被设定为处理对象的自动摄像机14的标识符关联地保存的校正值，生成摄像机作业控制信息。换句话说，在利用使得在待拍摄的图像的垂直方向，不包含被摄对象的全身的构图，拍摄图像的情况下，根据被摄对象的位置信息和自身位置之间的关系，计算按预定倍率，稍微改变变焦系数，以致整个被摄对象被包含在图像内的值，作为用于校正构图的校正值，并利用所述用于校正构图的校正值，生成摄像机作业控制信息。[0260]然而，即使使用利用此时计算的校正值的摄像机作业控制信息，预计也会出现其中再次利用在待拍摄的图像的垂直方向，不包含被摄对象的全身的构成，拍摄图像的情况。不过，通过重复类似的处理，直到用处于在待拍摄的图像的垂直方向，包含被摄对象的全身的状态的构图，拍摄图像为止，图像变成是利用使得在待拍摄的图像的垂直方向，包含被摄对象的全身的构图拍摄的。[0261]如上所述，在本公开的自动摄像机控制系统中，能够按照与利用多个自动摄像机的图像拍摄对象的拍摄相关的时间的流逝，和外部信息的变化，实现适当的摄像机作业。[0262]〈利用软件的执行例〉[0263]顺便提及，上述一系列处理例如可以用硬件执行，或者可以用软件执行。在利用软件执行所述一系列处理的情况下，构成所述软件的程序从记录介质被安装到包含在专用硬件中的计算机，或者当安装各种程序时，能够执行各种功能的通用个人计算机等中。[0264]图23表示通用个人计算机的例证构成。所述计算机包括CPU中央处理器）1001。输入输出接口1005通过总线1004,连接到CPU1001AOM只读存储器）1002和RAM随机存取存储器1003连接到总线1004。[0265]用户用于输入操作命令的包括诸如键盘、鼠标之类的输入设备的输入单元1006，把处理操作画面或处理结果的图像输出给显示设备的输出单元1007,保存程序或各项数据的包括硬盘驱动器等的存储单元1008,和通过因特网所代表的网络，进行通信处理的包括LAN局域网）适配器等的通信单元1009连接到输入输出接口1005。另外，连接的还有往来于可拆卸记录介质1011比如磁盘包括软盘）、光盘包括CD-ROM光盘-只读存储器和DVD数字通用光盘）、磁光盘（包括MD小型光盘）、或半导体存储器等）读写数据的驱动器IOlOo[0266]CPU1001按照保存在ROM1002中的程序，或者从诸如磁盘、光盘、磁光盘或半导体存储器之类的可拆卸介质1011读取的，安装在存储单元1008中，以及从存储单元1008被载入RAM1003中的程序，进行各种处理。RAM1003还适当保存当CPU1001执行各种处理时必需的数据等。[0267]在如上所述构成的计算机中，CPU1001通过输入输出接口1005和总线1004,把例如保存在存储单元1008中的程序载入RAM1003中，并执行该程序。从而，进行上述一系列处理。[0268]计算机CPU1001执行的程序是通过记录在作为套装介质等的可拆卸介质1011中提供的。另外，可以借助有线或无线传送介质，比如局域网、因特网或数字卫星广播，提供程序。[0269]在计算机中，通过把可拆卸介质1011插入驱动器1010中，程序可通过输入输出接口1005,被安装在存储单元1008中。此外，程序可通过有线或无线传送介质，被通信单元1009接收，并安装在存储单元1008中。此外，程序可被预先安装在ROM1002或存储单元1008中。[0270]应注意，计算机执行的程序可以是按照记载在本说明书中的顺序，时序地处理的程序，或者是并行地或在诸如调用时之类的必要时刻处理的程序。[0271]注意，图23中的个人计算机对应于切换器设备11，CPU1001对应于控制部分31。[0272]此外，在本公开中，系统具有多个构成元件（比如设备或模块部件）的集合的含义，并不考虑所有的构成元件是否在同一外壳中。于是，系统可以或者是收纳在单独的外壳中，并通过网络连接的多个设备，或者是单一外壳内的多个模块。[0273]本公开的实施例不限于上面说明的实施例，可以作出各种变化和修改，而不脱离本公开的范围。[0274]例如，本公开可以采用通过网络，由多个设备分担并且共同地处理一种功能的云计算的构成。[0275]此外，利用上述流程图说明的各个步骤可以由一个设备执行，或者可由多个设备分担地执行。[0276]另外，在多个处理包含在一个步骤中的情况下，包含在所述一个步骤中的多个处理可由一个设备执行，或者可由多个设备分担地执行。[0277]另外，也可如下构成本技术。[0278]〈1一种信息处理设备，包括：[0279]控制部分，所述控制部分根据其中关联计时信息、指示被摄对象的位置的位置信息和指示摄像机作业的摄像机作业信息的表集合，指定与指示图像拍摄的当前时间的当前计时信息和指示被摄对象的当前位置的当前位置信息对应的摄像机作业，并按照指定的摄像机作业，控制拍摄被摄对象的图像拍摄设备的摄像机作业。[0280]〈2按照〈1所述的信息处理设备，其中[0281]与多个图像拍摄设备中的每个图像拍摄设备对应地提供表集合，和[0282]控制部分通过利用多个图像拍摄设备中的每个图像拍摄设备的表集合，控制每个图像拍摄设备的摄像机作业。[0283]〈3按照〈1或〈2所述的信息处理设备，其中[0284]为每个图像拍摄对象，提供表集合，和[0285]控制部分有选择地使用对应于图像拍摄对象的表集合。[0286]〈4按照〈3所述的信息处理设备，其中[0287]控制部分根据指示图像拍摄对象的状况的状况信息，有选择地使用对于同一图像拍摄对象设定的多个表集合中的任意表集合。[0288]〈5按照〈4所述的信息处理设备，其中[0289]状况信息在其中图像拍摄对象是体育转播的情况下，是统计信息，在其中图像拍摄对象是现场音乐演出的情况下，是乐谱。[0290]〈6按照〈1-〈5任意之一所述的信息处理设备，其中[0291]在其中对应于当前位置信息的位置信息不存在于表集合中的情况下，控制部分利用与邻近当前位置信息的位置对应的多个位置信息，对与当前位置信息对应的位置信息进行插值。[0292]〈7按照〈1-〈6任意之一所述的信息处理设备，其中[0293]所述位置信息指示三维空间中的位置。[0294]〈8按照〈1-〈7任意之一所述的信息处理设备，其中[0295]摄像机作业控制信息是控制图像拍摄设备的摇移、俯仰和变焦任意之一的信息。[0296]〈9按照〈1-〈8任意之一所述的信息处理设备，其中[0297]在其中从由图像拍摄设备拍摄的图像中，识别出被摄对象，并且由摄像机作业信息指示的被摄对象的位置和识别的被摄对象的位置不一致的情况下，控制部分根据由图像拍摄设备拍摄的图像，校正指定的摄像机作业。[0298]〈10—种信息处理方法，包括：[0299]根据其中关联计时信息、指示被摄对象的位置的位置信息和指示摄像机作业的摄像机作业信息的表集合，指定与指示图像拍摄的当前时间的当前计时信息和指示被摄对象的当前位置的当前位置信息对应的摄像机作业，并按照指定的摄像机作业，控制拍摄被摄对象的图像拍摄设备的摄像机作业的步骤。[0300]〈11一种使计算机执行处理的程序，所述处理包括：[0301]根据其中关联计时信息、指示被摄对象的位置的位置信息和指示摄像机作业的摄像机作业信息的表集合，指定与指示图像拍摄的当前时间的当前计时信息和指示被摄对象的当前位置的当前位置信息对应的摄像机作业，并按照指定的摄像机作业，控制拍摄被摄对象的图像拍摄设备的摄像机作业的控制部分。[0302]附图标记列表[0303]1自动摄像机控制系统[0304]11切换器设备[0305]12接收部分[0306]13外部信息供给部分[0307]14、14_1〜14-n自动摄像机[0308]15手动摄像机[0309]16、16-1〜16-m传感器设备[0310]31控制部分[0311]32位置信息获取部分[0312]33外部信息获取部分[0313]34存储部分[0314]35摄像机作业控制信息发送部分[0315]36图像接收部分[0316]37计时信息获取部分[0317]51摄像机作业控制信息生成部分[0318]52图像获取管理部分[0319]71摄像机作业信息表集合存储部分[0320]72图像数据存储部分[0321]91摄像机作业控制信息接收部分[0322]92控制部分[0323]93图像拍摄控制部分[0324]94图像拍摄部分[0325]95图像获取部分[0326]96图像发送部分[0327]111操作部分[0328]112控制部分[0329]113图像拍摄控制部分[0330]114图像拍摄部分[0331]115图像获取部分[0332]116图像发送部分[0333]131位置信息检测部分[0334]132存储部分[0335]133位置计算部分[0336]134通信部分[0337]191、211摄像机作业控制信息生成部分

权利要求：1.一种信息处理设备，包括：控制部分，所述控制部分基于关联计时信息、指示被摄对象的位置的位置信息以及指示摄像机作业的摄像机作业信息的表集合，指定与指示图像拍摄的当前时间的当前计时信息和指示被摄对象的当前位置的当前位置信息对应的摄像机作业，并根据所指定的摄像机作业，控制拍摄被摄对象的图像拍摄设备的摄像机作业。2.按照权利要求1所述的信息处理设备，其中与多个图像拍摄设备中的每个图像拍摄设备对应地提供表集合，和控制部分通过利用所述多个图像拍摄设备中的每个图像拍摄设备的表集合，控制每个图像拍摄设备的摄像机作业。3.按照权利要求1所述的信息处理设备，其中为每个图像拍摄对象提供表集合，和控制部分有选择地使用对应于图像拍摄对象的表集合。4.按照权利要求3所述的信息处理设备，其中控制部分基于指示图像拍摄对象的状况的状况信息，有选择地使用对于同一图像拍摄对象设定的多个表集合中的任意表集合。5.按照权利要求4所述的信息处理设备，其中所述状况信息在图像拍摄对象是体育转播的情况下是统计信息，以及在图像拍摄对象是现场音乐演出的情况下是乐谱。6.按照权利要求1所述的信息处理设备，其中在对应于当前位置信息的位置信息不存在于表集合中的情况下，控制部分利用与邻近当前位置信息的位置对应的多个位置信息，对与当前位置信息对应的位置信息进行插值。7.按照权利要求1所述的信息处理设备，其中所述位置信息指示三维空间中的位置。8.按照权利要求1所述的信息处理设备，其中所述摄像机作业控制信息是控制图像拍摄设备的摇移、俯仰和变焦中的任意一个的信息。9.按照权利要求1所述的信息处理设备，其中在从由图像拍摄设备拍摄的图像中识别出被摄对象，并且由摄像机作业信息指示的被摄对象的位置和识别的被摄对象的位置不一致的情况下，控制部分基于由图像拍摄设备拍摄的图像校正所指定的摄像机作业。10.—种信息处理方法，包括：基于关联计时信息、指示被摄对象的位置的位置信息以及指示摄像机作业的摄像机作业信息的表集合，指定与指示图像拍摄的当前时间的当前计时信息和指示被摄对象的当前位置的当前位置信息对应的摄像机作业，并根据所指定的摄像机作业，控制拍摄被摄对象的图像拍摄设备的摄像机作业的步骤。11.一种使计算机执行处理的程序，所述处理包括：基于关联计时信息、指示被摄对象的位置的位置信息以及指示摄像机作业的摄像机作业信息的表集合，指定与指示图像拍摄的当前时间的当前计时信息和指示被摄对象的当前位置的当前位置信息对应的摄像机作业，并根据所指定的摄像机作业，控制拍摄被摄对象的图像拍摄设备的摄像机作业的控制部分。

百度查询： 索尼公司 信息处理设备、信息处理方法和程序

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD