CN102292725A - 感官效果信息的数据结构、感官效果信息输出装置、感官效果信息输出方法、感官效果信息生成装置、控制装置、系统、程序以及记录介质 - Google Patents

Abstract

控制装置为了控制对感官效果进行再现的感官效果再现装置而参照的感官效果信息的数据结构，包括：控制开始时刻规定信息，其规定控制开始时刻，该控制开始时刻是上述控制装置开始用于上述感官效果的再现的上述感官效果再现装置的控制的时刻；和再现开始时刻信息，其规定再现开始时刻，该再现开始时刻是上述感官效果再现装置要开始上述感官效果的再现的时刻，并且，使用将上述控制开始时刻设定为比上述再现开始时刻提前准备期间以上的数据结构，该准备期间是上述感官效果再现装置从接受用于上述感官效果的再现的控制起，到开始上述感官效果的再现为止所需的期间。这样，能提供一种用于在正确的定时对感官效果进行再现的技术。

Description

感官效果信息的数据结构、感官效果信息输出装置、感官效果信息输出方法、感官效果信息生成装置、控制装置、系统、程序以及记录介质

技术领域

本发明涉及感官效果信息的数据结构、感官效果信息输出装置、感官效果信息输出方法、感官效果信息生成装置、控制装置、系统、程序以及记录介质。

背景技术

尽管作为实现临场感高的AV内容再现的技术，已实施了大画面化、立体影像等的多视点化、音频的多信道化等，但作为进一步提高临场感的手法，还研究了利用除AV(音频以及视频)以外的效果的尝试。在ISO/IECJTC1/SC29(MPEG)发展标准化的RoSE(Representation of Sensory Effect、感官效果标准)是其中一例，其是用于使照明、送风、温度等感官效果配合AV来进行再现的国际标准。

若使用RoSE，则能配合场景内容来控制室内照明或空调、送风机等。例如，在夜晚的场景，能使室内照明变暗，在夕阳的场景，能用夕照色来照射画面周边的壁面，在地震的场景，能使椅子振动，在极冷的场景，使室温降低。

为了再现这些感官效果，作为AV数据，不仅需要现有存在的音频以及视频的数据，还需要描述了感官效果的信息即感官效果信息。RoSE的感官效果信息(Sensory Effect Metadata、感官效果元数据)如在工作草案(参照非专利文献1)中那样，依照基于XML的表述方法而进行描述。

用图11来说明感官效果信息的一例。RoSE的感官效果信息是XML描述的一种，具有树结构，从根分出的每个枝表示一种感官效果。在图11的感官效果信息中，照明效果1表示从时间0开始，在60秒的期间，将照明强度设为60。同样，照明效果2表示从时间60开始，在60秒的期间，将照明的强度设为40。温度效果1表示从时间0开始，在120秒的期间，将温度设为50。照明效果3和送风效果1的各自的强度是50和20，但其开始时间和持续时间是相同的，因此，作为效果群1而群组化。效果群1的开始是在150，持续时间是60秒。

图12是将图11的XML的树结构在时间轴上展开后的图。在时间0，照明效果1和温度效果1的再现开始，在60秒后，照明效果1结束，照明效果2开始，在120秒，照明效果2和温度效果1同时结束，自此起到150秒为止的期间不再进行任何再现。接下来，在从150秒起到210秒为止的期间，对效果群1即照明效果3和送风效果1进行再现。此外，在RoSE工作草案中，作为描述开始时刻的方法，使用了在MPEG-21DIA(Digital Item Adaptation、数字项适配)(参照非专利文献2)的8.6节中所规定的XML Stremming Instruction。

要在广播中利用这样的XML数据，需要合理地传输感官效果信息，并使其在指定的时间再现。作为用于此的技术的例子，简单说明BML的传输方式。

BML(Broadcast Markup Language、广播标记语言)是为了描述数据广播的画面布局而开发的描述语言，与上述的感官效果信息同样地以XML为基础(参照非专利文献3)。在BML的传输中，使用在ISO/IEC 13818-6中所规定的D SM-CC(Digital Storage Media Command and Control、数字存储媒体-命令和控制)的数据轮播方式等，将画面布局所需的BML文本、静止图像或效果音等单媒体存储于单个或多个组件(component)中进行传输。接收机接收需要的全部数据，并提示画面。在改写画面的情况下，将组件整体进行更新，并赋予新的data_event_id。在改写画面的一部分的情况下，能有模块升级的方法、使用事件消息来改写画面的一部分的方法等。

非专利文献1：Christian Timmerer、“Working Draft of the MPEGRepresentation of Sensory Effects v2.0”、2008年10月

非专利文献2：“ISO/IEC 21000-7：2007Informationtechnology-Multimedia framework(MPEG-21)--Part 7：Digital ItemAdaptation”、2007年

非专利文献3：社团法人电波产业会(Association of Radio Industriesand Businesses)、“数字广播中的数据广播编码方式和传输方式”、Ver5.1”、2007年3月

然而，在现有技术中，在正确的定时进行感官效果的再现是困难的。在感官效果中，在再现开始前，存在多个需要较长准备期间的感官效果。例如，在对感官效果中的温度效果进行再现的空调的情况下，要将冷气功能切换成暖气功能，需要数分钟以上的暖机运行期间，不能立刻开始再现。通常，附随在AV内容中的数据考虑到解码的处理时间等，要稍微提前于再现开始而传输，但在感官效果信息的再现所需的准备期间远长于该解码的处理时间的情况下，不能在现有的传输手法中的合适的定时进行再现。除此之外，准备期间根据感官效果再现设备的种类而极大地不同，因此一律附加固定的余留时间将造成大的浪费。

发明内容

本发明正是鉴于上述课题而提出的，其主要目的在于，提供一种用于在正确的定时对感官效果进行再现的技术。

为了解决上述课题，本发明的数据结构是控制装置为了控制对感官效果进行再现的感官效果再现装置而参照的感官效果信息的数据结构，所述数据结构的特征在于，包括：控制开始时刻规定信息，其规定控制开始时刻，该控制开始时刻是所述控制装置开始用于所述感官效果的再现的所述感官效果再现装置的控制的时刻；和再现开始时刻信息，其规定再现开始时刻，该再现开始时刻是所述感官效果再现装置要开始所述感官效果的再现的时刻，将所述控制开始时刻设定为比所述再现开始时刻提前准备期间以上，所述准备期间是所述感官效果再现装置从接受用于所述感官效果的再现的控制起，到开始所述感官效果的再现为止所需的期间。

根据上述构成，通过参照具有上述数据结构的感官效果信息，上述控制装置能取得关于上述控制开始时刻和上述再现开始时刻两者的信息。上述控制装置依照这些信息，能至少在上述控制开始时刻开始上述感官效果再现装置的控制，并在上述再现开始时刻使上述感官效果再现。此时，由于将上述控制开始时刻设定为比上述再现开始时刻提前准备期间以上，该准备期间是上述感官效果再现装置从接受用于上述感官效果的再现的控制起，到开始上述感官效果的再现为止所需的期间，因此，若利用具有上述数据结构的感官效果信息，则不会产生因上述准备期间引起的再现的延迟，能够在正确的定时对上述感官效果进行再现。

此外，上述控制开始时刻规定信息只要是规定上述控制开始时刻的信息即可，并不特别限定于其名目。例如，在上述控制装置在上述控制感官再现装置的控制前进行了某种处理的情况下，利用表示该处理的开始时刻的时刻也能规定上述控制开始时刻，这一点是本领域的技术人员容易理解的。另外，上述控制开始时刻规定信息可以是规定上述控制开始时刻和上述再现开始时刻之间的差分的信息。利用这样的信息也能规定上述控制开始时刻，这一点是本领域的技术人员容易理解的。

本发明的数据结构还可以包括再现状态信息，该再现状态信息规定作为上述感官效果再现装置进行的上述感官效果的再现的目标的再现状态，上述再现开始时刻信息规定上述感官效果再现装置实现上述再现状态的再现开始时刻，将上述控制开始时刻设定为比上述再现开始时刻提前准备期间以上，该准备期间是上述感官效果再现装置从接受用于上述感官效果的再现的控制起，到实现上述再现状态为止所需的期间。

根据上述构成，由于上述准备期间是上述感官效果再现装置从接受用于上述感官效果的再现的控制起，到实现上述再现状态为止所需的时间，因此，通过使用考虑了该准备期间的上述控制开始时刻规定信息，上述控制装置能使上述感官效果再现装置在正确的定时以指定的再现状态开始再现。

本发明的数据结构还可以包括：再现期间信息，其规定基于上述感官效果再现装置的上述感官效果的再现期间；和结束时状态信息，其规定从上述感官效果的再现开始起经过了上述再现期间的时刻的结束时状态。

根据上述构成，由于在对某种感官效果进行再现时，指定了前面所再现的感官效果的结束时的状态，因此能参照该前面所再现的感官效果的结束时的状态，来合理地设定用于该某种感官效果的再现的上述控制开始时刻。例如，在连续实施两种感官效果的情况下，若上述前面所再现的感官效果的结束时的状态、与成为上述某种感官效果的再现的目标的再现状态相同，则在上述准备期间，不需要用于实现上述再现状态的时间。这样，通过使上述数据结构包含上述感官效果的结束时的状态的信息，特别是在连续存在感官效果时，能合理地设定后面的感官效果的控制开始时刻规定信息。

在本发明的数据结构中，上述感官效果再现装置可以是从由照明装置、送风装置、空调装置、香味产生装置、振动产生装置以及湿度调整装置构成的群中所选出的1个以上的装置。

根据上述构成，上述感官效果再现装置能顺利地对照明(照度)、风(风力)、室温、香味、振动、湿度等各种感官效果进行再现。

本发明的信息存储介质存储有感官效果信息，该感官效果信息具有本发明的数据结构。

根据上述构成，由于在上述信息存储介质中存储有本发明的数据结构，因此能起到与本发明的数据结构同样的效果。

本发明的感官效果信息输出装置具备对感官效果信息进行输出的输出单元，该感官效果信息具有本发明的数据结构。

根据上述构成，由于上述感官效果信息输出装置能输出本发明的数据结构，因此能起到与本发明的数据结构同样的效果。

上述感官效果信息可以包括再现期间信息，该再现期间信息规定基于上述感官效果再现装置的上述感官效果的再现期间，上述输出单元从要输出的上述感官效果信息中提取由上述控制开始时刻规定信息规定的控制开始时刻在输出的时刻以前、且从上述再现开始时刻起经过上述再现期间后的时刻在输出的时刻以后的感官效果信息并进行输出。

根据上述构成，能在输出的时间点仅提取必要的感官效果信息来进行输出。即，由于再现期间已结束的感官效果、由控制开始时刻规定信息规定的控制开始时刻还未到达输出的时刻的感官效果等不用于在输出的时间点的感官效果的再现，因此能省略输出。特别是能节约在通过无线或有线通信来进行输出时的频带。另一方面，通过针对控制开始时刻已过，再现期间还未结束的感官效果也进行输出，即使是在从中途起接受上述感官效果信息的输出的情况下，也能合理地进行期待当前所再现的感官效果的感官效果的再现。

另外，从其他观点出发，根据上述构成，当在输出的时间点仅提取需要的感官效果信息时，参照上述控制开始时刻规定信息来进行该提取，因此能合理地提取需要的感官效果信息。即，由上述控制开始时刻规定信息规定的控制开始时刻在输出的时间点以后的感官效果，需要上述控制装置在输出的时间点开始用于该感官效果的再现的上述感官效果再现装置的控制，因此，根据上述构成，能顺利地提取那样的感官效果。

本发明的感官效果信息输出方法，是将感官效果信息输出给控制对感官效果进行再现的感官效果再现装置的控制装置的方法，其特征在于包括以下过程：感官效果信息输出装置输出具有本发明的数据结构的感官效果信息。

根据上述构成，由于能输出具有本发明的数据结构的感官效果信息，因此能起到与本发明的数据结构同样的效果。

在上述感官效果信息输出方法中，上述感官效果信息可以包括再现期间信息，该再现期间信息规定基于上述感官效果再现装置的上述感官效果的再现期间，在输出上述感官效果信息的过程中，上述感官效果输出单元从要输出的上述感官效果信息中提取由上述控制开始时刻规定信息规定的控制开始时刻在输出的时刻以前、且从上述再现开始时刻起经过上述再现期间后的时刻在输出的时刻以后的感官效果信息并进行输出。

根据上述构成，与上述感官效果信息输出装置同样，能在输出的时间点仅提取需要的感官效果信息。

本发明的控制装置的特征在于，具备控制单元，该控制单元参照具有本发明的数据结构的感官效果信息，至少在上述控制开始时刻前开始针对上述感官效果再现装置的、用于在上述再现开始时刻使上述感官效果的再现开始的控制。

根据上述构成，上述控制装置参照具有本发明的数据结构的感官效果信息，控制上述感官效果再现装置以使在上述再现开始时刻开始再现上述感官效果。此时，上述控制装置参照上述感官效果信息，至少在上述控制开始时刻开始上述感官效果再现装置的控制。在此，由于将上述控制开始时刻设定为比上述再现开始时刻提前准备期间以上，该准备期间是上述感官效果再现装置从接受用于上述感官效果的再现的控制起，到开始上述感官效果的再现为止所需的期间，因此，上述感官效果再现装置能顺利地在上述再现开始时刻开始再现上述感官效果。

本发明的感官效果再现系统的特征在于，具备：感官效果输出装置，其对控制装置输出具有本发明的数据结构的感官效果信息；和上述控制装置，其参照从上述感官效果信息输出装置输出的上述感官效果信息，控制基于上述感光效果再现装置的上述感官效果的再现。

根据上述构成，由于从上述感官效果输出装置输出具有本发明的数据结构的感官效果信息，且所述控制装置参照所输出的感官效果信息来控制感官效果再现装置，因此能起到与本发明的数据结构同样的效果。

本发明的感官效果生成装置的特征在于，生成具有本发明的数据结构的感官效果信息，该感官效果生成装置具备信息生成单元，该信息生成单元基于预先输入的、上述再现开始时刻以及上述准备期间，生成上述控制开始时刻规定信息，使得上述控制开始时刻比上述再现开始时刻提前上述准备期间以上。

根据上述构成，上述感官效果信息生成装置基于预先输入的、上述再现开始时刻以及上述准备期间，生成上述控制开始时刻规定信息，使得上述控制开始时刻比上述再现开始时刻提前上述准备期间以上。这样的控制开始时刻规定信息适合本发明的数据结构，根据上述感官效果信息生成装置，能顺利地生成具有本发明的数据结构的感官效果信息。

另外，本发明的范畴还包括使计算机实现上述各装置的功能的程序以及存储该程序的计算机可读取的记录介质，该程序用于使本发明的感官效果信息输出装置、控制装置或者感官效果信息生成装置进行动作。

由于在具有本发明的数据结构的感官效果信息中，包含对考虑了准备期间的控制开始时刻进行规定的控制开始时刻规定信息，该准备期间是上述感官效果再现装置从接受用于上述感官效果的再现的控制起，到开始上述感官效果的再现为止所需的期间，因此，若利用上述感官效果信息，则不会产生因上述准备期间引起的再现的延迟，能够在正确的定时对上述感官效果进行再现。

附图说明

图1是表示本发明的一实施方式中的感官效果收发系统的概略构成的图。

图2是表示本发明的一实施方式(构成例1)中的感官效果信息、和所再现的感官效果之间的关系的图。

图3是表示本发明的一实施方式(构成例2)中的感官效果信息、和所再现的感官效果之间的关系的图。

图4是表示本发明的一实施方式(构成例3)中的感官效果信息、和所再现的感官效果之间的关系的图。

图5是表示本发明的一实施方式(构成例4)中的感官效果信息、和所再现的感官效果之间的关系的图。

图6是表示本发明的一实施方式(构成例4)中的感官效果信息的图。

图7是表示本发明的一实施方式中的感官效果的再现期间的图。

图8是表示本发明的一实施方式中的感官效果的再现期间的表。

图9是表示本发明的一实施方式中的感官效果的再现期间的图。

图10是表示本发明的一实施方式中的感官效果信息的图。

图11是表示现有技术中的感官效果信息的图。

图12是表示现有技术中的感官效果的再现期间的图。

图13是表示本发明的一实施方式中的感官效果信息的图。

图14是表示本发明的一实施方式中的感官效果信息的变化的图。

图15是表示本发明的一实施方式中的感官效果信息发送机的概略构成的框图。

图16是表示本发明的一实施方式中的感官效果信息接收机的概略构成的框图。

图17是表示本发明的一实施方式中的感官效果信息的变化的图。

图18是表示本发明的一实施方式中的感官效果信息的变化的图。

图19是表示本发明的一实施方式中的感官效果信息的变化的图。

图20是表示本发明的一实施方式中的感官效果信息的变化的图。

(符号说明)

100：感官效果信息发送机(感官效果信息输出装置)

110：感官效果信息接收机(控制装置)

120～150：感官效果再现设备(感官效果再现装置)

具体实施方式

以下，参照附图说明本发明的一实施方式的感官效果收发系统(感官效果再现系统)。首先，说明本实施方式的感官效果收发系统的整体构成。其次，详细说明作为感官效果信息而进行描述的属性，特别是时间属性。接下来，表示在本实施方式中所收发的感官效果信息的具体例，说明如何用发送机来对其进行分割。接收机的动作在以上的说明中适当地进行。此外，感官效果是指由人类的五感所能感知的状态，例如，可列举照明、送风、温度、香味、振动、湿度等，但不限定于此。而且，感官效果的再现是指在特定的定时人为地做出上述状态。

(系统)

图1是表示本实施方式的感官效果收发系统的整体构成的图。如图1所示，上述感官效果收发系统由感官效果信息收发机(感官效果信息输出装置)100、感官效果信息接收机(控制装置)110、以及多个感官效果再现设备(感官效果再现装置)120～150构成。

感官效果信息收发机100只要是发送感官效果信息的发送机，就不作特别限定，例如，可以是经由无线通信或者有线通信来进行公共发送或者指定发送的广播站(包含经由互联网线路等来进行信息发送的服务器等)、或者是读取打包软件等进行一体化，或者对直接或间接连接的感官效果信息接收机110发送(输出)感官效果信息的信息设备。发送中的数据传输的方式将后述。

感官效果信息接收机110接收从感官效果发送机100送来的感官效果信息，对其内容进行解码，并在合适的定时控制与自身直接或间接连接的感官效果再现设备。此外，在本实施方式中，由于描述的是对感官效果信息进行编码的情况，因此，尽管感官效果信息接收机110对从感官效果信息发送机100接收到的感官效果信息进行解码，但本发明不限定于此，感官效果信息不一定非要进行编码。另外，优选不对后述的解码开始时刻进行编码而使用。另外，编码以及解码的方法不作特别限定，能使用公知惯用的信息处理技术。

感官效果再现设备120～150是依照从感官效果信息接收机110送来的控制信号来实际对感官效果进行再现的设备群。在本实施例中，与感官效果信息接收机110连接的感官效果再现设备以照明器(照明装置)120、送风机(送风装置)130、空调(空调装置)140、香味产生器(香味产生装置、气味物质排放装置)150这4个来分别对照明、送风、温度、香味的感官效果进行再现。尽管未包含在本实施例中，但除此之外，振动椅子(振动产生装置)、湿度调整机(湿度调整装置)等也能作为感官效果再现设备进行使用。

此外，感官效果信息接收机110如图16所示，可以具备：设备控制部113，其在任意的定时对感官效果再现设备120～150进行控制；以及存储部115，其存储在该控制时利用的信息。

(感官效果信息的数据结构)

感官效果信息不限定于此，例如，与在非专利文献1中记载的SEM(Sensory Effect Metadata、感官效果元数据)同样，能将感官效果信息设为将感官效果的类别、感官效果的再现值(再现状况)、感官效果的再现定时(再现开始时刻)等信息进行描述的XML文本。然而，在发送时，不限于始终发送该XML文本的整体，也有后述那样根据需要来进行分割的情况。作为本实施方式的感官效果信息的数据结构、和上述SEM的数据结构之间的差异，首先，有如下一点：在本实施方式的感官效果信息的数据结构中，包含对基于感官效果信息接收机110的感官效果再现设备120～150的控制定时(控制开始时刻)进行规定的信息(控制开始时刻规定信息)。换言之，本实施方式的数据结构重要在于，包含规定控制定时的信息，其形式不限定于XML，可以是其他结构化文本，还可以是二进制数据。

图13示出具有以上属性的感官效果信息的一例。在此，在作为感官效果信息1的感官效果中，作为解码开始时刻(控制开始时刻规定信息)、再现期间(再现期间信息)、再现开始时刻(再现开始时刻信息)，分别设定为10、100、70的值。此外，在此省略除它们之外的属性，例如指定值(再现状态信息)、结束时指定值(结束时状态信息)、渐入(fade in)期间、渐出(fade out)期间等任意的信息。以下，基于本实施方式中的感官效果信息，说明如何对感官效果进行再现。

(构成例1)

图2是表示在一例(构成例1)中，感官效果信息具有的各种时间属性的说明图。

再现开始时刻是表示感官效果再现设备120～150开始实际的再现的时刻。从该时刻起，经历指定为再现期间的期间来持续感官效果的再现，并在再现结束时刻结束再现并回到初始值。

解码开始时刻表示若在该时间前接收机未接收到该感官效果信息来开始解码，则再现开始会来不及的时刻。例如，在为对温度的效果进行再现的空调的情况下，即使从起动的状态起，到实际开始室温的调整前也需要一定准备期间的情况较多，因此，即使到了再现开始时刻首次接受指示，也不能立刻开始运行。为了避免这种情况，需要指定解码开始时刻，使发送机在该时间前能将该感官效果信息发送到接收机，且接收机能开始解码。在此，与感官效果再现设备120～150从接受用于感官效果的再现的控制起到开始感官效果的再现为止所需的准备期间相比，从感官效果信息的解码、以及对解码后的感官效果信息进行处理、到开始感官效果再现设备120～150的控制为止的时间非常短，因此从解码开始时刻起到再现开始时刻为止的时间也能实质上视为准备期间。即，将解码开始时刻设定为比再现开始时刻提前准备期间以上即可。

另外，如上所述，与准备期间相比，解码等所需的时间短，规定了解码开始时间实质上也可谓规定了开始感官效果再现设备120～150的控制的控制开始时刻。换言之，在本实施方式中，通过将控制开始时刻设定为比再现开始时刻提前准备期间以上，实现在再现开始时刻的正确的再现开始。

此外，作为感官效果再现设备的准备期间，需要的时间根据各个设备而不同，因此，利用以下所述的感官效果设备的等级规定的想法，作为等级规定，预先规定设备的准备期间，并将解码开始时刻设定为比再现开始时刻提前由该等级规定决定的时间以上。

感官效果设备的等级规定的想法是指以下的想法。即，感官效果再现设备根据感官效果的种类而各自具有固有的特性。例如，在为对照明效果进行再现的照明器的情况下，从接收控制信号起，能使照度等在短时间内变化到控制信号所含的指定值(在RoSE中也称作强度)。在再现停止时效果还不会残留。另一方面，在为对温度效果进行再现的空调、对香味效果进行再现的香味产生器的情况下，从接收控制信号并开始动作起，到再现值(若是空调，则为温度等，若为香味产生器，则为气味物质的空气中浓度等)达到控制信号所含的指定值为止需要数分钟的时间。另外，即使在完成指定值下的再现并终止动作后，在实际的再现环境下，效果还会残留一段时间。因此，对于感官效果信息的描述，需要与各感官效果对应的描述。

另外，这些特性，即到实现再现值为止的期间或再现结束后的效果的残留时间等因各个感官效果再现设备而不同，另外还会受再现环境例如室内的情况的影响。感官效果信息发送机与感官效果信息接收机一一对应，且除了能按照各别的再现环境来变更感官效果信息的视频点播那样的分发以外，广播或基于光盘的感官效果信息分发不能对应各别的环境。

因此，作为感官效果再现设备的动作特性，预先规定能满足假设的感官效果设备的大部分那样的条件，若发送侧满足那样的条件，则发送能再现的感官效果信息。该条件不需要是单个，还可以是面向高端机、低端版等多个。为此，将该条件称作感官效果再现设备的等级规定。

例如，作为温度效果再现设备的等级规定，按照如下方式规定：若温度从25度上升到30度所需的时间在5分钟以内，且暖气-冷气切换所需的时间在2分钟以内，则为等级A；若所述温度上升所需时间在10分钟以外，且切换所需时间在4分钟以内，则为等级B。感官效果信息发送机100侧考虑假设的用户层等，面向特定的等级规定进行发送。具有感官效果信息接收机110的用户侧在设置感官效果再现设备120～150时，考虑想要再现的内容究竟是面向哪个等级规定而创建的、或者放置再现设备的室内环境是怎样的等，选择满足希望的等级规定的感官效果再现设备来进行设置。这样，能提供一种不会对各个设备进行细微调整，能在多种用户环境下进行再现的感官效果信息。

在此，例如，在用户备齐等级A的感官效果再现设备120～150，并对等级A的感官效果信息进行再现的情况下，由于要预先使空调140进行暖气-冷气间切换，因此将在该感官效果信息中使暖气或者冷气工作的效果的解码开始时刻设定为比再现开始时刻至少提前2分钟。然后，感官效果信息接收机110参照上述感官效果信息，比再现开始时刻提前2分钟开始解码来开始控制空调140，由此，在再现开始时刻，能使暖气或冷气顺利地工作。这样，通过利用等级规定，能预先设定准备期间，因此能容易地将解码开始时刻设定得比再现开始时刻提前准备期间以上。这样，感官效果信息接收机110考虑感官效果再现设备120～150的准备所需的时间在内，能在非常早的时间点对感官效果再现设备120～150发出指示信号，从而能在再现开始时刻开始再现。

表示与感官效果再现设备120～150对应的上述等级规定的等级信息是拥有感官效果再现设备120～150的用户知晓的信息，因此用户可以对感官效果信息接收机110显式输入上述等级信息，或者可以构成为：在将感官效果再现设备120～150与感官效果信息接收机110连接时，自动地将上述等级信息从感官效果再现设备120～150通知给感官效果信息接收机110。例如，还能按照如下方式构成：与感官效果信息接收机110连接的感官效果再现设备120～150将表示与自身对应的等级的等级信息发送到与自身连接的感官效果信息接收机110，感官效果信息接收机110接收该等级信息，主控制部111将该等级信息存储到存储部115，设备控制部113在再现时利用存储在存储部115中的上述等级信息。

此外，使在AV数据中包含多个时刻信息是指，在MPEG-2Systems(ISO/IEC 13818-1)、MPEG-4Systems(ISO/IEC 14496-1)等现有技术中，也以对DTS(Decoding Time Stamp、解码时间戳)和PTS(PresentationTime Stamp、显示时间戳)或者CTS(Composition Time Stamp、合成时间戳)进行区别的形式存在。但是，在上述技术中，在其规格上，有需要使解码顺序和再现顺序不同的情况，DTS为了与此对应而设置。另一方面，在本实施方式的感官效果信息中，不是此种情况，解码开始时刻不是使解码顺序和再现顺序匹配的时刻。这样，本发明是与现有技术完全不同的独自的技术。

(构成例2)

在另一例(构成例2)中，在准备期间中，除了感官效果再现设备120～150的准备期间以外，还能包含感官效果再现设备120～150到实现由指示值表示的状态(成为再现的目标的再现状态)为止的期间。即使是在如图2所示指定了感官效果信息的情况下，例如，在为空调140的情况下，在再现开始时刻，一下子使温度从初始值变化到指定值也是不可能的。为了在再现开始时刻成为指定温度，需要在再现开始时刻以前使空调工作。在这种情况下，实际的温度变化如图3所示的曲线描画。为此，在准备期间中，除了设备的准备期间以外，还可以包含到指定值的设定期间作为使再现值变化到指定值所需的期间。这样，感官效果信息接收机110能包含感官效果再现设备再现指定值所需的时间(为了实现再现状态所需的时间)在内在非常早的时间点对感官效果再现设备发出指示，从而在再现开始时刻以所指定的值进行再现。

针对该到指定值的设定期间，与设备的准备期间同样，应用设备的等级规定的想法，能将解码开始时刻设定得比再现开始时刻提前在等级规定中所规定的温度变更所需的时间以上。例如，上述用户备齐等级A的感官效果再现设备120～150，在对等级A的感官效果信息进行再现的情况下，将该感官效果信息中的温度从25度(通常的室温)上升到30度(在此情况下的指定值)的效果的解码开始时刻设定为比再现开始时刻至少提前7分钟。然后，感官效果信息接收机110参照上述感官效果信息，比再现开始时刻提前7分钟开始解码来开始控制空调140，由此，空调140在2分钟内使暖气-冷气间切换完成，在5分钟内使室温上升到30度，由此，能在再现开始时刻顺利地实现感官效果的上述指定值。

此外，接收到感官效果信息的感官效果信息接收机110可以勘察与自身连接的感官效果再现设备120～150的能力，来实际决定对感官效果再现设备120～150发出指示的时刻。例如，若是温度的感官效果，则感官效果信息接收机110，作为与之连接的空调140的能力，将从初始状态起到运行开始为止所需的设备的准备期间、和使温度从当前的室温起变化到所指定的温度为止所需的最短的时间预先进行输入，或者基于通过与各自的感官效果再现设备之间进行通信等而得到的感官效果再现设备的能力信息来算出，并比再现开始时刻提前此时间来发出指示信号(开始控制)。这样，对温度变化进行如图3所示那样的温度变化。上述感官效果再现设备的能力信息可以在感官效果再现设备的连接时由设置者指定，还可以在感官效果再现设备和感官效果信息接收机之间自动进行信息的交换。另外，在所连接的感官效果再现设备具有超过等级规定的快速的温度调整功能的情况下，即使在解码开始时刻进行解码时，也不立即发出指示，而尽可能在近前发出指示，由此能进行符合内容制作者的意图的感官效果再现。

(构成例3)

图4是表示在一例(构成例3)中的感官效果信息具有的可选项的时间属性的图。并省略与图1相同的构成要素的说明。

示出了尽管渐入期间是可选项，但在对其指定的情况下，使用该期间来使再现值从初始值缓慢向指定值变化的情况。

示出了尽管渐出期间也是可选项，但在对其指定的情况下，使用该期间来使再现值从指定值缓慢向初始值变化的情况。

(构成例4)

图5是表示感官效果信息具有的另一选项的时间属性的说明图。并省略与图1或者图4相同的构成要素的说明。

在图4中，尽管向着初始值而渐出，但能向着与初始值不同的结束时指定值(结束时状态信息)进行渐出也是有用的。例如，在照明中，使再现值从某个值平滑地再向其他值变化的情况下，需要这样的描述方法。在这种情况下，与指定值不同，指定结束时指定值，使用渐出期间来使再现值从指定值向结束时指定值缓慢变化。即，结束时指定值是指，规定从感官效果的再现开始起经过了再现期间的时刻的结束时状态的信息。

图6表示使用以上的时间属性而描述的感官效果信息的描述例。图6是描述图5所示的连续的2种感官效果的图，在效果1的描述中有渐入期间、渐出期间，另外，指定了与效果2的指定值相同的值作为结束时指定值。另外，由于效果1的再现结束时刻，即再现开始时刻加上再现期间后得到的时刻，与效果2的再现开始时刻一致，因此其结果如图5所示，平滑地变更再现值。另外，若不明示效果1和效果2是连续的，则在效果1结束和效果2开始的时刻，再现值有瞬间变为0的可能，因此，以明示存在与效果1接续的效果为目的来指定连续＝是。接收到此信息的感官效果信息接收机110控制感官效果再现控制120～150来进行再现，使得效果1和效果2连续且平滑地相连，且不会瞬间变为0等不合适的值。

此时，效果2的准备期间能考虑效果1的上述结束时指定值来进行设定。即，关于效果2，在不使渐入的情况下，能将应该包含在准备期间中的时间不设为从初始值起到达到指定值为止的时间，而设为从上述结束时指定值起到达到指定值为止的时间。例如，在图5所示的情况下，通常在效果2中没有渐入指定，因此尽管在准备期间中包含从初始值起到达到其指定值为止的时间，但效果1和效果2连续，若考虑效果1的结束时指定值，则从效果1的结束时指定值起到达到效果2的指定值为止的时间为零，因此，使准备期间仅包含到使感官效果再现设备工作为止的时间即可。此外，需要到使感官效果再现设备工作为止的时间是因为，在渐出处理时，存在该感官效果再现设备不工作的可能性。这样，通过在感官效果信息中包含结束时指定值，能更合适地算出准备期间以及解码开始时间。

此外，在本构成例中，为了将在不指定连续的属性的情况下的省略时值规定为连续＝否，显式描述了连续＝是。在其他实施方式中，在将不指定连续的属性的情况下的省略时值规定为连续＝是的情况下，能省略本构成例那样的连续＝是的指定信息。然而，在将省略时值规定为连续＝是的情况下，需要连续地对不再现的效果显式描述连续＝否。在此，显式描述连续＝否是指，在该感官效果结束的时间点，不管后续的感官效果是否存在，先使再现值为零。一般而言，在有时间上邻接的感官效果的情况下，两者多为连续再现，因此能省略连续＝是的描述。根据该实施方式，将提高能减少描述量的可能性。

另外，在另一其他实施方式中，可以以对连续再现近前的效果(效果1)进行明示的目的，对与效果1接续再现的效果2赋予指定连续＝是的信息(属性)。接收到此的感官效果信息接收机110与构成例4同样，控制感官效果再现设备120～150。然后，根据该方法，在感官效果信息接收机110因某种理由不能接收效果1而仅接收效果2的情况下，若可能则发出再现请求，若判断为效果2的正常的再现不可能则取消效果2的再现本身等，能根据情况来更合理地进行对应。

此外，如上所述，本领域的技术人员能适当设定：将省略时值规定为连续＝否，显式描述连续＝是，或者将省略时值规定为连续＝是，显式描述连续＝否。

(构成例5)

此外，尽管在构成例1以及2中，如图13所示，采用的是在感官效果信息中描述再现开始时刻、和解码开始时刻的形式，但采用在感官效果信息中描述再现开始时刻、和准备期间的形式，也能取得完全相同的效果。图14示出在这种情况下的感官效果信息。在此，指定准备期间为60，来表示与图13的感官效果信息相同的效果。即，在图14所示的感官效果信息的情况下，从再现开始时刻(70)中减去准备期间(60)来算出解码开始时刻(10)，能与上述的实施方式同样地进行处理。换言之，本领域的技术人员容易理解，在图14所示的感官效果信息的情况下，再现开始时刻和准备期间规定了解码开始时刻或者控制开始时刻。即，感官效果信息所含的控制开始时刻规定信息可以是表示再现开始时刻和控制开始时刻之间的差分的信息。感官效果信息接收机110的设备控制部113能根据表示再现开始时刻的信息以及表示再现开始时刻和控制开始时刻之间的差分的信息来算出控制开始时刻，并能基于该控制开始时刻，开始感官效果再现设备120～150的控制。

(构成例6)

另外，在构成例1以及2中，针对各感官效果信息，使用解码开始时刻信息，规定了考虑了感官效果再现设备的准备期间、到指定值为止的到达所要时间等的控制开始时刻。在这样的构成中，由于按每感官效果描述了再现开始时刻信息以及控制开始时刻规定信息，因此，作为容易明白各自的信息表示什么的反面，还有这样的一面：在同样的感官效果多次出现的情况下，感官效果信息变得冗长。在本构成例中，说明如下方法：通过在间隔效果信息中描述感官效果设备的等级规定，来代替解码开始时刻的描述。

如在构成例1中的说明所述，经由广播、光盘等的感官效果信息的分发涉及的感官效果信息能依据任意的等级规定来进行创建。图13所示的感官效果1的解码开始时刻也成为依据特定的等级规定的值。在此，将该等级规定的名称设为等级A，另外将感官效果1的感官效果类别设为温度。在该情况下的等级A将温度的感官效果再现设备的最大准备时间规定为60秒，为此，将图13的解码开始时刻设定为比再现开始时刻提前60秒。

由于将等级A等作为规格进行决定，因此在接收侧也能与发送侧同样地预先知晓详细情况。即，在感官效果信息发送机100以及感官效果信息接收机110，能等同解释其含义。为此，即使作为从感官效果信息发送机100向感官效果信息接收机110，针对发送的感官效果信息的全部或者其中一部分，发送按每种感官效果规定的解码开始时刻的代替方法，发送表示发送的感官效果信息的全部或者其中一部分依据的规格的等级规定的信息(以下的描述全部依据等级A)的情况下，感官效果信息接收机110也能基于接收到的表示上述等级规定的信息，取得再现开始时刻和控制开始时刻之间的差分来算出控制开始时刻，从而在合适的定时开始感官效果再现设备120～150的控制。

图18是用本构成例的方法来描述与图13所示的感官效果信息同样的内容的例子。如图18所示，在本构成例中，在感官效果信息1中不包含解码开始时刻，取而代之地是在感官效果信息的树整体的路由的地方，包含表示对应等级＝A的信息。感官效果信息接收机110在根据图18的感官效果信息来算出解码开始时刻的情况下，参照等级A的规定。在等级A的规定中规定了温度的感官效果再现设备的最大准备时间是60秒，因此从再现开始时刻即70中减去60后得到的10成为解码开始时刻。

可以使对基于等级规定的各感官效果的准备期间进行规定的信息(表示上述等级规定和上述差分之间的对应关系的信息)以查找表等形式预先存储于感官效果信息接收机110具备的存储部115，或者在未预先规定等级的情况下、不知道等级规定是否在发送侧和接收侧正确共享的情况下，可以与感官效果信息同时地发送对基于等级规定的各感官效果的准备期间进行规定的信息(表示等级的规定内容的信息)。即，如图19所示，代替对应等级＝A的描述，感官效果信息发送机100可以向感官效果信息接收机110显式发送表示作为等级A的规定内容的温度的感官效果再现设备的准备时间为60秒的信息。

另外，尽管在图18中，将全部的感官效果类别描述为依据等级A，但也可以根据感官效果类别而依据其他的等级。

(构成例7)

尽管在构成例4中，在描述图5的感官效果信息时，使用具有图6所示的构造的XML描述，但在本构成例中，例示取代其的描述方法。

图20是用与图6不同的结构来描述图5的感官效果信息的例子。如图20所示，在本构成例中的感官效果信息不包含表示结束时指定值的信息、表示渐入期间的信息、以及表示渐出期间的信息。取而代之地，追加了表示渐变(fade)期间的渐变期间规定信息(属性)。另外，尽管在图5所示的感官效果信息中，感官效果1是从20到120秒，感官效果2是从120到180秒，但在本构成例的感官效果信息中，改变了该划分，感官效果1是从20到100秒，感官效果2是从100到180秒。

在该描述方法中，将渐入、渐出统一作为渐变对待，以指定的时间使值从初始值变化到指定值，即作为渐入的效果进行定义。渐出作为后续的效果的渐入进行处理。在朝着指定值0渐出的情况下，也作为向着指定值0的感官效果的渐入进行描述。

若使用该描述方法，则将不用在构成例4的描述中所需的渐入、渐出的区别、以及结束时指定值，因此有能简化语法的优点。

在本构成例中，感官效果信息接收机110若接收具有图20所示的结构的感官效果信息，则进行以下的动作。首先，在解码开始时刻所示的时刻对感官效果信息进行解码，开始感官效果再现设备120～150的控制。在该控制中，感官效果信息接收机110控制感官效果再现设备120～150，使得从再现开始时刻起经过渐变期间，实现指定值所示的状态。

即，感官效果信息接收机110在效果1规定的解码开始时刻10秒开始效果1相关的感官效果信息的解码，控制感官效果再现设备120～150，使得从在效果1规定的再现开始时刻20秒起，经过在效果1规定的渐变期间20秒，实现由指定值(60)指定的状态。然后，感官效果信息接收机110直到由效果1规定的结束时刻(从再现开始时刻20秒起经过再现期间100秒后的120秒)为止，都维持由上述指定值指定的状态。另外，感官效果信息接收机110在效果2规定的解码开始时刻90秒开始效果2相关的感官效果信息的解码，控制感官效果再现设备120～150，使得从在效果2规定的再现开始时刻100秒起，经过在效果2规定的渐变期间20秒，实现由指定值(40)指定的状态。然后，感官效果信息接收机110直到由效果2规定的结束时刻(从再现开始时刻100秒起经过再现期间80秒后的180秒)为止，都维持由上述指定值指定的状态。这样，能对图5记载的感官效果进行再现。

此外，尽管将在本构成例中的渐变期间规定为在感官效果的开始时从初始值变化到指定值的期间，但在其他实施方式中，也可以将渐变期间定义为在感官效果的结束时从指定值变化到后续值的期间，即渐出的效果。在这样构成的情况下，也同样能得到简化语法的效果。

在此所说的后续值是指在时间上邻接后续的感官效果的指定值。根据该描述方法，图5的感官效果信息描述再现开始时刻20秒、再现期间20秒、渐变期间20秒、指定值0作为感官效果1，描述再现开始时刻40秒、再现期间80秒、渐变期间20秒、指定值60作为感官效果2，进而描述再现开始时刻120秒、再现期间60秒、指定值40作为感官效果3。接收到这样的感官效果信息的感官效果信息接收机110与构成例4等同样地控制感官效果再现设备120～150，对图5所示的感官效果进行再现。

(构成例8)

尽管作为具有渐变效果的感官效果的描述方法例示了构成例4以及构成例7，但在本构成例中，例示取代它们的描述方法。

在构成例7的描述方法中，与构成例4的描述方法相比，作为能简化语法的反面，具有可读性变低的缺点。例如，即使是图4那样的一看就知道是1种感官效果，在RoSE工作草案中也描述为1种感官效果的事例，也必须描述为2种感官效果。

为了消除该缺点，在本构成例中，规定使渐入从初始值起经过渐入期间变化到指定值的效果，并规定使渐出从指定值起经过渐出期间变化到零的效果。

即，将渐变期间中的、在渐变结束后成为零以外的值的期间作为后续的感官效果的渐入期间进行处理，而仅将在渐变结束后成为零的期间作为近前的感官效果的渐出期间进行处理。

根据该描述方法，图4的感官效果能描述为1种感官效果。图5的感官效果的描述除了取代渐变期间而使用渐入期间以外，与构成例7中的描述例即图20相同。这样，尽管需要渐入期间和渐出期间两者，从而在语法方面比构成例7的描述方法复杂，但在实际描述感官效果的情况下，有提高能简化描述量的可能性的效果。

(构成例9)

此外，在以上的构成例中，在用XML描述的感官效果信息中描述了规定感官效果再现设备120～150的准备时间的信息。然而，描述方法不局限于此。尽管在广播用途中发送用XML描述的感官效果信息的情况下，考虑容纳在MPEG-2TS中来进行发送，但由于在MPEG-2TS中有记载解码开始时刻的部分，因此还能利用此。

感官效果信息发送机100将由XML描述的感官效果信息按各感官效果的要素进行分割并容纳在MPEG-2TS的PES分组中。另外，由于在PES分组头中有描述DTS之处，因此，在此描述解码开始时刻并发送到感官效果信息接收机110。这样，将不需要在XML的描述中记载解码开始时刻。感官效果信息接收机110从接收到的MPEG-2TS中提取DTS来取得解码开始时刻，并在该解码开始时刻开始记载于PES分组中的感官效果信息的解码，从而开始基于该感官效果信息的感官效果再现设备120～150的控制。

另外，不仅对于具有本实施方式的数据结构的感官效果信息进行收发，为了感官效果再现装置的控制而对其进行参照，还可以将其存储在记录介质(信息存储介质)中。通过将上述感官效果信息存储在记录介质中，能保存以及运输。存储所用到的介质可列举CD、DVD、蓝光(注册商标)等移动式的存储用介质、硬盘等固定式的存储介质等，但不特别限定于此。

(发送方法)

接下来，说明本发明的感官效果信息的发送方法(感官效果信息输出方法)。图7示出在本实施例中从发送机发送的感官效果信息的具体例。在此，仅着眼于感官效果信息的生存期间，以在时间轴上对各感官效果进行展开的形式来表示。此外，将从解码开始时刻起到再现结束时刻为止的时间称作感官效果信息的生存期间。

在本实施方式中，感官效果信息的收发的方法只要包含输出感官效果信息(优选是本发明的感官效果信息)的步骤，就不作特别限定，例如，能使用在BML(参照非专利文献3)中所用到的DSM-CC的数据轮播方式。在使用DSM-CC的数据轮播来发送感官效果信息的情况下，在从解码开始时刻起到再现结束时刻为止的期间，需要重复发送该感官效果信息。针对本发明的感官效果信息，将图7所示的数据全部汇集起来用DSM-CC的数据轮播发送会造成较多的浪费。在此例中，为了简化说明，感官效果的数量少，但若从实际出发考虑2小时的电影那样的例子，感官效果的要素数达到数百左右是很普通的。在将其直接载置于数据轮播的情况下，会产生如下情况中的一种：由于数据量大，因此分配给音频或视频的频带会减少，或者由于将频带压缩到以往的程度，因此数据轮播循环一周的时间变长，从而随机接入性会降低。

这样，由于在描述了感官效果信息的XML文本中具有几项在其他XML文本中没有的重要的特性，因此，若将现有型的传输方法直接用于感官效果信息的传输，会产生下面的各种不良状况。

首先，在对感官效果信息进行再现的情况下，不一定非要用到XML文本整体，甚至可以说发送整体是不现实的。在时间轴上的某一点上感官效果的再现所需的信息将成为描述感官效果信息整体的XML文本的枝的一部分。若用图12的例子来说，从时间0起到时间60为止的期间需要的是照明效果1和温度效果1的信息，在该期间发送照明效果3或送风效果1的信息将造成频带使用的浪费。因此，在感官效果信息的传输中，需要高效地汇集XML文本的一部分的枝来进行传输。

在感官效果信息中，在一个一个的枝上附有作为时间信息的再现开始时刻和再现持续时间，且有这样的问题：有时再现先开始的感官效果比再现后开始的感官效果持续时间更长。若是图11的例子，则在时间60开始的感官效果的枝仅是照明效果2的枝，但在该时间，温度效果1还在继续，若仅仅在温度效果1和照明效果2之间分割XML文本，且在时间60以后仅发送照明效果2，则会产生不能正确再现温度效果1的不良状况。

(分割方法1)

为此，本实施方式的感官效果信息发送机100可以将感官效果信息进行分割来发送。

在分割时，若在发送的时间点仅将最低需要的感官效果信息送往感官效果信息接收机110侧，则能使发送时所需的频带最小化。在当前时刻最低需要的感官效果信息是指感官效果信息的生存期间延续到当前时刻的感官效果信息，即解码开始时刻在当前时刻(输出的时刻)以前且再现结束时刻在当前时刻以后的感官效果信息。此外，该分割是考虑了感官效果再现设备的准备期间的具有本实施方式的数据结构的感官效果信息才能实施的。这是由于，在现有技术中，未考虑感官效果再现设备的准备期间，因此感官效果信息发送机100不能判断是否为为了在再现开始时刻开始再现而在输出的时间点发送的需要的信息。

在图7的例子中，分别在期间71发送照明信息1和温度信息1，在期间72发送照明信息1和温度信息1和送风信息1，在期间73发送照明信息1和温度信息1和送风信息1和照明信息2，在期间74发送温度信息1和送风信息1和照明信息2和香味信息1，在期间75发送温度信息1和照明信息2和香味信息1，在期间77发送照明信息32和送风信息2。在期间76没有发送的感官效果信息。图8示出将该分割方法总结在表中的情况。

接收到由图8所示的分割方法分割的感官效果信息的感官效果信息接收机110，接收以数据轮播发送中的数据，并控制感官效果再现设备120～150以使所指定的感官效果再现。在从中途例如期间75中接收到广播的情况下，照明信息2、温度信息1、香味信息1有效，因此对与它们对应的效果进行再现。这样，通过从要输出的感官效果信息中提取感官效果信息的生存期间延续到当前时刻的感官效果信息来进行发送，能不遗漏需要的信息且高效地进行传输。

此外，由于使温度和香味变化到指定值需要时间，因此，根据开始再现的时刻，在到达指定值前到达再现结束时刻的可能性是有的。在像这样不能充分设置到指定值的设定期间的情况下，为了避免半途而废，能进行如下控制：即使在再现期间中，也不进行再现。

图15是表示本实施方式的感官效果信息发送机100的概略构成的框图。如图15所示，感官效果信息发送机100具备：主控制部(输出单元)101、存储部104、发送部105。在存储部104中存储有要发送的感官效果信息。主控制部101具备提取部102和发送控制部103。提取部102从存储在存储部104中的感官效果信息中提取解码开始时刻在当前时刻以前且再现结束时刻(从再现开始时刻起经过再现期间后的时刻)在当前时刻以后的感官效果信息，并输出到发送控制部103。发送控制部103针对从提取部102输入的感官效果信息，在进行编码等需要的处理后，经由发送部105向感官效果信息接收机110发送。

图16是表示本实施方式的感官效果信息接收机110的概略构成的框图。如图16所示，感官效果信息发送机110具备：主控制部(控制单元)111、接收部114、存储部115。主控制部111具备接收控制部112、设备控制部113。由接收部114接收的感官效果信息，在接收控制部112中，在该感官效果信息的解码开始时刻解码，并传递到设备控制部113。此外，接收控制部112可以在接收时进行解码处理，并在解码开始时刻将感官效果信息传递到设备控制部113。设备控制部113依照所传递的感官效果信息，控制感官效果再现设备120～150。此时，控制开始的定时可以是如上所述的传递感官效果信息的定时，或与解码开始时刻实质上相同的定时，还可以基于预先存储在存储部115中的感官效果再现设备120～150的各个能力信息来调整定时。

(其他分割方法)

尽管在上述的分割方法1中，是在某个时间点提取需要的感官效果信息来进行发送的方法，但在光盘等打包介质中，有时希望将感官效果信息整体以树的形式分割为各自独立不重复的部分。在上述的分割方法1中，例如在期间71和期间72均包含照明信息1，有重复。

为此，作为分割方法2，示出如下方法：包含全部需要的信息，且在彼此不重复的分割可能点进行分割，以使各自能独立再现。系统构成与实施例1相同，因此省略。

图9是表示用于说明分割方法2的感官效果信息的生存期间的图。由于在期间92表示的期间中没有与生存期间对应的感官效果信息，因此在该点能对全部感官效果信息进行分割。即，汇集照明信息1、照明信息2、送风信息1、温度信息1、香味信息1作为期间91的感官效果信息，没有与期间92对应的感官效果信息，且汇集照明信息3和送风信息2作为与期间93对应的感官效果信息。

在分割时，若按照解码开始时刻的先后顺序排列各感官效果信息，则在香味信息1、照明信息3以及送风信息2之间将存在分割点。但这是分割点的事实不进行图9那样的解析是无法知晓的，因此在可分割的枝上附加可分割属性。图10是对其表示的图，作为对照明信息3和送风信息2群组化的效果群1的属性，指定了“可分割＝是”，这就明示了是可分割的。

另外，即使是在根据基于感官效果信息的生存期间的解析而知晓可分割的地方之中，也可能存在作者重视效果的连续性而不希望分割的地方。在这种情况下，通过将不可分割用“可分割＝否”来明示，能避免非本意的分割。

此外，尽管在本实施例中，对于“可分割”的属性采用了指定是或否的方式，但在逻辑上用对立的构成也没有关系。即，能采用对于“不可分割”的属性指定是或否的方式。在这种情况下，图10的“可分割＝是”将变为“不可分割＝否”的描述。

或者，为了表示不可分割，能描述针对关联性强的感官效果的参照。用图17说明该方法。在图17中，对于有依赖性的感官效果描述有“依赖”的属性。例如，示出了温度信息1对照明信息1以及照明信息2有依赖性，因此优选不将它们进行分割。同样，送风信息1也对照明信息1以及照明信息2有依赖性，照明信息2对照明信息1有依赖性，香味信息1对送风信息1有依赖性。另外，送风信息2对照明信息3有依赖性。由于优选将有依赖性的信息一体发送，因此在本例中，可分割的地方将在香味信息1和效果群1之间。

在此所说的“有依赖性”是指，作为整体发挥一个效果，或者仅在特定的效果的存在时发挥效果。例如，在图17中，尽管香味信息1依赖送风信息1，但其指定的目的是：凭借送风信息1来散布香味信息1，若送风信息1因某种理由而不能再现，则香味信息1的再现将失去意义。另外，尽管照明信息2依赖照明信息1，但其指定的目的是：照明信息2是接续照明信息1的连续的效果，若去除照明信息1来对照明信息2进行再现，则会偏离本来希望的效果。因此，希望在分割时一体对待。

这样，在由多个感官效果信息构成的感官效果信息群中，在特定的定时上述多个感官效果信息的任一个都未生存的情况下，通过将上述感官效果信息群分割成比上述特定的定时提前再现的感官效果信息群、和比上述特定的定时延后再现的感官效果信息群，能取得处理效果好的感官效果信息群。分割可以例如由感官效果信息发送机100在发送时进行，也可以由执行编写软件等的计算机进行。

(感官效果信息生成装置)

本发明还提供生成上述那样的感官效果信息的感官效果生成装置。上述感官效果生成装置具有：输入部，其在构成准备期间以及感官效果信息的信息之中，预先受理除解码开始时刻(控制开始时刻)以外的输入；和信息生成部(信息生成单元)，其在输入部受理的输入中，基于准备期间以及再现开始时刻，算出解码开始时刻，并根据预先输入的信息、和算出的解码开始时刻，来生成本发明相关的感官效果信息。本发明的感官效果生成装置例如由一般业务用计算机或者个人计算机实现上述功能。准备期间等输入能利用经由键盘或GUI的输入等的公知惯用的技术。上述信息生成部将解码开始时刻最简单地设定为比再现开始时刻提起准备期间。另外，取代准备期间的输入，使上述等级设定输入，上述信息生成部可以参照预先存储在感官效果生成装置内部的表格来特定准备期间。例如，当输入再现开始时刻70秒、准备期间60秒、再现期间100秒作为感官效果时，上述信息生成部将比再现开始时刻提前准备期间的10秒用作解码开始时刻，并生成如图13所示的、包括解码开始时刻10秒、再现开始时刻70秒、再现期间100秒的感官效果信息。另外，在输入等级A作为上述等级设定，再现开始时刻为10分钟、感官效果内容使温度为30度的效果的情况下，上述信息生成部将从再现开始时刻中减去等级A下的该效果的准备期间即7分钟后得到的3分钟用作解码开始时刻，并生成包括解码开始时刻3分钟、再现开始时刻10分钟、指定值30度的感官效果信息。

另外，上述感官效果生成装置还可以具备分割单元，该分割单元将生成的感官效果信息与上述分割方法2同样地进行分割。

(程序以及记录介质)

感官效果信息发送机100的主控制部101、感官效果信息接收机110的主控制部111、感官效果信息生成装置的信息生成部由硬件逻辑构成即可。或者可以像下面这样，利用CPU(Central Processing Unit、中央处理器)而由软件实现。

即，主控制部101和111、以及上述信息生成部具备：执行实现各功能的程序的命令的MPU等CPU、容纳该程序的ROM(Read Only Memory、只读存储器)、将上述程序展开成可执行格式的RAM(Random AccessMemory、随机存取存储器)、以及容纳上述程序以及各种数据的存储器等存储装置(记录介质)。

而且，本发明不限于程序固定存储在主控制部101和111以及上述信息生成部的程序存储器中的情况，还可以通过以下方法来实现：将存储有上述程序的程序代码(执行格式程序、中间代码程序、或者源程序)的记录介质提供给感官效果信息发送机100、感官效果信息接收机110以及上述感官效果信息生成装置，感官效果信息发送机100、感官效果信息接收机110以及上述感官效果信息生成装置读取存储在上述记录介质中的上述程序代码来执行。

上述记录介质不限定于特定的构造或者种类。即能将该记录介质设为例如磁带或盒式磁带等带类、包括软(floppy：注册商标)盘/硬盘等磁盘和CD-ROM/MO/MD/DVD/CD-R等光盘的盘类、IC卡(包括存储卡)/光卡等卡类、或者掩膜ROM/EPROM/EEPROM/闪速ROM等半导体存储器类等。

另外，即使与通信网络可连接地构成主控制部101和111、以及上述信息生成部(或者感官效果信息发送机100、感官效果信息接收机110以及上述感官效果信息生成装置)，也能实现本发明的目的。在这种情况下，将上述程序代码经由通信网络提供给主控制部101和111、以及上述信息生成部。该通信网络只要是能将程序代码提供给主控制部101和111以及上述信息生成部的网络即可，不限定于特定的种类或形态。例如，可以是互联网、内联网、外联网、LAN、ISDN、VAN、CATV通信网、虚拟专用网(Virtual Private Network)、电话线路网、移动通信网、卫星通信网等。

构成该通信网络的传输介质可以是能传输程序代码的任意的介质，不限定于特定的构成或种类。例如，无论是IEEE1394、USB、电线传输、有线电视线、电话线、ADSL(非对称数字用户环路)线等有线，还是IrDA或遥控那样的红外线、Bluetooth(注册商标)、802.11无线、HDR、NFC、DLNA、移动电话网、卫星线路、地面波数字网等无线，均可利用。此外，本发明还能以由电子传输实现上述程序代码的、嵌入到载波中的计算机数据信号的方式实现。

本发明不限定于上述各实施方式，能在权利要求表示的范围内进行各种变更，将在不同的实施方式中各自公开的技术手段适当组合而得到的实施方式，也包含在本发明的技术范围内。

(工业实用性)

本发明能够在收发感官效果的系统、特别是利用感官效果来实现临场感高的再现的广播系统、基于光盘的内容发布系统中进行利用。

Claims (18)

1.一种数据结构，是控制装置为了控制对感官效果进行再现的感官效果再现装置而参照的感官效果信息的数据结构，

所述数据结构的特征在于，包括：

控制开始时刻规定信息，其规定控制开始时刻，该控制开始时刻是所述控制装置开始用于所述感官效果的再现的所述感官效果再现装置的控制的时刻；和

再现开始时刻信息，其规定再现开始时刻，该再现开始时刻是所述感官效果再现装置要开始所述感官效果的再现的时刻，

将所述控制开始时刻设定为比所述再现开始时刻提前准备期间以上，所述准备期间是所述感官效果再现装置从接受用于所述感官效果的再现的控制起，到开始所述感官效果的再现为止所需的期间。

2.根据权利要求1所述的数据结构，其特征在于，

所述数据结构还包括再现状态信息，该再现状态信息规定作为所述感官效果再现装置进行的所述感官效果的再现的目标的再现状态，

所述再现开始时刻信息规定所述感官效果再现装置实现所述再现状态的再现开始时刻，

将所述控制开始时刻设定为比所述再现开始时刻提前准备期间以上，所述准备期间是所述感官效果再现装置从接受用于所述感官效果的再现的控制起，到实现所述再现状态为止所需的期间。

3.根据权利要求1或2所述的数据结构，其特征在于，

所述数据结构还包括：

再现期间信息，其规定基于所述感官效果再现装置的所述感官效果的再现期间；和

结束时状态信息，其规定从所述感官效果的再现开始起经过了所述再现期间的时刻的结束时状态。

4.根据权利要求1～3中任一项所述的数据结构，其特征在于，

所述感官效果再现装置是从由照明装置、送风装置、空调装置、香味产生装置、振动产生装置以及湿度调整装置构成的群中所选出的1个以上的装置。

5.一种信息存储介质，其特征在于，

存储有感官效果信息，该感官效果信息具有权利要求1至4中任一项所述的数据结构。

6.一种感官效果信息输出装置，其特征在于，

具备对感官效果信息进行输出的输出单元，该感官效果信息具有权利要求1至4中任一项所述的数据结构。

7.根据权利要求6所述的感官效果信息输出装置，其特征在于，

所述感官效果信息包括再现期间信息，该再现期间信息规定基于所述感官效果再现装置的所述感官效果的再现期间，

所述输出单元从要输出的所述感官效果信息中提取由所述控制开始时刻规定信息规定的控制开始时刻在输出的时刻以前、且从所述再现开始时刻起经过所述再现期间后的时刻在输出的时刻以后的感官效果信息并进行输出。

8.一种程序，用于使计算机作为权利要求7所述的感官效果信息输出装置进行动作，其中，

所述程序用于使所述计算机作为所述感官效果信息输出装置具备的各单元发挥功能。

9.一种计算机可读取的记录介质，存储有权利要求8所述的程序。

10.一种感官效果信息输出方法，是将感官效果信息输出给控制对感官效果进行再现的感官效果再现装置的控制装置的方法，

所述感官效果信息输出方法的特征在于，

包括以下过程：感官效果信息输出装置输出具有权利要求1至4中任一项所述的数据结构的感官效果信息。

11.根据权利要求10所述的感官效果信息输出方法，其特征在于，

所述感官效果信息包括再现期间信息，该再现期间信息规定基于所述感官效果再现装置的所述感官效果的再现期间，

在输出所述感官效果信息的过程中，所述感官效果输出单元从要输出的所述感官效果信息中提取由所述控制开始时刻规定信息规定的控制开始时刻在输出的时刻以前、且从所述再现开始时刻起经过所述再现期间后的时刻在输出的时刻以后的感官效果信息并进行输出。

12.一种控制装置，其特征在于，

具备控制单元，该控制单元参照具有权利要求1至4中任一项所述的数据结构的感官效果信息，至少在所述控制开始时刻前开始针对所述感官效果再现装置的、用于在所述再现开始时刻使所述感官效果的再现开始的控制。

13.一种程序，用于使计算机作为权利要求12所述的控制装置进行动作，其中，

所述程序用于使所述计算机作为所述控制装置具备的各单元发挥功能。

14.一种计算机可读取的记录介质，存储有权利要求13所述的程序。

15.一种感官效果再现系统，其特征在于，

具备：

感官效果输出装置，其对控制装置输出具有权利要求1至4中任一项所述的数据结构的感官效果信息；和

控制装置，其参照从所述感官效果信息输出装置输出的所述感官效果信息，控制基于所述感官效果再现装置的所述感官效果的再现。

16.一种感官效果生成装置，生成具有权利要求1至4中任一项所述的数据结构的感官效果信息，

所述感官效果生成装置的特征在于，

具备信息生成单元，该信息生成单元基于预先输入的、所述再现开始时刻以及所述准备期间，生成所述控制开始时刻规定信息，使得所述控制开始时刻比所述再现开始时刻提前所述准备期间以上。

17.一种程序，用于使计算机作为权利要求16所述的感官效果生成装置进行动作，其中，

所述程序用于使所述计算机作为所述感官效果生成装置具备的各单元发挥功能。

18.一种计算机可读取的记录介质，存储有权利要求17所述的程序。

Images