采集、记录和使用航空器中已捕捉数据的设备和方法

暂无

采集、记录和使用航空器中已捕捉数据的设备和方法\n技术领域\n[0001] 本发明涉及采集和记录航空器中已捕捉数据的设备和方法。它特别是涉及允许记录和可视化视频、音频、图形数据以及更普遍的任何类型数字数据的飞行测试设备。\n背景技术\n[0002] 飞行测试设备，以熟知的方式，负责记录，尤其是测试摄像机的视频数据源，例如SDI(串行数据界面“Serial Digital Interface”的缩写)，或来自飞机系统的视频，以及表示相关飞机参数的某些数据。记录系统是有必要调整以符合测试飞机的需求的所有权者的系统。它们将数据存储在磁带盒上。根据所处时代及市场上可获得的技术，不同类型的视频记录格式及记录装置被使用。\n[0003] 图1，以示意图形式，描绘现有技术的一连串视频测定功能块。在这样一个系统中，为飞机参数数据标注时间和将飞机参数数据与视频建立关联的需求以及记录尽可能多的通道的需求，促使通过尽可能改变某些功能和进行质量和数量的权衡以实现市场上可获得的专业设备的适应调整。\n[0004] 正如我们在图1中所见的，视频由摄像机传感器105获得并且随后由处理装置115进行处理。一个GMT(格林威治标准时间“Greenwich Mean Time”的缩写)110，换而言之基于一个通用时间的一个实时计时，采用该计时以便精确知道测试的进展并且将视频与并行获得的其他所有数据，尤其是飞机参数120，相关连。对于某些飞机，飞机参数由机载计算机(未被表示出)计算出并编码。相应数据在参数数量和刷新频率上被限制。在处理装置输出115处，信号例如根据SDI“SMPTE 259”标准被传输。这样一种连接的速率固定在\n270Mbps(兆位/秒)。\n[0005] 信号在自身测试时在一个可视化显示屏125上被可视化。我们注意到格式转换器(未被表示出)对于视频信号SDI的可视化是必需的。此外，视频和元数据，换而言之即参数，飞机、飞行、所用材料和时间的识别码被记录在磁带(录像带、录音带)130上以便通过地面装置135对它们整理、归档和/或存储。所用记录格式由所用记录器指定。该格式专属于专业设备。此外，飞机数据(类型，编号......)被添加以方便归类和归档。这些信息在磁带上是完整的。我们因此为每一个磁带得到一个笺头。\n[0006] 在地面上，所获得的磁带随后在一个处理工作台上由专家整理。磁带的处理用线性方式进行，磁带应被遍历以找到所需的顺序。而且，飞机的参数以局部的方式被记录，处理工作台与数据库之间的连接是必需的。\n[0007] 正如我们在阅读前面文章所理解的那样，目前的IEV(“飞行测试设备”的缩写)视频机载结构因此相对复杂，出于所用载体的原因，换而言之即磁带。(飞机的视频、音频和参数)(数据)流事实上被记录在磁带上。\n[0008] 现有技术显示出诸多不便：\n[0009] -一个磁带录像机仅允许记录标准清晰度，也被称作“SD”的视频(数据)流。要记录高清晰度，也被称作“HD”的视频(数据)流，应该要使用HDCam类磁带录像机，其额外成本是巨大的。为了记录涉及驾驶舱仪表的ASVI(航空电子串行视频接口“Avionics SerialVideo Interface”的缩写)或VGA(视频图形阵列“Video GraphicsArray”的缩写)类型的图形页面，应该要添加允许将这些信号转换成一个SD或HD视频信号的模块；\n[0010] -为磁带录像机上的图像标注时间由一个AES(音响工程协会“Audio Engineering Society”的缩写，一个定义数字信号结构并使其进入专业音频领域的规范化组织)信号提供的、被称作“Timecode”的时间码来完成。能够将飞机时间转换成AES时间码的一个实体模块因此应该被特别开发以便能够从飞机时间出发为图像标注时间而且[0011] -在磁带录像机上没有预留任何系统用于记录动态参数。允许在一个声道上为飞机参数编码的一个实体模块因此应被开发出来以便允许记录这些飞机参数。另外一个实体模块也应该被开发出来以便在地面上处理时读取这些参数。\n[0012] -磁带组成一个线性载体。这意味着不同的(音频、视频数据和参数)流在采集时应被同步。由于这些不同(数据)流的传输时间，因此造成问题。\n发明内容\n[0013] 本发明力求解决所有或部分这些不便。特别是，本发明旨在解决下述的所有或部分问题。\n[0014] 第一个问题在于以简单而非限制的方式关联和同步元数据、视频数据、音频数据及每个(数据)流的时间通道。视频(数据)流应在信息无损换而言之在原生分辨率和频率的情况下采集，并且以压缩或非压缩的方式记录起来。特别是，它涉及到在同一载体，实际中至少是一个硬盘上，但最好是在不同的文件中，记录不同的(数据)流，这体现一个好处是不必在采集这些(数据)流时同步它们。\n[0015] 第二个问题涉及到至此还被使用的记录载体，磁带、以及记录和再次读取的设备的即将过时。问题是找到一个交换格式，它不仅满足机载限制而且适应地面所遇到的限制，尤其是采集数据的自动存档和简单快速处理。最好的情况是，我们力求为视频和已记录在硬盘上的飞机数据的存档架构统一化。\n[0016] 第三个问题在于允许记录所有类型的格式。事实上，在计算机的输出端，新的、尤其是高清晰度的格式出现，例如ARINC 818(航空无线电公司“Aeronautical Radio，Incorporated”的缩写，注册商标，其818标准涉及一个航空电子数字视频总线)，VGA，描述相关联测试的数据，pre-trigger功能，换而言之即预触发功能，回放功能(英语为“play”或“replay”)。而且，强大的压缩新算法和设备允许大(数据)速率出现。本发明因此力求确定一种非特定于视频的机载系统架构以及一种允许不受数量和质量限制，采集、压缩、同步、储存及重放及处理不同视频、音频数据、参数、图形数据流的文件格式。\n[0017] 本发明特别力求解决所有或部分这些问题。为此效果，根据第一方面，本发明力求提供一种采集和记录在航空器中捕捉的数据的设备，包含：\n[0018] 待记录数据流的多个源，\n[0019] 被标注时间的记录参数值的至少一个源，以及\n[0020] 在至少一个非易失信息载体上记录来自数据流的数据和参数值的记录装置，[0021] 其特征在于所述记录装置适于在相互独立的文件中存储不同数据流的数据，在每个文件中记录的数据与所述参数值相关联。\n[0022] 本发明因此提供一个非特定于视频的机载系统架构以及一种允许不受数量和质量限制，采集、压缩、同步、存储及重放和操作不同数据、视频、音频、参数、图形(数据)流的文件格式。\n[0023] 而且，所建议的架构是一个模块架构，来自不同数据源的不同音频/视频(数据)流由多个不同的流程采集，它允许根据记录通道的数量调整尺寸(采集服务器及存储硬盘的数量)并便于添加新的功能。\n[0024] 得益于这些设备，在采集时无需同步这些(数据)流。\n[0025] 把(数据)流记录在多个不同的文件中体现以下优势：\n[0026] -在机舱，各文件是由多个不同的流程生成并且可被记录在多个不同的硬盘中而且\n[0027] -在地面，不同(数据)流在相互独立的文件中的存储允许限制文件的大小，以及根据需求限制待处理数据的数量，只有包含所要求的(数据)流的文件例如应被置于“近线存储”。\n[0028] 本发明提出一种围绕简单(可作唯一的)服务器而设计的设备架构，它与一个适合航天限制并且尤为特别的是飞行测试限制的文件格式相关联。\n[0029] 所提出的文件格式允许记录所有类型的数据，并有可能将它们同步，以及尤其是通过从一个绝对时间开始通过数据库为便利搜索自动提供资料来随机访问数据，以及通过数据安全而便利操作，\n[0030] 而且，所建议的架构是一个模块架构，来自不同源的不同音频/视频(数据)流由多个不同流程获得，这允许根据记录通道的数量调整大小(采集服务器及存储硬盘的数量)并便于添加新的功能。\n[0031] 最终目标是在考虑了飞行测试的职业限制的同时(在地面和在飞行中)获得优化的“工作流(workflows)”。在此，一个“工作流”是一个组织内部的一个信息流，象例如文件在人群中自动传送一样。“工作流”是待完成任务以及在一个职业流程(也被称作操作流程或者是公司流程)的实现过程中牵涉到的不同行动者的整体的信息模型化和管理。“工作流”一词因此能够被翻译成法语为“职业流程的电子管理”。用更为实用的方式，“工作流”描述了验证的循环、一道流程的不同行动者之间的待完成任务、期限、验证模式，并向每一位行动者提供实现他的任务所必需的信息。它通常允许通过细述行动者角色和最好的完成办法来跟踪并识别行动者。“工作流”的引擎是允许执行一个或多个“工作流”定义的软件设备。由于语言的滥用，可以简单地称呼这种软件设备为“工作流”。\n[0032] 在无磁带的信息化环境下(数据、视频、音频、图表)内容管理允许：\n[0033] -控制成本以及\n[0034] -便利操作(数据存档合理化，数据轻松快捷的访问)。\n[0035] 该解决方案由中央服务器四周的一种简单架构支持，同时无论输入格式还是压缩率都可适应。\n[0036] 根据特定的特征，记录装置包含合成文件生成装置，这些合成文件随着代表来自不同数据源的数据的文件的记录而被生成，合成文件使得能够以同步方式为这些文件设置参考编号和再次读取这些文件，并且包含指向代表来自数据源的数据的每一个文件的外部参考编号。该合成文件通过将多个标注时间、包含在几个文件中的(数据)流关联，允许这些文件同步重新读取。\n[0037] 根据特定的特征，记录装置适于以动态方式在至少一个文件中记录参数值。\n[0038] 根据特定的特征，记录装置适于用通用数据结构的斜体记录参数描述符以及关于测试的数据。\n[0039] 例如，关于测试的数据是测试类型、测试号、飞机类型、飞机编号及飞行号。\n[0040] 根据特定的特征，记录装置适于与数据流的采集的通用时间相关联地记录该每个数据流数据。\n[0041] 因此允许记录所有类型的数据并有可能将它们同步，并且，尤其是基于一个通用时间通过随机访问数据可便利操作。\n[0042] 得益于这些设备的每一个，限制了数据存储所需的存储空间。\n[0043] 根据特定的特征，本发明的设备，如上面简要陈述的那样，包括读取装置，该读取装置适于为至少一次来自数据流的记录数据的传播生成一个合成文件。该合成文件使得能够以同步方式为文件编制参考编号并再次读取该文件，该文件包含待传播数据并包含指向代表待传播数据的每个文件的外部参考编号。\n[0044] 该合成文件指明哪一个(数据)流应被发布。这一机制允许记录和处理不同文件中的(数据)流。\n[0045] 根据特定特征，本发明的设备如上面简要陈述的那样，包括将来自各个源的数据流向记录装置路由的路由装置，记录装置包括适于补偿由路由装置产生的传输等待的时间标注装置。\n[0046] 时间标注因此非常精确。\n[0047] 根据特定的特征，记录装置适于把来自数据源的数据成形为MXF(素材交换格式“Material eXchange Format”的缩写)格式文件形式。\n[0048] 关于MXF格式有关其逻辑结构的优势，我们可以引用MXF格式文件的逻辑结构优势，它独立于其物理结构。因此在不同(数据)流和元数据之间进行组织和同步均有可能，无论它们的类型和位置。\n[0049] 这一格式提供对应IEV限制条件的机制，尤其是：\n[0050] -文件模式和不同流式模式的管理，\n[0051] -支持外部参考编号；\n[0052] -随机数量的不同类型(数据)流的同步\n[0053] -为随机访问而生成的机制，以及\n[0054] -即时演化元数据的管理：静态和动态元数据的管理，元数据作用范围的管理，回应大范围需求的标准化元数据的“构架”，定义所有权者(propriétaire)元数据“构架”的可能性。\n[0055] 根据特定的特征，数据流在采集时被用与航空器时钟同步的内部时钟标注时间。\n例如，内部时钟的时间校准可由外部NTP服务器，或由一个GMT/AES时间码转换器从一个AES时间码输入开始完成。索引表则允许再次找到与该时间码相关联的图像。这一机制允许保证所记录数据流的同步读取，即便当它不使用同样的时基。\n[0056] 根据特定的特征，记录装置包括将来自数据流源的每个数据流包装到一个包含标识航空器、飞行测试及所述数据源的静态元数据、数据流数据及代表所述数据被捕捉时刻的信息的文件中的装置。\n[0057] 根据特定的特征，本发明的设备如上面简要陈述的那样，包括缓冲存储器，在该缓冲存储器中，当记录未被激活时，数据流在一个预定时间段内被存储和保持，而当记录被启动时，至少一部分暂存数据被记录。\n[0058] 根据特定的特征，来自数据流数据源的数据流被分成固定时长的时间段，记录装置为每个时间段和每个参数记录该时间段期间可用参数的最新近值。\n[0059] 因此被生成的时间段，逐渐地，被包封在一个包含描述飞机和测试以及所采集的不同参数的静态元数据、存有为每一个时间段所保留的参数采集日期及数值的动态元数据的文件中。\n[0060] 因此允许进行参数的时间重组，以便可以用与音频/视频(数据)流相同的方式存储和处理参数。\n[0061] 根据特定的特征，记录装置适于记录包含根据它们的采集时间分配到固定时长时间段的参数值的描述性元数据文件，每个参数每个时间段仅存储唯一一个参数值。\n[0062] 根据特定的特征，记录装置适于将记录分割成连续无中断、且一致无配置改变的序列，一个包含用于每个新序列的多个新文件的新目录在每次记录、重新启动或重新配置时被生成。\n[0063] 根据特定的特征，记录装置适于以多个不同的压缩率和算法存储同样的数据。\n[0064] 根据特定的特征，本发明的设备如上面简要陈述的那样，记录装置适于在飞行测试时将数据存储为“流式采集”模式，该记录模式其中文件被分成多个包含至少一个数据流的数据并跟随有一个允许再次读取数据流的所述这些数据的信息块的分段。\n[0065] 当文件从一个线性载体(带)上采集，或当采集有可能被突然打断时，这一记录模式被使用。仅有位于最后一个可读取信息块之后的(数据)流不能被轻易地解码。因此，机舱内，文件是以“流式采集”模式采集的，以便，即便它们未被正确的关闭它们能够被使用。\n他们被分割成对应于预定时长的几个部分。因此，在系统崩溃的情况下，仅有位于最后部分的(数据)流不能被轻易地解码。\n[0066] 根据特定的特征，记录装置适于在地面上将已记录数据转换以便将其存储为“文件”模式，其中该文件被分割成多个块，包含允许再次读取文件的信息的一个文件标题和/或一个文件页脚以及包含来自数据流的数据的一个文件本体。\n[0067] 该记录模式更适合存储在一个允许随机访问的载体(硬盘或光盘)上的文件。\n[0068] 根据特定的特征，本发明的设备如上面简要陈述的那样，包含适于生成一个指明哪里可找到不同的记录图像的索引表的索引编制装置。\n[0069] 这一表因此允许随机存取关于一个(数据)流和一个给定的一个图像。\n[0070] 根据特定的特征，记录装置适于以其原始的无压缩的形式保留至少一个数据流。\n[0071] 根据特定的特征，记录装置适于定义允许用以“构架”的形式组织的专用于用户的信息修饰每一个文件的描述性元数据。\n[0072] 根据特定的特征，记录装置适于记录包含描述参数值的元数据组列表的静态描述性元数据文件。\n[0073] 根据特定的特征，记录装置适于以回放一个或多个同步数据流的形式提供已记录的数据。\n[0074] 根据另一个方面，本发明力求提供一种采集和记录在航空器中已捕捉数据的方法，包括待记录数据流的多个源，被标注时间的记录参数值的至少一个源以及在至少一个非易失信息载体上记录来自数据流和参数值的记录装置，\n[0075] 其特征在于包括：\n[0076] -记录步骤，用于在独立文件中存储不同数据流的数据，和\n[0077] -在每个文件中已记录数据与所述参数值相关联的关联步骤。\n附图说明\n[0078] 本发明的其他优势、目标及特征分列在随后的描述中，参照附件图，旨在说明并且绝不局限于此，其中：\n[0079] -图1，以功能示意图的形式，表示现有技术的系统，\n[0080] -图2，以逻辑示意图的形式，表示本发明设备的一种具体实现方式，[0081] -图3，以示意图的形式，表示在本发明设备和方法的最佳实现方式下，记录的文件的一个组织结构，\n[0082] -图4、5和6，以示意图的形式，表示根据三种不同的记录模式所记录文件的结构，[0083] -图7，以示意图的形式，表示在本发明设备和方法的一种具体实现方式下使用的文件的结构，\n[0084] -图8，以示意图的形式，表示在本发明设备和方法的一种具体实现方式下使用的“架构”，\n[0085] -图9至14，以示意图的形式，表示在本发明设备和方法的具体实现方式下使用的文件的结构以及\n[0086] -图15和16，以逻辑示意图的形式，表示本发明设备的具体实现方式的变型。\n具体实施方式\n[0087] 在所有描述中，“盘”这一词既指代硬盘也指代光盘。\n[0088] 如图2所示，从逻辑观点出发，本发明设备的一种具体实现方式的架构，基于一个中央服务器200，分为四个层次。图2的左边，表示了给与采集任何类型来源的数据的可能性的接口源。图2，涉及到职业(métier)数据和飞机时间201、摄像机202、图形源203、ASVI源204和音频源205的输入。\n[0089] 我们随后发现，图2中，允许将数据源通过切换格栅206路由到采集服务器，该切换格栅206在必要时包括一个用于将多个SD源拼合到一个HD图像中，以便构成一个能够节约记录道数量的图嵌镶(mosaique d’images)的嵌镶结构生成系统。在图2的中央可看到音频/视频(数据)流和飞机参数的采集系统。它们职责在于收集由不同源发出的信号并将其成形为MXF(素材交换文件格式“MaterialeXchange Format”的缩写)格式的文件。\n这些不同的采集系统可彼此独立运行(无需将其同步)。在图2中，这一部分除人机接口\n210之外还包含一个视频采集模块211，一个音频采集模块212和一个在图中也被称为MTD的元数据(职业数据和飞机时间)采集模块213。\n[0090] 最后，在图2中具有一个合成、存储和读取系统220，它负责取回不同的MXF格式文件，将其存储在盘225上并将其重新读取。不同的文件可被彼此独立写入(无需将其同步)。一个合成文件逐步被生成和记录，以便允许再次同步读取这些文件。为此目的，存储系统220包含一个由合成文件生成模块235编入合成文件的外部编号生成模块230。\n[0091] 最好是，根据本发明，通过选择适于IEV需求的该格式所提供的各种功能，执行一个MXF标准化文件格式。MXF格式是一种标准化和独立格式(因此是可持久的并可相互操作的)，开放的并可发展的(因此能够管理众多不同的视频格式和编码器)，并且越来越多被采用。它可被用作所有生产线上的交换格式，从采集，经过后生产、索引编制和归档，到发布。\n[0092] MXF格式是可发展的。新的标准和建议被写下来以便应对新的问题。因此，“422M”标准最近被加入用以描述容器“Jpeg2k”。“RP2008”建议将用于“H.264”的“381M”标准补充完整。针对“VC-1”和“VC-3”的标准正在草拟中。\n[0093] MXF格式提供符合IEV限制的所有机制，尤其是：\n[0094] -文件模式以及不同流模式的管理，\n[0095] -外部参考载体，\n[0096] -任意数量的不同类型(数据)流的同步，\n[0097] -用于随机接入的一般机制以及\n[0098] -实时演变的元数据管理：静态和动态元数据管理，元数据范围管理，满足大范围需求的标准化元数据“架构”，定义主要元数据“架构”的可能性。\n[0099] 事实上，本发明重要的一点是具有所有权者的元数据“架构”的使用和定义，该“架构”适于更为广泛的应用的IEV和航空航天需求。\n[0100] 这里，“架构”是一套能够快速开发应用程序的库。它提供足够的软件砖石用于建造一个成品应用程序。这些元件被组织起来以可以相互之间互动，特别是根据所述的“都市化”技术。\n[0101] 术语法语化的尝试已被完成。我们因此有时发现由法语版魁北克OFFICE软件提供的术语“应用程序范围”，或“cadriciel”。\n[0102] 一个“架构”提供一套利于创造所有或一部分软件系统的功能，以及一个将目标域分成几个模块的结构向导。一个“架构”通常借助一个对象语言来实现，虽然这并不是严格必需的：一个“架构”对象因此通过将目标域分类并且定义每一个的职责以及各类间的协作关系来提供一个结构向导。这些类的子集允许是抽象的类。\n[0103] 若软件库术语的使用被局限于正确被称作的库，术语“架构”可被扩展用于同样包括被力荐给于该库的软件结构(层式组织)，甚至是周围框架的开发环境，即便它已能够胜任管理不同的“架构”。\n[0104] 我们发现不同类型的“架构”：\n[0105] -基础设施系统的“架构”：用于开发操作系统，图形界面，通信工具；\n[0106] -中间设备集成“架构”：为了使非均匀应用程序建立联盟关系。用于把不同的技术以唯一的接口形式就位；\n[0107] -企业“架构”：用于开发专用于企业活跃部门的应用程序；以及[0108] -面向内容管理系统的“架构”\n[0109] 这些“架构”的主要优势是再次使用它们的代码，软件生命周期标准化(详细说明、开发、维护、进展)，它们允许形式化一个适合企业需求的结构。它们吸取以前开发的部分经验。这些架构，某种形式上，是极端灵活和演进的软件程序包。\n[0110] 另一重要方面是所考虑的资源的多样性：\n[0111] -SD源：PAL和NTSC分辨率，\n[0112] -HD源：分辨率1920×1080，每秒50个图像，以及其他，\n[0113] -ASVI源(“Avionics Serial Video Interface”航空电子串行视频接口的缩写)或Arinc818：分辨率1024×768，60p，换而言之在渐进模式下每秒60个图像，[0114] -VGA、SVGA(“超级视频图形阵列”“Super video graphicsarray”的缩写)及XGA(“扩展图形阵列”“Extended graphics array”的缩写)源，分辨率640×480至\n1280×1024，60p，\n[0115] -模拟或数字音频源，\n[0116] -飞机参数数据源：约50个参数，频率例如每秒5个采集样本同时又可能得到更大量任何类型的数据和\n[0117] -其他类型的源。\n[0118] 我们注意到不同的源不是同步的。\n[0119] 可供选择的情况是，切换格栅允许在同一地点重新组合各分支并且选择我们希望记录的摄像机(通常都有比可用的记录通道更多的摄像机)。我们注意到只有一个SD/HD-SDI格栅是必需的。它管理同步资源并由指令IHM指挥，而它是，例如，视频可视化显示屏上所显示的菜单。\n[0120] 嵌镶结构生成器借助于嵌镶允许把多个摄像机重新组合到同一个记录通道内。例如能够在不明显损失质量的同时把几个SD摄像机重组到一个单独的HD通道。\n[0121] 音频/视频(数据)流的采集合并几个步骤：\n[0122] -所述(数据)流的采集，\n[0123] -这些(数据)流的压缩，\n[0124] -这些(数据)流的时间标注，以及\n[0125] -已压缩并已标注时间的这些(数据)流被包装在MXF格式的文件中。\n[0126] 压缩根据其中一个确定的编解码器(术语“编码器”和“解码器”的缩写)完成。\n第一次高品质压缩由采集服务器实时执行，以便限制向存储模块传输的(数据)速率。第二次压缩，用代理服务器质量，若有可能，同时被执行，以避免地面上代理服务器的生成步骤。\n根据来源和所需品质，多个编解码器可在同一个服务器内部被使用。\n[0127] 不同的(数据)流在时间上被精确编码或“被时间编码”，换而言之即根据它们被采集的时刻标注时间，并包含一个图像时长数量级的精确度。有几种方法被考虑到：\n[0128] -GMT/AES时间码转换器被放置在记录装置的上游。这些记录装置配备一个AES时间码输入，它能够根据AES时间码为所采集的图像标注时间。这一方法可被直接采用，因为基于AES时间码的时间标注在所有商业视频采集服务器上都可用。它完全建立在设备的基础上，因此更为精细。与之对应的是，它需要GMT/AES时间码切换器设备的开发，并且它对于故障并不耐抗(在转换器故障或AES信号传输有问题的情况下时间标注变得不可能)。\n[0129] -一种基于服务器内部时钟的方法：通过使用与飞机参数采集机架上相同的机制或使用机载计算机的NTP(网络时间协议“NetworkTime Protocol”的缩写)服务器，采集服务器内部时钟可与飞机时钟进行同步。例如，内部时钟的校准可由外部NTP服务器，或一个GMT/AES时间码转换器基于AES时间码输入来完成。\n[0130] 得益于这些时间数据，记录装置适于以一个或多个同步数据(数据)流回放的形式提供记录的数据。\n[0131] 商业采集卡使用它们自己的时钟来为获得的图像标注时间。一个采集软件模块因此应该被开发以用于在采集卡的时钟和服务器内部时钟之间建立对应联系并且因此根据服务器内部时钟为视频标注时间。这一方法因此需要对采集软件的一个小小调整，但相对应地并不需要特定设备。它对于故障更耐抗(在失去同步的情况下服务器内部时钟在几天内持续可用并足够精确)。\n[0132] 时间标注的方法考虑到由路由系统造成的在采集设备(摄像机、麦克风、其他......)和采集服务器之间的传输等待。这一等待事实上在直接传输的情况下是可忽略的，但是当它通过一个嵌镶结构生成器造成时，可以达到几个图像的差距。这一等待已被认知，它由设备根据已知的技术予以补偿。\n[0133] 每一个(数据)流逐步被封装入MXF格式原子文件中。该文件包含描述飞机、测试及数据源的静态元数据，包含采集的(数据)流的一个音频或视频轨道，以及一个包含每个图像时间日期的动态时间码或是“timecode”轨道。该文件遵循机载文件的结构，详见图\n7。\n[0134] 在一种变形中，一个预记录功能可被集成到服务器中：当记录未被激活时，已压缩并已标注时间的(数据)流被存储在一个临时空间内，最好是在随机存取存储器内，并且被保留一段时间。当记录被启动，它们被加入所生成的MXF格式文件中。\n[0135] 飞机参数的采集组合了以下步骤：\n[0136] -设置与数据发送器系统的连接，\n[0137] -采集由数据发送器系统提供的参数(数值和采集日期)，\n[0138] -根据它们的采集日期分拣这些参数，并且\n[0139] -装入一个MXF格式文件。\n[0140] 前两个步骤对应于标准数据发送器系统客户端的实现。它允许预订一个参数列表，取回关于这些参数的普通信息(名称、单位)，随后，按固定时间间隔取回带有参数采集日期的这些参数的所有工业测量值，换而言之即可直接使用的值。\n[0141] 第三个步骤为视频IEV专用的。它使得能够在时间上重新组织这些参数，以便能够以与音频/视频(数据)流同样的方式将参数存储和利用。一个音频/视频流事实上被分成固定期间的段，这一个期间通常对应图像帧的周期或频率，或称之为“帧率”，例如对于一个25个图像/秒的视频为40毫秒。参数采集软件把时间分成固定时长片段(它对应各参数所需频率)，并且，为每一片段和每一参数，保留在该时间段中最近所采集的参数值(或者如果在此时间段中没有获得任何数值则取最近的那个可用数值)。\n[0142] 因此所生成的时间段逐步装入MXF格式原子文件中。该文件包含描述飞机及测试的静态元数据以及不同的所采集的参数。它还包含一个分成固定时长片段的动态元数据轨道，在这些片断中记录着每一时间段预定的参数的值和采集日期。该文件遵循机载文件的预定结构，详细结构参考图7。\n[0143] 就如关于音频/视频(数据)流一样，一个预记录功能被并入采集软件中。\n[0144] 关于序列的管理和存储，来自不同采集方式的MXF格式文件被记录在至少一个存储盘上。每个文件随着它的生成仅被存储在一个盘上。\n[0145] 最好的情况是，每个盘记录所有文件的一个备份。然而，若不同文件的累积流量(速率)远大于一张盘所能承载的流量，将这些流量分配到几个盘上，在一个盘上记录某些文件，在另一个盘上存储某些文件，按需要多少个盘就使用多少个盘。\n[0146] 下表给出所需文件的流量(速率)和体积的例子：\n[0147] \n 速率 速率 4小时空间 6小时空间\n (Mb/秒) (Mo/秒) (Go) (Go)\n 1个SD摄像机 10 1.3 18 27\n 1个HD摄像机 40 5 72 108\n 1个SD代理服务器 1 0.1 1.8 2.7\n 6个SD配置 70 8.8 126 189\n 4个SD+2个HD配置 130 16 234 351\n[0148] 一个软件查看来自不同采集的文件并生成一个能够以同步方式给这些文件编制参考编号和重新读取的MXF格式文件。此外这个文件包含指向每个所采集文件的外部参考编号。它包含描述飞机和测试的静态元数据，以及特定于每一个文件的静态元数据备份(标识摄像机、参数描述)。该文件小但至关重要，它以规则的时间间隔最好是在两张不同的盘的两个不同位置上完全被重写。因此，在两个存储系统有损坏的情况下一个正确的文件总是可得的。\n[0149] 为了便利向地面的传输，最好是同时记录所采集的文件到同一个目录中(或者当文件被分散到几个盘时存储到具有相同名称的各目录中)。\n[0150] 在飞行测试期间，记录可被中止、重启或重新配置。最好是为了便利操作，如图3所绘，将记录细分成连续序列305、310、315、360和365，换而言之即不中断且均一的，换而言之即不改变配置的。因此，每当记录因无论任何原因(摄像机切换，盘的更换，系统崩溃后重启)，这里是由于切换370，在一次中断320之后重启或重新配置时，用每一个新序列的新文件来创建一个新的目录。\n[0151] 关于人机接口(“IHM”)，用户能够得益于它修改他希望记录的源。可采取两种解决方案来执行源切换而不会受它们并非同步这一事实的影响：\n[0152] -在第一种变型中，同步所有SDI源以避免图像损失：这一解决方案涉及同步设备或配备有“重新计时”功能的切换格栅的安装。\n[0153] -在第二种变型中，在切换之前停止记录并且在切换之后重新开始。这造成在被切换通道上的一些图像的损失，但无需进行设备调节。记录的停止和重启以对于用户透明的方式由视频服务器自动执行。\n[0154] 为了限制“系统崩溃”和故障的影响，规定：\n[0155] -生成以“流”模式，即以连续模式的MXF格式文件，这允许限制系统崩溃时数据的损失，\n[0156] -错误恢复功能：在错误时采集自动再次启动，\n[0157] -在测试前检验视频IEV状况的诊断功能，\n[0158] -测试时故障检测功能(信号损失，图像损失或冻结，采集系统、时间标注系统或存储系统问题)，在必要时它产生警报并停止相关通道的数据采集。\n[0159] 关于选定文件的格式，在视频IEV范围内所用文件可存储多种类型的视频和音频流：SD视频(PAL和NTSC格式)，HD视频(720p和1080i类型格式)，来自计算机的视频(VGA类型格式)，以及来自驾驶舱的视频(ASVI格式)，音频，来自可能需求的其他数据。\n[0160] 这些流被压缩以限制传输它们所需的流量(速率)和存储它们所需的空间。使用多种不同的编解码器，以便在图像质量和文件大小之间得到良好的折中。这一折中可根据文件处理模式而有不同，并且有时候需要以几个不同压缩率存储同一个视频：轻微压缩(用于工作台上处理的高品质视频)和/或高压缩(用于个人工作站上处理的代理服务器)。\n[0161] 这些文件允许为这些标准元数据的音频/视频(数据)流提供资料(规则、题目、参与者......)。这些文件也允许存储应用于所有(数据)流的职业元数据(飞机和飞行的描述，......)或仅仅是某些(数据)流的职业元数据(摄像机的描述，......)。这些元数据很容易在数据库中被修改并编索引。\n[0162] 最后，这些文件也被用于记录以动态元数据存储的参数流(飞机参数)。\n[0163] 来自不同源的不同音频/视频(数据)流由不同的程序(甚至是不同的多台机器)获得。将这些程序同步并把获得的不同的(数据)流重组到唯一一个文件中是困难的。\n因此更愿意用异步方式获得不同的(数据)流并放在独立的文件中(至少每个程序一个文件)。于是为每一个(数据)流精确地实时计时，以便随后对其进行同步。\n[0164] 如前所述，在机载架构中所用盘的速率(流量)有时不足以承载不同(数据)流的累积速率(流量)，在必要时我们将这些速率(流量)分配到几个盘上。\n[0165] 采集程序由于多种原因(电源切断、磁盘无空间、硬件或软件问题......)，可能突然被中止。在此情况下，这些文件可被使用，即便它们没有被正确的关闭。这些文件因此是以流模式获得，换而言之即是有规律地写入使得可再次读取该文件的关键信息。\n[0166] 最后，改变流的数量和源(改变视频源)是有可能的。这些改变通过这些文件中的元数据被“跟踪”。这些文件被检验并且可在传输到地面时被再次成形。为此目的，我们具有检验和操纵这些文件的功能。\n[0167] 在目前技术中都不存在的实施本发明的一个重要优势是(数据)流可借助网络被单独使用。最好是，一个文件仅有一个(数据)流，从而不会使网络过载。\n[0168] 这些(数据)流也允许被集体使用(在操作台上)，如现有技术中的一样。选定文件的格式允许关联、编索引和同步包含在多个文件中的多个标注时间的(数据)流，以便能够完美同步地重新读取这些不同的(数据)流。\n[0169] 无论何种操作模式，用户希望能够快速在视频中移动，并快速进入记录的精确时刻。选定的文件允许随机访问图像。\n[0170] 而且，来自测试的视频构成一个敏感数据。选定文件的格式可保证数据的机密性。\n文件格式可以例如：\n[0171] -以“流”模式被使用：文件则通过网络被发布给用户，而用户无法将其复制并且[0172] -被加密以便无法被读取。\n[0173] 用户在授权之后也可以提取一部分视频，向其中嵌入数据并将其用于外部使用。\n选定的文件的类型支持“部分恢复”机制、给定时间范围内某些(数据)流的提取、文本嵌入、解压缩/再压缩。\n[0174] 关于编解码器，上面描述的架构允许同时使用不同的编解码器，例如，“Mpeg4 AVC(H.264)”、“VC-1”、“Jpeg2k”、“Mpeg2”、“Dirac”编解码器和“H.265”。\n[0175] 关于记录模式，MXF文件格式可以在多个不同的模式存储(数据)流：\n[0176] -“文件”模式，其中文件被分成两或三个块，如图4所绘，文件的标题405(英语是“Header”)和/或页脚(英语是“Footer”)包含允许再次读取文件的信息。文件的本体415包含(数据)流。该模式被用于当这些文件被存储于一个允许随机存取的载体上时(盘或CD)；\n[0177] -“流式采集”(连续采集)模式，其中文件被分成几个分段，如图5所绘。每个分段包括所采集的流505和515，在之后是一个允许再次读取这些流的信息块510和520。该模式被用于当这些文件被采集到一个线性载体(带)上，或当采集极可能被突然中断时。只有位于最后一个可读取信息块之后的流不能被轻易地解码；\n[0178] -“流式读取”模式，其中文件被分成几个分段，如图6所绘。每个分段包括前面为允许读取这些流的信息块605和615的所采集流610和620。该模式被用于当这些文件应从一个线性载体(磁带)被再次读取时或当它们应当通过线缆或通过微波在网络上发布时。只有在第一个可读取信息模块之前的(数据)流不能被解码。\n[0179] 本发明的使用中，“流式采集”模式和文件分别在飞机和地面上被实施。\n[0180] 关于同步机制：MXF文件的格式提供允许同步随机数量的(数据)流的同步机制，无论它们的类型和它们在文件中的布置。\n[0181] 关于外部参考(编号)，MXF格式允许存储能够在被称为“原子”文件的不同文件中构成一个音频/视频序列的不同(数据)流，并允许构建一个被称为“合成文件”的文件，它给包含应被再次读取的(数据)流的文件作参考编号。每个(数据)流被存储在一个独立的文件中。对于每一次传播都构建一个合成文件。它指明哪一个(数据)流应被传播。\n这一机制允许在不同文件中记录和使用(数据)流。\n[0182] 关于元数据的管理，MXF格式允许管理标准元数据(标题、权限持有人)及更具体被称为“所有权者”的元数据(飞机及测试的描述)。而且，在飞行测试中本发明应用程序中所用文件包含仅应用于一个流(源描述)的元数据。最后，MXF格式允许定义动态元数据，以存储飞机参数。\n[0183] 在与其物理结构有关的MXF格式优点中，我们引述以下几点：\n[0184] -它允许使用一个指明哪里可找到记录于不同(数据)流中的不同图像的索引表。\n它因此允许随机存取对于一个给定时刻和一个给定流的一个图像。\n[0185] -它允许使用一个本体容器，它包含最初形式的(数据)流：音频和/或视频流，动态元素(非持续性时间码和/或动态元数据)。这些(数据)流通常被分割成对应固定时长，一个图像或一个GOP(图像组“Group of Pictures”的缩写)的时长，的几块，而我们称为“帧包装”。(数据)流也可以由一个块(它对应序列的总时长)包装起来，称为“别针包装(clip-wrapping)”。\n[0186] 关于MXF格式与其逻辑结构有关的优势，我们能够引述与他们的物理结构无关的MXF格式文件逻辑结构的优势。因此无论它们的类型和它们的位置，在它们之间组织和同步不同(数据)流和元数据是可能的。\n[0187] 关于元数据的管理，MXF格式文件仅使用一个元数据模型，它允许同时定义结构性元数据和描述性元数据。结构性元数据重组允许描述文件逻辑结构的重要信息，以及允许保管其创建和修改痕迹的某些信息。它们是必需和标准化的。描述性元数据允许使用专用于用户的信息修饰文件。它们是随机的。它们以“架构”的形式被组织起来。\n[0188] 元数据的三个“架构”为满足视听需求已经以“DMS-1”的名义被标准化。我们也能够定义和使用所有权者元数据“架构”(我们则称为“隐蔽元数据(Dark Metadata)”)。\n采用MXF格式的某些软件允许可视化DMS-1“架构”内容并允许以XML(可扩展标记语言“Extensible Markup Language”的缩写)格式文件形式将其输入和输出。与之相对应的，它们忽视所有权者“架构”，然而并不将其取消。\n[0189] 关于时间标注及同步配置，MXF格式允许不同(数据)流的时间标注和同步。每个(音频/视频(数据)流或动态元数据)通道拥有自身固有的时基(帧率)和起点。MXF格式文件读取器允许由以下机制从一个绝对时间开始随机访问数据：对于每一个通道，绝对时间根据通道的帧率被转换成时间码。索引表则允许再找到与此时间码相关联的图像，甚至在GOP结构中。这一机制允许保证各通道的同步读取，即便它们没有使用相同的时基。\n[0190] MXF格式的文件允许管理更为具体的某些功能，尤其是：\n[0191] -“部分恢复”：它涉及一些机制，这些机制允许基于一个MXF格式文件在一段指定时间范围内提取元数据和(数据)流，并将其以原始文件的形式记录，或记录在另一个MXF格式的文件中，并且\n[0192] -“AES加密”：MXF格式文件中的本体可通过使用AES算法进行加密。\n[0193] 为了避免协同操作的问题，最好是产生具有一个简单而广泛流行结构的文件，例如“Op1a”类型，而且它完全遵守IRT(“Institut fürRundfunktechnik”的缩写，注册商标)规范(命名为“分析器”或“分析者”的采用MXF格式的软件一样的工具)，允许检测文件与标准的不兼容性。\n[0194] 最好是，为了实施本发明，我们把(数据)流记录在几个不同的文件中，这体现以下优势：\n[0195] -机舱中，这些文件由几个不同程序生成并能够被记录到几个不同的盘上而且[0196] -地面上，不同(数据)流在分离的文件中的存储，允许根据需求限制这些文件的大小，以及待处理数据的数量，只有包含所需(数据)流的文件例如应被置于近线。在此，“近线”限定一个快速存取系统，它使存档于一个序列存取载体上的数据可迅速获得，如在一个随机存取数据载体上一样。\n[0197] 在一种实现模式中，施行一种(数据)流的原子化，以及绘于图7中的文件结构的使用。\n[0198] 正如我们参照图7所观察到的，我们使用两种类型的文件：\n[0199] -原子文件705至730，它们每一个仅包含一个(数据)流(高品质视频、代理视频、音频或动态元数据)及提供给测试的静态元数据(飞机及飞行识别码)及(摄像机、麦克风识别码或参数描述)流。原子文件705至730可被单独使用并且\n[0200] -为包含数据流的不同文件705至730设置参考编号的合成文件735。合成文件\n735，允许自身，获得飞行测试及不同(数据)流的所有信息：合成文件735包含提供给测试的静态元数据(飞机及飞行识别码)和提供给每个源的静态元数据(摄像机、麦克风识别码、或参数描述......)。合成文件735也允许以同步方式使用这些不同(数据)流。\n[0201] 关于“元数据架构”，MXF格式的不同文件包含静态描述性元数据(权限、飞机识别码，......)及有时，根据飞机上所实现的测试类型，回应飞机需求，换而言之即关联譬如速度或压力等某些测定参数的需求的动态元数据(飞机参数)。\n[0202] 可以观察到，可以将一个“DMS-1”标准化“架构”用于非保密性的标准静态元数据。\n这些元数据事实上可以在某些施行MXF格式的软件中被查看。例如将一个“生产架构”用于指示权限所有人及其联系方式。\n[0203] 也可以以间接方式将一个DMS-1“架构”用于存储静态职业元数据(飞机、飞行、摄像机及麦克风识别码、参数描述)。可以例如将一个“场景架构”用于识别飞机和摄像机，并且因此允许它们在大部分MXF格式软件中的可视化。\n[0204] 在最佳实现模式下，将一个所有权者“架构”用于这些静态职业元数据，因为它允许精确地给与它们名称和所需类型，并且由此便于它们的可视化、它们的编辑和它们的编制索引。\n[0205] 而且，这一所有权者“架构”适于飞机参数数据的存储，因为它允许大力限制用于存储这些参数所需字节的数量(每个参数约16个八位字节而不是应用间接DMS-1架构时的几百个)。\n[0206] 所有权者“架构”的使用，此外，允许保证某些机密性。它所包含的元数据事实上被施行于市场上的MXF格式的软件所忽略。只有一个借助于描述所有权者“架构”的方案修改或配置过的软件可对其进行解释。\n[0207] 在这些实现模式中，施行这样一个“架构”，其结构被描绘在图8上。这样一个“架构”805允许存储静态元数据：\n[0208] -飞机类型和飞机识别码，块810；\n[0209] -飞行类型(静态测试，飞行测试，商务飞行)及飞行号，块815；\n[0210] -源识别码，例如类型、P/N(部件编号“Part Number”的缩写)，它用唯一的方式识别仪器，S/N(序列号“Serial Number”的缩写)，它识别仪器的序列编号，名称和预留空间，块820；\n[0211] -关于源的补充注释，块825和\n[0212] -对于飞行和对于每次存储的UTC时间范围(协调世界时，UTC是英语CUT“Coordinated universal time”和法语TUC的折中)，块830。\n[0213] 这一“架构”，此外，允许存储飞机参数和每个源的专用参数，例如EVS(增强视景系统“Enhanced Vision System”的缩写)：水平计算位置、增益值、除冰激活、模式、GPS(全球定位系统“GlobalPositionning System”的缩写)位置：\n[0214] -每一参数的描述以静态方式存储起来并配备一个UL(通用标签“Universal Label”的缩写)，块835以及\n[0215] -参数样本以动态方式被存储，块840。这些样本只包含每一参数的数值(无单位)和GMT时间(采集日期)，这便于限制所需空间。这些样本通过斜体UL给参数描述符编参考号，以便再次查到该参数的名称和单位。\n[0216] 该“架构”为了满足航天应用程序以及飞行测试被设计出，如下文所述。\n[0217] 关于音频/视频文件结构，每个音频或视频(数据)流被存储在一个分离的文件\n905中，如图9所绘，它们可以被单独使用在一个采用MXF格式的读取器或安装软件中。\n[0218] 这些文件因此只包含唯一一个“源代码包”910，它包含音频或视频流915和在必要时一个非连续的时间码轨道(未表示出)，以及唯一一个“设备包”920，它允许在其完整性上回放该流。设备包920在输出处具有所需形式，换而言之即由一个传统视频读取器读取的形式。这一结构的元素被设置并且通过“文件包”与原始数据“源代码包”相关连。这一逻辑表示非常精炼：一个典型的“文件包”对应约1Ko而它所代表的主体可能是几兆(Mb)、几千兆(Gb)或甚至是几个太拉(Tb)八位字节。\n[0219] “Op1a”结构更为理想，因为它简单而范围广泛，且允许保证良好的协同合作(这些文件在采用MXF格式的几乎全部读取器和安装软件上都可使用)。“Op0”结构在标准化过程中最终会有意义，因为它会在记录时允许优化读取功能。\n[0220] 这些文件可有两种不同的物理结构：\n[0221] -机舱上，如图10所绘，文件1005以“流式采集”模式被采集，以便它们可被使用，即便它们没有被正确地关闭。它们被分割成几个分段1010、1015和1020，这对应一个选定时长。因此，在系统崩溃的情况下仅有一些位于最后分段1020的(数据)流不能被轻易地解码。每一分段由一个元数据树1025和一个本体容器1030构成。每一个元数据树1025包含结构性元数据(它给出文件逻辑结构)和静态描述性元数据(权限、飞机和飞行识别码、摄像机和麦克风的识别码)。每一个本体容器1030，用允许正确将文件转移的数据(例如，分段大小的信息、(数据)流中的位置......)，将(数据)流在一个固定时长内(一个图像或一个GOP)包装成“帧包装”模式。地面上，如图11所绘，文件被转换成“文件”模式。\n结果文件1105仅包含一个标题分段1110和一个页脚分段1115。这些分段包含一个元数据树1120，它收集结构性元数据以及静态描述性元数据。唯一一个本体容器1125被用于将数据流(必要时加密)包装成“别针包装”，成为单独一个块1130。根据地面已知技术，一个索引表1135自动被加入以便允许对每个图像快速存取。\n[0222] 关于动态元数据文件，包含飞机参数或其他相关联数据的该文件符合与包含音频/视频(数据)流的文件相同的逻辑和物理结构。\n[0223] 然而它在元数据和被包装的(数据)流方面存在几个不同，这参照图12在此作出解释。第一个不同关于静态描述性元数据。标识音频/视频源的元数据组由描述参数的一套或一列表的元数据组1205至1220替代。每组参数描述符存储一个参数的名称、描述和单位，以及一个UL(通用标签)，一个对于每个参数都不同的标识码。\n[0224] 第二个不同在于本体。音频/视频(数据)流被一个“时间轴”类1225动态元数据轨道所代替，时间轴是一个对数据进行时间标注的方法，它包含参数样本。根据它们的采集时间(而不根据服务器接收时间)，这些被筛选并分配在固定时长的各个片段1230中(例如，若5pps(每秒参数的缩写)则200毫秒)，并且每个参数每个片段只保管唯一一个样本。每一个样本1235与一组参数样本元数据1240关联存储，该一组参数样本元数据1240存储参数值采集时间和数值并用其斜体字UL为该组相应参数描述符编制参考编号。\n[0225] 关于合成文件，它给其他所有文件设置参考编号以便允许以同步方式再次读取，它由几个“源代码包”1305和一个“设备包”1310组成，每个“源代码包”为包含一个视频、音频或参数(数据)流的一个文件编制参考编号，“设备包”允许以同步方式重新呈现所有这些(数据)流，正如图13所绘。一个“Op1b”类型结构允许管理这一复杂性。这一文件因此更不易于协同合作。该文件的物理结构，与之相对地，更为简单，就如图14所绘。该文件1405仅包含一个“标题分段”1410，一个“标题元数据”1420和一个“页脚分段”1415。标题1410和页脚1415包含给出文件逻辑结构的结构性元数据，和重取总体静态元数据(飞机和飞行识别码)的静态元数据，以及关联于每个(数据)流的静态元数据(源识别码，参数列表)。\n[0226] 从结构的角度来看，几种技术选择是可能的，例如：\n[0227] -软件或硬件压缩选择，\n[0228] -视觉化选择，和\n[0229] -模块添加以实现重放功能。\n[0230] 而且对于总体结构而言几种变型是可能的。在第一个变型中，如图15所绘，采用一个专用于视频的网络1505，传感器直接提供文件格式数据给一个切换器(开关)1515，这涉及一定程度的传感器复杂性。这一架构在由服务器1510管理的可视化方面造成实时的问题。所需服务和图像质量被考虑到以定网络1505的尺寸。事实上，由传感器生成的速率(流量)太大并应被无损管理。\n[0231] a)在第二个变型中，如图16所绘，采用一个不专用于视频的总体网络1605，该网络其中视频传感器1610与其他任何IEV传感器1615、1620或1625处于同一级别。在此情况下，在传感器捕捉数据之后，这些数据与适于每个应用程序的格式包装在一起并借助于服务器1630和1635以及切换器1650在同一网络上传输。这一架构也会在可视化服务器\n1640在可视化显示屏1645上施行可视化时造成实时的问题。所需服务和图像质量被考虑到以定网络1605的尺寸。事实上，由传感器生成的速率(流量)太大并应被无损管理。\n[0232] 在第三个变型中，实施前面两个变型的组合。