著录项信息
专利名称 | 一种实现节目的字幕制作方法及系统 |
申请号 | CN201110147909.6 | 申请日期 | 2011-06-02 |
法律状态 | 暂无 | 申报国家 | 中国 |
公开/公告日 | 2012-02-08 | 公开/公告号 | CN102348071A |
优先权 | 暂无 | 优先权号 | 暂无 |
主分类号 | H04N5/278 | IPC分类号 | H;0;4;N;5;/;2;7;8查看分类表>
|
申请人 | 上海东方传媒集团有限公司;成都索贝数码科技股份有限公司 | 申请人地址 | 上海市松江区漕河泾开发区松江高科技园莘砖公路518号23幢502室-39
变更
专利地址、主体等相关变化,请及时变更,防止失效 |
权利人 | 成都索贝数码科技股份有限公司,上海东方传媒技术有限公司 | 当前权利人 | 成都索贝数码科技股份有限公司,上海东方传媒技术有限公司 |
发明人 | 余军;罗天;尚峰;王继正;黄奇志;罗檑;盖璐斯;黄海 |
代理机构 | 北京安信方达知识产权代理有限公司 | 代理人 | 栗若木;王漪 |
摘要
本发明披露了一种实现节目的字幕制作方法及系统,涉及支持字幕离线制作的一工具平台,该方法包括:用户创建节目的字幕工程项目后,从素材资源管理器选择要进行字幕制作的视音频素材对象到时间线上;该工具平台根据选择的字幕制作模式自动进行相应模式的字幕制作,将生成的字幕文件归档字幕工程项目后保存到素材资源管理器。本发明的系统可部署在桌面办公站点或PC客户端中,字幕制作操作过程中无需连接节目生产网,而字幕制作的成果可通过专用网络或移动介质方式导入生产网。本发明提高了字幕制作效率,降低的节目部门使用后期制作设备的成本。
1.一种实现节目的字幕制作方法,涉及支持字幕离线制作的一工具平台,该方法包括:
用户创建节目的字幕工程项目后,从素材资源管理器选择要进行字幕制作的视音频素材对象到时间线上;
所述工具平台根据选择的字幕制作模式自动进行相应模式的字幕制作,将生成的字幕文件归档所述字幕工程项目后保存到所述素材资源管理器;
其中,所述工具平台根据选择的字幕制作模式自动进行相应模式的字幕制作,具体包括从以下三种模式中选择一种模式:
模式一:
用户选择所述字幕制作模式为自动断句模式,并在有唱词内容的情况下导入本地保存的唱词文本文件;
所述工具平台至少根据用户操作自动断句键自动对所述视音频素材中的音频波形进行断句操作,并在有唱词内容的情况下依据导入的唱词文本文件分布唱词句;
用户在无唱词内容的情况下通过对唱词编辑键和试播键的操作逐句编辑及试播编辑的唱词,直至完成所有唱词句的录制;
模式二:
用户选择所述字幕制作模式为拍唱词模式,并导入或录入全部唱词内容,根据所述视音频素材设置和调整所述唱词的入点和/或出点的时码位置;
模式三:
用户选择所述字幕制作模式为听写模式,所述工具平台自动播放所述视音频素材;
对于常规录入,用户设置唱词的入点和/或出点的时码位置,并逐一在新增的唱词编辑行内写入听到的唱词句,直至完成所有唱词句的听写;
对于快速录入,用户设置唱词的入点和/或出点的时码位置,通过专用键盘快速输入听到的所有唱词句。
2.按照权利要求1所述的方法,其特征在于,在用户选择所述字幕制作模式为自动断句模式和所述工具平台自动进行断句操作之间,还包括:用户在断句参数设置界面设置相应的参数值,包括语速方案、停顿时间间隔、语音段时间间隔、基音频率阈值以及能量阈值中的一种或多种;
所述工具平台在用户导入所述唱词文本文件后,或在无唱词内容的情况下,除了根据所述自动断句键的操作外,还根据用户设置的所述参数值对所述音频波形进行一般语速、稍慢语速以及稍快语速中任意一种断句操作。
3.按照权利要求2所述的方法,其特征在于,还包括:
用户将所述工具平台自动分布的唱词或用户手动编辑的唱词进行手动调节,包括选中及拖动所述唱词句,调整所述唱词句的入点时码和/或出点的时码位置。
4.按照权利要求1所述的方法,其特征在于,用户根据所述视音频素材设置和调整所述唱词的入点和/或出点的时码位置,具体包括:
用户将准备好的所述唱词内容导入所述工具平台,或直接在所述工具平台的编辑窗口中录入所述唱词内容;
用户针对视音频素材的前后内容敲击两次双时码设置键,分别设置字幕的入点和出点的时码位置,或者敲击单时码设置键设置字幕的入点时码位置。
5.按照权利要求4所述的方法,其特征在于,还包括:
当用户需对部分唱词内容进行修改和调整,则再次进入拍唱词模式,对唱词句进行修改后选中,点击所述双时码设置键或所述单时码设置键对修改的唱词句进行时码位置的调整;
当出现唱词句重叠时,根据用户设置平移或覆盖后面的唱词句。
6.按照权利要求1所述的方法,其特征在于,
所述常规录入具体包括:
用户选择常规录入按钮,进入常规录入方式;在耳听视音频素材播放时用手敲击两次双时码设置键或敲击单时码设置键设置唱词句的入点和/或出点的时码位置;在用户新增唱词编辑行后进入唱词编辑而停止播放,用户直接在该编辑行中输入听到的唱词句;直至完成对所有唱词句的听写;
所述快速录入具体包括:
用户选择快速录入按钮,进入快速录入方式;在耳听视音频素材播放的过程中,用手敲击两次双时码设置键或敲击单时码设置键设置唱词句的入点和/或出点的时码位置,并通过专用键盘快速录入听到的所有唱词句。
7.按照权利要求1所述的方法,其特征在于,所述工具平台将生成的字幕文件归档所述字幕工程项目后保存到所述素材资源管理器,具体包括:
将生成的所述字幕文件导出并归档到相应节目的字幕工程项目中,和/或将导出的字幕文件与相应的视音频素材绑定后,保存到所述素材资源管理器;
所述字幕文件中至少包括B类字幕,即在制作域基于相应的视音频节目的工程文件的时间线产生并保持完好的对应关系,被打包成独立的字幕工程文件,附属于相应的节目工程保存及传输。
8.一种实现节目的字幕制作的平台系统,包括依次连接的字幕工程创建模块、字幕加工素材选择模块、字幕制作模块以及字幕工程文件归档模块,其中:
字幕工程创建模块,用于根据用户的请求创建节目的字幕工程项目;
字幕加工素材选择模块,用于基于创建的字幕工程项目及用户的操作,从素材资源管理器选择要进行字幕制作的视音频素材对象到时间线上;
字幕制作模块,用于根据用户选择的字幕制作模式进行相应模式的字幕制作,并输出生成的字幕文件;
字幕工程文件归档模块,用于将字幕制作模块输出的字幕文件归档到字幕工程创建模块创建的相应的字幕工程项目中,保存到所述素材资源管理器;
所述字幕制作模块具体包括字幕制作模式选择单元,还包括自动断句操作单元、拍唱词操作单元以及唱词听写操作单元,其中:
字幕制作模式选择单元,用于根据用户选择的自动断句模式调用自动断句操作单元,或根据用户选择的拍唱词模式调用拍唱词操作单元,或根据用户选择的听写模式调用听写操作单元;
自动断句操作单元,用于在字幕制作模式选择单元的调用下,对所述视音频素材中的音频波形进行断句操作,并依据导入的唱词文本文件分布唱词句;或根据用户操作的唱词编辑键和试播键逐句编辑及试播唱词,直至完成所有唱词句的录制;
拍唱词操作单元,用于在字幕制作模式选择单元的调用下,根据用户的操作导入或录入全部唱词,根据视音频素材设置和调整唱词的入点和/或出点的时码位置;
听写操作单元,用于在字幕制作模式选择单元的调用下,自动播放视音频素材,根据用户的操作设置唱词的入点和/或出点的时码位置,记录用户输入的唱词内容。
9.按照权利要求8所述的平台系统,其特征在于,
所述自动断句操作单元还提供设置断句参数界面,用于设置包括语速方案、停顿时间间隔、语音段时间间隔、基音频率阈值以及能量阈值中的一种或多种断句参数值;根据用户设置的所述断句参数值对所述音频波形进行一般语速、稍慢语速以及稍快语速中任意一种断句操作;
所述拍唱词操作单元在用户直接导入的所述唱词内容或在编辑窗口中录入所述唱词内容后,根据用户对视音频素材的前后内容敲击两次双时码记录设置键,分别记录用户设置的字幕的入点和出点的时码位置,或者根据用户对视音频素材的内容敲击单时码设置键,记录用户设置的字幕的入点时码位置;
所述听写操作单元根据用户的选择进入常规录入方式,在用户用手敲击两次双时码设置键或敲击单时码设置键时,记录用户设置的唱词句的入点和/或出点的时码位置;在用户新增唱词编辑行后停止所述播放,记录用户直接在该编辑行中输入的唱词句;或者,根据用户的选择进入快速录入方式,在用户手敲击两次双时码设置键或敲击单时码设置键设置唱词句的入点和/或出点的时码位置,并记录用户通过专用键盘快速录入听到的所有唱词句。
10.按照权利要求9所述的平台系统,其特征在于,
所述自动断句操作单元还根据用户选中及拖动的通过自动分布的唱词句或通过手动编辑的唱词句,记录用户针对所述唱词句调整的入点时码和/或出点时码的位置;
所述拍唱词操作单元在用户对所述唱词句进行修改并通过点击所述双时码设置键或所述单时码设置键对修改的唱词句进行时码位置的调整时,记录所述用户修改的唱词句及调整的所述时码位置;根据用户针对出现的唱词句重叠进行的设置平移或覆盖后面的唱词句。
11.按照权利要求8至10任一项所述的平台系统,其特征在于,
所述字幕工程文件归档模块将所述字幕制作模块生成的所述字幕文件导出并归档到相应节目的字幕工程项目中,和/或将导出的字幕文件与相应的视音频素材绑定后,保存到所述素材资源管理器;导出及归档的所述字幕文件至少包括B类字幕,即在制作域基于相应的视音频节目的工程文件的时间线产生并保持完好的对应关系,被打包成独立的字幕工程文件。
一种实现节目的字幕制作方法及系统\n技术领域\n[0001] 本发明涉及广播电视节目制作系统及方法,尤其涉及实现节目的字幕制作方法及系统。\n背景技术\n[0002] 到目前为止,现有的生产网节目制作站点的字幕听写及同期字幕制作环节都是通过非线性编辑软件或字幕机进行的。\n[0003] 通过非线性编辑软件进行字幕听写及同期字幕制作,在后期制作流程中常会用到两种方式,一种方式是:节目制作人员利用录像机和监视器音箱等观看声音画面,然后同步地将同期字幕信息输入到文本文件中,通过非线性编辑后期制作环节将该文本文件引入一字幕模块,并在画面播放的过程中记录时码信息,即拍唱词;另一种方式则是:将需要加入唱词的视音频素材上载到节目制作系统,当对视音频素材完成节目时间线粗剪时,便开始通过字幕模块一边编写唱词一边上字幕,然后再进行细节调整。上述这两种制作方式的弊端是在其前期的字幕听写过程中操作不是很方便,效率较低,而且上字幕操作对后期制作设备资源的占用比例比较大,故相应的业务部门制作成本比较高。\n[0004] 通过在字幕机中进行字幕听写及同期字幕制作,并非是在后期制作环节中完成,而是在后期制作完成后通过专用的字幕机完成。这种方式由于不能在后期制作环节中完成,故其主要弊端是增加了额外的制作环节,因而延长了制作周期;另外,同期字幕操作对设备资源的占用比例比较大,当制作发生错误调整也不是很方便,制作效率也较低,且会对画面质量造成二次损失。\n[0005] 在节目后期制作过程中,比较大的一个工作量便体现在字幕听写环节上,往往一期节目唱词句数要数千句左右。对于工作量如此巨大的制作环节,非常需要针对以往的种种弊端加以改进,通过实现字幕听写的自动化,方便地进行操作,并提高工作效率及降低制作成本。\n发明内容\n[0006] 本发明所要解决的技术问题是提供一种实现节目的字幕制作方法及系统,能够提高字幕听写的工作效率。\n[0007] 为了解决上述技术问题,本发明提供了一种实现节目的字幕制作方法,涉及支持字幕离线制作的一工具平台,该方法包括:\n[0008] 用户创建节目的字幕工程项目后,从素材资源管理器选择要进行字幕制作的视音频素材对象到时间线上;\n[0009] 该工具平台根据选择的字幕制作模式自动进行相应模式的字幕制作,将生成的字幕文件归档字幕工程项目后保存到素材资源管理器。\n[0010] 进一步地,该工具平台根据选择的字幕制作模式自动进行相应模式的字幕制作,具体包括:\n[0011] 用户选择字幕制作模式为自动断句模式,并在有唱词内容的情况下导入本地保存的唱词文本文件;\n[0012] 工具平台至少根据用户操作自动断句键自动对视音频素材中的音频波形进行断句操作,并在有唱词内容的情况下依据导入的唱词文本文件分布唱词句;\n[0013] 用户在无唱词内容的情况下通过对唱词编辑键和试播键的操作逐句编辑及试播编辑的唱词,直至完成所有唱词句的录制。\n[0014] 进一步地,在用户选择字幕制作模式为自动断句模式和工具平台自动进行断句操作之间,还包括:用户在断句参数设置界面设置相应的参数值,包括语速方案、停顿时间间隔、语音段时间间隔、基音频率阈值以及能量阈值中的一种或多种;\n[0015] 工具平台在用户导入唱词文本文件后,或在无唱词内容的情况下,除了根据自动断句键的操作外,还根据用户设置的参数值对音频波形进行一般语速、稍慢语速以及稍快语速中任意一种断句操作。\n[0016] 进一步地,该方法还包括:\n[0017] 用户将工具平台自动分布的唱词或用户手动编辑的唱词进行手动调节,包括选中及拖动所述唱词句,调整唱词句的入点时码和/或出点的时码位置。\n[0018] 进一步地,该工具平台根据选择的字幕制作模式自动进行相应模式的字幕制作,具体包括:\n[0019] 用户选择字幕制作模式为拍唱词模式,并导入或录入全部唱词内容,根据所述视音频素材设置和调整唱词的入点和/或出点的时码位置。\n[0020] 进一步地,用户根据视音频素材设置和调整唱词的入点和/或出点的时码位置,具体包括:\n[0021] 用户将准备好的唱词内容导入工具平台,或直接在工具平台的编辑窗口中录入唱词内容;\n[0022] 用户针对视音频素材的前后内容敲击两次双时码设置键,分别设置字幕的入点和出点的时码位置,或者敲击单时码设置键设置字幕的入点时码位置。\n[0023] 进一步地,该方法还包括:\n[0024] 当用户需对部分唱词内容进行修改和调整,则再次进入拍唱词模式,对唱词句进行修改后选中,点击双时码设置键或单时码设置键对修改的唱词句进行时码位置的调整;\n[0025] 当出现唱词句重叠时,根据用户设置平移或覆盖后面的唱词句。\n[0026] 进一步地,工具平台根据选择的字幕制作模式自动进行相应模式的字幕制作,具体包括:\n[0027] 用户选择字幕制作模式为听写模式,工具平台自动播放视音频素材;\n[0028] 对于常规录入,用户设置唱词的入点和/或出点的时码位置,并逐一在新增的唱词编辑行内写入听到的唱词句,直至完成所有唱词句的听写;\n[0029] 对于快速录入,用户设置唱词的入点和/或出点的时码位置,通过专用键盘快速输入听到的所有唱词句。\n[0030] 进一步地,\n[0031] 常规录入具体包括:\n[0032] 用户选择常规录入按钮,进入常规录入方式;在耳听视音频素材播放时用手敲击两次双时码设置键或敲击单时码设置键设置唱词句的入点和/或出点的时码位置;在用户新增唱词编辑行后进入唱词编辑而停止播放,用户直接在该编辑行中输入听到的唱词句;\n直至完成对所有唱词句的听写;\n[0033] 快速录入具体包括:\n[0034] 用户选择快速录入按钮,进入快速录入方式;在耳听视音频素材播放的过程中,用手敲击两次双时码设置键或敲击单时码设置键设置唱词句的入点和/或出点的时码位置,并通过专用键盘快速录入听到的所有唱词句。\n[0035] 进一步地,工具平台将生成的字幕文件归档字幕工程项目后保存到素材资源管理器,具体包括:\n[0036] 将生成的字幕文件导出并归档到相应节目的字幕工程项目中,和/或将导出的字幕文件与相应的视音频素材绑定后,保存到素材资源管理器;\n[0037] 字幕文件中至少包括B类字幕,即在制作域基于相应的视音频节目的工程文件的时间线产生并保持完好的对应关系,被打包成独立的字幕工程文件,附属于相应的节目工程保存及传输。\n[0038] 为了解决上述技术问题,本发明提供了一种实现节目的字幕制作的平台系统,包括依次连接的字幕工程创建模块、字幕加工素材选择模块、字幕制作模块以及字幕工程文件归档模块,其中:\n[0039] 字幕工程创建模块,用于根据用户的请求创建节目的字幕工程项目;\n[0040] 字幕加工素材选择模块,用于基于创建的字幕工程项目及用户的操作,从素材资源管理器选择要进行字幕制作的视音频素材对象到时间线上;\n[0041] 字幕制作模块,用于根据用户选择的字幕制作模式进行相应模式的字幕制作,并输出生成的字幕文件;\n[0042] 字幕工程文件归档模块,用于将字幕制作模块输出的字幕文件归档到字幕工程创建模块创建的相应的字幕工程项目中,保存到素材资源管理器。\n[0043] 进一步地,字幕制作模块具体包括字幕制作模式选择单元,还包括自动断句操作单元、拍唱词操作单元以及唱词听写操作单元中的一种或多种,其中:\n[0044] 字幕制作模式选择单元,用于根据用户选择的自动断句模式调用自动断句操作单元,或根据用户选择的拍唱词模式调用拍唱词操作单元,或根据用户选择的听写模式调用听写操作单元;\n[0045] 自动断句操作单元,用于在字幕制作模式选择单元的调用下,对视音频素材中的音频波形进行断句操作,并依据导入的唱词文本文件分布唱词句;或根据用户操作的唱词编辑键和试播键逐句编辑及试播唱词,直至完成所有唱词句的录制;\n[0046] 拍唱词操作单元,用于在字幕制作模式选择单元的调用下,根据用户的操作导入或录入全部唱词,根据视音频素材设置和调整唱词的入点和/或出点的时码位置;\n[0047] 听写操作单元,用于在字幕制作模式选择单元的调用下,自动播放视音频素材,根据用户的操作设置唱词的入点和/或出点的时码位置,记录用户输入的唱词内容。\n[0048] 进一步地,\n[0049] 自动断句操作单元还提供设置断句参数界面,用于设置包括语速方案、停顿时间间隔、语音段时间间隔、基音频率阈值以及能量阈值中的一种或多种断句参数值;根据用户设置的所述断句参数值对所述音频波形进行一般语速、稍慢语速以及稍快语速中任意一种断句操作;\n[0050] 拍唱词操作单元在用户直接导入的所述唱词内容或在编辑窗口中录入唱词内容后,根据用户对视音频素材的前后内容敲击两次双时码记录设置键,分别记录用户设置的字幕的入点和出点的时码位置,或者根据用户对视音频素材的内容敲击单时码设置键,记录用户设置的字幕的入点时码位置;\n[0051] 听写操作单元根据用户的选择进入常规录入方式,在用户用手敲击两次双时码设置键或敲击单时码设置键时,记录用户设置的唱词句的入点和/或出点的时码位置;在用户新增唱词编辑行后停止所述播放,记录用户直接在该编辑行中输入的唱词句;或者,根据用户的选择进入快速录入方式,在用户手敲击两次双时码设置键或敲击单时码设置键设置唱词句的入点和/或出点的时码位置,并记录用户通过专用键盘快速录入听到的所有唱词句。\n[0052] 进一步地,\n[0053] 自动断句操作单元还根据用户选中及拖动的通过自动分布的唱词句或通过手动编辑的唱词句,记录用户针对唱词句调整的入点时码和/或出点时码的位置;\n[0054] 拍唱词操作单元在用户对所述唱词句进行修改并通过点击双时码设置键或单时码设置键对修改的唱词句进行时码位置的调整时,记录用户修改的唱词句及调整的时码位置;根据用户针对出现的唱词句重叠进行的设置平移或覆盖后面的唱词句。\n[0055] 进一步地,\n[0056] 字幕工程文件归档模块将字幕制作模块生成的字幕文件导出并归档到相应节目的字幕工程项目中,和/或将导出的字幕文件与相应的视音频素材绑定后,保存到素材资源管理器;导出及归档的所述字幕文件至少包括B类字幕,即在制作域基于相应的视音频节目的工程文件的时间线产生并保持完好的对应关系,被打包成独立的字幕工程文件。\n[0057] 本发明提供的实现节目的字幕制作方法及系统,支持文本导入边看视频边听写字幕的方式、自动拍唱词、自动断句以及配置专用键盘实时地进行字幕听写的诸多功能;听写完毕的字幕可以绑定相应的元数据保存成非线性编辑字幕轨道数据,当在非编软件中拖拽素材时该字幕轨道数据自动上线,或在非编软件中直接导入听写字幕轨道,使得字幕细节调整及字幕特技编辑可在非性编辑中继续进行。本发明的字幕制作系统可部署在桌面办公站点或PC客户端中,字幕制作操作过程中无需连接节目生产网,而成果则可通过专用网络或移动介质方式导入生产网。本发明通过对同期字幕制作方式的改进,提高了字幕制作效率,降低的节目部门使用后期制作设备的成本。\n附图说明\n[0058] 图1为本发明的实现节目的字幕制作方法实施例的流程图;\n[0059] 图2为图1所示方法实施例中自动断句模式下的参数设置界面实施例;\n[0060] 图3为图1所示方法实施例中依据选择的字幕制作模式进行相应操作实施例的流程图;\n[0061] 图4为本发明的实现节目的字幕制作系统实施例的结构框图。\n具体实施方式\n[0062] 以下结合附图和优选实施例对本发明的技术方案进行详细地阐述。以下例举的实施例仅用于说明和解释本发明,而不构成对本发明技术方案的限制。\n[0063] 如图1所示,是本发明提供的实现节目的字幕制作方法实施例的流程,包括如下步骤:\n[0064] 100:创建节目的字幕工程项目;\n[0065] 在本发明的字幕制作工具平台上创建一字幕工程项目,该平台支持节目的字幕离线制作功能,需指明相关的素材资源管理器。\n[0066] 200:从素材资源管理器选择要添加字幕的视音频素材到时间线上;\n[0067] 通过上述字幕制作工具平台,从素材资源管理器上拖拽要进行字幕制作的视音频素材对象到时间线上。\n[0068] 300:根据选择的字幕制作模式进行相应的操作,将生成的字幕文件保存到素材资源管理器。\n[0069] 通过上述字幕制作工具平台可选择以下三种字幕听写模式中的任意一种:\n[0070] (1)自动断句模式\n[0071] 自动断句模式是针对视音频素材中音频的波形图通过语音识别来判断应该断句位置。\n[0072] 为了达到自动断句的精确性,字幕制作工具平台具有自动断句参数设置功能,其设置界面如图2所示,可以设置停顿时间间隔、每段语音的时间间隔(即语音段时间间隔)、基音频率阈值以及能量阈值等参数值,主要用于在音频的波形图比较紧密的情况下能够根据设置的参数值精确断句。\n[0073] 自动断句的语速方案默认有三种方案:一般语速(标准语速方案)、较快语速以及较慢语速;自动断句模式又分为两种方式,有字幕内容和无字幕内容两种方式。\n[0074] (2)拍唱词模式\n[0075] 拍唱词模式是预先将准备好的唱词内容导入,或者预先在在编辑窗口中录入唱词内容,针对视音频素材设置和记录每句唱词的时码入点和/或出点,从而实现拍唱词功能。\n[0076] (3)听写模式\n[0077] 听写模式是一边播放视音频素材,一边通过添加的唱词编辑行录入从播放的视音频素材中听到的唱词内容,从而实现字幕听写功能。\n[0078] 生成的字幕文件中包括以下字幕类别中的任意一种:\n[0079] A类字幕,可以直接合成在视音频素材的视频图像上并打包;\n[0080] B类字幕,在制作域可以打包成独立的字幕工程文件,附属于节目工程保存及传输,在播出域完成与视音频节目图像的叠加播出;不论是在制作域或是在播出域,此字幕工程文件基于视音频节目工程文件的时间线产生,并与其保持完好的对应关系;该类字幕是本发明的字幕制作方法所特别支持的的一种字幕类别。\n[0081] C类字幕,与B类字幕类似,但能进一步细分成不同版本的唱词层,可以按照不同的需要被调用,为将来互动式点播提供基础。\n[0082] 至于本发明的字幕制作工具平台如何根据选择的模式行相应的字幕听写操作,其实施例流程如图3所示,包括如下步骤:\n[0083] 301:选择自动断句模式,设置断句参数;根据是否有唱词内容分别进入步骤302、\n304执行;\n[0084] 选择字幕制作工具平台上的自动断句模式;\n[0085] 为了达到自动断句的精确性,可进入图2所示的断句参数设置界面设置相应的参数值,包括语速方案、停顿时间间隔、语音段时间间隔、基音频率阈值以及能量阈值中的一种或多种。\n[0086] 302:若有唱词内容,则导入本地保存的唱词文本文件;\n[0087] 用户选择所述字幕制作模式为自动断句模式,并在有唱词内容的情况下导入本地保存的唱词文本文件;\n[0088] 303:根据自动断句键和设置的断句参数通过语音识别技术对视音频素材进行断句操作,并辅以手调分布的唱词;执行步骤305;\n[0089] 在上述字幕制作工具平台上,当用户点按自动断句操作界面上的[自动断句]按钮或相应的快捷键,平台系统便根据设置的断句参数值针对视音频素材中的音频波形进行一般语速、稍慢语速以及稍快语速中任意一种断句操作,并在有唱词内容的情况下依据唱词文本文件分布唱词句。\n[0090] 平台系统在断句后可提供手动调整功能,用户针对已经分布好的唱词进行手调,包括选择唱词句、拖动选择的唱词句调整其位置,或者调整该唱词句的入、出点时码。\n[0091] 304:若无唱词内容,则根据自动断句键和设置的断句参数对视音频素材通过语音识别进行断句,通过唱词编辑键和试播键逐句编辑及试播唱词,直至完成所有唱词句的录制;\n[0092] 在上述字幕制作工具平台上,当用户点按自动断句操作界面上的[自动断句]按钮或相应的快捷键,平台系统便根据设置的断句参数值针对视音频素材中的音频波形进行一般语速、稍慢语速以及稍快语速中任意一种断句操作,注意此时断句后的唱词内容尚是空的,待用户手动编辑;\n[0093] 此后,用户按下[Ctrl+Home]键进入第一句唱词编辑行录入唱词内容;\n[0094] 在录入唱词后按下[B]键进入唱词播放状态,然后按下[TAB]键则重新进入唱词编辑状态;可反复使用[B]和[TAB]实现唱词的音频播放与唱词编辑状态的切换。\n[0095] 完成第一句唱词编辑后,按[Enter]键后便进入下一句唱词的编辑和播放,以此类推,通过以上同样的操作逐句进行唱词的编辑和播放,直至完成所有唱词的录制。\n[0096] 同样,用户可以对手动编辑的唱词进行手调,包括选择唱词句、拖动选择的唱词句调整其位置,或者调整该唱词句的入、出点时码。\n[0097] 305:将生成的字幕文件导出和/或与相应的视音频素材绑定后,保存到素材资源管理器,结束流程;\n[0098] 上述平台系统将自动断句生成的字幕文件导出归档到相应节目的字幕工程项目中,和/或将导出的字幕文件与相应的视音频素材绑定后保存到素材资源管理器。\n[0099] 以上步骤是实现自动断句模式的字幕制作操作步骤。\n[0100] 311:选择拍唱词模式,导入或录入全部唱词,根据视音频素材设置和调整唱词的时码入/出点位置;\n[0101] 在上述字幕制作工具平台上,点按[拍唱词模式]按钮或相应的快捷键进入拍唱词模式,使得平台系统进入拍唱词模式;将准备好的唱词内容导入平台,或直接在平台的编辑窗口中录入唱词内容,针对据视音频素材前后敲击两次双时码设置键(譬如空格键),分别设置字幕的入、出点时码位置,敲击单时码设置键(譬如[Enter]键)则只设置字幕的入点时码位置。\n[0102] 拍唱词完成后,部分唱词内容可能需要被进一步修改和调整,可点击[拍唱词模式]按钮再次进入拍唱词模式,对唱词句进行修改,选中内容修改后的唱词句,点击空格键或[Enter]键则可进行时码位置的调整。\n[0103] 312:当出现唱词重叠现象时,根据设置平移或覆盖后面的唱词;\n[0104] 唱词修改完成后退出拍唱词模式时,如果出现唱词有重叠现象,则可根据设置重新平移或覆盖后面的唱词,以消除唱词重叠。\n[0105] 313:将生成的字幕文件导出,和/或与视音频素材绑定后,保存到素材资源管理器,结束流程;\n[0106] 上述平台系统将拍唱词生成的字幕文件导出归档到相应节目的字幕工程项目中,和/或将导出的字幕文件与相应的视音频素材绑定后保存到素材资源管理器。\n[0107] 以上步骤是实现拍唱词模式的字幕制作操作步骤。\n[0108] 321:选择听写模式,自动进行视音频素材播放;对于常规录入和快速录入,可分别执行步骤322和323;\n[0109] 在上述字幕制作工具平台上,点击[听写模式]按钮便进入唱词听写模式,平台系统将自动对选择的视音频素材进行播放。\n[0110] 322:对于常规录入,设置唱词时码的入/出点位置,并逐一在新增的唱词编辑行内写入听到的唱词,直至完成所有唱词的听写,执行步骤324;\n[0111] 选择[常规录入]按钮,进入常规录入方式;在听视音频素材播放时敲击两次双时码设置键(譬如空格键)或敲击单时码设置键(如[Enter]键)设置唱词的入点和/或出点的时码位置;在新增唱词编辑行后进入唱词编辑而停止播放,可直接在该编辑行中输入听到的唱词内容;重复以上操作,便可完成对所有唱词内容的听写。\n[0112] 323:对于快速录入,设置唱词时码的入/出点位置,通过专用键盘快速输入所有听到的唱词;\n[0113] 选择[快速录入]按钮,进入快速录入方式;在听视音频素材播放的过程中,敲击两次空格键或[Enter]键设置唱词的入、出点时码位置,并通过专用键盘快速录入唱词内容。\n[0114] 324:将生成的字幕文件导出,和/或与视音频素材绑定后,保存到素材资源管理器,结束流程。\n[0115] 上述平台系统将听写唱词生成的字幕文件导出归档到相应节目的字幕工程项目中,和/或将导出的字幕文件与相应的视音频素材绑定后保存到素材资源管理器。\n[0116] 以上步骤是实现听写模式的字幕制作操作步骤。\n[0117] 本发明根据上述方法实施例,相应地还提供了实现节目的字幕制作系统实施例,即前已述及的字幕制作工具平台系统,其结构如图4所示,包括依次连接的字幕工程创建模块、字幕加工素材选择模块、字幕制作模块以及字幕工程文件归档模块,其中:\n[0118] 字幕工程创建模块,用于根据用户的请求创建节目的字幕工程项目;\n[0119] 字幕加工素材选择模块,用于基于创建的字幕工程项目及用户的操作,从素材资源管理器选择要添加字幕的视音频素材到时间线上;\n[0120] 字幕制作模块,用于根据用户选择的字幕制作模式进行相应的操作,并输出生成的字幕文件;\n[0121] 字幕工程文件归档模块,用于将字幕制作模块输出的字幕文件归档到字幕工程创建模块创建的相应节目的字幕工程项目中,和/或将导出的字幕文件与相应的视音频素材绑定后保存到素材资源管理器。\n[0122] 在上述字幕制作系统实施例中,字幕制作模块进一步包括字幕制作模式选择单元,还包括自动断句操作单元、拍唱词操作单元以及唱词听写操作单元中的一种或多种;其中:\n[0123] 字幕制作模式选择单元,用于根据用户选择的自动断句模式调用自动断句操作单元,或根据用户选择的拍唱词模式调用拍唱词操作单元,或根据用户选择的听写模式调用听写操作单元;\n[0124] 自动断句操作单元,用于在字幕制作模式选择单元的调用下对视音频素材中的音频波形进行断句操作,并依据导入的唱词文本文件分布唱词句;或根据用户操作的唱词编辑键和试播键逐句编辑及试播唱词,直至完成所有唱词句的录制;\n[0125] 拍唱词操作单元,用于在字幕制作模式选择单元的调用下进入拍唱词模式,根据用户的操作导入或录入全部唱词,根据视音频素材设置和调整唱词的入/出点时码位置;\n在退出拍唱词模式时,根据用户的操作设置重新平移或覆盖后面的唱词;\n[0126] 听写操作单元,用于在字幕制作模式选择单元的调用下,根据用户的选择进入拍唱词常规录入或快速录入模式,并自动播放视音频素材;在常规录入方式下根据用户的操作设置唱词的入、出点时码位置,并新增唱词编辑行后停止播放视音频素材,并记录用户在每一编辑行中输入的唱词内容;在快速录入方式下根据用户的操作设置唱词的入/出点时码位置,并记录用户通过专用键盘快速输入所有的唱词。\n[0127] 对于本领域的专业人员来说,在了解了本发明内容和原理后,能够在不背离本发明的原理和范围的情况下,根据本发明的方法进行形式和细节上的各种修正和改变,但是这些基于本发明的修正和改变仍在本发明的权利要求保护范围之内。
法律信息
- 2015-05-27
专利权的转移
登记生效日: 2015.05.08
专利权人由上海文化广播影视集团有限公司变更为上海东方传媒技术有限公司
地址由200041 上海市静安区威海路298号变更为200223 上海市松江区漕河泾开发区松江高科技园莘砖公路518号23幢502室-39
专利权人由成都索贝数码科技股份有限公司变更为成都索贝数码科技股份有限公司
- 2015-05-27
专利权的转移
登记生效日: 2015.05.08
专利权人由上海东方传媒集团有限公司变更为上海文化广播影视集团有限公司
地址由200041 上海市静安区威海路298号变更为200041 上海市静安区威海路298号
专利权人由成都索贝数码科技股份有限公司变更为成都索贝数码科技股份有限公司
- 2013-06-19
- 2012-03-21
实质审查的生效
IPC(主分类): H04N 5/278
专利申请号: 201110147909.6
申请日: 2011.06.02
- 2012-02-08
引用专利(该专利引用了哪些专利)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 |
1
| |
2003-05-14
|
2002-12-02
| | |
2
| |
2006-05-10
|
2004-11-01
| | |
3
| |
2009-09-23
|
2008-03-21
| | |
4
| |
2011-06-01
|
2009-11-26
| | |
被引用专利(该专利被哪些专利引用)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 | 该专利没有被任何外部专利所引用! |