一种跨模块的高速数据流连续回放处理方法与流程

本发明属于数据流回放处理，具体涉及一种跨模块的高速数据流连续回放处理方法。

背景技术：

1、高速数据流连续回放处理是数据流回放领域的一项关键技术。随着数据采集量日益增大，数据流回放业务需要面对的数据流速率越来越大，如何保证大容量数据流高速传输、连续回放成为亟需解决的问题；同时，为了连续回放多个存储模块中的数据流，保证还原后的数据的连续性，需要设计可靠的交互机制；并且，面对多格式、多速率的数据流，解帧数据流的参数特征，如采样率，并针对数据特征进行回放数据流速率自动匹配，是有必要的。

2、现有数据流回放处理技术总体框图如图1，利用高速传输口将存储模块中的数据流传回主控单元，然后进行数据流缓存，数据流缓存多采用fifo实现，解决数据流缓存的同时，完成了跨时钟域处理；接着从缓存区读出数据流，根据采样率完成数据还原，最终数据从da完成回放。现有技术，多采用大容量flash的、flash阵列、板上磁盘阵列或采用大容量cf卡进行数据流存储，当面临容量扩展、系统中需要设置多个存储模块时，没有给出有效的控制机制，以保证高速大容量高速数据流连续回放；同时flash存储或者cf卡存储，存储容量有限；并且，面对多格式、多速率的数据流回放需求时，无法实现回放数据流速率自动匹配。

技术实现思路

1、针对现有技术中存在的上述技术问题，本发明提出了一种跨模块的高速数据流连续回放处理方法，设计合理，克服了现有技术的不足，具有良好的效果。

2、为了实现上述目的，本发明采用如下技术方案：

3、一种跨模块的高速数据流连续回放处理方法，设置存储模块和回放模块，所述存储模块中包括4个存储单元1～4，所述回放模块中配置了缓存器fifo_x，x为0、1、2、3和4，4个存储单元分别与缓存器fifo_1～fifo_4通过2根通信信号线相连，缓存器fifo_1～fifo_4共同连接至缓存器fifo_0；

4、该方法包括以下步骤：

5、s1、待回放数据流从存储模块自动连续传输到回放模块，每个存储单元和回放模块之间的数据流传输通过aurora高速传输口实现；所述数据流文件包括多个文件，每个文件由一个文件头和m个数据段组成；每个数据段由一个数据段头和n个数据块组成；每个数据块由一个数据块头和q个待还原数据组成；

6、s2、数据流解帧，当一个数据流文件中的所有数据段以及各数据段中的全部数据块解帧完毕，即完成一个文件解帧，解帧得到数据类型、采样率及待还原数据，继续解帧下一个文件；

7、s3、将待还原数据缓存到ddr4中，数据类型和采样率写入寄存器待用；

8、s4、利用采样率和数据类型控制ddr4数据读出的速度，自动匹配不同格式、不同采样率的数据的还原，最后通过da输出，实现数据回放。

9、进一步地，步骤s1包括以下子步骤：

10、s1.1、当系统上电后，上位机控制存储单元1作为在线模块进入工作状态，当存储单元1接收到来自fifo_1的信号11的第一个上升沿后进入数据流可传输状态，当缓存深度达到对应缓存器的深度的3/4，信号11归零，停止数据流传输；当数据量少于对应缓存器的深度的1/4，信号11置1，继续传输数据流；

11、s1.2、当存储单元1中的数据流全部传输完毕，控制信号10归零后置1，同时在数据流中插入一个数据尾1，值为一个位宽为512位的可设置数据；当回放模块接收到来自存储单元1的信号10传输的信号的上升沿以后，开始搜索数据尾1，当接收到数据尾1时，表示存储单元1的数据流全部传输到缓存器fifo_1；

12、s1.3、上位机依次控制存储单元2～4作为在线模块进入工作状态，将存储单元2～4中的数据流全部传输到缓存器fifo_2～fifo_4，fifo_1～fifo_4最后将数据统一传输给fifo_0。

13、进一步地，每个aurora共有8个lane，单lane传输速度为8gb/s，综合传输效率能够给实现不小于54.4gb/s的数据流传输速率。

14、进一步地，步骤s2包括以下子步骤：

15、s2.1、空闲状态下，等一个时钟周期后开始识别头数据，若未识别到头数据，则停留在识别文件头数据状态；

16、s2.2、当识别到头数据，则判断头数据类型状态；若识别到的头数据为文件头，则开始解帧文件头，并将文件头的数据寄存；

17、s2.3、再次开始识别头数据，识别到第一个数据段头，解帧数据段头，从数据段头中解帧出数据采样率和数据类型；

18、s2.4、继续识别头数据，识别到第一个数据块头，从数据块头中解帧出数据块长度；

19、s2.5、从数据块头后可依次从数据块中解帧出q个待还原数据；

20、s2.6、继续识别头数据，识别到第二个数据块头，完成第二个数据块的数据块头和待还原数据解帧操作，直到完成所有n个数据块的解帧，即完成第一个数据段的解帧；

21、s2.7、继续识别头数据，识别到第二个数据段头，完成第二个数据段头中全部数据块的解帧，直到完成所有单个文件中m个数据段中全部数据块的解帧，从而完成当前数据流中一个文件的解帧。

22、s2.8、继续解帧下一个文件，返回到s2.2继续执行。

23、进一步地，步骤s3中，ddr4采用读数据优先级高于写数据的优先级工作，在读数据空闲的周期内进行数据写入，补充新的数据；同时使解帧写入的数据保持比读出的数据多一段地址片。

24、进一步地，所述ddr4用户式中采用1333/4mhz，用户数据处理宽度为512位。

25、在步骤s4中，将采样率小于da输入数据采样率的待还原数据利用插值滤波器实现采样率的提高，最终将统一了数据采样率的数据通过da输出。

26、进一步地，待还原数据的最大采样率为200msps，8路并行，单路数据位宽最大为32位，待还原数据最大数据速率为51.2gb/s。

27、本发明所带来的有益技术效果：

28、1)跨模块数据连续回放：在需要回放数据量扩展的场景中，支持配置多个存储模块。设计了有效的机制，完成跨模块数据流连续传输控制，可实现跨模块回放数据连续。

29、2)数据流回放速率自动匹配：本方法可自动完成多格式、多采样率的数据流的解帧，不同格式、采样率的数据还原需要不同的数据量，进而决定缓存区内待还原数据的读出速度，并反馈到缓存区的数据写入速度和高速传输口的数据流传输速度，从而实现回放数据流速率自动匹配。

技术特征：

1.一种跨模块的高速数据流连续回放处理方法，其特征在于，设置存储模块和回放模块，所述存储模块中包括4个存储单元1～4，所述回放模块中配置了缓存器fifo_x，x为0、1、2、3和4，4个存储单元分别与缓存器fifo_1～fifo_4通过2根通信信号线相连，缓存器fifo_1～fifo_4共同连接至缓存器fifo_0；

2.根据权利要求1所述的一种跨模块的高速数据流连续回放处理方法，其特征在于，步骤s1包括以下子步骤：

3.根据权利要求2所述的一种跨模块的高速数据流连续回放处理方法，其特征在于，每个aurora共有8个lane，单lane传输速度为8gb/s，综合传输效率能够给实现不小于54.4gb/s的数据流传输速率。

4.根据权利要求2所述的一种跨模块的高速数据流连续回放处理方法，其特征在于，步骤s2包括以下子步骤：

5.根据权利要求1所述的一种跨模块的高速数据流连续回放处理方法，其特征在于，步骤s3中，ddr4采用读数据优先级高于写数据的优先级工作，在读数据空闲的周期内进行数据写入，补充新的数据；同时使解帧写入的数据保持比读出的数据多一段地址片。

6.根据权利要求5所述的一种跨模块的高速数据流连续回放处理方法，其特征在于，所述ddr4用户时钟采用1333/4mhz，用户数据处理宽度为512位。

7.根据权利要求5所述的一种跨模块的高速数据流连续回放处理方法，其特征在于，在步骤s4中，将采样率小于da输入数据采样率的待还原数据利用插值滤波器实现采样率的提高，最终将统一了数据采样率的数据通过da输出。

8.根据权利要求4所述的一种跨模块的高速数据流连续回放处理方法，其特征在于，待还原数据的最大采样率为200msps，8路并行，单路数据位宽最大为32位，待还原数据最大数据速率为51.2gb/s。

技术总结
本发明公开了一种跨模块的高速数据流连续回放处理方法，设置存储模块和回放模块，依次完成待回放数据流跨模块自动连续传输、数据流解帧、数据缓存以及数据还原回放。为了实现跨模块数据流连续传输，利用存储模块和回放模块之间的信号线交互以及数据尾标记的机制，完成跨模块连续数据流传输控制，可实现跨模块数据流连续传输。可完成既定格式数据流解帧，解帧出数据流中的数据类型、采样率参数决定缓存区内待还原数据读出的速度，并且影响缓存区的待还原数据写入速度和高速传输口中的数据流的传输速度。通过逐级反馈实现回放速度自动匹配。

技术研发人员：赵金龙,顾军,李晓慧,徐健,蒋国庆,成华强,王志恒,杜磊磊,关伟强
受保护的技术使用者：中电科思仪科技股份有限公司
技术研发日：
技术公布日：2024/1/14