2026年了，FPGA大赛做实时图像处理，摄像头采集到HDMI显示整条链路延迟怎么压到20ms以内？求实战调优思路

我们队伍今年电赛准备做实时图像处理方向，用国产FPGA做OV5640采集到HDMI显示。现在整条链路延迟大概有50ms，画面明显感觉卡顿。看往届获奖作品都说能压到20ms以内，想请教下做过的大佬：帧缓存用DDR3还是片上BRAM？行缓存和帧缓存怎么取舍？流水线结构怎么搭才能减少等待时间？另外HDMI输出时序和摄像头采集时序不同步的问题怎么处理？求有实战经验的给个调优思路，最好能说下具体资源占用情况。