我想自己动手做一个基于FPGA的简单图像处理系统，比如实现边缘检测。我手头有带摄像头的开发板。但感觉无从下手，整个链路太长了：图像传感器数据怎么采集进来？DDR3怎么用来做帧缓存？处理算法（比如Sobel）怎么用硬件描述语言实现？最后又怎么通过HDMI显示出去？求一个大概的框架和关键模块说明。
回答 1
搞FPGA图像处理确实头大，东西一环扣一环。不过拆开看也就那几个大块，一步步来就行。
先从摄像头抓数据。你开发板上的摄像头一般是并口或者MIPI接口。得写个传感器配置模块，用I2C或者SPI去初始化摄像头寄存器，设置分辨率、帧率这些。然后就是采集模块，盯着像素时钟和行场同步信号，把并行的像素数据流按时序收进来，通常先存到FIFO里缓冲一下。
收进来的原始数据一般是RAW格式，得做一下预处理。比如插值变成RGB，或者转成灰度图。这一步可以在收数据的时候就顺手做了，用流水线处理，来一个像素处理一个，不耽误时间。
处理完的数据量不小，一帧图好几兆字节，片内RAM肯定不够用。这时候就得用DDR3了。写个DDR控制器模块，或者用厂商提供的IP核。关键就是设计好读写仲裁和地址管理，把一帧图像按顺序存进去，相当于在外部内存里开辟了一个帧缓存区。
做算法处理，比如Sobel边缘检测，就是典型的卷积运算。在硬件里实现，可以设计一个3×3的滑动窗口。从DDR里按行读出像素，用移位寄存器组构成窗口，每个时钟窗口移动一次。然后窗口里的9个像素和Sobel算子做乘加运算，算完的结果就是边缘强度。这一步完全是流水线，速度很快。
处理完的结果还要写回DDR的另一块区域。显示模块再从DDR里把最终图像读出来。显示这边要按显示器的时序来，比如HDMI需要生成标准的视频时序信号（行同步、场同步），同时从内存里读取对应位置的像素数据，送给HDMI编码芯片（比如ADV7511）或者直接用FPGA的GTX收发器输出。
整个流程就是采集、预处理、存DDR、处理、再存DDR、显示读出，这几个模块用状态机或者FIFO连接起来。数据流就像水一样，从一头流到另一头。建议你先让采集和显示这两个头尾通了，能实时显示摄像头画面，然后再往中间插入处理模块，这样调试起来容易定位问题。
别想着一次全搞定。先点亮摄像头，再调通DDR读写，最后加算法。每步验证好了，串起来就是完整系统。
发表回答
登录后可在本页底部提交回答
游