johnllon

【转载】基于FPGA的图像处理(三)--图像融合

0
阅读(1917)

原文地址:http://blog.csdn.net/renshengrumenglibing/article/details/8144261


System Generator安装之后可以在Simulink中调用相应的模块进行视觉算法的搭建,我两台电脑上分别是ISE12.3+matlab2010a, ISE10.1+Matlab2010a。需要注意的是ISE和Matlab之间是有型号匹配的。

          首先要打开FPGA,打开Simulink,新建一个Model。

          在Xilinx Blockset中拖取需要的模块,搭建图像处理的算法。本程序是一个图像融合算法,读入两幅图像,相加,截取低8位,输出。

      


         其中System generator模块是每一个model中都必须的,在System Generator可以进行一些配置,包括编译选项、FPGA的选型、综合工具、HDL语言、时钟周期等,如果只是在上位机仿真不下载到FPGA中,那么这些参数基本都不用改。

        这里我使用的Xilinx公司的官方开发板ML605,芯片是Virtex6 xc6vc240t-1ff1156,HDL语言选择了Verilog。

                                                                                 


        gateway In和gateway out模块是FPGA和外部的纽带,FPGA只支持定点数,是不支持float、double类型的,通过gateway In可以将数据转化为需要的类型,gateway out又将处理之后的数据传出,可以在Matlab中查看。

        为模型添加回调函数callback。在model properties中添加。PreLoadFcn中添加LoadImage_gray,StopFcn中添加ShowImage_gray,这两个函数实际是在当前文件夹下的m文件,这样在进行仿真时两个函数会分别在加载和停止时自动执行。二者的功能分别是提供初始数据和数据的后处理显示。

                                                                



//LoadImage_gray的代码,将两张原始图像读入,并转化为一个n行2列的矩阵传入gateway In

[plain] view plaincopy

  1. %读取原始图像数据  

  2. SourceImage1_2D = imread('rice.png');  

  3. SourceImage2_2D = imread('text.png');  

  4. SourceImage2_2D = 250*SourceImage2_2D;  

  5. %得到图像的长宽尺寸  

  6. ImageWidth = size(SourceImage1_2D,2);  

  7. ImageHeight = size(SourceImage1_2D,1);  

  8. %将二维数组转换成一维数组  

  9. SourceImage1_1D = reshape(SourceImage1_2D',1,ImageWidth*ImageHeight);  

  10. SourceImage1_1D = [SourceImage1_1D];  

  11. SourceImage2_1D = reshape(SourceImage2_2D',1,ImageWidth*ImageHeight);  

  12. SourceImage2_1D = [SourceImage2_1D];  

  13. %按照格式形成Simulink的To Workspace模块要求的数据格式  

  14. SourceImage1_1D = [ double(0:ImageWidth*ImageHeight-1)'  double(SourceImage1_1D)'];  

  15. SourceImage2_1D = [ double(0:ImageWidth*ImageHeight-1)'  double(SourceImage2_1D)'];  

  16. %设置整个模块的输入到输出延时  

  17. DesignLatency = 2;  


//ShowImage_gray的代码 ,主要是将处理结果的以为数据转化为二维图像数据,并显示

[plain] view plaincopy

  1. %将DestImage1D一维数组转换成规定大小的DestImage2D二维数组  

  2. DestImage2D = reshape(DestImage1D(DesignLatency:DesignLatency+ImageHeight*ImageWidth-1),ImageWidth,ImageHeight);         

  3. DestImage2D = DestImage2D';  

  4. %按照格式显示输入图像和输出图像  

  5. h = figure;  

  6. clf;  

  7. colormap(gray(256));  

  8. set(h,'Name','Results');  

  9. image(DestImage2D),  axis off;  


         这些准备完成之后还要修改一些仿真时间,这里是图像的点数加上延时,ImageWidth*ImageHeight+DesignLatency。

         DesignLatency是一个需要自己根据算法中延时的长度自己调整的参数,并在Loadimage_gray中修改。需要特别注意的是System Genrator的时序问题是一个很麻烦的问题,经常会因为时序导致仿真结果一差千里,千万注意。

        下面可以进行仿真了。

        //原图1   rice

           

      //原图2 text

           

         //计算结果

         


二、生成HDL代码

         System Generator的真正高端之处在于能够将简单搭建的模块转化为HDL代码,我们进行简单的配置,生成Verilog HDL代码。

         

         选中Create testbench,硬件语言选择Verilog HDL,点Generate ,自动生成ISE工程。

         完成之后在netlist文件夹下生成了一个ISE的工程,直接用ISE打开工程就可以看到Verilog代码,包括testBench,由于我的板子是官方开发板,因此其中的管脚约束文件都是自动生成的,十分方面,如果使用的自己做的板子的话,可能需要修改一些管脚约束文件ucf文件。在ISE下进行仿真,效果如下:

          

         可以看到 geteway out的数据都是两个gateway In数据的和,刚还延迟一个时钟周期。

        

        目前正在使用System Generator搭搭建立体视觉算法,虽然已经搭建完成,但是时序问题没有处理明白,导致进行匹配时,总是发生错位,导致匹配效果大大降低,如果哪位高手解决了此问题的话,还望不吝赐教。