ZynqMP-ISPDemo基于KV260(ARM+FPGA)平台，设计实现了CIS(AR1335接在IAS1口)配置，MIPI接收，ISP处理，DP显示。3MP-RAW10@30FPS。Demo软件基于Vitis裸机环境开发，实现简单的2A控制。Linux软件请见ZynqMP-ISP图像信号处理器软件框架ISPLiteIP基于verilog实现了ISP常规处理模块，用于处理CIS(CMOSImageSensor)的RAW数据，并支持图像统计。主要代码支持跨平台特性(altera/xilinx)VIPIP实现了一些图像辅助处理，如CROP，DSCALE等。主要代码支持跨平台特性MIPIRxIP

ZynqMP-ISPDemo基于KV260(ARM+FPGA)平台，设计实现了CIS(AR1335接在IAS1口)配置，MIPI接收，ISP处理，DP显示。3MP-RAW10@30FPS。Demo软件基于Vitis裸机环境开发，实现简单的2A控制。Linux软件请见ZynqMP-ISP图像信号处理器软件框架ISPLiteIP基于verilog实现了ISP常规处理模块，用于处理CIS(CMOSImageSensor)的RAW数据，并支持图像统计。主要代码支持跨平台特性(altera/xilinx)VIPIP实现了一些图像辅助处理，如CROP，DSCALE等。主要代码支持跨平台特性MIPIRxIP

小透镜放在滤光片上来增加光线的收集能力传感器只能测量光的强弱，并不能区分颜色，这就需要将不同颜色的滤镜和传感器结合起来，实现这一过程的技术叫做拜尔阵列（“Bayer”pattern）传感器是光敏二极管光线进入镜头，到达【带有RGB滤光阵列的传感器】，得到最原始的电信号。这个信号经过【ISO增益和原始图像处理】【RGB去马赛克】和【降噪】，就会得到raw格式的图片，对它接着进行【白平衡以及色彩空间转换】和【色彩处理】，并【映射到sRGB输出】，这时图片已经呼之欲出，只要【JPEG压缩】并【保存成文件】，储存卡里就会增加一张JPEG格式的照片了。

小透镜放在滤光片上来增加光线的收集能力传感器只能测量光的强弱，并不能区分颜色，这就需要将不同颜色的滤镜和传感器结合起来，实现这一过程的技术叫做拜尔阵列（“Bayer”pattern）传感器是光敏二极管光线进入镜头，到达【带有RGB滤光阵列的传感器】，得到最原始的电信号。这个信号经过【ISO增益和原始图像处理】【RGB去马赛克】和【降噪】，就会得到raw格式的图片，对它接着进行【白平衡以及色彩空间转换】和【色彩处理】，并【映射到sRGB输出】，这时图片已经呼之欲出，只要【JPEG压缩】并【保存成文件】，储存卡里就会增加一张JPEG格式的照片了。

最近在做夜景去噪声的lowlevel工作，相关工作可以说是非常的难以及boring。因为这种lowlevel你必须往上层，往底层走，甚至说需要了解ISP相关的知识；因此这段时间对于相关知识进行了大量的学习与了解。1、ISO曝光量以E表示，计算单位就是勒克斯·秒（lux*s）。若要取得一定量的曝光量，则光强度越大，曝光时间越短；光强度越小，曝光时间越长。曝光是拍照最基本也是最重要的技术之一。在专业相机中，曝光强度=曝光时间*光圈大小*ISO，手机上的光圈是固定的，所以只需考虑曝光时间和ISO（也就是Gain值的一种表示，这里的Gain又分为AnalogGain，DigitalGain，ISO指的

最近在做夜景去噪声的lowlevel工作，相关工作可以说是非常的难以及boring。因为这种lowlevel你必须往上层，往底层走，甚至说需要了解ISP相关的知识；因此这段时间对于相关知识进行了大量的学习与了解。1、ISO曝光量以E表示，计算单位就是勒克斯·秒（lux*s）。若要取得一定量的曝光量，则光强度越大，曝光时间越短；光强度越小，曝光时间越长。曝光是拍照最基本也是最重要的技术之一。在专业相机中，曝光强度=曝光时间*光圈大小*ISO，手机上的光圈是固定的，所以只需考虑曝光时间和ISO（也就是Gain值的一种表示，这里的Gain又分为AnalogGain，DigitalGain，ISO指的

一，网络拓扑二，规划说明2.1IP地址规划设备　接口安全区域IP地址FW1GE0/0/0Local192.168.0.10/24GE1/0/0Local202.100.2.10/24GE1/0/1Local202.100.1.10/24GE1/0/2Local10.1.1.10/24GE1/0/3Local10.1.2.10/24GE1/0/4Local10.1.3.10/24GE1/0/5Local192.168.34.10/24ISP1GE0/0/0untrust11.1.1.20/24GE0/0/1untrust202.100.1.20/24Loopback0untrust1.1.1.1

一，网络拓扑二，规划说明2.1IP地址规划设备　接口安全区域IP地址FW1GE0/0/0Local192.168.0.10/24GE1/0/0Local202.100.2.10/24GE1/0/1Local202.100.1.10/24GE1/0/2Local10.1.1.10/24GE1/0/3Local10.1.2.10/24GE1/0/4Local10.1.3.10/24GE1/0/5Local192.168.34.10/24ISP1GE0/0/0untrust11.1.1.20/24GE0/0/1untrust202.100.1.20/24Loopback0untrust1.1.1.1

对特斯拉死磕的“纯视觉路线”，笔者一直是持质疑态度的。质疑的点在于：算法的进步，能弥补摄像头物理性能的局限性吗？比如，视觉算法足够牛逼时，摄像头就有测距能力了？晚上就能看见了？前一个疑问，在2021年7月份被打消——当时，特斯拉被曝已开发出“纯视觉测距”技术。而后一个疑问，则持续存在。笔者甚至一度认为，如果把摄像头类比为人眼、把视觉算法类比为人的大脑中“跟眼睛配合的那一部分功能”，那么，“视觉算法足够牛逼时，就可以不需要激光雷达”这种观点就相当于说“只要我的脑子足够聪明，眼睛高度近视也没关系”。但前段时间，马斯克提到的HW4.0将“干掉ISP”的计划，却颠覆了笔者的认知。在接受Lex采访时，马

对特斯拉死磕的“纯视觉路线”，笔者一直是持质疑态度的。质疑的点在于：算法的进步，能弥补摄像头物理性能的局限性吗？比如，视觉算法足够牛逼时，摄像头就有测距能力了？晚上就能看见了？前一个疑问，在2021年7月份被打消——当时，特斯拉被曝已开发出“纯视觉测距”技术。而后一个疑问，则持续存在。笔者甚至一度认为，如果把摄像头类比为人眼、把视觉算法类比为人的大脑中“跟眼睛配合的那一部分功能”，那么，“视觉算法足够牛逼时，就可以不需要激光雷达”这种观点就相当于说“只要我的脑子足够聪明，眼睛高度近视也没关系”。但前段时间，马斯克提到的HW4.0将“干掉ISP”的计划，却颠覆了笔者的认知。在接受Lex采访时，马