FPGA转行ISP的探索之一：行业概览

ISP的行业位置

最近看到一个分析，说FPGA的从业者将来转向ISP（Image Signal Process图像信号处理）是个不错的选择，可以适应智能汽车、AI等领域。故而我查了一下ISP，对它大致有个概念。

传统的ISP对应的是相机公司，它是相机里的一个核心环节，可以称作成像引擎，就像汽车里的发动机一样重要。
ISP在相机成像的整个环节中，它负责接收感光元件（Sensor）的原始信号数据，可以理解为整个相机拍照、录像的第一步处理流程，用于处理图像信号传感器输出的图像信号。它在相机系统中占有核心主导的地位，是构成相机的重要设备。

ISP是对前端图像传感器输出的信号做后期处理，依赖于ISP才能在不同的光学条件下都能较好的还原现场细节，ISP技术在很大程度上决定了相机的成像质量，是拍照过程中的运算处理单元，其地位相当于相机的“大脑”。

ISP的竞争壁垒

ISP是苦活累活，人才会被吸引到更加多金、就业面更广的AI上去；作为历史较悠久的ISP技术，员工要做好需花费大量时间和心思，而就业去向只有较大的几家芯片公司、手机公司、相机公司等，这些公司可能已经不怎么招新人了。但现在可能要加上汽车公司，自动驾驶的技术推进，可能会让ISP迸发新的需求。所以，一家公司要建立自己的ISP团队，考验的是公司的技术积累、公司对ISP的政策倾斜。

ISP的原理不复杂，但成为图像处理芯片的最大竞争壁垒之一的原因有如下几点：
第一， ISP的功能，原理虽然简单，但是里面有太多需要估计的策略，其实就是猜，要猜准确，有大量的经验，反复的调校工作在里面。
第二，ISP各个模块是相互影响的，这也增加了工作量。调试时，可能按下葫芦浮起瓢，大量时间消耗。比如，我们常说的3