0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

视频桥接解决方案,实现传统图像传感器与MIPI应用处理器的互连

YCqV_FPGA_EETre 来源:未知 作者:佚名 2017-11-17 06:04 次阅读

几十年前当嵌入式系统设计工程师们想要降低成本时,他们会使用那个年代规模化生产的PC架构。通过采用原先为PC架构开发的硬件和软件,嵌入式系统设计工程师能够在降低开发成本的同时,获得经过上千万消费电子应用验证的高可靠性元器件。PC总线为专用的嵌入式应用提供了极具吸引力的低成本替代方案。除了以上优势之外,嵌入式开发工程师还能充分利用易于使用的设计工具和基于熟知的架构之上的开源操作系统。通过将设计迁移到PC架构,使得设计工程师能够将低成本传递给终端消费者,并且缩短开发周期。

PC时代已经一去不返。PC架构已不再能够提供如同以往的规模化生产优势。现在的嵌入式系统开发工程师在考虑如何利用消费电子市场上规模化生产带来成本优势时,智能手机市场变成了首选。全球范围内每年卖出的智能手机数量高达数十亿部,各个领域的设计工程师都在尝试如何充分利用当今移动解决方案中关键元器件提供的高性能和低成本优势。就像二十年前PC架构所扮演的角色一样,移动市场提供了工程师熟悉的硬件架构和应用,其性能已经在竞争激烈的消费电子市场中得到验证。

核心标准

推动当前便携式设备设计发展的是由MIPI联盟定义的接口和总线。MIPI联盟成立于2003年,旨在为移动和移动相关设备制定一整套全面的规范。联盟的目标是提供设备供应商创建创新移动产品时所需的硬件和软件接口规范,同时加速产品上市进程并降低成本。通过制定一整套核心标准,MIPI联盟使得移动设备制造商能够从不同的供应商处获取元器件,并轻松优化设计的性能。

图1. MIPI联盟已经制定推出了一套核心标准,以简化移动系统设计并确保互操作性(图片来自MIPI联盟

该组织已经从最初的四个成员发展到现在的成百上千个成员,其在智能手机行业的声誉不言而喻。所有主要芯片厂商都使用MIPI联盟制定的规范,每一部智能手机至少使用一个MIPI规范。

广泛的影响

事实上,MIPI联盟的影响力已经远远超出了移动行业的范畴。随着移动互连融入到人们生活中的方方面面,越来越多不同行业中的设计工程师正在尝试为他们的设计采用移动技术。但是在这个过程中,他们也面临着重重障碍。许多嵌入式系统中使用的摄像头和显示屏与当今移动应用处理器(AP)上的接口类型或数量不匹配。

应用处理器、图像传感器和显示屏可能是嵌入式系统设计者们能够从移动市场中获益最多的MIPI标准元器件。如今的移动系统设计常常包含采用MIPI显示屏串行接口(DSI)的显示屏和采用MIPI摄像头串行接口(CSI-2)的图像传感器。DSI和CSI-2接口均基于D-PHY物理层总线协议。D-PHY采用一个差分时钟和1-4对差分数据线来传输数据,D-PHY是一种中心对齐的源同步接口,在时钟的上下边沿都有数据传输。D-PHY的独家特性之一是能够“即时”将差分信号转换为单端信号。

当设计中采用传统或专用显示屏以及传统或专用图像传感器时,嵌入式设计工程师该如何利用MIPI市场提供的众多优势呢? 以工业市场为例。一直以来,嵌入式应用设计工程师都依赖于采用LVDS、RGB或SPI接口的显示屏。但是大多数嵌入式处理器都不具备DSI接口。想要利用MIPI处理器和应用优势的工业应用设计工程师在保留传统LVDS显示屏时,需要实现LVDS显示屏与符合MIPI标准的应用处理器之间的桥接。解决这个问题的一个方法是构建从OpenDSI、LVDS或专用接口到MIPI DSI的视频桥接解决方案(见图2)。

图2. 视频桥接解决方案使得设计工程师能够实现传统显示屏与MIPI应用处理器的互连

同样,工业领域中的许多设计工程师也想在设计中采用最新一代移动处理器和应用时保留CMOS摄像头。图3(下图)说明了如何实现传统CMOS并行输出与MIPI应用处理器CSI-2输入之间的桥接。

图3. 在此示例中,视频桥接解决方案使得开发工程师能够实现传统图像传感器与MIPI应用处理器的互连

在汽车行业,符合MIPI标准的应用处理器和元器件的使用量也在增加。随着汽车设计中像高级驾驶辅助系统(ADAS)和车载信息娱乐系统等应用需要显示的内容以及使用的摄像头数量不断增加,对于视频桥接解决方案的需求也在不断增长。在摄像头的帮助下,驾驶员不仅可以在倒车时看到后方车辆,它们还可以替代两侧后视镜以提供360度视野,并支持各类应用,例如车道变更跟踪和盲点减少。在现在的汽车中,设计工程师可以聚合来自多个图像传感器的视频数据,将其拼接在一起,通过单个CSI-2接口传输到应用处理器。

设计工程师在游戏应用中聚合来自多个摄像头的数据或将其分开输出到多个显示屏,这样的视频桥接解决方案经过验证是非常有用的。举个例子,快速发展的虚拟现实(VR)市场的最新趋势之一是从单个显示屏转为各使用一半带宽的双显示屏头盔,为用户提供立体图像。但是如果应用处理器只有一个DSI接口,设计工程师该如何拆分视频输出到两个显示屏?图4(下图)说明了如何使用视频桥接解决方案将来自应用处理器的单个DSI视频数据输出拆分为两路输出,分别用于左眼和右眼显示屏。该桥接可支持两个HD或一个QHD显示屏,I/O速率高达1.5 Gbps/通道。

图4. 该桥接解决方案将视频数据拆分为两路DSI输出,实现支持立体图像的VR头盔

另一个潜在的桥接应用是将数据聚合为单个CSI-2输出。图5(下图)说明了无人机或VR开发工程师如何使用全新的桥接器件将多个图像传感器视频输出聚合为满足应用处理器接口要求的单个输入。该桥接可用于设计中的应用处理器无法提供足够的接口以支持图像传感器输入或图像传感器和成像数据之间存在处理延迟的情况。 在这种情况中,处理器必须以最小的延迟同时接收多个CSI-2输出。多个合并的视频流还必须共享公共时钟,并且在某些情况下还需要单独的上电时序。

图5. 无人机和其他系统制造商在设计中集成多个CSI-2摄像头,因此可能需要将视频内容进行合并以交付应用处理器进行处理

选择合适的解决方案

为了满足全新视频应用的需求,今天的嵌入式视频应用设计工程师需要高性能、低功耗、小尺寸的桥接解决方案。理想的桥接解决方案要能够为摄像头、显示屏和应用处理器转换不兼容的接口,将多个视频流合并为单个输出,或者将单个视频输出拆分为多个。

解决这个问题的一种方法是使用通用的多通道无源开关将信号传送到电路板上的多个位置。然而,大多数多路复用/解复用解决方案不能为设计工程师提供所需的高性能或高度的设计灵活性。另一个选项是投资基于特定应用标准产品(ASSP)或专用集成电路ASIC)的桥接解决方案。大多数桥接解决方案的应用面都很窄,高昂的一次性工程成本(NRE)以及超长开发周期让这种方式得不偿失。

莱迪思半导体的CrossLink FPGA已上市一年多了,可为设计工程师提供设计灵活性并加速产品上市进程,它是业界超快的MIPI D-PHY桥接器件,能够以12 Gbps带宽传输分辨率高达4K超高清的视频。CrossLink器件设计用于解决应用处理器、图像传感器和显示屏之间的接口不匹配问题,能够实现支持各种领先和现有协议的低成本、高度紧凑的桥接解决方案。

CrossLink桥接器件包含两个MIPI D-PHY硬核以及支持多种视频功能的面向移动应用的FPGA架构,能够实现复用、合并、解复用、仲裁、拆分和数据转换功能。器件中的每个MIPI D-PHY块最高支持四条数据通道和一条时钟通道用于发送和接收(Tx和Rx)数据。两个可编程I/O bank支持多种接口,包括MIPI D-PHY、MIPI CSI-2、MIPI DSI、CMOS、RGB、SubLVDS、SLVS、LVDS以及Open LDI。

器件中的FPGA架构拥有5936个4输入LUT、180 kbit RAM块和47 kbit分布式RAM。这些LUT分布在可编程功能单元(PFU)中专用寄存器的旁边,可用作逻辑运算、RAM和ROM功能的基本功能块。可编程互连网络连接各PFU块。可编程I/O bank、嵌入式I2C和嵌入式MIPI D-PHY以及嵌入式RAM(EBR)块分布在PFU之间。设计工程师可使用莱迪思Diamond设计软件来配置PFU模块并实现设计。

典型的开发流程

基于CrossLink器件的接口桥接解决方案的开发流程相对来说比较简单。开发人员首先从莱迪思Diamond FPGA设计软件的IP配置工具Clarity Designer中选择要使用或生成的IP。Clarity Designer支持配置多个IP,构建IP之间的互连以及规划设计中IP所使用的资源。

一旦生成IP,开发工程师就可以使用Aldec仿真器进行仿真。开发工程师只需打开Aldec仿真器,打开工具并点击执行即可。仿真完成后,开发工程师可以查看仿真结果。使用莱迪思Reveal片上调试工具可以进行设计硬件调试。Reveal工具集成在莱迪思Diamond FPGA设计软件中,具备一键操作、高级触发功能、简单的流程、支持修改原始设计以及增强的逻辑分析仪波形显示功能。

为了加速系统开发,莱迪思还提供CrossLink LIF-MD6000主控连接评估板。该评估板包括一片采用81-ball csfBGA封装的CrossLink-MD6000器件。除此之外,该评估板还具备Mini USB Type-B连接器到FTDI以及通过SPI接口将FTDI连至CrossLink的电路。该套件还包括两个接口板。

总结

二十年前,处于市场主导地位的PC架构推动了各类市场的发展。今天,高速发展的移动市场对工业、汽车和医疗等领域也产生了类似的影响。随着移动技术不断扩展到全新的应用领域,移动相关产品的设计工程师可在桥接解决方案的帮助下充分利用移动市场的规模化生产优势以及移动处理器、显示屏和图像处理器的成本和性能优势。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 图像传感器
    +关注

    关注

    68

    文章

    1734

    浏览量

    128847
  • 应用处理器
    +关注

    关注

    0

    文章

    162

    浏览量

    28204
  • 嵌入式开发
    +关注

    关注

    18

    文章

    976

    浏览量

    46957
  • 视频桥接
    +关注

    关注

    0

    文章

    15

    浏览量

    2723
  • mipi应用处理器

    关注

    0

    文章

    1

    浏览量

    1161

原文标题:全新的桥接解决方案可满足移动相关市场的需求

文章出处:【微信号:FPGA-EETrend,微信公众号:FPGA开发圈】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    将MLX75027 3D图像传感器与CX3 RDK MIPI开发板连接后报错如何解决?

    我们打算将MLX75027 3D图像传感器与CX3 RDK MIPI开发板连接,但EZ-USB-suite软件中配置MIPI块参数中针对的是2D图像
    发表于 02-28 07:41

    视频处理器的作用 视频处理器的功能有哪些

    任务。下面是视频处理器的一些常见功能: 图像增强:视频处理器可以通过增加图像的对比度、亮度和饱和度来改善图像质量。它还可以去除
    的头像 发表于 02-01 17:23 921次阅读

    AG32VF-MIPI应用场景

    MIPI接口技术在图像视频传输中的应用越来越广泛,应用场景也在不断拓展,而不仅限于移动设备。MIPI接口在物联网、智能家居、智能监控、智能电视、智能汽车等领域也得到广泛应用。
    发表于 01-22 08:56

    传统基于帧的图像传感器输出和基于事件的视觉传感器输出对比

    (EVS)。这两款专为工业设备设计的传感器实现了业界最小(相比其它堆叠式基于事件的视觉传感器)的4.86 μm像素尺寸,并且只有在感知到场景变化时才会进行捕捉记录。   01 事件相机概述  
    的头像 发表于 11-16 10:12 1038次阅读
    <b class='flag-5'>传统</b>基于帧的<b class='flag-5'>图像</b><b class='flag-5'>传感器</b>输出和基于事件的视觉<b class='flag-5'>传感器</b>输出对比

    北京君正X2600处理器亮相ELEXCON 2023,打造多核异构跨界新价值

    通过将各个领域的细分需求拆解,从而分解出共通点,再针对性开发出解决方案,并集成于X2600系列处理器中;同时,针对更细分的应用,X2600系列处理器还提供有丰富的型号可选,从而实现为不
    发表于 11-03 18:17

    ARM马里图像信号处理器(ISP)对比表

    马里的互联网服务供应商家族为商业、工业和消费设备带来了下一代图像处理能力。 这些解决方案为各种物联网、汽车和嵌入式使用案例提供完整的互联网服务提供商解决方案,包括计算机视觉应用、智能显
    发表于 08-25 07:07

    将DSP和ML功能融合到低功耗通用处理器

    随着各种类型的物联网和嵌入式系统对信号处理的需求不断增加,我们看到市场上出现了许多新的芯片,它们结合了数字信号处理器(DSP)和通用处理器来满足这些日益增长的处理需求。 虽然这些适用于
    发表于 08-23 06:51

    浅谈相机、处理器图像传感器未来趋势

    结合先进的图像传感器技术,我们还看到了低数据解决方案的进步,包括在空间、时间甚至光子级别上实现的基于事件的传感,例如光子倍增管或电子倍增 C
    发表于 08-22 09:49 273次阅读

    ARM Cortex®-M3处理器技术参考手册

    中断处理。 ·多个高性能总线接口。 ·具有以下可选功能的低成本调试解决方案: -实现断点和代码补丁。 -实施观察点、跟踪和系统分析。 -支持printf()风格的调试。 -接到跟踪端
    发表于 08-18 06:09

    MIPIIO用户手册

    MIPI (Mobile Industry Processor Interface)是 MIPI 联盟发起的为移动应用处理器制定的开放标准和一个规范。目前 MIPI 已经成为移动领域最
    发表于 08-09 06:49

    ARM Cortex-M4处理器技术参考手册

    矢量中断控制(NVIC)与处理器核心紧密集成,以实现低延迟中断处理。 •多个高性能总线接口。 •低成本调试解决方案,具有以下可选功能: -
    发表于 08-08 07:18

    LED视频处理器,让未来科技更具色彩!

    讯维LED视频处理器可以实现多种图像信号混合叠加,不同分辨率、不同的视频格式可以同时显示,无缝切换。 底板交换技术,高速多通道传输不卡级 讯维LED
    的头像 发表于 08-02 10:15 609次阅读

    MIPI框架的协议有哪些

    1、介绍 1、MIPI 联盟,即移动产业处理器接口(Mobile Industry Processor Interface)联盟。MIPIMIPI 联盟发起的为移动应
    的头像 发表于 07-06 16:51 537次阅读
    <b class='flag-5'>MIPI</b>框架的协议有哪些

    集成一个在MIPI接口上提供8位BGGR数据的传感器,拜耳图像格式不正确是怎么回事?

    嗨,我们正在尝试集成一个在 MIPI 接口上提供 8 位 BGGR 数据的传感器。我们能够捕获图像,但色彩空间不正确。以下是相机驱动程序中的配置 MEDIA_BUS_FMT_SBGGR8_1X8
    发表于 05-17 06:26

    瑞芯微RK3568智慧视频录像机NVR设备解决方案

    8路720P的高清视频图像接入,然后通过NVR技术实现高清视频图像信息的集中管理和实时存储。另外,此种小型NVR
    发表于 04-27 10:19