0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

源码公开!基于C6678+Zynq-7045的目标追踪视觉方案分享

Tronlong创龙科技 2021-11-09 10:43 次阅读

随着现代科技的高速发展,机器视觉技术在无人机、安防监控、工业检测ADAS高级驾驶辅助系统、医疗诊断等方面有着广泛的应用,并且更多的场合中要求能实现高算力、高速采集、高速传输。目标追踪的视觉技术是计算机视觉领域的一个重要分支课题,有着重要的研究意义。本文主要介绍基于TI C6678+ Xilinx Zynq-7045/7100的目标追踪视觉方案。

poYBAGGIf2CAN5RMAAZHzsOuLJk763.png

图 1

01 硬件平台推荐

创龙科技(Tronlong)为您推荐基于TI TMS320C6678 + Xilinx Zynq-7045的高速多路高清视频采集处理平台,采用DSP+FPGA+ARM架构,可完美满足目标追踪关键指标。


*测试硬件平台:TL6678ZH-EVM评估板(TMS320C6678+Zynq-7045/7100)


点击点击图片/图注即可查看产品详细介绍↓↓↓

81ce995e-3d8c-11ec-a0d8-dac502259ad0.jpg

图 2 TL6678ZH-EVM评估板

824fa3fa-3d8c-11ec-a0d8-dac502259ad0.jpg

图 3 SOM-TL6678ZH核心板


02方案介绍

2.1方案要点

(1)图像数据采集

通过可编程逻辑器件(例如FPGA)进行高速、高精度的图像数据采集,且可灵活接入各种摄像头,如CameraLink、SDI、PAL等。


(2)目标追踪分析

将采集得到的图像数据通过高速数据总线(例如SRIO、PCIe等)传输至数字信号处理平台(例如DSP),通过算法对图像数据进行位置分析。

(3)目标图像监控

将处理后的图像通过CameraLink、HDMI接口进行实时显示,并可对可视化界面进行控制。


2.2方案框图


2.1.1方案框图

83b40830-3d8c-11ec-a0d8-dac502259ad0.png

图 4方案框图

2.1.2 方案模块


本篇目标追踪方案使用了Tronlong的三大模块,分别为CameraLink、SDI、PAL模块。

pYYBAGGIf86AU-dhAAY2B1mtbSc113.png

图 5 TLCameraLinkF模块

poYBAGGIf-WAO3ktAAXTLkcrmgM152.png

图 6 TL2971A/2972F模块

poYBAGGIf_KAXyd_AAdvg2EMD2E233.png

图 7 TL2867F模块


2.2方案优势


(1)高性能处理器

TMS320C6678集成八核C66x定点/浮点DSP,主频可高达1.25GHz,运算能力可高达320 GMAC、160 GFLOP,算法能力强,满足目标追踪算法要求。

ZYNQ Z-7045/7100集成PS端双核ARM Cortex-A9 + PL端Kintex-7架构28nm可编程逻辑资源,ARM主频800MHz,硬件资源丰富。可通过PL端进行高速图像数据采集,并通过PS端进行业务逻辑控制,运用十分便捷。


(2)视频接口丰富

可拓展众多目标追踪场合常用的视频接口,如CameraLink、SDI、HDMI、PAL等。其中CameraLink可支持Full模式,最大支持传输速率5.4Gbps。

(3)系统稳定可靠

核心板集成DSP和ZYNQ处理器芯片间通过SRIO高速接口链接,核间通信更高速、更稳定。


核心板经过高低温测试、振动测试、老化测试,并经过3000次系统掉电启动测试,达到工业级品质,系统运行稳定。


2.4案例演示


案例功能:


(1)基于TL6678ZH-EVM评估板接入CameraLink相机采集图像,把图像数据传输到DSP进行Sobel(边缘检测)算法处理(客户可自行替换为目标追踪算法),最后通过网络输出处理结果。


(2)CameraLink相机参数:分辨率2560 x 2048,帧率107,灰度输出,每个像素8bit,数据量为2560 x 2048 x 107 x 8 ≈ 4.5Gbps。


(3)C6678与Zynq-7045通过SRIO接口的两个Lanes进行高速数据传输,每个Lane传输速率为5Gbps,总数据有效带宽为5Gbps x 2 x 80% = 8Gbps。

poYBAGGIgAWAUNXfAAFrHUP9HA4456.png

图 8案例功能框图

poYBAGGIgBWAUwizAACq7_vgqI0319.png

图 9PL端程序功能框图

poYBAGGIgCSAHXhoAAgiVQDj0P0542.png

图 10 测试连接图

poYBAGGIgDCAMrrCAASQfSht3Vw608.png

图 11 边缘检测网页输出效果

pYYBAGGIgD2AeD1JAALLZ93HGts053.png

图 12 处理结果

创龙科技基于TL6678ZH-EVM评估板提供CameraLink、SDI、HDMI、PAL的测试案例,客户仅需要专注上层应用开发。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 嵌入式开发
    +关注

    关注

    18

    文章

    973

    浏览量

    46943
  • 工业自动化
    +关注

    关注

    17

    文章

    1136

    浏览量

    66541
  • TMS320C6678
    +关注

    关注

    3

    文章

    37

    浏览量

    17996
收藏 人收藏

    评论

    相关推荐

    KU115+ZU19EG+DSP6678的双FMC 6U VPX处理板

    和 1 片 Zynq UltraScale+ MPSoC 家族的 XCZU19EG-2FFVC1760I 以及 1 片 TI 公司的 DSP 芯片 TMS320C6678ACYPA。
    的头像 发表于 04-08 11:11 100次阅读
    KU115+ZU19EG+DSP<b class='flag-5'>6678</b>的双FMC 6U VPX处理板

    机器视觉的图像目标识别方法综述

    文章来源:MEMS引言从20世纪80年代开始,机器视觉技术的发展速度不断加快,已经走进了人们的日常生活与工作之中。机器视觉的图像目标识别系统的自动化程度较高,应用范围广,尤其在危险场所的运用,采用
    的头像 发表于 02-23 08:26 335次阅读
    机器<b class='flag-5'>视觉</b>的图像<b class='flag-5'>目标</b>识别方法综述

    雷达干扰追踪器(RIT),使用公开数据追踪军事雷达

    首先,Ollie Ballinger使用的是公开可获得的数据,这些数据是通过卫星捕获的,他使用这些数据来检测和追踪军事雷达。这意味着,任何人只要有足够的专业知识,都可以使用这些数据来查找军事雷达发射器。
    的头像 发表于 12-05 14:49 389次阅读
    雷达干扰<b class='flag-5'>追踪</b>器(RIT),使用<b class='flag-5'>公开</b>数据<b class='flag-5'>追踪</b>军事雷达

    Zynq7045的PS端的SPI外设配置AD9154读取芯片ID返回值一直为FF的原因?

    Zynq7045的PS端的SPI外设配置AD9154读取芯片ID(0x005地址)返回值一直为FF,但是用相同的代码去读取AD9434就没有问题,能正常读取ID值,实在是搞不清楚问题会出在哪里
    发表于 12-01 11:59

    Zynq评估板及ZED板供电方案

    电子发烧友网站提供《Zynq评估板及ZED板供电方案.pdf》资料免费下载
    发表于 11-13 09:52 0次下载
    <b class='flag-5'>Zynq</b>评估板及ZED板供电<b class='flag-5'>方案</b>

    基于TMS320C6678的八核DSP雷达信号分选电路

    电子发烧友网站提供《基于TMS320C6678的八核DSP雷达信号分选电路.pdf》资料免费下载
    发表于 11-06 10:28 0次下载
    基于TMS320C<b class='flag-5'>6678</b>的八核DSP雷达信号分选电路

    【KV260视觉入门套件试用体验】Vitis-AI加速的YOLOX视频目标检测示例体验和原理解析

    本文将介绍如何使用Vitis-AI加速YOLOX模型实现视频中的目标检测,并对相关源码进行解读。由于演示的示例程序源码是Vitis-AI开源项目提供的,本文演示之前会介绍所需要的准备工作。演示之后
    发表于 10-06 23:32

    使用LabVIEW人工智能视觉工具包快速实现传统Opencv算子的调用源码

    电子发烧友网站提供《使用LabVIEW人工智能视觉工具包快速实现传统Opencv算子的调用源码.rar》资料免费下载
    发表于 09-28 17:38 12次下载

    基于机器视觉的物流仓储智能车设计方案

    使用OpenMV3 M7摄像头实现视觉追踪与距离检测,使用TB6612FNG模块驱动两路直流电机,使用16路舵机驱动板PCA9685驱动三路180度s90 舵机的机械臂,实现目标物体的抓取。
    发表于 09-25 06:32

    【KV260视觉入门套件试用体验】KV260开发板初使用

    分析、智慧城市和机器视觉应用的生产部署。它由K26 系统级模块 (SOM)、载卡和散热解决方案的非生产版本组成。SOM 非常紧凑,仅包含关键组件,例如基于 Zynq UltraScale+ MPSoC
    发表于 09-18 14:56

    Zynq裸机设计中使用视觉库L1 remap函数的示例

    本篇博文旨在演示如何在 Zynq 设计中使用 Vitis 视觉库函数 (remap) 作为 HLS IP,然后在 Vitis 中使用该函数作为平台来运行嵌入式应用。
    的头像 发表于 08-01 10:18 337次阅读
    在<b class='flag-5'>Zynq</b>裸机设计中使用<b class='flag-5'>视觉</b>库L1 remap函数的示例

    MAX6678AEP92+ - (Maxim Integrated) - PMIC - 热管理

    电子发烧友网为你提供Maxim(Maxim)MAX6678AEP92+相关产品参数、数据手册,更有MAX6678AEP92+的引脚图、接线图、封装手册、中文资料、英文资料,MAX6678AEP92+真值表,MAX
    发表于 07-07 18:30
    MAX<b class='flag-5'>6678</b>AEP92+ - (Maxim Integrated) - PMIC - 热管理

    MAX6678AEP92+T - (Maxim Integrated) - PMIC - 热管理

    电子发烧友网为你提供Maxim(Maxim)MAX6678AEP92+T相关产品参数、数据手册,更有MAX6678AEP92+T的引脚图、接线图、封装手册、中文资料、英文资料,MAX6678AEP92+T真值表,MAX
    发表于 07-06 19:04
    MAX<b class='flag-5'>6678</b>AEP92+T - (Maxim Integrated) - PMIC - 热管理

    基于机器视觉的典型多目标追踪算法应用实践

    TBD(Tracking-by-Detection)与DFT(Detection-Free Tracking)也即基于检测的多目标跟踪与基于目标外形的先验知识无需检测器的多目标跟踪。TBD是目前学界业界研究的主流。
    的头像 发表于 06-15 17:22 996次阅读
    基于机器<b class='flag-5'>视觉</b>的典型多<b class='flag-5'>目标</b><b class='flag-5'>追踪</b>算法应用实践

    Zynq PCIe电路设计

    ZYNQ7045的PCIE电路设计,板卡使用插针式连接器,引出了PCIE信号,未使用金手指。为了插入机箱设计了扩展版,插座与插针对应,带有PCIE金手指。目前遇到的问题是,当板卡连接扩展板使用金手指
    发表于 05-16 11:07