0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

低延迟、分布式数据库架构对于雾应用的重要性

星星科技指导员 来源:嵌入式计算设计 作者:Rob Schauble 2022-10-12 15:27 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

物联网IoT) 解决方案对任何数据库来说都是一个独特的挑战。来自非常广泛的物联网设备的数据越来越大,速度越来越快,再加上关键的延迟要求。鉴于此,数据的处理和分析必须越来越多地在网络边缘处理,靠近传感器,执行器和其他物联网设备。

我们不再奢侈地能够在云环境中处理物联网数据,因为云环境中似乎有无限的计算和存储资源,因为延迟是不可接受的。值得庆幸的是,有强大的数据库和平台解决方案可以正面应对这一挑战,我们将在下面进行探讨。但首先,让我们回顾一下物联网环境特有的一些数据要求。

鉴于物联网和大数据的数量、速度、多样性和准确性(“四个V”)要求,以及其中许多用例的分布式性质,边缘计算越来越成为赌注的隐喻。

那么,如果我们回到边缘的分布式计算,有没有办法保持我们长期以来所享有的功能(以及我们在过去10年中云计算的巨大趋势)?我们也可以吃蛋糕吗?

通过雾计算将云原则带到边缘

幸运的是,在这种情况下 - 随着雾计算的普及和增长趋势 - 答案是肯定的。解决方案是将云主体带到边缘,雾和云环境协同运行以处理复杂的物联网用例。当您有关键的延迟要求时,例如对于智能城市物联网用例,例如枪声检测或犯罪面部识别,您的数据必须由位于IP摄像机和其他传感器附近的加固雾节点处理。

非延迟关键数据仍可同步到核心或云。通过这种方式,来自物联网解决方案中所有边缘设备和雾节点的数据可以在核心级别(例如,智能城市用例中的城市街区)聚合,并最终聚合到云或数据中心环境中进行商业智能和其他分析。

对于雾计算,我们将物联网设备、边缘设备、雾节点和云之间的数据通信称为“南北”通信,将系统中边缘/雾节点之间的数据通信称为“东西向”通信。为了有效,我们必须在边缘拥有通用的云或数据中心环境功能,例如机器学习深度学习和其他人工智能

这带来了下一个挑战:鉴于边缘设备和雾节点的分布式性质以及适度的存储和计算能力,我们如何处理这些需求?让雾和云环境协同运行至关重要。例如,通过机器学习,我们需要在云中训练模型,在那里我们拥有大量的计算和存储资源。然后,我们需要将这些经过训练的模型部署到雾节点和/或边缘设备,以便它们可以在物联网设备附近提供服务,以最大限度地减少延迟。

“智能边缘”数据库

“智能边缘”已经到来,并将我们从这些看似无法解决的问题中解救出来(或者小林丸为你们“星际迷航”粉丝)。如今,边缘已成为物联网的战场,但地球上是否有一个数据库可以处理来自数千个传感器,摄像头和其他设备的海量和高速数据?一个可以实时处理这些数据,具有许多不同的数据库模型,并且占用空间小?

业界正在解决这个问题,答案是:是的。

现在有解决方案进入市场,提供快速性能,并能够在物联网边缘以小于1ms的延迟每秒摄取数百万次写入。这很强大。由于这些解决方案可以提供较小的硬件和软件占用空间,因此在某些情况下,它们非常适合生活在雾节点,边缘网关设备甚至物联网设备上。

其中一些解决方案,如Redis Enterprise,具有许多本机数据结构(集,排序集,列表,哈希,流等),为物联网应用程序开发人员提供了最大的灵活性。此外,由于已经存在许多模块来扩展它,这些解决方案可以具有多模型数据库,可以处理物联网边缘所需的非常多样化的工作负载:时间序列,图形,机器学习,搜索等。

简化的架构

这些平台无需部署六个不同的数据库来支持这些需求,而是可以管理所有这些数据库,从而极大地简化了您的架构。许多任务关键型 IoT 用例分布在多个区域,这代表了另一个用例,可以通过即将推出的具有高可用性、主动-主动(带 CRDT)、灾难恢复和自动扩展功能的平台来优雅地处理。

现在我们已经展示了值得在智能边缘上使用的数据库,您可能想知道哪个平台最适合在物联网边缘运行它们?当然,有很多变量和选择。在 Redis 实验室,我们与微软 Azure 合作开发物联网边缘解决方案。关键是为客户提供快速的常规数据存储、Azure Edge 模块之间的消息代理、流处理、时序数据库和内存中处理(机器学习模型服务、图形处理等),以获得最佳性能。

物联网社区将从联合物联网边缘解决方案中受益匪浅。但是,将正确的数据库与正确的智能 IoT 边缘解决方案集成对于所有 IoT 工作的成功至关重要。

审核编辑:郭婷

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2574

    文章

    54457

    浏览量

    786589
  • 物联网
    +关注

    关注

    2940

    文章

    47365

    浏览量

    408690
  • 数据库
    +关注

    关注

    7

    文章

    3994

    浏览量

    67848
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    分布式光伏环境监测站的技术架构与应用实践

    分布式光伏环境监测站的技术架构与应用实践 柏峰【BF-GFQX】一、系统技术架构解析 分布式光伏环境监测站采用“感知层-传输层-应用层”三层架构
    的头像 发表于 10-13 10:05 279次阅读
    <b class='flag-5'>分布式</b>光伏环境监测站的技术<b class='flag-5'>架构</b>与应用实践

    【节能学院】Acrel-1000DP分布式光伏监控系统在奉贤平高食品 4.4MW 分布式光伏中应用

    摘要:在“双碳”和新型电力系统建设背景下,分布式光伏接入比例不断提高,对配电网电压、调度运行及调峰等环节造成强烈冲击。本文设计包含平台层、设备层二层架构体系的分布式光伏管控平台,以及小容量工商业
    的头像 发表于 08-23 08:04 3324次阅读
    【节能学院】Acrel-1000DP<b class='flag-5'>分布式</b>光伏监控系统在奉贤平高食品 4.4MW <b class='flag-5'>分布式</b>光伏中应用

    有哪些方法可以降低分布式光伏集群通信网络中的延迟

    微机小电流 降低分布式光伏集群通信网络的延迟,需从 接入优化、数据处理、协议适配、环境抗扰、边缘 - 云端协同 等多维度入手,结合场景特点针对解决瓶颈。以下是具体方法: 一、优化接入
    的头像 发表于 08-22 09:54 541次阅读
    有哪些方法可以降低<b class='flag-5'>分布式</b>光伏集群通信网络中的<b class='flag-5'>延迟</b>?

    宏集分享 | 集中式架构还是分布式架构?SCADA架构选型的新趋势

    HongraxIIoT在工业数字化不断推进的今天,SCADA系统早已不仅是简单的数据监控工具,它正在成为保障企业运行效率、安全和业务连续的战略核心。而“选择集中式、分布式还是混合式
    的头像 发表于 08-08 18:15 499次阅读
    宏集分享 | 集中式<b class='flag-5'>架构</b>还是<b class='flag-5'>分布式</b><b class='flag-5'>架构</b>?SCADA<b class='flag-5'>架构</b>选型的新趋势

    一键部署无损网络:EasyRoCE助力分布式存储效能革命

    分布式存储的性能瓶颈往往在于网络。如何构建一个高带宽、超低时延、零丢包的无损网络,是释放分布式存储全部潜力、赋能企业关键业务(如实时数据库、AI训练、高性能计算)的关键挑战。
    的头像 发表于 08-04 11:34 1362次阅读
    一键部署无损网络:EasyRoCE助力<b class='flag-5'>分布式</b>存储效能革命

    分布式存储数据恢复—虚拟机上hbase和hive数据库数据恢复案例

    分布式存储数据恢复环境: 16台某品牌R730xd服务器节点,每台服务器节点上有数台虚拟机。 虚拟机上部署Hbase和Hive数据库分布式存储故障:
    的头像 发表于 04-17 11:05 522次阅读

    Oracle推出创新数据库服务

    务专为应对分布式应用需求而设计,旨在提供一个高度统一且功能强大的数据库平台。 该创新服务融合了Raft复制技术,实现了计算与存储的分离,能够在多个地理区域提供延迟访问、高可用
    的头像 发表于 02-10 14:45 804次阅读

    分布式云化数据库有哪些类型

    分布式云化数据库有哪些类型?分布式云化数据库主要类型包括:关系型分布式数据库、非关系型分布式数据库
    的头像 发表于 01-15 09:43 891次阅读

    MySQL数据库的安装

    的 RDBMS (Relational Database Management System,关系数据库管理系统) 应用软件之一, 具有成本、速度快、体积小且开放源代码等优点。 全球数据库引擎使用排行榜: 【三】下载MyS
    的头像 发表于 01-14 11:25 878次阅读
    MySQL<b class='flag-5'>数据库</b>的安装

    数据库是哪种数据库类型?

    数据库是一种部署在虚拟计算环境中的数据库,它融合了云计算的弹性和可扩展性,为用户提供高效、灵活的数据库服务。云数据库主要分为两大类:关系型数据库
    的头像 发表于 01-07 10:22 821次阅读

    基于ptp的分布式系统设计

    在现代分布式系统中,精确的时间同步对于确保数据一致性、系统稳定性和性能至关重要。PTP(Precision Time Protocol)是一种网络协议,用于在
    的头像 发表于 12-29 10:09 985次阅读

    分布式、域控及SOA架构车身功能测试方案

    北汇信息推出分布式、域控以及SOA架构的车身功能测试解决方案,支持在实验室环境下完成车身单部件、系统级功能自动化测试,可以极大地提升车身功能的可靠和稳定性。
    的头像 发表于 12-27 09:05 3410次阅读
    <b class='flag-5'>分布式</b>、域控及SOA<b class='flag-5'>架构</b>车身功能测试方案

    HarmonyOS Next 应用元服务开发-分布式数据对象迁移数据文件资产迁移

    使用分布式数据对象迁移数据,当需要迁移的数据较大(100KB以上)或需要迁移文件时,可以使用分布式数据
    发表于 12-24 10:11

    数据库加密办法

    企业对于数据的重视程度不言而喻,也衍生出了数据=资产的概念。但是数据泄漏的事件频繁发生,为了保护数据资产,企业有必要对
    的头像 发表于 12-24 09:47 1022次阅读

    HarmonyOS Next 应用元服务开发-分布式数据对象迁移数据权限与基础数据

    使用分布式数据对象迁移数据,当需要迁移的数据较大(100KB以上)或需要迁移文件时,可以使用分布式数据
    发表于 12-24 09:40