0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Informatica将无服务器计算带到数据集成云

独爱72H 来源:金马科技 作者:金马科技 2020-03-29 08:58 次阅读

(文章来源:金马科技

在推出基于微服务的第二代智能云服务几年之后,Informatica的最新季度版本终于发现了无服务器错误。它是一系列新功能中的一部分,这些新功能增加了用于管理数据管道和集成流传输的新功能。

无服务器计算很自然地适合于数据摄取和集成过程,因为它们通常是成批运行的,并且根据来源的不同,它们也可能具有高度可变的资源消耗配置文件。无服务器的指导思想是消除提供“以防万一”的能力来处理高峰的需求,系统会根据流量自动调整供应。新的无服务器选项会自动扩展,并已内置到高可用性和恢复中。客户仍然可以使用基于服务器的选项来处理可预测的长期运行的工作负载。

尽管无服务器通过让系统自动配置资源来简化用户的生活,但缺点是成本可能无法预测。作为新的无服务器选件的一部分,Informatica提供了一个计算器,该计算器将机器学习应用到新的工作负载中,从而根据客户对性能(通过并行处理)还是成本(通过单个节点)进行优先级估算成本。

借助无服务器,Informatica从基于云的服务中窃取了一个页面,这些服务已经使无服务器成为基于数据管道的ETL和集成产品的主要内容。其中包括AWS Glue,Azure数据工厂,Google Cloud Data Fusion甚至Databricks,它们添加了无服务器选项。

一个相关功能是应用机器学习来帮助组织合理化其数据管道。由于基于云的低代码/无代码工具几乎很容易构建管道,因此客户可以轻松地构建令人困惑的一次性项目。Informatica的新工具将对管道进行内部检查,扫描数据源,操作和目标,以识别哪些管道使用类似的转换模式,并指导用户构建可配置的模板,以减少扩散并使它们更易于配置和维护。

而且,在摄取流时,Informatica新增了一项功能,可以扫描Kafka存储库以跟踪数据沿袭,就像对数据库和文件源所做的一样。在进行数据准备时,Informatica的云服务可以推荐加入。Informatica的云ETL服务的可视化集成设计器通过推荐基于扫描源和目标的转换操作,进而从数据准备中窃取了页面。

在增量更新中,去年推出的数据质量服务中增加了重复数据删除功能。尽管重复数据删除对于Informatica来说并不是什么新事物,但以前它只能在本地使用,也可以作为自带许可证(BYOL)支持的一部分,以在Amazon EC2或其他云基础设施服务上运行Informatica Data Quality。通过菜单,用户可以选择元数据的逻辑或物理视图,从而为数据工程师,业务分析师和数据科学家提供了多种视图,从而增强了目录的功能。该目录已从数据库资源的常规花名册扩展到从Microsoft Power BI,Qlik Sense,AWS Glue,Google Cloud,Snowflake等云服务中检索元数据,以及其他来源。

春季发布的结果是使用基础图形数据库公开了客户主数据,该数据库提供了一种更直观的表示和探索客户关系的方式。新版本现已在AWS,Azure以及Google Cloud的 beta版中可用。
(责任编辑:fqj)

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 数据
    +关注

    关注

    8

    文章

    6515

    浏览量

    87617
  • 无服务器
    +关注

    关注

    0

    文章

    16

    浏览量

    4023
收藏 人收藏

    评论

    相关推荐

    通过STM32+ESP8266 Wifi模块 +服务器,做一个数据收发控制的板子服务器方面该如何选择?

    通过STM32+ESP8266 Wifi模块 +服务器 做一个数据收发控制的板子 服务器方面该如何选择?
    发表于 04-25 08:16

    服务器数据恢复—分享几个服务器数据恢复的案例

    服务器数据恢复案例之服务器raid6中3个磁盘离线导致阵列崩溃的数据恢复案例;服务器数据恢复案例
    的头像 发表于 03-04 13:21 228次阅读

    服务器远程不上服务器怎么办?服务器无法远程的原因是什么?

    产生问题的原因,检查硬盘和服务器系统。通过日志和检查数据来确认问题出 现的原因以及如何解决。 三、端口问题 1.端口错误 找回正确的端口或更换远程端口 2.端口被扫爆 更改端口,并在防火墙禁止扫爆的IP
    发表于 02-27 16:21

    linux服务器和windows服务器

    ,Linux服务器表现出更好的性能和稳定性,因此广泛应用于科学计算、大数据处理和网络服务器等领域。 另一方面,Windows服务器是由微软开
    发表于 02-22 15:46

    春节想开黑幻兽帕鲁?先把上的专属服务器部署好!

    服务器
    脑极体
    发布于 :2024年02月07日 00:16:05

    如何远程登录服务器?登录失败是什么原因?

    我用Linux服务器,遇到了有关远程登录的一些问题,于是搜索了一些资料,整理了一篇文档,作为记录。如果你也遇到过 相似的问题,欢迎一起探讨! 一、Linux服务器的远程登录 远程登
    发表于 02-01 15:32

    TFTP服务器是什么如何下载文件

    读取的文件。如果 TFTP 服务器接收了该请求,打开连接,向客户端发送请求获取的文件数据。 发送的数据包是以定长 512 字节进行传输。如果文件
    发表于 12-12 16:06

    AT32基于mbed TLS的HTTPS服务器

    AT32基于mbed TLS的HTTPS服务器介绍如何使用mbed TLS 搭建一个HTTPS 服务器,用户可以根据自己的应用去编写网页内容的同时,又简单地传输数据加密。
    发表于 10-26 08:24

    【开源】4G_Lora远程硫化氢监测之【4G接入Mqtt服务教程】

    功能概述: 参考本文档可实现将传感采集到的数据信息,以 Json 格式通过 Mqtt 传输给远端的服务器。 Json 消息包含内容如下: Json对象 描述 类型 单位 值域 Ui
    发表于 06-25 15:06

    【开源】4G_Lora远程水质监测(COD)之【4G接入Mqtt服务教程】

    功能概述: 参考本文档可实现将传感采集到的数据信息,以 Json 格式通过 Mqtt 传输给远端的服务器。 Json 消息包含内容如下: Json对象 描述 类型 单位 值域 Ui
    发表于 06-07 10:10

    如何从GY-271读取的数据通过互联网发送到我的服务器

    我正在尝试让我的 ESP-01 板与基于 QMC5883L 的 GY-271 板“对话”。我正在尝试使用 I2C 通信,但一点运气都没有。我的想法是,我从 GY-271 读取的数据通过互联网发送到我的服务器。 有没有人有过这种
    发表于 06-07 06:01

    如何向中央服务器发送音频或从中央服务器发送音频?

    ://github.com/espressif/ESP8266_MP3_DECODER。我还没有看到很多流回服务器,也没有看到双向的。我正在寻找有关使用什么集成电路来执行此操作的建议。我知道 ESP8266 有一个模拟数字引脚,我可以
    发表于 05-23 06:20

    esp8266设置为服务器时,如何从不同的接入点连接到服务器

    嘿,我想问一个 <> 问题。当我 esp8266 设置为服务器时,如何从不同的接入点连接到服务器?我阅读了有关端口转发的内容,但没有更简单的方法吗?我想创建应用程序
    发表于 05-15 08:13