报告

营销和 ETL:ETL 是 BI 分析师的无代码解决方案

介绍

营销ETL

如果您需要将数据导入您的 营销数据仓库 立即,并且您迫不及待地等待有人编写代码来实现它, Singular ETL 可能是您最好的朋友。 对于普通营销人员来说,提取、转换和加载可能听起来并不令人兴奋……但是使用 营销ETL 快速、轻松地在正确的位置获取正确的数据?

嗯,这非常令人兴奋。

或者至少使用这些数据可以生成令人兴奋的结果。

这就是为什么 ETL 工具对于现代营销人员或 BI 分析师来说是一个可取之处。 因为没有代码就意味着快。 快速意味着更快的洞察力。

事实上,ETL 甚至比实时 API 更快。 (继续阅读以了解原因。)

这不仅仅是因为即使对于资金雄厚的商业智能和营销技术组织来说,与多个数据源的全面数据集成也是一个巨大的挑战。 这是因为Singular ETL 为您做的事情比 API 所能做的更多。

旧的又是新的

近 50 年前设计的概念并不常见——是的, ETL 起源于 20 世纪 70 年代 — 用于现代技术堆栈。 多年来,我们对数据仓库或数据湖的概念发生了很大变化。 当时 Hadoop 和 Spark 还不存在,实时数据——甚至非结构化数据——都不是真正的问题。

云并不存在,Amazon Redshift 在任何工程师眼中都算不上闪光,几乎没有供应商将自己描述为数据集成商。

但好的想法经得起时间的考验,无论您的数据集是平面文件、半随机数据源、数据仓库还是分析工具,通过 ETL 提取数据都会有所帮助。

即使您最终决定需要 API 集成,集成也需要时间,即使是资金雄厚的大公司也不一定总是有这样的时间。 此外,在开始 API 集成之前,通常需要完成重要的内部流程。

那么提取、转换和加载对您有何帮助呢?

我们将讨论什么:

  • 简而言之,ETL
  • 谁应该使用 ETL……以及为什么
  • 提取转换负载: Singular ETL 的工作原理
  • SingularETL 可以完成(几乎)所有事情
  • 营销人员如何利用 ETL 节省时间
  • ETL 和 API:BFF 总数?
  • ETLFTW

简而言之,ETL

即使您不熟悉数据,您也可能知道 ETL 是“提取、转换、加载”的缩写。

EXTRACT 是从数据库或多个数据源中提取数据。 TRANSFORM 正在将提取的数据从当前存储的任何形式转换为您需要的特定格式。并且,它可以包括丰富数据:根据规则或从其他来源添加行,以用更多详细信息补充原始数据。 LOAD 只是将数据插入到新数据库中……您计划将其用于进一步的业务或营销操作的数据库。

换句话说,营销 ETL 非常简单。 至少在概念上:提取、转换、插入。

这是一件好事,因为提取数据和手动数据集成几乎不是开发人员(或营销人员)的好时机。

营销 ETLsingular

您通常使用 Informatica、Boomi、InfoSphere DataStage、Oracle 数据集成平台、Ta​​lend 或 JasperSoft 等工具来获取数据、更改数据和加载数据。

然而,与大多数事情一样,当您实施它时,复杂性就会出现。

ETL 工具是一方面。 其他的是实际数据的传输以及理论上干净和独立的三个阶段的重叠。 此外,使用 Amazon Redshift 和 BigQuery 等工具进行数据转换的能力还增加了其他选项。

然而,ETL 的基本形式非常清晰。

谁应该使用 ETL……以及为什么

大多数使用Singular的人都属于几个不同的类别。 其中包括营销人员、商业智能分析师、营销技术专家、增长工程师、创意人员和高管,还有一些其他类别。

营销人员经常使用Singular的前端:基于 Web 的用户界面。

营销技术人员或增长工程师经常实施Singular API,从Singular实时提取数据。 然后,他们可以将其集成到 Tableau 或 Looker 中的其他数据源(专有数据)或旨在处理营销数据并提供增长或分析见解的自定义系统中。

两者都很棒。

但是Singular ETL 可以以适合您的特定格式将您需要的数据传输到您想要的系统。 (尝试从 API 获取它!)

这对包括商业智能分析师在内的客户很有帮助,他们需要比前端用户界面可以轻松提供的更多的分析数据。 他们可能会在另一个平台上处理这些数据,将其用于机器学习,或进行某种其他形式的数据分析。 现在,他们可以通过Singular ETL 获得所需的一切,而无需花费任何工程时间。

另外,虽然一些 BI 分析师技术精湛,但他们可能没有 100% 准确实施 API 所需的访问权限或全部知识。 如果您的开发工程师最终想要 API 访问,那是完全可行的。 这将需要一些工程时间和精力,但它是完全可用的。

这就是Singular ETL 的用武之地:许多客户每天在移动营销上花费数万到数十万美元。 等待数周或数月才能找到工程师或数据集成商可能会产生巨大的成本。

因此, Singular ETL 可帮助 BI 分析师快速轻松地步入正轨。

您可以在自己的数据仓库中创建营销数据的副本。 您可以直接将 Tableau 连接到该数据。 您可以在其之上构建自定义报告或仪表板。 您可以在安全可靠的内部基础设施中将敏感或专有数据加入到您的营销数据中。

最终,您可以通过更多数据和更多访问权限来增强您的分析、数据科学和营销技术专家团队的能力。

提取转换负载: Singular ETL 的工作原理

ETL 是提取、转换、加载,对吧? 好吧,这并不令人震惊,这就是Singular ETL 的工作原理。

ETL 提炼:
它首先定义提取所需数据的参数,通常在Singular营销数据或(即将推出)Singular归因日志中。 您可以使用配置的字段和可能的过滤器设置预定报告,并且该报告将定期自动生成。

默认情况下,“定期”可以每天安排多次。 换句话说,它并不完全是实时数据,但它可以按照适合您的时间表进行。

ETL 转换:
然后,您不必为接收数据的方式设置数据模式(请记住,转换阶段),我们可以直接从您已配置的一组字段中推导出目标模式。 其中包括您想要的列、它们的类型等等。 稍后,我们将确定您是否需要平面文件或将数据插入 Amazon Redshift 或其他位置。

换句话说,它使数据仓库变得简单。

ETL 软件可以处理非结构化数据和结构化数据,有些 ETL 工作可能比其他工作更困难,但Singular ETL 将以您需要的格式为您提供所需的数据。

ETL 加载:
最后,您设置数据的目标,该目标可以是 Amazon Redshift 等数据库,也可以是 Amazon S3 等基于文件的终端节点,也可以是 SFTP 位置。 换句话说,数据可以直接进入数据库,或存储在平面文件中。 其他目的地包括 BigQuery 和 Snowflake。

随着时间的推移,如果有足够的需求,我们甚至可能添加 Google 云端硬盘或 Google 表格。

一旦获得了所需的数据,BI 分析师、数据科学家和营销人员就可以访问数据、分析数据并进一步转换或增强数据。 他们可以在他们最熟悉的工具和平台上做到这一点,从而显着提高效率。

此外,由于您可以选择将数据存储在文件或数据库中,因此数据科学家可以执行一些 ETL 魔法(提取、转换、加载)(如果他们选择)。 换句话说,他们可以在数据或数据模型停留在他们最终想要存储的任何平台之前对其进行转换。

SingularETL 可以完成(几乎)所有事情

基本上任何营销人员都可以从使用Singular ETL 中受益。

如果您的数据以您需要的格式进入您的系统(无论它们是什么),将会带来巨大的好处。 这可以节省大量时间。

如果您有足够的工程时间和精力来与Singular的 API 建立牢固的集成,并且需要实时归因数据,那么这也是一个不错的选择。 但这需要额外的努力。

走这条路线将使您能够实时访问归因数据,这对于需要立即或至少快速反应的情况显然更好。 如果您发现投资回报率较低的活动,您可以从Singular API 获取按需和自动化的数据,从而可以快速调整策略。 数据完整性为100%,您可以进行任何您希望的数据处理。

此外,如果您希望能够近乎实时地响应用户或客户的安装或购买,它还可以让您快速将营销数据引入互动平台。 它为您提供完全控制权,并且您不必共享对数据库的访问权限。

移动设备变化很快,对于归因而言,API 是跟上变化的最佳方式。 对于更聚合的营销数据,尤其是有关成本的数据,实时性并不是主要问题。

但即使您已经实现了我们的 API, Singular ETL 也提供了更多功能。

现在,您可以自动了解所有新的Singular创新:所有新数据类型均可立即可用,无需任何集成工作。 通过将营销数据管道卸载到Singular ,您可以节省开发运营和工程资源。 您可能会节省服务器费用。 而且,您可能会更加安心,因为您知道Singular全天候不间断地监控您的营销数据管道。

营销人员如何利用 ETL 节省时间

ETL 可以为营销人员节省大量时间,因为您可以消除数据插值所浪费的开销。 想想不同的系统可以采用不同的方式来设想单一类型的营销数据(例如位置):

  • 国家
  • 城市
  • 状态
  • 城市、州和国家(顺序不限)
  • 大陆
  • 地区(如欧洲、中东和非洲或亚太地区)
  • GPS坐标
  • 纬度和经度(非十进制)

您的数据湖或营销数据记录系统可能会使用其中任何一种。 您需要从营销来源、合作伙伴和广告网络获得的数据可能完全不同。 但是,一个好的 ETL 系统可以以目标数据库理解的方式处理和转换许多不同类型的位置数据,从而节省您的时间、麻烦、效率低下,或者在最坏的情况下,由于不良或错误而完全无法生成增长见解。格式错误的数据。

我们甚至还没有讨论时间:

  • 2020/2/10
  • 2020/10/2
  • 2020 年 2 月 10 日
  • 2020 年 2 月 10 日
  • 2020 年 2 月 10 日星期一……等等……

Singular ETL 提供的是能够按照目标系统设计的操作方式将所需的数据获取到目标系统中。 即刻。 现在,您可以立即启动并运行,生成见解以节省资金或更快地增长或更好地为客户服务……而不是浪费时间来修复数据格式。

或者,更糟糕的是,在不知情的情况下处理不兼容的数据,从而做出错误的决策。

ETL 和 API:BFF 总数?

这是一个完全有效的场景。 Singular ETL 和Singular API 都有其适当的用途:如果需要,您可以添加 API 来获取它带来的功能,并使用Singular ETL 来获取它提供的功能。

Singular API 为您提供及时的归因数据,以客户的速度提供洞察力。 而且它是每台设备的精细数据。

Singular ETL 为您提供定期安排的活动聚合数据提取,您可以将其放置在任何您想要的地方,例如 Hadoop 和 Spark 等开源解决方案。

现在您已经两全其美了。 您无需亲自完成将细粒度数据转换为聚合的工作,并且仍然拥有用于归因的实时数据,以便能够快速响应营销变化或快速与新用户和群体互动。

此外,如果您需要深入了解趋势的历史背景,您可以聚合所有数据源的数据,并从中提取该信息。 (注:您还可以使用Singular的网页用户界面!)

而且,由于不同的团队可能会使用不同形式的数据来满足自己的不同需求,因此每个人都会得到他们想要的东西。

ETL 致胜:入门

目前,您不会在典型的Singular用户界面中看到有关设置 ETL 目标的详细信息,因为该功能处于公开测试阶段。

因此,目前,要开始使用,您需要先与您的Singular联系人交谈。 这也是审查当前不断增长的系统功能并仔细检查您的集成解决方案的好时机。

一旦完成,您将看到新选项出现,并且能够通过Singular ETL 工作,并在此过程中获得任何必要的支持。 ETL 作业将根据需要发生:直接流入您的数据仓库基础设施。

准备好出发?

只需联系您的Singular代表即可。

我们将帮助您进行设置并开始使用,并可以回答您有关数据集成平台和策略的任何问题。 我们还可以提供有关第三方数据集成、数据质量和数据传输细节的建议。

点击这里了解更多详情.