postgresql数据库扩展之fdw

1.介绍

PostgreSQL中的Foreign Data Wrapper（FDW）是一个强大的功能，它允许你访问和操作存储在外部源中的数据，就好像它是PostgreSQL数据库内的一个表一样。这意味着你可以直接从PostgreSQL查询和联接不同数据库和系统中的数据。FDW可以用于多种数据源，包括其他SQL数据库、NoSQL数据库，甚至是CSV或JSON这样的文件格式。

下面是FDW在PostgreSQL中工作方式的简要概述：

安装FDW扩展：首先，你需要为想要连接的特定类型的数据源安装FDW扩展。PostgreSQL内置了一个用于其他PostgreSQL服务器的FDW（postgres_fdw），同时还有许多其他类型的数据源可用的FDW。
创建外部服务器：这一步涉及到定义你想要连接的远程数据源。这包括指定使用哪种类型的FDW以及外部数据源的连接细节。
创建用户映射：用户映射定义了PostgreSQL用户如何映射到外部系统的用户。这对于访问外部数据时的认证和授权是必要的。
创建外部表：最后，在你的PostgreSQL数据库中定义一个代表外部数据源的外部表。定义包括表的结构（列和数据类型），这需要与外部数据源的结构匹配或映射。
查询外部表：设置完成后，你可以像查询数据库中的任何其他表一样查询外部表。你可以使用SELECT、JOIN和其他SQL操作，尽管根据FDW和外部数据源的能力，一些特性和优化可能是有限的。

FDW使得PostgreSQL成为一个更加强大的工具，用于整合和分析来自多样化来源的数据。然而，重要的是要意识到可能的性能影响，因为查询外部数据可能会比访问本地数据慢，这取决于网络和外部系统的性能。

2.fdw和dblink之间的区别

FDW（Foreign Data Wrapper）和dblink都是PostgreSQL提供的两种在数据库间进行数据访问和集成的技术，它们有着各自的特点和使用场景。下面是它们之间的一些主要区别：

实现机制不同：
- FDW：基于SQL/MED（SQL Management of External Data）标准的一部分，提供了一个框架，允许PostgreSQL与外部数据源（包括其他SQL和NoSQL数据库）进行交互。通过定义外部服务器、用户映射和外部表来实现数据的访问和整合。
- dblink：是一个特定于PostgreSQL的扩展，允许一个PostgreSQL数据库服务器直接执行另一个PostgreSQL数据库服务器上的查询。通过创建数据库链接来执行远程查询和数据操作。
使用灵活性：
- FDW：支持更广泛的数据源，不仅限于PostgreSQL数据库。通过对不同类型的FDW进行安装和配置，可以访问各种类型的远程数据源。
- dblink：主要用于连接PostgreSQL数据库之间，虽然主要用于PostgreSQL数据库，但在操作PostgreSQL数据时可能更简单直接。
性能和优化：
- FDW：可以利用外部数据源的某些优化，尤其是当FDW实现支持推送查询下推（例如，部分过滤和聚合）到外部数据源时。然而，性能也受到外部数据源和网络延迟的影响。
- dblink：因为是针对PostgreSQL优化的，可以有效地进行远程查询。但是，查询优化主要依赖于本地数据库，可能不会考虑远程数据库的特定优化。
集成和维护：
- FDW：提供了一个标准化的接口用于访问外部数据，这意味着一旦设置，就可以像操作本地表一样操作外部表。不过，需要针对每种数据源类型安装和配置相应的FDW。
- dblink：相对来说设置更简单，尤其是在只需要PostgreSQL数据库间互连的场景中。但是，每次连接都需要指定连接信息，这可能在某些情况下显得繁琐。

总的来说，选择FDW还是dblink，取决于你的具体需求，比如你需要访问的数据源类型、你对性能的要求以及你愿意投入多少精力去维护这种数据访问方式。如果需要访问非PostgreSQL的外部数据源，或者需要一个更标准化的数据访问方式，FDW可能是更好的选择。如果你的需求主要是在PostgreSQL数据库之间进行数据交换，并且希望快速简单地实现，dblink可能更适合。