تقارن هذه المقالة بنية أدوات التجميع الثلاثة: اللغة، وأوضاع التجميع، والنموذج الفردي أو المتعدد المستأجرين، والوظائف التي تتجاوز التجميع النقي. وقد نشر كل من Tembo وPkgPulse مقارنات عددية لهذه الأدوات الثلاث، لكننا لم نقم بإعادة إنتاج أي من قياساتها بأنفسنا. إن موقفنا التحريري بشأن المعايير، المفصل في منهجية قياس الأداء ، هو عدم إعادة نشر رقم لم نتحقق منه بأنفسنا أبدًا. ما ستجده هنا بدلاً من ذلك: البنية الفعلية لكل أداة، وكيف تقوم Aurabase فعليًا بتوجيه حركة مرور Postgres الخاصة بها، والتي تم التحقق منها قسمًا تلو الآخر في الكود المصدري.
- يظل PgBouncer (C) هو المُجمِّع الأكثر إثباتًا والأفضل تكاملًا مع Kubernetes: يعتمد CloudNativePG عليه مباشرةً في مورده
Pooler. - يستهدف Supavisor (مشروع Elixir، Supabase) مشكلة مختلفة: خدمة آلاف قواعد البيانات من نفس الخدمة، بدلاً من مُجمِّع واحد لكل قاعدة بيانات.
- يضيف PgCat (Rust) تقسيم التطبيق وموازنة التحميل بين النسخ المتماثلة وتجاوز الفشل التلقائي إلى التجميع الأولي.
- يعرض مستودع Aurabase PgBouncer المستخدم على مستويين: نشر مشترك للأسطول المشترك ومورد
Poolerتتم إدارته بواسطة CloudNativePG لكل مستأجر مخصص. كلاهما يعمل في وضع المعاملة. - يظل PostgREST وتجمع الإدارة
aura-dbطوعًا على اتصال مباشر بـ Postgres، دون المرور عبر المجمع: سيؤدي تجميع المعاملات إلى كسر إعادة تحميل المخطط وأقفال الجلسة الخاصة بهم.
ثلاثة مجمعات، ثلاث فلسفات
PgBouncer يقلل، Supavisor تجمعات على نطاق متعدد المستأجرين، PgCat يضيف وظائف الشبكة إلى التجميع الأولي. لا يعد أي من الثلاثة بديلاً مباشرًا للاثنين الآخرين، على الرغم من أنه غالبًا ما تتم مقارنتهما بمصطلح بمصطلح في نفس الصفحات.
| اللغة | C | إكسير (شعاع) | Rust |
|---|---|---|---|
| أوضاع التجميع | الجلسة، المعاملة، البيان | جلسة، معاملة | الجلسة، المعاملة، البيان |
| نموذج الإيجار | مجموعة مستهدفة واحدة لكل مثيل، مصممة لتكون مستأجرًا واحدًا | مستأجر متعدد أصلي: خدمة للعديد من قواعد البيانات | مجموعة مستهدفة، مقسمة بواسطة مفتاح القسم |
| أبعد من التجميع | لا توجد وظائف إضافية، الحد الأدنى عمدا | واجهة برمجة تطبيقات HTTP للمسؤول، تسجيل المستأجر الديناميكي | المشاركة وموازنة التحميل وتجاوز الفشل بين النسخ المتماثلة |
| تكامل Kubernetes الأصلي | نعم: مُجمّع موارد CloudNativePG | لم يتم توثيقه أصلاً حتى الآن | لم يتم توثيقه أصلاً حتى الآن |
| الأصل | المعيار التاريخي للتجميع Postgres | تم إنشاؤه بواسطة Supabase لسحابته الخاصة متعددة المستأجرين | وُلد في Instacart، وتتم صيانته اليوم بواسطة PostgresML |
الأعمدة بالترتيب: PgBouncer, Supavisor, PgCat. خصائص البنية وفقًا للملفات الرسمية لكل مشروع، والتي سيتم تأكيدها في الإصدار الذي تقوم بنشره، يتطور النظام البيئي بسرعة في هذه المرحلة.
المعيار التاريخي، خفيف الوزن ومدمج في Kubernetes
PgBouncer يفعل شيئًا واحدًا فقط: تجميع اتصالات Postgres، دون أي وظائف إضافية. يفسر هذا النطاق الضيق بشكل متعمد إلى حد كبير طول عمره واعتماده كوحدة بناء أساسية في معظم مجموعات Postgres في الإنتاج.
تتوفر ثلاثة أوضاع للتجميع. يفتح وضع الجلسة اتصال خادم واحد لكل اتصال عميل، وهو الأكثر سماحًا. يعيد وضع المعاملة استخدام اتصال الخادم بين العديد من العملاء، والذي يتم إصداره في نهاية كل معاملة. يذهب وضع البيان إلى أبعد من ذلك، ونادرا ما يستخدم في الإنتاج. إن وضع المعاملة هو الذي يحقق مكاسب التجميع الحقيقية، ولكنه يفرض قواعد صارمة. أي حالة جلسة (SETمتغيرات، أقفال استشارية، LISTEN/NOTIFY) لا تبقى بعد المعاملة. نقوم بتفصيل هذه القواعد ومزالقها في مقالتنا المخصصة حول وضع تجميع المعاملات لـ PgBouncer.
تاريخيًا، تستخدم عملية واحدة، مثيل PgBouncer نواة وحدة المعالجة المركزية (CPU) واحدة بشكل افتراضي. يعد تشغيل مثيلات متعددة خلف نفس المنفذ (عبر SO_REUSEPORT) تطورًا أحدث للمشروع، وليس ميزة تصميم أولية. من ناحية المصادقة، يدعم PgBouncer وظيفة auth_query القابلة للتكوين، وهي وظيفة SQL يتم تنفيذها عند كل اتصال لحل كلمة مرور الدور ديناميكيًا. تتجنب هذه الآلية الاعتماد على ملف ثابت يسرد كل مستخدم مقدمًا. هذه هي الآلية التي يستخدمها Aurabase لأدواره لكل مشروع (القسم 05).
PgBouncer هو المُجمّع الذي ينشره CloudNativePG أصلاً خلف مورده Pooler. في مجموعة Postgres التي يديرها مشغل CloudNativePG، يصل تنشيط المجمع المُدار، عمليًا، إلى تنشيط PgBouncer دون تكوينه يدويًا.
Supabase مجمع سحابي متعدد المستأجرين
يعالج Supavisor مشكلة لم يتم تصميم PgBouncer لحلها على هذا النطاق على الإطلاق. يتضمن ذلك خدمة عدد كبير جدًا من قواعد بيانات المستأجرين المميزة من خدمة واحدة، بدلاً من مثيل مجمّع واحد لكل قاعدة بيانات. تمت كتابة المشروع بلغة Elixir وتم تنفيذه على جهاز Erlang الظاهري (BEAM)، وتم تطوير المشروع وصيانته بواسطة Supabase، في مصدر مفتوح، في مستودع GitHub الخاص به.
النموذج الأصلي متعدد المستأجرين هو الفرق الهيكلي الحقيقي. حيث يتطلب أسطول PgBouncer الكلاسيكي عملية واحدة (أو مجموعة من الاتصالات المخصصة) لكل قاعدة مستهدفة، فإن Supavisor يعمل بشكل مختلف. فهو يسجل المستأجرين ديناميكيًا عبر واجهة إدارة HTTP، ويوجه كل اتصال وارد إلى قاعدة البيانات الصحيحة دون إعادة تشغيل الخدمة. قامت Supabase بترحيل مشاريعها السحابية الخاصة من PgBouncer إلى Supavisor لهذا السبب بالذات. لا يمكن توسيع مجموعة التجميع الكلاسيكية، واحدة لكل قاعدة بيانات، إلى سحابة متعددة المستأجرين تستضيف مئات الآلاف من المشاريع.
هذا الاختيار المعماري له جانب سلبي موثق. استغرق تكافؤ الميزات مع PgBouncer في الحالات المتقدمة بعض الوقت حتى يستقر بعد إطلاق المشروع. مثالان: سلوكيات معينة لـ LISTEN/NOTIFY والإدارة الدقيقة للبيانات المعدة في وضع المعاملة. تحقق من الإصدار الخاص بك قبل الترحيل إذا كان تطبيقك يعتمد على هذه السلوكيات المحددة.
الطرف الخارجي Rust: المشاركة الأصلية وموازنة التحميل
تم وضع PgCat بشكل صريح كبديل لـ PgBouncer المكتوب باللغة Rust. فهو يضيف وظائف الشبكة إلى التجميع الكلاسيكي الذي لا يتضمنه PgBouncer ولا Supavisor أصلاً. ثلاثة على وجه الخصوص: تقسيم التطبيق عن طريق مفتاح القسم، وموازنة التحميل بين النسخ المتماثلة المقروءة، وتجاوز الفشل التلقائي بعيدًا عن النسخة المتماثلة الفاشلة. وُلد المشروع في Instacart قبل أن يتم الاستحواذ عليه وصيانته اليوم بواسطة PostgresML.
بشكل ملموس، يمكن لـ PgCat أن تلعب الدور الذي تشغله عادةً طبقتان مختلفتان: مجمع الاتصال ووكيل التطبيق للتوجيه بين عدة مثيلات Postgres. يمكن للفريق الذي كان يشارك بياناته يدويًا بالفعل تبسيط التعليمات البرمجية الخاصة به باستخدام PgCat. نفس الشيء بالنسبة لمنطق توزيع القراءات بين النسخ المتماثلة التي تم تطويرها داخليًا: تحل طبقة الشبكة المخصصة محلها مباشرة.
يوجد أيضًا حل وسط معاكس: PgCat هو مشروع أحدث، مع نظام بيئي أصغر بكثير من التوثيق وردود الفعل على الإنتاج من PgBouncer. إن اعتماد وظائف التقسيم وتجاوز الفشل يعني أيضًا الموافقة على الاعتماد على نضج هذا المكون المحدد، وليس فقط على قدرته التجميعية.
ما يظهره رمز Aurabase: PgBouncer في كل مكان، باستثناء الأماكن التي يؤدي فيها تجميع المعاملات إلى كسر كل شيء
ينشر مستودع Aurabase PgBouncer في مستويين منفصلين، كلاهما في وضع المعاملة. بالنسبة للأسطول المشترك، يحدد مخطط Helm عملية نشر مخصصة PgBouncer أمام مستوى البيانات المشترك (deploy/helm/aurabase/templates/infra/pgbouncer.yaml، الصورة edoburu/pgbouncer). بالنسبة للمستأجر في مثيل مخصص، يقوم الموفر بإنشاء مورد Pooler تتم إدارته أصلاً بواسطة CloudNativePG (deploy/cnpg/tenant-pooler.yaml، يتم تقديمه بواسطة k8s_tenant.rs). لا يستخدم أي منهما Supavisor أو PgCat. لا يوثق الكود مقارنة صريحة سبقت هذا الاختيار. من ناحية أخرى، فإنه يُظهر تكاملًا عميقًا وتشغيليًا بالفعل مع النظام البيئي CloudNativePG، بما يتوافق مع حقيقة أن PgBouncer هو لبنة التجميع الأصلية.
ومع ذلك، لا يمر كل شيء عبر المجمع، وهذا اختيار متعمد موثق في الكود نفسه. يظل PostgREST متصلاً مباشرة بـ Postgres، وليس عبر PgBouncer أبدًا. تعليق مخطط Helm واضح بشأن السبب: قد يؤدي تجميع المعاملات إلى تعطيل إعادة تحميل المخطط الخاص به، والذي يعتمد على LISTEN على قناة pgrst. هذه الآلية غير متوافقة مع اتصالات الخادم المعاد تدويرها بين العملاء. يظل تجمع الإدارةaura-db (المخطط، DDL، الأقفال الاستشارية للجلسة) أيضًا على اتصال مباشر، لنفس السبب الأساسي. لا ينجو SET search_path وتأمين الجلسة الذي لا يشمل نطاق المعاملة من مجمع وضع المعاملة.
# مستوى البيانات aura-db: عبر PgBouncer، كل شيء على نطاق المعاملة (SET LOCAL)
DATABASE_URL: postgresql://aura_authenticator:...@pgbouncer:5432/aura_db_master
# مسؤول المجموعة (DDL، الاستبطان): مباشر على Postgres، أبدًا PgBouncer
# يؤدي تعيين مسار البحث غير المحلي + إلى كسر أقفال الجلسة لتجميع المعاملات
ADMIN_DATABASE_URL: postgresql://aura:...@postgres:5432/aura_db_master
تتبع المصادقة نمط auth_query الموضح في القسم 02: AUTH_QUERY: SELECT * FROM pgbouncer.user_lookup($1)، بدون ملف userlist.txt ثابت. هذا هو ما يسمح للأدوار التي تم إنشاؤها ديناميكيًا لكل مشروع (project_<uuid>_authenticator) بالمصادقة عبر PgBouncer دون إعادة نشر المجمع لكل مشروع جديد.
يُظهر تعليق التحقق من الصحة PgBouncer في Kubernetes المحلي وجود خطأ حقيقي، تم إصلاحه بالفعل. يعمل pg_isready على PgBouncer على التحقق من صحة مصافحة الوكيل فقط، وليس الاتصال الفعلي بالواجهة الخلفية Postgres التي ينقلها. يستجيب PgBouncer "لقبول الاتصالات" حتى عند توقف الواجهة الخلفية، وانتظار الطلبات. النتيجة التي تمت ملاحظتها أثناء الاختبار المدمر: ظلت الخدمة healthy لمدة 5 دورات متتالية بينما كان Postgres غير قابل للوصول. يستبدل الإصلاح عملية التحقق بطلب حقيقي شامل psql من خلال المجمع، وصولاً إلى الواجهة الخلفية. النتيجة بعد التصحيح، في نفس الاختبار المعاد: تم اكتشاف unhealthy في 7 دورات، حوالي 35 ثانية.
تفصيل أخير، بسيط ولكنه كاشف: دبابيس مخطط Helm edoburu/pgbouncer:v1.24.1-p1 افتراضيًا، بينما يستخدم مقعد k3d المحلي v1.25.2-p0. إنه ليس خيارًا معماريًا، بل مجرد نقص طفيف في مزامنة الإصدار بين بيئتين، وهو نوع التفاصيل التي تلتقطها مراجعة التعليمات البرمجية بشكل أسرع من منشور المدونة. نحن نوثقها كما هي بدلاً من تلبيسها. للحصول على تفاصيل حول تقسيم المخطط الذي يخدمه هذا المجمع، راجع مقالتنا حولعزل RLS متعدد المستأجرين.
كيفية الاختيار بين الثلاثة
اختر PgBouncer إذا...
- مجموعة Postgres تتم إدارتها بواسطة CloudNativePG أو Kubernetes بشكل عام
- تريد المجمع الأكثر إثباتًا وتوثيقًا
- القاعدة المستهدفة لكل مثيل من أدوات التجميع تناسبك
اختر Supavisor إذا...
- مئات أو آلاف القواعد وراء نفس الخدمة
- تحتاج إلى تسجيل المستأجرين ديناميكيًا عبر واجهة برمجة التطبيقات (API)، دون إعادة التوزيع
- موجود بالفعل في النظام البيئي Supabase أو على استعداد للاعتماد عليه
اختر PgCat إذا...
- مشاركة التطبيقات موجودة بالفعل أو مخطط لها على مستوى المجمع
- موازنة التحميل والنسخ المتماثل لتجاوز الفشل بدون طبقة تطبيق منفصلة
- مريح مع مشروع أصغر سنًا وأقل توثيقًا من PgBouncer
مهما كان المجمع الذي تم اختياره، فهو لا يحل محل حجم Postgres نفسه. يجب التفكير في حجم التجمع والخادم max_connections معًا، وليس واحدًا تلو الآخر. يؤدي وجود حوض سباحة كبير أمام max_connections منخفض جدًا إلى تحويل التشبع من مستوى إلى آخر. دليلنا حول ضبط max_connections يوضح تفاصيل صيغة التحجيم التي يجب تطبيقها قبل تحديد حجم حمام السباحة الخاص بك.
ما نسأل عنه في أغلب الأحيان
PgBouncer وPgpool-II، ما الفرق؟+
هل يمكننا استخدام PgBouncer مع Supabase؟+
هل يقوم PgCat بإدارة البيانات المعدة في وضع المعاملة؟+
هل Supavisor مفتوح المصدر؟+
لا يوجد مجمع عالمي، فقط ما يناسب إيجارك
PgBouncer و Supavisor و PgCat تحل ثلاثة أشكال مختلفة لنفس المشكلة، وليس ثلاثة إصدارات من نفس الأداة. يظل PgBouncer هو الخيار الأكثر أمانًا عندما يعتمد نظامك الأساسي بالفعل على Kubernetes وCloudNativePG، أو عندما تريد ببساطة المجمع الأكثر توثيقًا. Supavisor تصبح ذات صلة بما يتجاوز عدد معين من القواعد التي تخدم من نفس الخدمة. PgCat يستحق الانعطاف إذا فاتتك المشاركة وتجاوز فشل النسخ المتماثلة على مستوى الشبكة، بشرط قبول نضج مشروع أصغر.
يعرض رمز Aurabase خيارًا متسقًا وغير محايد: PgBouncer في وضع المعاملة، على مستويين، الأسطول المشترك وCNPG المجمع لكل مستأجر مخصص. يبقى هناك استثناءان موثقان، لـ PostgREST ولإدارة المخطط. إذا كنت تريد رؤية هذا المشروع منعزلاً على أرض الواقع وليس على الورق، فإن صفحة الأداء توثق منهجية القياس المرتبطة.