⚡ تثبيت QuestDB — قاعدة البيانات السلاسل الزمنية فائقة السرعة مع دعم SQL على Docker
نشر منصة QuestDB على Ubuntu باستخدام Docker — قاعدة البيانات العمودية مفتوحة المصدر للسلاسل الزمنية وإنترنت الأشياء (IoT) والبيانات المالية مع دعم كامل للغة SQL وبروتوكول InfluxDB.
📦 الملفات والأكواد المطلوبة
قبل البدء، يرجى التأكد من تحميل الأكواد المطلوبة من مستودعنا على GitHub لتتمكن من تطبيق الخطوات مع الفيديو بسهولة.
التثبيت السريع:
wget https://raw.githubusercontent.com/mhmdali94/Docker/main/databases/questdb/questdb-ubuntu.sh
chmod +x questdb-ubuntu.sh
sudo bash questdb-ubuntu.sh
خطوات التنفيذ
1 تحميل السكريبت
wget https://raw.githubusercontent.com/mhmdali94/Docker/main/databases/questdb/questdb-ubuntu.sh
2 منح صلاحية التنفيذ
chmod +x questdb-ubuntu.sh
3 تشغيل المثبت
يقوم السكريبت بتثبيت Docker وتجهيز مجلد التخزين الدائم للبيانات (`./data`) وتشغيل حاوية QuestDB الرسمية على المنافذ 9008 و8812 و9011.
sudo bash questdb-ubuntu.sh
4 استكشاف لوحة الويب وإدخال البيانات
افتح متصفحك وانتقل إلى الرابط http://ip-سيرفرك:9008. نفذ استعلامات SQL التفاعلية، واستعرض المخططات البيانية للسلاسل الزمنية، واربطها مع لوحات Grafana وTelegraf.
http://<your-server-ip>:9008
المنافذ المستخدمة
| المنفذ | الغرض |
|---|---|
| 9008 | Web console (host → container 9000) — no authentication |
| 8812 | PostgreSQL wire protocol — default credentials admin/quest |
| 9011 | InfluxDB Line Protocol ingest (host → container 9009) — unauthenticated |
نظرة عامة
تعد QuestDB قاعدة بيانات عمودية للسلاسل الزمنية (Time-Series Database) فائقة السرعة ومفتوحة المصدر تم تطويرها بلغات Java و++C المتقدمة لتحقيق أقصى معدلات إدخال بدون توقف لجمع المهملات في الذاكرة. تعمل المنصة على المنفذ 9008 (للوحة التحكم التفاعلية وواجهة REST API)، والمنفذ 8812 (لبروتوكول PostgreSQL)، والمنفذ 9011 (لبروتوكول InfluxDB Line Protocol)، مما يتيح للشركات والمهندسين إدخال ملايين السجلات في الثانية الواحدة بزمن استجابة يقاس بالميكروثانية. وتوسع لغة SQL القياسية بكلمات مفتاحية مخصصة للزمن (`SAMPLE BY` و`LATEST ON` و`ASOF JOIN`) لتسهيل الاستعلام عن الأسواق المالية وحساسات IoT وسجلات الخوادم.
لماذا تستخدمه
تعاني قواعد البيانات العلائقية التقليدية (مثل MySQL أو PostgreSQL العادية) من بطء شديد وتدهور في الأداء عند استقبال ملايين السجلات في الثانية وتستغرق وقتاً طويلاً لتجميع مليارات الصفوف المؤرخة. كما تفرض قواعد NoSQL الزمنية (مثل InfluxDB) تعلم لغات استعلام معقدة ومقيدة. تجمع QuestDB بين بساطة وقوة لغة SQL القياسية مع السرعة الخارقة للتخزين العمودي، محققة سرعة إدخال تصل إلى 4 ملايين صف/ثانية مع تجميع تحليلي فوري.
متى تحتاجه
- تجمع بيانات سلاسل زمنية عالية التردد (حساسات إنترنت الأشياء، العدادات الذكية، الأسعار المالية، مقاييس السيرفرات) بملايين النقاط يومياً
- تبحث عن قاعدة بيانات زمنية مفتوحة المصدر ومستضافة ذاتياً تدعم لغة SQL القياسية بالكامل مع مخططات بيانية مدمجة
- تحتاج إلى التوافق الأصلي مع بروتوكول PostgreSQL لربط أدوات التحليل مثل Grafana أو DBeaver بسهولة
- تريد محرك إدخال فائق السرعة يدعم بروتوكول InfluxDB Line Protocol (ILP) من برامج Telegraf وVector أو بايثون
- تحتاج إلى عمليات SQL زمنية متقدمة: إعادة تجميع الفترات الزمنية (`SAMPLE BY`) والربط الزمني المقارب (`ASOF JOIN`)
من يحتاجه
- مهندسو التكنولوجيا المالية (FinTech) ومتداولو الخوارزميات لتحليل تداولات الأسهم والعملات الرقمية الفورية
- مطورو إنترنت الأشياء والتحكم الصناعي (SCADA) لتسجيل قراءات آلاف الحساسات المتصلة
- مهندسو العمليات (DevOps/SRE) لتجميع مقاييس الخوادم وسجلات أداء التطبيقات بدقة متناهية
- محللو البيانات لبناء لوحات متابعة فورية بالاعتماد على استعلامات SQL في Grafana
- أصحاب السيرفرات المنزلية لتسجيل استهلاك الطاقة ودرجات الحرارة واختبارات سرعة الشبكة
حالات الاستخدام الشائعة
- إدخال 100,000 قراءة حرارة واهتزاز في الثانية من حساسات المصانع عبر بروتوكول InfluxDB Line Protocol
- تحويل صفقات الأسهم اللحظية (بالثانية) إلى شموع يابانية تجميعية كل 5 دقائق باستخدام أمر `SAMPLE BY 5m`
- تنفيذ استعلامات `ASOF JOIN` فائقة السرعة لمطابقة قراءات الحساسات مع تقلبات أسعار الطاقة في نفس اللحظة
- ربط لوحة Grafana عبر موجه بيانات PostgreSQL على المنفذ 8812 لبناء لوحات مراقبة حية
- أرشفة سنوات من سجلات السيرفرات مع ضغط عمودي فائق للبيانات على القرص
الميزات الرئيسية
- هيكل تخزين عمودي فائق السرعة مع استغلال تعليمات SIMD لتنفيذ الاستعلامات التحليلية فورياً
- دعم بروتوكولات إدخال متعددة: InfluxDB Line Protocol على 9011، وPostgreSQL wire على 8812، وREST على 9008
- إضافات SQL الزمنية: كلمات `SAMPLE BY` (لتقليل العينات)، و`LATEST ON` (لأحدث حالة)، و`ASOF JOIN` (للربط الزمني)
- لوحة تحكم ويب تفاعلية مدمجة على الرابط `:9008` تتضمن محرر SQL، واستكشاف الجداول، ورسوماً بيانية تفاعلية
- معمارية ذاكرة بدون توقف لجمع المهملات (Zero-GC) مصممة للاستجابة المستقرة في أجزاء من المللي ثانية
- تكامل أصلي مع لوحات Grafana عبر موصل PostgreSQL بدون الحاجة لأي إضافات خاصة
- محرك تخزين متراكم على القرص يوفر نسب ضغط عالية واستهلاكاً منخفضاً لعمليات القراءة والكتابة (I/O)
- نشر منظم عبر Docker مع ربط مجلد `./data` للحفظ الدائم لقواعد البيانات والإعدادات
كيفية الاستخدام بعد التثبيت
- افتح المتصفح وانتقل إلى الرابط http://ip-سيرفرك:9008 لعرض لوحة تحكم QuestDB التفاعلية
- نفذ استعلام SQL تجريبي (مثل: `CREATE TABLE sensors (timestamp TIMESTAMP, device_id SYMBOL, temp DOUBLE) timestamp(timestamp) PARTITION BY DAY;`)
- أدخل بيانات تجريبية عبر SQL أو أرسل بيانات عبر بروتوكول InfluxDB Line Protocol على المنفذ 9011
- في Grafana، أضف مصدر بيانات PostgreSQL جديد برابط `ip-سيرفرك` والمنفذ `8812` وقاعدة `qdb` والمستخدم `admin` وكلمة `quest`
- ضع لوحة التحكم خلف وكيل عكسي مشفر بـ HTTPS (مثل Nginx) مع تفعيل المصادقة بكلمة مرور لتأمين الإنتاج
- أعد سكريبت نسخ احتياطي دوري لمجلد البيانات `./data`
أفضل ممارسات الأمان
- تنبيه أمني حاسم: لوحة التحكم الافتراضية على المنفذ 9008 لا تحتوي على مصادقة؛ احرص على وضعها خلف وكيل عكسي محمي بكلمة مرور (Nginx Basic Auth)
- غيّر كلمة مرور بروتوكول PostgreSQL الافتراضية (`admin`/`quest`) في ملف `server.conf` أو عبر متغيرات البيئة
- أبقِ منفذ InfluxDB 9011 ومنفذ Postgres 8812 محصورين داخل شبكتك الداخلية وشبكة VPN ولا تكشفهما للإنترنت العام
- احمِ مجلد البيانات `./data` بصلاحيات نظام مناسبة بالسيرفر
- حدد معدل الطلبات عبر الوكيل العكسي لحماية واجهة REST API من هجمات الاستنزاف
- حدّث صورة الحاوية دورياً للحصول على التحديثات الأمنية وتحسينات الأداء المستمرة
المنافذ وإعدادات جدار الحماية
تستخدم QuestDB منفذ TCP 9008 للوحة الويب وREST API (المحول من 9000)، ومنفذ TCP 8812 لبروتوكول PostgreSQL، ومنفذ TCP 9011 لبروتوكول InfluxDB Line Protocol (المحول من 9009). في الإنتاج، أبقِ المنافذ 8812 و9011 محصورة داخل الشبكة المحلية، وقم بتوجيه المنفذ 9008 عبر وكيل عكسي مشفر بـ SSL على المنفذ 443.
النسخ الاحتياطي والصيانة
- استخدم أمر تجهيز اللقطات المدمج في SQL: `SNAPSHOT PREPARE;` قبل أخذ نسخ احتياطية لنظام الملفات
- انسخ مجلد `./data` احتياطياً، والذي يحتوي على مجلد قاعدة البيانات `db` والفهارس والأقسام المؤرشفة
- أتمت النسخ الاحتياطي اليومي للمجلدات وارفعه إلى مساحة تخزين سحابية عبر restic أو rsync
- اختبر الاستعادة بربط مجلد البيانات بحاوية تجريبية للتأكد من استرجاع الجداول الزمنية والاستعلام عنها بنجاح
الأخطاء الشائعة
- كشف لوحة التحكم على المنفذ 9008 للإنترنت العام مباشرة دون حماية بكلمة مرور
- ترك بيانات دخول PostgreSQL الافتراضية (`admin`/`quest`) دون تغيير في بيئة الإنتاج
- إنشاء جداول زمنية دون تحديد عمود التاريخ والوقت المخصص (Designated Timestamp) مما يعطل ميزات `SAMPLE BY`
- عدم ربط مجلد التخزين الدائم `./data`، مما يسبب فقدان السلاسل الزمنية التاريخية عند تحديث الحاوية
- استخدام مساحات تخزين شبكية بطيئة (NFS) بدلاً من أقراص NVMe/SSD المحلية لعمليات الإدخال فائقة التردد
استكشاف الأخطاء وإصلاحها
- رفض اتصال PostgreSQL على المنفذ 8812 — تأكد من تفعيل بروتوكول Postgres في `server.conf` وصحة بيانات الدخول
- فشل إدخال بيانات InfluxDB على المنفذ 9011 — راجع صيغة نصوص Line Protocol والتأكد من صحة التوقيت بالنانوثانية
- فشل الاستعلام وظهور 'designated timestamp required' — تأكد من إنشاء الجدول مع تحديد العمود الزمني `timestamp(ts_column)`
- لوحة التحكم لا تفتح على 9008 — افحص سجلات الحاوية بالأمر: `docker logs questdb -f`
- امتلاء مساحة القرص أثناء الإدخال المستمر — اضبط سياسات استبقاء البيانات أو احذف أقسام الأيام القديمة عبر SQL
البدائل
إضافة TimescaleDB لقواعد بيانات PostgreSQL. منصة InfluxDB المخصصة للبيانات الزمنية. منصة ClickHouse التحليلية العملاقة. منصة VictoriaMetrics المتوافقة مع Prometheus. منصة Prometheus لمراقبة وتنبيهات السيرفرات.
متى لا تستخدمه
تجنب استخدام QuestDB إذا كانت طبيعة بياناتك علائقية بحتة وتتطلب معاملات مالية معقدة (OLTP)، ومفاتيح أجنبية (Foreign Keys)، وتعديل وحذف مستمر للصفوف الفردية (حيث صُممت PostgreSQL أو MariaDB لذلك). وإذا كنت تحتاج لتحليل بيانات ضخمة موزعة عبر مئات السيرفرات بحجم بيتابايت، فإن ClickHouse مخصصة للتوزيع العنقودي الضخم.
هل تحتاج مساعدة احترافية؟
توفر PrismaTechWork خدمات بنية تحتية شاملة — من النشر الأولي وتصليب الأمان إلى المراقبة المستمرة والنسخ الاحتياطي التلقائي والدعم المخصص. سواء كنت تحتاج إعداد سيرفر واحد أو شبكة متعددة المواقع، يضمن فريقنا بناء بنيتك التحتية بشكل صحيح وتأمينها بالشكل المناسب وصيانتها باستمرار.
- التثبيت وتجهيز السيرفر
- الإعداد المتقدم وإعداد التوجيه
- تصليب الأمان وتحسين جدار الحماية
- إعداد شهادات SSL/TLS مع Let's Encrypt
- ربط النطاق المخصص والوكيل العكسي
- جدولة النسخ الاحتياطي التلقائي والتعافي من الكوارث
- المراقبة الفورية وتنبيهات الجاهزية
- الترحيل من المنصات القائمة
- استكشاف مشكلات الاتصال والأداء وإصلاحها
- سكريبتات أتمتة مخصصة وعقود دعم مستمر
الأسئلة الشائعة
ما هي البروتوكولات التي تدعمها QuestDB لإدخال البيانات؟
تدعم QuestDB ثلاثة بروتوكولات إدخال رئيسية: بروتوكول InfluxDB Line Protocol على المنفذ 9011 (الأسرع لبيانات IoT والمقاييس)، وبروتوكول PostgreSQL على المنفذ 8812، وواجهة REST API على المنفذ 9008.
كيف أربط QuestDB بلوحات Grafana؟
في Grafana، أضف مصدر بيانات PostgreSQL قياسي. واكتب عنوان السيرفر والمنفذ `8812`، وقاعدة البيانات `qdb`، والمستخدم `admin`، وكلمة المرور `quest`، واضبط وضع SSL على `disable`.
هل تدعم QuestDB لغة SQL القياسية؟
نعم! تدعم QuestDB لغة ANSI SQL وتوسعها بكلمات مفتاحية زمنية مثل `SAMPLE BY` لتقليل عينات الفترات، و`LATEST ON` لجلب أحدث حالة، و`ASOF JOIN` للربط الزمني المقارب.
كيف تحقق QuestDB هذه السرعة الفائقة في الكتابة؟
تعتمد QuestDB على لغتي Java و++C بدون توقف لجمع المهملات (Zero-GC)، والتخزين العمودي المباشر في الذاكرة المعنونة على القرص، ومعالجة تعليمات المعالج المتوازية SIMD، مما يمكنها من استيعاب ملايين السجلات في الثانية.
كم تستهلك QuestDB من الذاكرة العشوائية (RAM)؟
تتميز QuestDB بكفاءة استثنائية ويمكنها العمل بذاكرة تبدأ من 512 ميجابايت إلى 1 جيجابايت للأحمال المتوسطة، وتتوسع بسلاسة لأكثر من 16 جيجابايت لخطوط الإدخال الضخمة متعددة الملايين.