تجربة Unison، الجزء 4: من الحافة إلى السحابة
الحلقة الأخيرة من سلسلة «تجربة Unison». اكتشف كيف يمكن أن تصبح البرمجة الموزعة أسهل بكثير مما هي عليه اليوم – وممتعة فعلًا في الكتابة
بدأت الأجزاء السابقة من سلسلة «تجربة Unison» بالنظر إلى الميزة المحورية في اللغة، وهي الشيفرة المعنونة بمحتواها (content-addressed code)، التي تجعل هوية الدالة تعتمد على ما تفعله لا على اسمها (فالأسماء مجرد تسميات). ثم بحثنا كيف يؤثر ذلك في طريقة تنظيم الشيفرة وإدارة الاعتماديات باستخدام فضاءات الأسماء. وأخيرًا درسنا القدرات (abilities) في Unison، وهي نظام تأثيرات جبري يوفر إمكانات مثل معالجة الأخطاء أو حقن الاعتماديات.
هذه الخصائص وحدها تتيح لـ Unison تجاوز ما تقدمه لغات البرمجة السائدة اليوم: إعادة تسمية بلا عناء، وغياب «جحيم الاعتماديات»، وإمكانية تقييد الحسابات ذات التأثيرات الجانبية دون الإضرار بقابلية القراءة، وهذا غيض من فيض. تسلك Unison طريقًا مختلفًا وتضع «تجربة المبرمج» في المقام الأول في الوقت نفسه، ولهذا فهي جديرة بالاستكشاف.
لكن لدى Unison ورقة أخرى في جعبتها: Unison Cloud. ليست مفتوحة المصدر ولا تُستخدم إلا ضمن نسخة تجريبية مغلقة، ومع ذلك فبفضل الميزات المذكورة أعلاه يمكن أن تجعل البرمجة الموزعة أسهل بكثير مما هي عليه اليوم – وممتعة فعلًا في الكتابة!
وليس هذا كل شيء: يمكن توقع مكاسب في الأداء أيضًا، بفضل نموذج «نقل الحوسبة إلى البيانات»، في مقابل نهج «نقل البيانات إلى الحوسبة» الشائع عمليًا.
فهل تكون هذه هي السحابة التي وُعدنا بها؟
الانتقال إلى البعيد
يتكون دعم Unison للحوسبة الموزعة – وللحوسبة الشبكية عمومًا – من ثلاث قطع. الأولى هي واجهة البرمجة المتاحة للمستخدمين، وتوجد في فضاء الأسماء distributed. ويتمثل تجريدها المحوري في القدرة Remote، التي تتيح لك إطلاق حسابات على عقد بعيدة وانتظار نتائجها.
القطعة الثانية هي عميل Unison Cloud؛ فإلى جانب إعداد الوصول إلى خدمة السحابة يوفر الدالة run. تعالج هذه الدالة القدرة Remote بتفسيرها على أنها IO + Exception، ويمكن عندئذ التعامل معها محليًا:
run : '{Remote, Http, Atomic, Channels, Scratch} a ->{IO, Exception} a
والقطعة الأخيرة هي تنفيذ خادم Unison Cloud: تقاسم الوقت، والاتصال، وتتبع حالة العنقود، وما إلى ذلك. يتضمن العميل والخادم معًا منطق التسلسل والشبكات – كل تلك الأمور المملة والضرورية التي تفضّل ألا تفكر فيها. الخادم هو ما لا نستطيع استخدامه بعد – لكن بوسعنا إلقاء نظرة خاطفة على ما هو قادم.
عندما تكتب أنظمة موزعة في Unison، فأبسط عملية ستتعامل معها هي تفريع حساب ليعمل على عقدة بعيدة باستخدام forkAt:
forkAt : Location g -> '{g, Remote, Exception} t ->{Remote} Task t
تقبل الدالة Location – وصفًا مجردًا لخادم واحد أو لمجموعة خوادم (منطقة). وهنا سيُنفَّذ الحساب في النهاية.
الوسيط الثاني هو الحساب نفسه. وينتقل إلى العقدة البعيدة بالآلية ذاتها التي صادفناها من قبل: فكلما فرّعنا (fork) مكتبة عبر Unison Share، تنتقل شيفرة Unison عبر الشبكة. وتعتمد العملية على تجزئات الدوال، وبصورة أعم على فكرة الشيفرة المعنونة بمحتواها.
يجب أن تحصل العقدة البعيدة على الدالة التي تطابق تجزئتها ما مُرِّر وسيطًا إلى forkAt، مع جميع اعتمادياتها (مرة أخرى، تمامًا كما في التفريع). وقد يستغرق ذلك عدة رحلات ذهابًا وإيابًا عبر الشبكة، إذ قد يحتفظ الخادم المستهدف محليًا بالرسم البياني للشيفرة كاملًا أو بجزء منه فقط.
قد يستخدم الحساب نفسه القدرة Remote (للتخاطب مع عقد أخرى)، وقد يرمي استثناءات، ويستخدم أي قدرات يدعمها الموقع (سنصل إلى ذلك لاحقًا). ويعبّر عن كل هذا النوع '{g, Remote, Exception} t. والتنصيص ' أساسي هنا: فهو يشير إلى شيفرة مؤجلة التقييم، وهي بعد إزالة التسكير مجرد thunk من الشكل () ->{g, Remote, Exception} t.
لاحظ أيضًا أن التعارضات وأخطاء الإخلاء وتضارب الأسماء لا يمكن أن تحدث، لأن كل شيء يعمل على مستوى التجزئات. يستطيع مشرف واحد تنفيذ شيفرة تعتمد على إصدارات مختلفة من مكتبة Unison الأساسية دون أن يكترث لذلك إطلاقًا.
مهمة، لكنها ليست monad
استدعاء forkAt يعطينا حسابًا يستخدم القدرة Remote ويعيد Task، أي حسابًا قيد التنفيذ على عقدة ما (بعيدة أو محلية).
قد يذكّرك Task بـ Future أو Promise في لغات أخرى. وهذا صحيح من بعض الوجوه. فمثلًا تتيح Remote.empty! إنشاء مهمة جديدة يمكنك إكمالها لاحقًا إما بقيمة أو بخطأ عبر Remote.tryComplete.
لكن بما أن Unison توفر خيوطًا خفيفة وبرمجة بأسلوب مباشر (لا بأسلوب monad)، فلن تجد أي flatMap أو عمليات أخرى لربط عدة مهام. بدلًا من ذلك تنتظر المهمة بـ await، وحين تتوفر نتيجتها تستخدمها لحساب القيمة التالية:
await : Task a ->{Remote} a
أين مهمتي
من الخصائص الأساسية للبرمجة الموزعة في Unison التحكم الدقيق في مكان تشغيل الحسابات. ومع أن الفكرة العامة هي «نقل الحوسبة إلى البيانات» لا «نقل البيانات إلى الحوسبة»، يظل ممكنًا (بجهد يسير) أن تفعل الأمور بكفاءة أقل مما كان يمكنك.
لنأخذ مثالًا بسيطًا مأخوذًا مباشرة من التوثيق التمهيدي لفضاء الأسماء distributed:
example1 loc =
t1 = forkAt loc '(1 + 1)
t2 = forkAt loc '(2 + 2)
await t1 + await t2
تطلق هذه الشيفرة حسابين في الموقع المعطى loc (على الأرجح بالتوازي) ثم تنفذ await للنتيجتين. تذكّر أن الانتظار يحدث محليًا – أي على العقدة التي تنفذ الدالة example1. وبالتالي تُرسَل نتيجتا المهمتين t1 وt2 من loc البعيد إلى الموقع المستدعي. في هذه الحالة تكون البيانات واختزال النتائج (+) تافهين فلا يهم الأمر، لكنه قد يصبح مشكلة عمومًا.
وهذا مثال معدّل قليلًا يحاول تقليل البيانات المنتقلة بين العقد:
example2 loc =
use Nat +
t1 = forkAt loc '(1 + 1)
t2 = forkAt loc '(2 + 2)
t3 = forkAt (task.location t1) '(await t1 + await t2)
await t3
قد تسأل لماذا تُفرَّع t3 عند task.location t1 – أي حيث عملت t1 – بدلًا من loc ببساطة. فقد يدل loc على منطقة واسعة يمكن تفريع الحسابات فيها، لا على عقدة بعينها. في هذه الحالة نضمن أن t3 تعمل على الأقل على العقدة نفسها التي عملت عليها t1. أما t2 فقد تنتهي على عقدة أخرى. وفي كل الأحوال تنتقل بيانات أقل بين العقد.
كل شيء يتعلق بما هو غائب
لا سحر في الأمر – فتحديد مكان تشغيل كل جزء من الحساب وكيفية دمج النتائج قد يكون هو التعقيد الجوهري لمجال مسألة البرمجة الموزعة – لكن من السهل ألا ننتبه إلى ما هو غائب عن المقاطع البرمجية أعلاه.
انظر: لتشغيل دالة على عقدة بعيدة، سلّمناها ببساطة إلى forkAt. ولنحصل على نتيجتها استدعينا await فحسب. لا تسلسل، ولا قرارات صعبة بين JSON وProtobuf (فهي تُتخذ نيابة عنا)، ولا إعداد اتصالات، وهكذا. ومع ذلك يبقى الاستدعاء البعيد مختلفًا عن المحلي، لأنه يحتاج إلى القدرة Remote. ولهذا لا نقع في مغالطة RPC. ومع ذلك فهذا على الأرجح أقرب ما يمكن الوصول إليه لجعل الاستدعاء البعيد يتصرف كالمحلي مع البقاء آمنين. فقد اختفى معظم (وربما كل) التعقيد العرضي.
أستطيع تخمين ما يدور في ذهنك: قد تحدث أخطاء، لكن يمكن التعامل معها بالشكل الصحيح. بالفعل، يمكن إضافة إعادة المحاولة عبر معالج قدرة لـ Remote ينتج حسابًا آخر من Remote (هذه المرة مع تفعيل إعادة المحاولة عند أعطال الشبكة، انظر Remote.retrying). وبالطريقة نفسها يمكنك إضافة المهلات، وعزل الموارد (bulkheading)، وقواطع الدوائر، وغيرها.
وتأمل هذا: إجراء ترقية متدرجة يتلخص في استخدام تجزئة دالة جديدة في خدمة معروضة للعالم الخارجي – دون حاجة إلى إعادة نشر الملفات التنفيذية عبر مزارع الخوادم. تتولى Unison توزيع تجزئات الدوال الصحيحة عند أول استدعاء. وفي الأثناء تواصل التجزئات القديمة العاملة بالفعل عملها دون تغيير.
مجموعات بيانات شبيهة بـ Spark
فوق Remote وTask توفر Unison بعض البنى عالية المستوى. إحداها Seq – بنية بيانات موزعة مؤجلة التقييم. يمكنها نمذجة مجموعات بيانات موزعة على عقد كثيرة، حيث يفوق حجم البيانات الكلي ذاكرة أي عقدة منفردة.
تشرح سلسلة رائعة من المقالات كيف صُممت هذه البنية، لذا سأكتفي بأن أقترح قراءتها!
المواقع المقيّدة النطاق
من المهم التأكيد أن المواقع ليست متماثلة. بل إن كل موقع محدد بالقدرات المتاحة للشيفرة التي تعمل فيه.
ففي Unison Cloud الحالية (النسخة التجريبية المغلقة) مثلًا، يمكن تشغيل الحسابات بهذه القدرات:
{Remote, Http, Atomic, Channels, Scratch}
ويعني ذلك عمليًا، مثلًا، أن الإدخال والإخراج العشوائي غير متاح، لأن القدرة IO غير مضمّنة. لكن بوسعنا التخاطب مع عقد أخرى في السحابة، وإرسال طلبات HTTP، والاحتفاظ ببعض الحالة القابلة للتغيير في الذاكرة، وتبادل الرسائل عبر القنوات، وحفظ الطلبات مؤقتًا في ذاكرة تخزين.
تتيح لك هذه القدرات إنجاز الكثير، بينما تستطيع المنصة ضمان الأمان والعزل التام للدوال التي تنفذها.
وبطبيعة الحال قد تقدم مواقع أخرى مجموعة مختلفة من القدرات. وقد تمنح هذه قوة أكبر، لكن ربما بتكلفة إضافية.
حاسوب Unison
مجتمعةً، تجعل كل هذه الأمور عقد نشر Unison Cloud تعمل كحاسوب واحد كبير. يبدو أجمل من أن يكون حقيقيًا؟ في معظمه – نعم. فـ Unison موجودة فقط كنسخة تجريبية مغلقة، وكما يعلم الجميع، الشيطان يكمن في التفاصيل.
كتابة البرامج الموزعة في Unison أنيقة وصديقة للمبرمجين: إنها بالضبط نوع الحوسبة الذي تود ممارسته. لكن عاجلًا أم آجلًا ستحتاج إلى التكامل مع العالم الخارجي. وإنجاز كل هذه التكاملات سيتطلب جهدًا كبيرًا.
نقطة حاسمة يجب تذكرها: Unison نظام مغلق ومعزول. جزء من أناقتها يأتي من كون كل شيء مكتوبًا بـ Unison – وهذا أيضًا نقطة ضعف، لأن كل شيء يجب أن يُكتب بـ Unison. وبالتالي ستحتاج كل مكتبة أدوات تحبها إلى نظير لها في Unison.
ومع ذلك قد تكون Unison مهيأة للتعامل مع هذه المشكلة. فسنحتاج في النهاية إلى واجهة للدوال الأجنبية (FFI) لنتمكن من استدعاء، مثلًا، خوارزمية عددية أصلية على بيانات مخزنة محليًا على عقدة. والقدرة ذات المعالج الخاص بها ملائمة تمامًا لهذا النوع من التكامل.
السحابة عند الحافة
إلى جانب «السحابة»، هناك اتجاه آخر: حوسبة الحافة (edge computing). الفكرة هي نقل الحسابات قريبًا من المستخدم – إما إلى جهازه نفسه (كالهاتف الذكي) أو إلى مكان قريب منه (كبرج اتصالات خلوي أو خادم حافة تابع لشبكة توصيل محتوى). وإذا كانت حوسبة الحافة تهمك، فلعلك صادفت «نقل الحوسبة إلى البيانات»: وهو بالضبط المفهوم الذي تطبقه Unison Cloud.
وليس هذا صدفة؛ فـ Unison ونموذجها يلائمان هذه الحالة بشكل خاص. إرسال الحسابات إلى الحافة سهل – فهي الآلية نفسها مجددًا – ولا يتطلب سوى تجزئة الدالة المراد تنفيذها وبعض النظراء الذين يمكن جلب تلك الدالة منهم. والأهم أن حسابات Unison تعمل في بيئة معزولة (sandbox). وهذا يشبه ما توفره WebAssembly، حيث يُعدّ ميزة أمنية أساسية.
يقوم العزل على قدرات Unison. لنقل إننا أعلنّا أن موقع حافة معينًا لا يجوز له تنفيذ سوى دوال تستخدم قدرات محددة. عندئذ نتأكد من أنه لن تُنفَّذ أي عمليات أخرى (بشرط ألا تكشف لغة Unison «أبوابًا خلفية» غير آمنة – وهذا هو الحال حتى الآن).
وفوق كل شيء، العملية بأكملها خفيفة جدًا وغير مرئية للمبرمج. لا يُرسَل إلا الشيفرة (التجزئات) اللازمة لتشغيل دالة معينة: هي بالضبط، لا أكثر ولا أقل! وفوق ذلك نحصل على لغة برمجة وظيفية ذات جمع نفايات وصياغة مباشرة للحسابات ذات التأثيرات. وهذا يبدو واعدًا!
ما التالي؟
بهذا تنتهي سلسلتنا القصيرة عن Unison. وإلى أن تصدر نسخة تجريبية مفتوحة من Unison Cloud، لا يسعني إلا أن أقترح التعرف على اللغة في صورتها أحادية العقدة. وبالنسبة لي، كانت بلا شك تجربة مفيدة وملهمة جدًا.
أتطلع إلى رؤية Unison تكتسب زخمًا أكبر، وآمل أن أكتب يومًا ما شيفرة Unison مفتوحة المصدر.