الكاتب | CreditEase

تحرير | الرماد

أعلن يى شين تقنية R & D مركز ثلاثة دعم سلاح عملية ذكية وصيانة المصادر المفتوحة في التشغيل والصيانة العالمية المؤتمر CNUTCon التكنولوجيا: UAVStack، الثقب، DBus تثبيت. ما هي التكنولوجيا الأساسية لخلق مثل هذه ودعم عملية ذكية وصيانة سلاح ذلك؟ مع وجهة نظر!

UAVStack هي الخدمات الذكية كومة التكنولوجيا، هو عملية البحث والتطوير والمحافظة على الحل المتكامل. الطائرات بدون طيار UAV هو اختصار، وهذا يعني UAV السماء الزرقاء، ذكي وشفاف لإكمال المهمة. وهي تشمل مهام الروبوت (HIT التي أطلق عليها اسم)، ورصد كامل الأبعاد (رمز UAV.Monitor)، وإدارة أداء التطبيقات (رمز UAV.APM)، إدارة خدمة (قانون UAV.ServiceGovern)، وخدمات الحوسبة الدقيقة (رمز UAV.MSCP)، تجربة المستخدم إدارة (رمز UAV.UEM) وهلم جرا. الذي، وUAV.Monitor + APM جمعها فقط لتشغيل وصيانة البيانات رصد جميع الأبعاد ذكية، ولكنها توفر أيضا رصد في الوقت الحقيقي، والآلية أداة تشخيص المشكلة هي وقفة واحدة كاملة الأبعاد حلول الشاشات + عملية تطبيق وصيانة.

• الموقع الرسمي: الشبكي: //uavorg.github.io/main

• فتح عنوان المصدر: الشبكي: //github.com/uavorg

حاليا UAVStack خط الإيرادات تشمل ما يلي:

يحسب التركيز DBus تثبيت على جمع البيانات وتدفق البيانات في الوقت الحقيقي، وبطريقة غير الغازية حتى نهاية مصدر الحصول على البيانات سهلة ومرونة التشكيل، ويعمل على تدفق متاح للغاية الحوسبة الإطار، فإن البيانات التي تم إنشاؤها في عملية عمل ليتم تجميعها، بعد التحويل إلى تنسيق البيانات العملية JSON موحد (UMS)، وتوفير البيانات لاشتراك مختلف المستهلكين والاستهلاك. DBus تثبيت الطائرات بدون طيار بيانات الرصد كامل الأبعاد التي تم جمعها بطريقة غير الغازية لجمع في الوقت الحقيقي، لتوفير مصدر بيانات التجهيز النهائي منصة البيانات الكبيرة الثقب تشغيل النماذج الإحصائية وتعلم الآلة.

فتح رابط المصدر: الشبكي: //github.com/BriData

وبالإضافة إلى ذلك، DBus تثبيت أيضا يوفر الميزات التالية:

• وهو يدعم مجموعة متنوعة من مصادر البيانات، ونقل في الوقت الحقيقي من البيانات الضخمة

• تصور في الوقت الحقيقي التغييرات مصدر المخطط الحساسية البيانات

• الحمل الأولي ومستقلة تحميل

• موحد بروتوكول الرسائل موحدة، يمكن الاعتماد عليها توزيع الأخبار متعددة القنوات الاشتراك

• دعم الجدول نقاط جمع البيانات

الهندسة التقنية DBus تثبيت

الثقب هو SPAAS (معالجة تيار كخدمة) حل المنصة. البيانات الثقب لتطوير المشاريع الكبيرة وتشغيل وعمال الصيانة والإدارة، وملتزمة تبسيط ومواءمة عمليات إدارة التنمية. اليوم هو عملية نموذجية وصيانة تطبيقات البيانات الكبيرة، الثقب هو عملية تعلم الآلة الذكية وصيانة دعما قويا، خصوصا المشهد لتدفق في الوقت الحقيقي والقريب في الوقت الحقيقي الجري معالجة البيانات. في نفس الوقت، يوفر واجهة مرئية، عملية التكوين الحد الأدنى، ووضع تطوير الأعمال المستندة إلى SQL، وقناع وراء التفاصيل الفنية معالجة البيانات الكبيرة، الحد بشكل كبير من عتبة التنمية والإدارة. تصميم الثقب وحدة تدفق DAG أعلى ترتيب كسورية مجردة، عامة موحدة بروتوكول نقل UMS التجريد رسالة موحدة مراسلة UMS نقل المشترك بروتوكول التجريد.

فتح رابط المصدر: الشبكي: //github.com/edp963/wormhole.

نقطة الألم هي القوة الدافعة للترقيات التكنولوجيا

نحن تحول من العملية التقليدية والحفاظ على عملية التشغيل الآلي وصيانتها، ومن ثم Weimai في النقل الذكية. من خلال البناء المستمر للDevOps toolchain، وقد شكلنا من خلال البعد كله من المراقبة، CI / CD، الاختبار الآلي، الافتراضية تطبيق وتشغيل نظام التشغيل الآلي والصيانة. ومع ذلك، عملية مالية وعملية الصيانة / عملية، ونحن لا تزال تواجه نقاط الألم التالية:

1، آلية التشغيل والصيانة لأنها تحسن تشغيل وصيانة الشيخوخة، وتقلل إلى حد كبير العمل، وتحسين دقة. ومع ذلك، يتم تعريف تنفيذ العمليات المؤتمتة من قبل عملية التنفيذ الاصطناعية، واضحة. مع مرونة وقوة وتوقيت متطلبات النظام صنع القرار لالتحسين المستمر وتشغيل وصيانة معدات التشغيل الآلي، وكانت هناك تأثير هامشي.

• لا يوجد "الحس السليم"، وليس القرارات. هناك عدة احتمالات الأحداث التشغيل والصيانة تتطلب تدخل SRE الحكم والتحليل، من أجل التأكد من ما هو قبل أن تتمكن من إعطاء تعليمات إلى النظام. على سبيل المثال: عندما وجدت وحدة المعالجة المركزية إنذار أن ارتفاع، خدمة هذا لا ينبغي أن خفضت، يجب إعادة تشغيل التطبيق. في الواقع، والناس الذين أصبحوا خبراء في مجال تشغيل وصيانة يصعب تحقيقه، إن لم يكن في SRE، لا يمكن معالجة هذه المشكلة.

• تفتقر للمرونة، التخلفية تدخل يدوي. الوضع النموذجي هو أن الشرطة، والشرطة هي عادة استراتيجيات تقوم على الخبرة من موظفي التشغيل والصيانة لاقامة، ولكن استراتيجيات السوق وتطوير الأعمال المتغيرة بسرعة جعل مسبقا من التاريخ، وليس الانذارات المتكررة، لم تبلغ التي ظهرت في الصحف.

2، IT أكثر وأكثر تقليدية نموذج التعاون "لا يمكن التعامل مع" و. نموذج الأعمال التقليدية تبحث عن R & D والبحث والتطوير لإيجاد تشغيل وصيانة وتشغيل وصيانة نظام للعثور على وضع "خط". وفي الوقت نفسه، لغة IT ولغة الأعمال في كثير من الأحيان "يتحدثون نفس اللغة"، فقد وقعت قراءة خاطئة، مما أدى أيضا في انخفاض الكفاءة.

• فريق العمل الأمل في أي مكان، بسيطة، ظروف التشغيل السريع، وتشغيل الأعمال التجارية لفهم النظام، وبطبيعة الحال، أنهم لا يفهمون IT المصطلحات، وأنها تريد أن تسمع "الإنسان" اللغة.

• أصبحت التشغيل والصيانة SRE مفتاح "عنق الزجاجة"، لا تتم مشاركة خبراتهم وهطول الأمطار.

• R & D لفهم النظام، فهم منطق الأعمال، ولكن "لا" عندما لا يكون هناك تشغيل وصيانة المساعدة SRE (حتى إذا كان هناك أدوات التشغيل الآلي عن بعد)، من أجل حل المشاكل بسرعة الأعمال. أنها تفتقر إلى فهم شامل للبنية التحتية، والتطبيقات المصب المساعد.

3، وفرق العمليات التجارية تحتاج إلى مزيد من الدعم، المحمول، والتفاعل متعدد القنوات، وبالتالي تحرير العين البشرية.

• من مستوى التقارير (الأشخاص الذين يستدير، ويجد الناس شخص) نقلة نوعية لبيانات مركزية والتشغيل الرقمية (نقل البيانات الناس حولها، والناس يبحثون عن البيانات) النموذج هو الاتجاه الكبير. الأساس التقني لهذا التغيير هو فريق العمل (لا داعي للتسجيل في نظام معين، ولا يكون للعثور على زعيم معين أو شخص الاتصال) الانتشار السريع للمعلومات من خلال قنوات مختلفة، لتبادل البيانات.

• يمكن أن التدابير التنفيذية أن تكون مباشرة وكفاءة مع الجزء الخلفي فريق لرجال الأعمال "فهم" اللغة. على سبيل المثال احتياجات التمويل الخروج، ونقل الأموال المخصصة فرق مواكبة النمو في الطلب على الأموال من خلال العاصمة، لكنهم لا يعرفون عبت في الواقع تأثير كبير، وبطبيعة الحال، يمكن أن ينظر إليه من خلال رصد الأعمال، ولكن خصائص الصناعة المالية، مكتب متنقل / السفر هو القاعدة، شروط يكن لديك الوقت للدخول النظام، ولكن من خلال بريد إلكتروني الجزئي، QQ وحتى أكثر ملاءمة.

تصنيفها المزيد من النقاط الألم يمكن اعتبار نوعين من المشاكل:

الشيخوخة النوع من المشاكل: طبيعة التشغيل والصيانة هو تقديم خدمة موثوق بها، ولكن المفتاح لتحقيق هذا الهدف هو جيد الشيخوخة كافية.

نوع بالتعاون المشكلة: إنتاج التعاون البشري لا يمكن فصلها. وعلى الرغم من منصة التشغيل الآلي أو تشغيل سلسلة أداة وصيانة وتشغيل وصيانة العديد من المشاهد لا تزال بحاجة إلى الكثير من التعاون اليدوي.

عملية ذكية وصيانة الطريق من البحوث

تعرف غارتنر خوارزمية تقوم على تشغيل وصيانة (ITOA) التي هي AIOps، وهي عملية وخوارزمية الصيانة ويستخدم خوارزمية مجالات التشغيل والصيانة. في الواقع، لقد هبطت في عملية خوارزمية الآلي ونظام الصيانة لسلسلة أداة DevOps، مثل خريطة ديناميكية خدمة تقديم، APM الأدوات تحليل موضوع زر واحد في الرصد، وتطبيق الافتراضية حساب القدرة المرنة. ومع ذلك، فإننا نعتقد أن هذه لا تزال "أتمتة" فئة، ضرورة أن يكون الحل أكثر ذكاء.

التكنولوجيا المزدهرة الذكاء الاصطناعي، حتى يتسنى لنا أن ندرك أن النظام يعطي "ذكية" هو اتجاه كبير. لAIOps، ونحن نفضل لتفسير هذا: AIOps على وجه التحديد تطبيق تكنولوجيا الذكاء الاصطناعي في مجال تشغيل تكنولوجيا المعلومات والصيانة والتشغيل تغيير المساعدة ووضع الصيانة، وتحسين الكفاءة وإنشاء "الهندسة" عملية قيمة عملية، ولكن أيضا تطور اتجاه DevOps.

الهدف لحل المشكلة مبلغ يصل، ونحن بحاجة إلى أن تصبح نظام AIOps

• أعضاء الإدارة التشغيل والصيانة: تنسيق الناس والنظم، وليس أداة سلبية، ولكن بشكل مباشر في تشغيل وصيانة "مساعد"

• أعضاء من العمليات التجارية دعم: التنسيق والعمل الأشخاص الذين شاركوا في العملية من "مساعد"

• ونظم العمل "المعرفة الكاملة": آليات التنسيق والأعمال التجارية، ونظم الإدارة ودعم الأعمال التجارية

فكيف ينبغي للنظام AIOps البناء؟ أنشأنا المبادئ التالية:

• والهدف هو أن تبدأ من الناحية العملية من الألم، للعثور على المشكلة والصحيح لمكان الحادث لالطيار، بدلا من الحلول AIOps "كبيرة".

• الاستفادة الكاملة من اختيار التكنولوجيا قد يكون أكثر نضجا مفتوحة المصدر التكنولوجيا AI التي يمكن أن تجعل التحسينات اللازمة، ولكن ليس محاولة لتكرار إنشاء عجلة القيادة.

• الاستفادة الكاملة من DevOps الموجودة لدينا toolchain، وليس تعيد اختراع العجلة شامل.

السبب في هذا الاعتبار:

• تكنولوجيا AI ليست "التكنولوجيا المدنية"، على الرغم من أن وضعت لفترة طويلة، ولكن نسبة المدخلات والمخرجات التي قد لا ترغب في استخدام الربيع، هر، مثل RabbitMQ المباشر كومة التكنولوجيا مفتوحة المصدر. لذلك أول "نقطة" شيء، ثم ينظر في "الوجه". المشهد المناسب من قطع المقبل.

• وعلى الرغم من AIOps سيجلب تخريبية عملية التفكير الأبعاد وتأثير، ولكن أيضا ما إذا كان النظام القائم إلى برنامج إعادة اختراع العجلة ذلك؟ AIOps DevOps الاتجاه التطوري، سلسلة أداة متكاملة مع عمق DevOps هو السبيل الوحيد. حتى AIOps ليس ليحل محل نظام التشغيل الآلي الحالية والصيانة، ولكن نظرا لنظام المخابرات الموجودة.

• إعادة استخدام جودة الأصول الحالية لتكنولوجيا المعلومات، وتعظيم قيمة الأصول ضروري أيضا للنظر فيها.

ومن الجدير بالذكر أن ثبت، آلية التشغيل والصيانة هي أساس عملية ذكية والصيانة. إذا كان هناك أي آلية صب تشغيل وصيانة التقنيات والحلول، AIOps فارغ. مع استعارة حية وتشغيل وصيانة أنظمة الأتمتة، نظام مراقبة الحصول على البيانات مثل العين البشرية، يتم استخدام الأذن لاستشعار الواقع، مثل التنفيذ عن بعد من أيدي الناس وتستخدم قدم لتغذية الواقع. نظام AI مثل الدماغ البشري، الذي يتلقى تصور شكلتها سلسلة من عملية صنع القرار، والذي هو عملية "المعرفية"، ثم عن طريق التغذية المرتدة أو نتائج تعكس "الحكمة".

AI هو الشكل نحقق الروبوت مهمة (HIT التي أطلق عليها اسم). ومن الذكية لتوجيه التشغيل والصيانة من "الدماغ" للنظام هو البرنامج الإنسان مثل السلوك. وينبغي أن يكون الروبوت بعثة قادرا على:

HIT فلسفة التصميم هي مجردة قدرات مهمة الروبوت. وهو يتألف من ثلاث خدمات أساسية:

تفاعل : التفاعل. تنفيذ واجهة غير واجهة المستخدم الرسومية الإنسان، تنفذ حاليا جانبين هما: التفاعل الطابع كوي (نظام الدردشة الداخلية / إخطارات نظام IM العام، مثل قناة صغيرة / ف ف)، التعرف على الكلام وتركيب الكلام (الجهاز الطرفي المحمول). وهو وسيط الإنسان إلى التواصل مع النظام، وتلعب المعلومات الترجمة، دور نشر المعلومات، بحيث حاجة الناس لم تعد أن تكون مرتبطة إلى واجهة نظام معينة لاستكمال الأعمال ذات الصلة.

اعتقد : صنع القرار. هذا هو الفرق الأساسي بين الآلي، فإنه يحتاج إلى أن يفهم بالنيات الإنسان، في حين جمع سياق بيئة التنفيذ، وفقا لنية لجدولة خطة التنفيذ وتنفيذ وإجراء تعديلات على الخطة. وفي الوقت نفسه، في عملية التنفيذ الفعلي من خلال ردود الفعل على التفاعل من خطة التنفيذ ومعالجة المعلومات من أجل أداء وطريقة تشبه الإنسان من وصف (اللغة الطبيعية). ويستخدم التكنولوجيا الأساسية بما في ذلك معالجة اللغة الطبيعية، وخرائط المعرفة، والتعلم الآلي، تقنية البحث.

Handson : إعدام. هذا هو الفرق الأساسي بين الدردشة الروبوت، وفقا لخطة التنفيذ التي تقدمها فكر وأنظمة تتعلق خطة التكيف API لاستكمال تنفيذ تزامن الخدمة وعملية الخدمة الفعلية. ويحتاج أيضا إلى تقديم التغذية الراجعة للفكر، من أجل تحقيق اتخاذ القرار متكرر (ردود الفعل + تعديل)، بل سوف تؤدي أيضا إجراءات ونتائج تغذية العودة إلى التفاعل، لمساعدة الناس على فهم حالة التنفيذ (لغة غير الطبيعية)

خطة الكلمة

ويتركز برنامجنا AIOps مهمة على الروبوت، وذلك باستخدام معالجة البيانات تعلم الآلة منصة كبيرة والنماذج الإحصائية، وtoolchain DevOps بشدة عملية ذكية وصيانة متكاملة. يمكنك تفسير هذا المخطط من المستويات التالية:

DevOps toolchain يوفر جودة عالية الروبوت مهمة HIT المعرفة خريطة بناء البيانات الخام

المهمة الأساسية HIT من الروبوت القدرة على الخريطة والمعرفة المستمدة من مناطق محددة نموذج حساب. وتشمل مجالات التدريب لدينا حاليا نموذج نظام API، والسياق الصرف شخصية، طوبولوجيا الخدمة، خطة التنفيذ، وتشخيص المشكلة. يرتبط خريطة المعرفة المعرفية لتحقيق التكنولوجيا الأساسية، ومعرفة كيفية بناء الأتمتة هي مفتاح مفتاح خريطة. ناضجة DevOps toolchain يمكن أن توفر البيانات الخام عالية الجودة لخريطة بناء المعرفة الآلي.

ويشمل نموذج API API معلومات وأمثلة على تطبيق المعلومات / الخدمة الوصفية، هذه المعلومات يجب أن تبقي دائما مواكبة العالم الحقيقي. يوفر UAV مراقبة كامل الأبعاد صورة من بيانات التطبيق، وذلك بسبب استخدام الطائرات بدون طيار الصغيرة نفسها ذكي (التركيز على صناعة السيارات في اكتشاف وصيانة الذات والتكيف التلقائي) تصميم وتطبيق البيانات صورة نفسه الوقت لمواكبة العالم الحقيقي. HIT مهمة الروبوت من خلال التطبيق المباشر للخدمة بيانات الإسناد صورة، وفقا للنموذج API المرتبطة البنية المعرفية، فإننا يمكن أن تولد نموذج API. خصائص، حماية طبيعية عالية الجودة المتناهية الصغر ذكاء من الخريطة نموذج المعرفة لبناء API الأتمتة.

وكمثال آخر، طوبولوجيا الخدمة هي العلاقة بين استجابة الخدمة، في الهندسة المعمارية خدمة الصغرى، أصبحت هذه العلاقة معقدة على نحو متزايد. توفر خدمة خريطة كاملة الأبعاد UAV المراقبة، والتي تقوم أيضا على فكرة البيانات الصغير الذكي يمكن أن تكون متزامنة في الوقت المناسب مع العالم الحقيقي. HIT عليك سوى خدمة الخرائط الإسناد، وفقا لخدمة النموذج المعرفي الخريطة طوبولوجيا يمكن بناؤها على المعرفة.

وبالإضافة إلى ذلك، يمكن للسلسلة طلب البيانات تساعد أتمتة بناء علاقة توقيت، وخصائص المشروع CI / CD الموظفين ويمكن للبيانات المرتبطة تساعد تطبيقات الخرائط بناء المرتبطة مع فريق (من مشاكل عدم التطبيق، ومن ثم تتبعت رمز وأفراد)، وحالة اختبار المدخلات والمخرجات العلاقة API يمكن أن تساعد في بناء معالم النموذج، والمعلمات الافتراضية جمعية الدلالي.

يوفر كامل الأبعاد UAV المراقبة نموذجا البعد مهمة تدريبية شاملة من البيانات الخام الروبوت HIT

في الوقت الحقيقي رصد + عملية عمق وتطبيق الصيانة يوفر حلا (الشكل) UAVStack في مراقبة + APM هو. عملية ذكية ونظام الصيانة، والأبعاد الكاملة للبيانات الرصد أنه جمع مصدر البيانات تعلم الآلة الأصلي والنماذج الإحصائية. بيانات الرصد تغطي البعد كله من أداء البنية التحتية، والتطبيق / أداء الخدمة، وقطع الأشجار، وسلسلة المكالمة، كومة موضوع، تجربة العميل ومقاييس العمل، وتطبيق صورة، وملامح الخدمة.

التطبيق / خدمة صورة : رصد المسبار تطبيقها تلقائيا تكنولوجيا تحليل البيانات الوصفية يجب أن يكون استخراج كومة، وتشمل واحدة أمثلة تطبيق الهامة URL الذي أساليب واجهة الخدمة وURL، وذلك باستخدام والعملاء (MQ / DB / رديس / NoSQL / المتشعب / دوبو، الخ) وكذلك الوصول URL.

التطبيق / أمثلة صورة بيانات الخدمة

أداء التطبيق : بما في ذلك تطبيق الكتل، أمثلة التطبيق، الوسيطة التطبيق / JVM، مكونات الخدمة، مكونات العميل، URL، تجمع اتصال قاعدة بيانات ومؤشرات الأداء الأخرى

سجل التطبيق : سجلات مختلفة ولدت من قبل التطبيق، تؤيد ترشيح القواعد.

تطبيق الأداء وبيانات السجل المثالي

تطبيق مؤشرات الأداء البيئي : VM / المادي على مستوى النظم وعلى مستوى عملية المقاييس، مثل وحدة المعالجة المركزية والذاكرة، والاتصالات، وشبكة المرور، قرص IO، الخ

تطبيق الأداء البيئي سبيل المثال مؤشرات البيانات

سلسلة المكالمة : يحتوي على أسلوب خدمة / العميل / المرحلة، حيث الطبقة / طريقة، تستغرق وقتا طويلا، وحالة طلب حزمة، حزمة استجابة، الخ

المثال البيانات سلسلة المكالمة

خريطة الخدمة : دعوة العلاقة بين الجيل التلقائي للخدمة

خدمة سبيل المثال بيانات الخرائط

البيانات كومة الموضوع : JVM تفريغ الموضوع + كل وحدة المعالجة المركزية موضوع، بيانات استهلاك الذاكرة

البيانات موضوع كومة سبيل المثال

بيانات عن الخبرات ويب العميل المتصفح : تحميل الصفحة، وترك الصفحة، خطأ JS، طلبات اياكس، والمعلومات الجغرافية، IP العميل، الخ

مستعرض ويب تجربة العميل البيانات (اياكس) مثال

مؤشر الأعمال : تطبيقات يمكن أن توفر نقطة مؤشرات مخصصة دفن أو وضع السجل

أمثلة للبيانات المؤشرات التجارية

واصلت الحافلة البيانات DBus تثبيت، وبيانات الرصد على التكيف كاملة الأبعاد من إدخال وتخزين البيانات

على الرغم من أن بيانات الرصد التي جمعتها الأبعاد الكاملة من الطائرات بدون طيار، ولكن لا يزال لا يمكن استخدام هذه البيانات مباشرة تفعل التعلم الآلي والنماذج الإحصائية. والسبب في ذلك يرجع إلى احتياجات التخزين والاستعلام الخاص بهم يتم تعريفها وفقا لاحتياجات في مجال رصد في الوقت الحقيقي، بحيث يصبح لديهم الصفات التالية:

• هل في مصادر ذاكرة مختلفة، مثل MongoDB، في مطاطا البحث، RocketMQ هناك بيانات خدمة تخزين صورة معتدلة المخزنة في سجل التطبيق وسلسلة الدعوة تطبيقات التخزين الأداء والبيانات مقاييس الأداء الأساسية؛

• مع تعاريفها مخطط مختلفة، مثل مخطط بن تنسيق السجل، تنسيق JSON، تنسيق السجل عادي، مقاييس الأداء المخطط وسلسلة نداء مختلفة.

• استراتيجيات التغيير المختلفة، مثل خدمة البيانات صورة وعلى أساس التغيرات في رفع مستوى التطبيق من وقت لآخر، قد تكون بيانات السجل القضية.

ناقل البيانات وصفة DBus تثبيت هو حل هذه المشاكل الثلاث.

DBus تثبيت يمكن أن تدعم مجموعة متنوعة من مصادر البيانات، لا يمكن أن يتحقق إلا من خلال تكوين لرسو السفن غير الغازية. محطة جمع يضم مجموعة سجل قاعدة البيانات المحطة، محطة جمع سجل، على أساس مختلف القطعة المسايل نهاية مجموعة مخصصة، هذه الغايات جمع البيانات في الوقت الحقيقي التزامن لكافكا، والانتهاء من جمع البيانات.

مصادر البيانات دعم متعددة DBus تثبيت

DBus تثبيت أشكال مختلفة يمكن تحويلها إلى شكل موحد (تنسيق UMS). وسوف يستند على أشكال مختلفة والبيانات تحويل البيانات واستخراج المتعلقة التكوين، البيانات في الوقت الحقيقي وحساب التحليلي. لتطبيق مؤشرات الأداء ومقاييس العمل، على سبيل المثال: تنسيق البيانات هو استخدام تنسيق ملف MDF (UAV في الشكل)، والذي هو نوع واحد من البيانات الهرمية في تنسيق JSON، في حين UMS DBus تثبيت تنسيق البيانات الناتج النهائي هو نوع من الجدول الوحدة الأساسية للبيانات، فمن الضروري لشد البيانات، عدد وافر من قطعة من البيانات MDF UMS الموافق السجل.

صيغ DBus تثبيت دعم مختلف موحدة

DBus تثبيت لديه القدرة على التكيف تلقائيا لتتناسب مع نوع وشكل هذه التغييرات. وهو يدعم بالإضافة الديناميكية للمؤشر، وبيانات MDF من الطائرات بدون طيار حتى لو كل وجلب أنواع جديدة المؤشر، وهذه مؤشرات جديدة تحل في حد ذاته لا يؤثر على البيانات نفسها، كما أنها تدعم التغييرات المخطط ديناميكية، بيانات الاستشعار تلقائيا اسم العمود ونوع البيانات، شكل UMS تسجيل نسخة من المعلومات والبيانات والأعمدة، إذا وجدت أن لا تنتمي إلى نفس إصدار البيانات ستتم ترقية رقم الإصدار، وتوليد نسخة جديدة من البيانات. على سبيل المثال، الإصدار الجديد كحقل أكثر من RC406 (أداء التطبيق، المتشعب رموز استجابة) من الإصدار القديم.

DBus تثبيت تنسيق إصدار تتكيف تلقائيا مع تغير

البيانات الكبيرة تجهيز المشهد الهدف الثقب، والتعلم الآلي والنماذج الإحصائية تستند على معالجة بيانات الرصد كامل الأبعاد

الثقب مهمة المنتجين هي لحساب نموذج للروبوت. الثقب سبارك القائمة، وكافكا يمكن الوصول إلى بيانات السجل على الانترنت لتدفق، ولكن أيضا الوصول إلى البيانات التاريخية HDFS حاليا تجهيز الدفعات، على مزيد من سبارك المفهوم المجرد ونموذج عملية جديدة، قد يتم تنفيذ المستخدم من خلال واجهة المستخدم تكوين بسيط لتنفيذ وإدارة تدفق العمل، المستخدم ببساطة اختيار تأتي البيانات من أين تذهب، أي نوع من المنطق يتم تنفيذه على تيار لبدء تدفق العمل. الثقب يعتمد فقط الهبوط متعددة المغسلة، ويدعم تيار العملية، يمكن للتيار أيضا القيام ببعض عمليات التوسع البيانات قبل غسله HBase.

العمارة التكنولوجيا الثقب

في الوقت الحاضر، يتم تطبيق دينا HIT مهمة تدريب الروبوت موضوع "مشكلة تشخيص" الحوسبة النموذج من قبل تدريب الثقب، فإن عملية الإنتاج الفعلي استخدام بعض آلة التعلم الكلاسيكي والنماذج الإحصائية، وهم:

• نموذج التنبؤ البيانات سلسلة الاتجاه: يمكنك التنبؤ اتجاه مؤشرا هاما للاتجاه المستقبل لبعض الوقت على أساس الأيام القليلة الماضية.

• مؤشر المرتبطة نموذج مركب: تحديد أي تركيبة المؤشر هو شرط كاف لتحديد شذوذ.

• نموذج يجمع بين ناشز مؤشر تحديد الهوية: يتم تحديد مؤشر تلقائيا على ناشز مزيج التوقيت.

• غير طبيعي السلوك نموذج الاعتراف ارتباط عبر العقد متعددة: جذر سبب مشاكل تحليل نموذج العقد.

على سبيل المثال، HIT مهمة الروبوت مدفوعة وفقا لخطة تنفيذ الثقب كل عشر دقائق لاستخراج نافذة أحدث قصيرة الأجل من البيانات (عدة أيام) من HBase، HIT ب "تشخيص المشكلة" خريطة المعرفة لتحديد [نموذج التنبؤ الاتجاه بيانات السلاسل] و [ تحديد القيم المتطرفة مؤشر محفظة نموذج] لمدة عشرة القيم المتطرفة البيانات الإضافية لتحديد والتنبؤ الاتجاه المستقبلي للمؤشرات ساعة واحدة، وجعل التجميع الإحصائي المناسب، يمكنك الحصول على مؤشر مراقبة تدريجي لتأخير لمستوى 10 دقائق، التلقائي مؤشرا هاما للاتجاهات وتحديد القيم المتطرفة ويتوقع الرسم البياني المستقبل ساعة واحدة، ولكن يمكن أيضا أن تستند على مستوى خطورة من القيم المتطرفة في حالة تأهب. يمكننا أن نرى نظام الإنذار المبكر كامل للتدخل غير البشرية، استنادا إلى نموذج آلة التعلم والقريب في الوقت الحقيقي توقعات البيانات الإضافية خارج، عندما دقة نموذج أعلى، وتحذيرات تكون أكثر دقة.

وكمثال آخر، HIT مهمة الروبوت بواسطة "تشخيص المشكلة" خريطة المعرفة وحدد ، من خلال تطبيق CPU عالية الأداء وجدت على موضوع يرتبط بها من بيانات كومة يمكن أن نعرف التي تسببت موضوع CPU عالية، موضوع كومة كومة متاحة ويمكن أن تترافق مع خدمة صورة، والتي وجدت URL التي، من خلال مؤشرات أداء الخدمة المرتبطة URL خدمة الخدمات ذات الصلة يمكن فهم ما إذا كان الوصول المتزامن عالية نظرا لمحات خدمة المرتبطة يمكن التي تتبع نظام المنبع وURL في المكالمات الخدمة، والتي قد تتأثر نظام المصب، والبيانات المرتبطة سلسلة الدعوة التي يمكن ان يعزى ذلك بسبب طلب خدمة، حتى طلب للفترة المقبلة من توقعات الذروة المرورية.

تنفيذ المهمة HIT الروبوت من خلال خطة تنفيذ نموذج API

مهمة هامة أخرى للروبوت هو الفرق بين النظام العادي: يمكن أن ينظر إلى النظام عن طريق رمز العام "آلة" لبعض الأمور كاملة، والنظام نفسه، فإنه لا يفهم "ما أفعله". مهمة الروبوت هو يحركها هدف، فإنه يقوم بإنشاء خطة التنفيذ وفقا لنموذج API ونماذج المعرفية الأخرى (خرائط المعرفة) واستخدام نموذج API لتنفيذ خطة التنفيذ، وطبيعة تنفيذ الخطة هي دعوة إلى API نظام DevOps.

إلى النظام على شبكة الإنترنت على سبيل المثال، نعطي أهداف مهمة الروبوت، "الليلة الساعة 19:30 على علامة بوابة خط السلطة." الروبوت مهمة من خلال "النية الأساسية لفهم" أن نعرفه هو أن يقود "، انقر فوق أحد نشر" ميزة CI / CD نظام هابل لنشر "علامة الكهربائية بوابة" النظام. نموذج API يساعد مهمة الروبوت من قبل الجملة الكلمات الرئيسية، وتحليل، والارتباط، ولربط نظام CI / CD، أيضا بالتعاون مع وظيفة API، واستخراج يتطلب اثنين API buildApp وdeployApp، ولكن أيضا يساعد على تحقيق اثنين المعلمات ملء API. وأخيرا، والاعتماد على توقيت المرتبطة نموذج API لتحديد الترتيب تنفيذا لAPI قليلة، بالإضافة إلى وقت التنفيذ لوضع اللمسات الأخيرة على خطة التنفيذ. بالطبع، أثناء تنفيذ تنفيذ الخطة ستعتمد على "مشكلة تشخيص" النموذج المعرفي.

هذا مدفوعة بتحقيق الهدف، وهناك العديد من السيناريوهات تطبيق، مثل السماح للروبوت للقيام خط مهمة تسجيل البيانات ذكي لصفقة مساعدة مع هذه المشكلة، وحتى دعم التعاون العملي.

بناء فريق AIOps

وأخيرا، والحديث عن فريقنا. وأعتقد أن في مواجهة AIOps، ونحن سوف التفكير في كيفية تشكل فريق. أعتقد أن النظام الإيكولوجي هو مماثل لمنظمة العفو الدولية والبيانات الكبيرة، هناك نوعان من أدوار أساسية: العلماء AI AI ومهندس الميدان (FE). منظمة العفو الدولية السابق تشجيع تطوير العلم والمعرفة وإنشاء نظام AI جديد، وهذا الأخير هو علم منظمة العفو الدولية إلى مناطق معينة من الإنتاج والحياة، لخلق قيمة واقعية.

يتم وضع فريقنا لمنظمة العفو الدولية FE، هو فريق الهندسة التكنولوجيا AI، يجب أن يكون هذا الفريق العديد من الخصائص:

• تكنولوجيا AI إلى فهم كامل وسيد الحالية

• اختيار أكثر نضجا مفتوحة المصدر التكنولوجيا AI هو السبيل الوحيد

• التشغيل والصيانة في مجال التكنولوجيا (مثل مراقبة والتكنولوجيا الحاويات، CI / CD، تشخيص المشكلة، وما إلى ذلك) هو واضح، فمن الأفضل الخبراء

• مشهد من تشغيل وصيانة الحقل هو مألوف، ومعيار باييون وي مينغ، والمنطق، والمبادئ

فريق العمل لدينا أساسا نوعين من الأدوار:

• المهندس بيانات خوارزميات: تكنولوجيا خوارزمية الماجستير والتكنولوجيا AI، مع وجود درجة معينة من القدرة الهندسية، مجال المعرفة لفهم التشغيل والصيانة

• خلفية خدمة المهندس: تكنولوجيا خدمة سيد، لديها بعض الفهم للتكنولوجيا AI، على دراية تطوير / اختبار / تشغيل وصيانة وتشغيل وصيانة تجربة مع

إنشاء الروبوت في وقت سابق فريق عمل يقوم على نموذج فريق الظاهري. لأن الوجه من مناطق جديدة في البحث والتطوير / تشغيل وصيانة النظام يحتاج إلى محاولة نماذج جديدة، وخوارزميات وضع الطلاب، والطلاب يتم سحبها خدمة خلفية وتشغيل وصيانة معا من قبل الطلاب. التفاعل من خلال المعرفة وتبادل الخبرات وغيرها من الوسائل، حتى يتسنى لنا متزامنة تدريجيا في التفاهم. وتوقع الجميع لإتقان نهاية كاملة لإنهاء العملية. وبالإضافة إلى ذلك، مع تطور عملية ذكية والصيانة، والطائرات بدون طيار، الثقب، DBus تثبيت وفرق أخرى وافقت تدريجيا في الهندسة المعمارية والتكنولوجيا، وغيرها من جوانب الإرساء.

CreditEase مفتوحة المصدر

مجتمع التكنولوجيا CreditEase هو جزء مهم من تكنولوجيا البناء البيئية يجب وضع دائرة حول الرسالة، والرسالة هي لإثبات التكنولوجيات المناسبة، وبناء متكامل المجتمع من النقد الأجنبي. تمتلك أشكالا مختلفة CreditEase الكلية التقنية، ينبغي للعالم أن يصدق التكنولوجيا (عدد الجمهور قناة الدقيقة)، يجب على الجمعية العامة وتكنولوجيات الاتصال الأخرى. CreditEase المجتمع أساسا لموظفي الداخلية والشركاء وهواة التكنولوجيا العامة.

من بينها، لا تزال التكنولوجيا مفتوحة المصدر لفتح، لتعزيز التكنولوجيا والنمو معا هو واحد من الأهداف الأساسية للمجتمع التقني. اليوم شملت رسميا في المصدر المفتوح UAVStack، الثقب، DBus تثبيت، وما إلى ذلك، فقد كان سلسلة سبعة المفتوحة لتكنولوجيا البرمجيات. رؤية المزيد من الموقع الرسمي المصدر المفتوح كلية التقنية

سلسلة CreditEase برمجيات المصدر المفتوح

نص اليوم الموصى بها

انقر أدناه لقراءة الصورة

مساعدة الطلاب المتخرجين، مبرمج الشباب التي تشهد نموا سريعا 12 نصائح