إذا لم يكن هذا أول كبير السنة الجديدة لعلي الاستهلاك واحد، وأكثر الناس يعرفون Flink في وقت لاحق ربما قليلا. ووفقا لتقارير وسائل الإعلام الأجنبية دويتشه تبدأ الأوروبي، مجموعة علي بابا ل103300000 $ (90 مليون يورو) الاستحواذ على بدء شركة تتخذ من برلين مقرا بيانات الحرفيين. تم تأكيد هذا الخبر من قبل عدد من وسائل الإعلام من علي في وقت لاحق.

لأن الحرفيين البيانات لديهم نوع من التكنولوجيا المتطورة نيابة عن محرك تيار تجهيز البيانات الكبيرة اليوم، مما يسمح علي، وتسبب هذه الخطوة الصناعة ذات الصلة اكتساب أي تداعيات الصغيرة. على وجه الخصوص، ومجموعة علي أجري بعد إعادة هيكلة تنظيمية رئيسية، الحاجة إلى الاعتماد تقنيات الحوسبة السحابية أكثر ذكاء في نمط تنمية أكثر تنوعا علي، واقتناء الحرفيين البيانات يعتبر تخطيط قوي للاستراتيجية الجديدة.

الدم علي Flink

قراء غير مألوفة مع الحرفيين البيانات، سيكون من السهل جدا أن يغيب بسبب تلك بعنوان "بابا الحصول على بيانات الشركة الألمانية" الكثير من المعلومات الواردة في هذه البيانات مشوق. حتى لو كان ذلك الاستحواذ على ما يقرب من 100 مليون $ التعبير، بيع بيع بيع في التاريخ علي مع ما يقرب من 400 مليار $ حجم الجسم، قبل أن الاستحواذ على النقيض من الجوع من 9.5 بليون $، 3670000000 $ فاز البطاطا YOUKU، الخ ، فمن الصعب في التمييز أيضا.

ولكن في الواقع، الحرفيون البيانات يد تمسك كبير دفق البيانات تجهيز محرك اليوم واحدة من عدد قليل من التكنولوجيا المتطورة، ودعا Flink. الأساسية Flink هو البيانات تدفق تدفق محرك التنفيذ لتوزيع الحوسبة دفق البيانات يوفر توزيع البيانات والاتصالات البيانات وظائف الخطأ والتسامح. شركات التكنولوجيا Flink تعتمد على نظام لإنشاء البيانات الكبيرة تيار تجهيز الحل المحرك يمكن أن يكون أكثر من المعقول أن تحصل على نتائج بسرعة أكبر في صنع القرار الشركات. سوف البيانات الحرفيين Flink في أوائل 2015 المساهمة في المجتمع ويصبح مشروع أباتشي المستوى الأعلى في المجتمع، الحرفيون البيانات بعد عقد تيارات موازية متعددة من البيانات منصة الحرفيين تصبح النسخة التجارية من Flink.

ووفقا للموقع الرسمي الحرفيين البيانات، التي منصة دا من قبل أباتشي Flink وتكوين دا إدارة التطبيقات "، بما في ذلك التكامل المستمر وتزامن حاوية / تسليم المستمر (CI / CD)، وقطع الأشجار، وظائف قياس المؤشرات المتاحة بسهولة وعن حالة دمج وحدات التخزين، وتوفر الشركة للعملاء عرض واحد من أجل فهم كل من تطبيقات معالجة دفق البيانات. "عملائها تشمل بابا، مجموعة ING (ING)، نيتفليكس، اوبر، Lyft ،، باي، عواء، مثل هواوي وعاصمة واحدة.

الحرفيين البيانات في قائمة العملاء من حيث أننا بسهولة وجدت علي، والذي دعونا نظهر في الوقت الحقيقي 2-11 سنة عند رقم المعاملة على علي يحدق في مقر الشاشة الكبيرة، وراء Flink تعتمد على التكنولوجيا. قطعة شاشة العرض الرقمية، تحتاج إلى تجميع البيانات أجزاء مختلفة من التقرير، وذلك من خلال قاعدة بيانات ضخمة من حركة مرور الشبكة، وضرورة أن تكون محسوبة ضمن ميلي ثانية تأخير الوقت، وتتلخص النتائج في عرض واحد ما في وسعنا لاحظت النتائج من خلال شاشة، وهذه التكنولوجيا هي دفق البيانات الكبيرة تكنولوجيا معالجة محرك في عصر اليوم من AI تصبح ركيزة أساسية من الأسباب.

إذا إنشاء Flink النظام التقني هو الطلب القوي على عهد منظمة العفو الدولية، علي الطلب الأساسية. ولهذه الغاية، علي Flink بعد إدخال الفريق الداخلي لخلق الطرفة. تم الكشف عن أن بابا جميع الأعمال التجارية، بما في ذلك جميع الشركات التابعة بابا اعتمدت في الوقت الحقيقي بنيت Flink منصة الحوسبة القائمة. وبالإضافة إلى ذلك، سوف تشو جينغ، نائب رئيس مجموعة علي بابا، الذي أعلن قبل الإصدار بابا الداخلية Flink الطرفة ستكون مفتوحة رسميا في يناير 2019، وهو ما يعني علي، وأساسا أن تستثمر في المستقبل باعتباره الطرفة مساهمة المجتمع Flink.

تشو جينغ، نائب رئيس مجموعة علي بابا، الناس

ويمكن القول، على طول الطريق وصولا الى الاستثمار Flink، وقد ثبت علي رؤية استراتيجية نفسه في البيانات الكبيرة الحوسبة.

أولا، علي مبكرا لرؤية تطوير الأعمال تحتاج الحلول في عصر البيانات الكبيرة. الصين لديها السنوات العشر خدمة السحاب للمؤسسة الحوسبة الممارسين التاريخ علي، السطر الأول شهدت كمية كبيرة من البيانات لتحقيق اندلاع الضغوط المشاريع التجارية، والحاجة إلى الإنتاجية العالية، وانخفاض الكمون الحوسبة الحلول لخدمة البيانات الكبيرة البيانات على نطاق واسع من الساحة التجارية. وفي أوائل عام 2004، عندما أعطى جوجل تصل خلقه الخاص من البيانات الكبيرة خارج الخط حساب المنشئ، ويتم احتساب البيانات على نطاق وPB أيضا مابريديوس عنق الزجاجة لا يمكن التغلب عليها. بعد تطوير سبارك حتى الآن، مع مجموعة كبيرة من البيانات يتم احتساب حيز لحظة تأخير الاستجابة. اليوم، وتدفق المهيمن الحوسبة الموزعة وسوف يقود محرك البيانات الحسابية الكبيرة تجلب في الوقت الحقيقي للبيئة بيانات الشركات القريب. تحقيقا لهذه الغاية، وعلي بابا الحوسبة تقسيم منصة كبار الخبراء التقنيين في Yunqi لا تسأل أشار المؤتمر إلى أن في عام 2014 Flink مع ميزات متقدمة أخرى من إنتاجية عالية، وانخفاض الكمون وقذف مفتوحة المصدر صناعة المحركات بيانات كبيرة، سوف Flink 2015 ، يمكن توقع المستقبل مقدمة من فريق R & D لخدمة المشهد الأعمال بياناتهم فائقة على نطاق واسع.

ثانيا، الاعتراف بأن الفضاء علي أرضية التكنولوجيا مفتوحة المصدر مع قطاع الأعمال Flink الانصهار الجينات الخاصة بهم. كما تدفق أباتشي أعلى البيانات الكبيرة محرك الحساب، Flink يست وحدها. هذا العام جوجل بدعم شعاع، DataTorrent دعم مفتوح المصدر أباتشي أبيكس أصبحت رائدة في هذا المجال. وفي الوقت نفسه، Samza العاصفة، ينكدين من تويتر أيضا بحكم مزايا فريدة من منصب قيادي. وفي هذا الصدد، يمكن أن نرى علي تطورها على Flink "عدم التوافق" الفضاء، موين اعتقد المستخدمين الحاجة إلى وجود موحد كبيرة تكنولوجيا محرك البيانات، فقط وفقا لمنطق الأعمال الخاصة بهم لوضع مدونة في مجموعة متنوعة من السيناريو، سواء كانت كاملة أو الإضافية البيانات حجم البيانات، أو عن طريق تجهيز الوقت الحقيقي، ووضع خطة يمكن أن تدعم بشكل كامل. "هذا هو علي اختيار Flink خلفية والعقل." موين التمثيل.

ثالثا، وإدخال خط علي Flink من الأعمال، وبالتالي التوسع في كومة التكنولوجيا إلى الأمام المشهد الفضاء Flink مع ميزة. Flink بشكل واضح أعلى تحقيقها في تطبيق علي للتخطيط. Flink على تطبيق على نطاق واسع في علي بابا، وكشف موين، بابا Flink، الحجم الحالي وصلت لأول مرة على الانترنت فقط المئات من الخوادم مليون وحدة من هذا الحجم على نطاق عالمي هي واحدة من عدد قليل، تراكم على أساس Flink، والداخلية الاحتياطي للبيانات على مستوى الدولة هو بالفعل PB نطاق، والآن كل يوم على منصة الحوسبة Flink، وتجهيز البيانات لديها أكثر من تريليون، ويمكن أخذ أكثر من 472 مليون مرة في الزيارة الثانية خلال فترة الذروة، فإن السيناريو الأكثر شيوعا هو بابا المزدوج 11 الشاشة الكبيرة.

Flink الدعم الفني علي ضعف أحد عشر مهرجان التسوق شاشة عرض كبيرة للنتائج في الوقت الحقيقي ضخمة

الرابع، علي Flink الى الواجهة من ساحة المعركة، والابتكار والتركيز على التغيير الحقيقي. قبل أن يبدأ علي التحول Flink، Flink ل "مجموعة موحدة من كبرى تكنولوجيا المحركات البيانات" تم إنشاؤه. كبير محرك حساب البيانات بين دفعة وتدفق حساب، وليس أكبر البيانات إلى محرك حساب، يسكن الوقت بطرق مختلفة من ذاكرة التخزين المؤقت، اعتمادا على المساحة مخبأ دفعة بعد الهبوط في بطء تخزين على المدى الطويل، وتدفق حساب القدرة على نقل المقصود ضمن وقت محدد مسبقا أو البيانات إلى العقدة المقبل. Flink مقارنة مع نفس الفترة من البرنامج، مثل سبارك، العاصفة، وما إلى ذلك، وميزة هو أنه يمكنك أن تأخذ في الاعتبار النظامين حساب في وقت واحد في محرك الحساب، ولكن لا يمكن "موحدة" كما كومة. وتحقيقا لهذه الغاية، اقترح علي بابا على Flink إطار API الموحد الجديد، واستخدام DAG (محدود الرسم البياني احلقي) API. "طوبولوجيا كله يمكن أن تكون متكاملة دفعة تدفق حدة دلالية، وحساب كله لا حاجة للتمييز بين تيار الحوسبة أو دفعة الحوسبة، ضرورة التعبير عن احتياجاتهم فقط."

وقد تقرر مستقبل Flink في هذا الاتجاه علي تكنولوجيا الجينات. لا تسأل الجمعية العامة بشأن المقترح Yunqi المستقبل Flink ثلاثة اتجاهات: أولا، اسمحوا مكان Flink في أكثر المشاهد لتصبح محرك الحوسبة التيار دفعة واحدة. ثم التبديل بسهولة بين أبعد دفعة والتدفق، دفعة وتدفق حدود واضحة على نحو متزايد. ثانيا، دعونا الحصول على مزيد من اللغات بيئيا Flink، وليس فقط جافا، لغة سكالا، حتى مع انخفاض آلة التعلم بيثون، لغة العودة. أيضا، والكمال العلوي مكتبة Flink في آلة التعلم خوارزميات، في حين Flink سوف تتعلم إلى أن تنضج إلى الجزء العلوي من الجهاز، وعمق التعلم مشاهد التكامل.

ليس من الصعب أن نرى، والمزايا التقنية Flink تسمح علي أن نرى سيناريوهات الأعمال على نطاق واسع من المتوقع في خط مع دعمهم، لبناء مستقبل التعلم العميق للمشهد من الحاجة إلى إدماج تدفق دفعة، وتطوير مشهد الهبوط أكثر انفتاحا وذكاء القائمة، وتوسيع Flink البيئة.

تحتاج علي لتوسيع خندق الفني

مشروع Flink هو حقل كبير من معالجة البيانات النجم الصاعد الأخيرة ببطء. على ميزة التكنولوجية لدينا في "في عمق فهم التكنولوجيا الأساسية Flink"، فضلا عن فريق علي نشر في مقالين في المجتمع Yunqi لها، و"مبرمج" المجلة "لقد كان Flink بما فيه الكفاية قوية بعد قال بابا:؟ لا يكفي" و " لماذا اختيار بابا أباتشي Flink؟ "التفسير إذا تمت مفصل جدا.

لخص، Flink يمكن أن يقال Flink 2015 الاستقرار والسلامة وتساءل على نطاق واسع بعد علي R & D، من خلال تغيير الهندسة المعمارية، وطبقة وسطى من الابتكار في مجال الأعمال، والتكامل عملية الحساب، وتطوير واجهة محول التكامل، وما إلى ذلك فاتحة مزايا التطور الكبير لدت من جديد.

سوف يكمل الاستحواذ على الحرفيين البيانات وعلي إحراز مزيد مما لا شك فيه التكامل بين الموارد البيئية كامل Flink من Flink أكثر ملاءمة لتخطيط التنمية. ومع ذلك، لأن بعض من منافسينا بدأوا يدركون القيادة Flink علي في التكنولوجيا، Flink علي في تحقيق المستقبل لتعزيز حقيقة أن البيانات الكبيرة الحوسبة الزعيم، ولكن أيضا كامل من كثير من المجاهيل.

أولا، قبل الحصول Flink المورد مستقلة عن دعم الحرفيين البيانات والمساهمات مفتوحة المصدر لخارطة الطريق تقنيتها تلبية توقعات العملاء بسهولة أكبر. هوى علي اكتساب Flink الحق المطلق في التنمية، والمساهمة والمشاركة في الحماس المجتمع أو ضعفت نسبيا.

لقد شهدنا في السنوات الأخيرة Samza تفتقر إلى نعمة والتنمية من مستخدمي الثقيلة من ينكدين بعد صراع في المصدر المفتوح. أباتشي يصبح مشروعا إطار معالجة أعلى تيار في وقت مبكر من 2014 قبل فترة طويلة للدخول على المرحلة 1.0، ولكن هذه المرة قد ذهب Flink من خلال العديد من التكرارات إلى الإصدار 1.8. وقال قائد الفريق سام Samza ينكدين لهذا الغرض Samarth شيتي في مؤتمر صحفي عقد في 1.0 Samza، عندما أول نظرة لتجهيز تيار والإطار تجهيز تيار موجود نادرا قادرة على التعامل مع حجمها أو مشاكل فنية على LinkedIn، و "على سبيل المثال، قمنا ببناء حاجز Samza وجمعية المضيف الوظائف الإضافية. هذه الوظائف لا يمكن أن تستخدم عندما أباتشي Flink وأطر أخرى." من الواضح، علي المساهمة في المجتمع في Apache Flink فقد تغير الوضع. اليوم، السيطرة علي Flink من مساهمة كبيرة Flink ميزان واحد بين طبعة التجارية والمجتمع، وربما ستكون هناك تغييرات جديدة.

وعلاوة على ذلك، البيانات الكبيرة الحالية تدفق الحوسبة اختراقات تكنولوجية منافسة جدا ومركزة، والحاجة خندق الفني علي أيضا أن يكون انطلاقة جديدة. على سبيل المثال، تم إنجازه حتى علي نفسه بفضل الاتصال الحالي إلى API سوف تعمل على مستكشف، Samza كمكتبة جزءا لا يتجزأ مباشرة في التطبيق وتشغيله على أي إدارة الموارد على غزل، بحيث الحوسبة محرك الخدمات الأساسية نسبيا أكثر شفافية. وبالإضافة إلى ذلك، دعم SQL أصبحت الآن ساحة المعركة الرئيسية من تدفق وسائل الاعلام، كافكا وشرارة قد ارتكب لدعم إنشاء قذيفة التفاعلية باستخدام SQL.

ثالثا، كما الحوسبة تيار البيانات الكبيرة يمكن أن توفر معلومات بشكل سريع صنع القرار، المستخدم يتسارع الهجرة إلى مكان الحادث البيانات في الوقت الحقيقي لوضع دفعة التقليدية، التي دفق تقنيات الحوسبة في الهندسة المعمارية المبتكرة حين تحقيق اختراقات ينبغي أيضا إيلاء الاهتمام ل فعالية التقارب بين الأصول البيانات التقليدية. مثل، تحققت أشياء Flink في عملها ACID زعت الحوسبة أطر تيار، ومفهوم زعت أقفال الاتساق مخبأ توزيع بيئة التخزين حل فعال الأشياء. وقال الحرفيين بيانات الشريك المؤسس والرئيس التنفيذي لشركة كوستاس Tzoumas هم براءة اختراع هذه التكنولوجيا، "نحن تسمح للشركات للتخلص منها قواعد بيانات أوراكل مكلفة ومعقدة حقا، والتي توفر حاليا المعاملات ACID بالنسبة لهم، وبالتالي يسمح لك لتمديد تقنية جديدة تسمح لك لتنفيذ التعليمات البرمجية المخصصة "، وقال أيضا:" ولكن هناك بعض القيود واضحة، مثل قاعدة بيانات أوراكل Flink ليس API متوافق ".

وفي هذا الصدد، شرارة بسبب عدم دعم بنية سبارك API جديد وتتدفق من التعامل مع جلسة رفيعة المستوى، مما يتيح القرار أرورا وظائف دفعة متقدمة مهندس البيانات نيتفليكس نيتفليكس لترحيل اختار أباتشي Flink تدفق العملية.

رابعا، علي Flink بعد الحصول على ملكية الأعمال التجارية، ونحن بحاجة إلى أن تكون أكثر وضوحا وتخطيط الأعمال الهبوط Flink. وفي هذا الصدد، أبيكس يبدو أن تكون قدوة جيدة. DataTorrent تجهيز منصة جوهرها RTS المحرك إلى أباتشي مفتوحة قبل عامين، عندما يمكن أن تتخذ بالفعل الاستفادة من نطاق تحجيم غزل الطلب وخطأ قدرات التسامح من خلال HDFS. هذا Flink ما زال يبدو غير ناضجة بعد. ولكن في تطور لاحق، الجدول DataTorrent أكثر وأكثر تطرفا، مثل الرئيس التنفيذي غي Churchward DataTorrent أعلن DataTorrent بمناسبة تشمل الميزات الجديدة الرئيسية توسيع الدعم من خلال التكامل مع SQL الكاهن والتحليل، والتعلم الآلي وAI يتحقق عن طريق وPMML بيثون وظيفة، من خلال التكامل مع يرول تدعم قواعد معالجة الحدث المعقدة، وكذلك التخزين والتشغيل لتسجيل وتشغيل من وجهة نظر العديد من الميزات مثل الوقت، من اتجاه منصة للسماح للتطوير التطبيقات البرمجية المبتكرة DataTorrent إلى نوع من الفوضى. في فبراير 2018، في غي Churchward أعلنت أنها ستقدم تدفق تطبيقات البيانات لتحقيق 90 يوما من التكنولوجيات المدمرة ونموذج الأعمال التخريبية، DataTorrent إفلاس. من الواضح، منذ تدفق الحوسبة وتجهيز الدفعات في الوقت الراهن لا يزال لديه دور أكثر تحديدا في المشهد، علي التزاما قويا لتكامل تدفق دفعة أيضا بحاجة إلى دعم واضح من المشهد سيكون أكثر إقناعا.

خامسا، كما هما الأكثر ملاءمة المنافسين علي سحابة، والأمازون أو Microsoft تحققت بالفعل استضافت في الوقت الحقيقي خدمة تحليل تدفق عالية السرعة، على ما يبدو علي الحوسبة السحابية ينبغي مواصلة تحسين كومة Flink الجري. على سبيل المثال الأمازون كينسيس من الواجهة الأمامية للخادم التطبيق (على سبيل المثال، ملقمات ويب) أو عملاء الجوال (الهواتف المحمولة وغيرها من الأجهزة النقالة أو جهاز تقنيات عمليات) حقنه مباشرة في تيار البيانات، ويمكن أن يتم بث وتحسب من قبل EMR (سبارك استنادا على سبيل المثال تيار EMR إطار الحساب)، ويخزن البيانات في مخزن كائن أو على الأمازون DynamoDB S3.

ووفقا لبيانات MarketInsightsReports ومن المتوقع أن تحليل السوق تدفق وسائل الاعلام العالمية في عام 2025 سوف تصل 47750000000 $، 2017-2025 سوف ينمو بنسبة 34.98. وقال في ورقة بيضاء جديدة في IDC، بحلول عام 2025، فإن ما يقرب من 30 من ما يسمى ب "الكرة البيانات العالمية" تكون المعلومات في الوقت الحقيقي. لحظة، البيانات الكبيرة، AI، وتسريع تم دمج الشبكة الفعلية في تدفق الحوسبة تعلم الآلة، والإطار الذكاء الاصطناعي. بابا Flink بناء منصة على أساس رسميا في عام 2016، وبدأ البحث وتوصية من بابا لتحقيق هذين السيناريوهين. جميع بابا الأعمال الحالية، تتضمن بابا اعتمدت جميع الشركات التابعة في الوقت الحقيقي بنيت Flink منصة الحوسبة القائمة. ويعتقد ذلك، ثم، Flink ستكون تحت علي الساحة غنية، مع تطور أسرع.

في العام الماضي، عندما يحين الوقت يقع في الرئيس التنفيذي لشركة ما تشانغ يونغ لتمرير، المطلوب تشانغ يونغ ما تكنولوجيا الجينات يمكن أن يحقق المزيد من علي، علي، وتحديد المواقع كاملة من أذهان الناس في تسويق التكنولوجيا لدينا المزيد من الألوان.

وفي هذا الصدد، فإن الأبحاث ديناميكية عمق في هذا المجال المدير التنفيذي التقني والمستثمر كه جيا وو ييتشو الصندوق يعتقد أن هذا الاستحواذ هو علي في التفكير الجاد والتخطيط الفني، جنبا إلى جنب مع معينة سيناريوهات تدفق دفعة لها، سحابة العامة أو سحابة خاصة يمكن تعبئتها وفقا منصة دفعة flink / سير العمل، يمكننا أن نرى علي القصد الاستراتيجي من الاحتياطيات الفنية. وفي الوقت نفسه، يعتقد وو ييتشو أيضا أن هذه الصفقة قد تكون أكثر تأثير بعيد المدى أن البائعين سحابة تنسحب قبل الصوف مفتوحة المصدر العام، إذا تحكم امتصاص مستمرة منصة مفتوحة المصدر، ومن ثم على مستقبل سياسات ترخيص البرمجيات مفتوحة المصدر على السحابة العامة قد تختلف. ثالثا، أن ننظر أبعد قليلا، وقالت أنها يمكن أن تكون بداية كبيرة مساومة احتياطيات منصة التكنولوجيا، ونمط البيئي ومستقبل الخدمات السحابية سوف تتأثر.

المزيد من المحتوى المثير، اهتمام وسائل الاعلام التيتانيوم إشارة الصغرى (ID: taimeiti)، والتيتانيوم أو تحميل وسائل الاعلام التطبيقات