গুগল ক্লাউড তথ্য প্রবাহ
গুগল ক্লাউড তথ্য প্রবাহ বা ডেটাফ্লো হল গুগল ক্লাউড প্ল্যাটফর্ম ইকোসিস্টেমের মধ্যে Apache Beam পাইপলাইনগুলি চালানোর জন্য একটি সম্পূর্ণরূপে পরিচালিত পরিষেবা ৷ [১]
ইতিহাস
সম্পাদনাGoogle ক্লাউড ডেটাফ্লো জুন, 2014 সালে ঘোষণা করা হয়েছিল এবং এপ্রিল, 2015 এ একটি উন্মুক্ত বিটা হিসাবে সাধারণ জনগণের কাছে প্রকাশ করা হয়েছিল। জানুয়ারী, 2016-এ Google স্থানীয় রানার বাস্তবায়ন অন্তর্নিহিত SDK এবং Google ক্লাউড প্ল্যাটফর্ম ডেটা পরিষেবাগুলি অ্যাক্সেস করার জন্য IOs ( ডেটা সংযোগকারী ) সেট অ্যাপাচি সফ্টওয়্যার ফাউন্ডেশনে দান করেছিল । দান করা কোডটি অ্যাপাচি বিমের মূল ভিত্তি তৈরি করেছে ।
ক্লাউডে পর্যবেক্ষণ
সম্পাদনাএই সংযোগের মাধ্যমে ডাটাফ্লো কনসোলে কাজের অগ্রগতি পর্যবেক্ষণ করা যায় ।
কাজের(জব) বিবরণের ভিউতে নিম্নক্তোগুলি দেখা যাবে :
- কাজের কাঠামো
- কাজের লগ
- স্টেজ মেট্রিক্স