অভিবাসন

অ্যাপাচি হাডুপ থেকে ইলুমে মাইগ্রেশনে বেশ কয়েকটি পদক্ষেপ জড়িত, সাধারণত নতুন পরিবেশের সেটআপ দিয়ে শুরু হয়, তারপরে ডেটা এবং অ্যাপ্লিকেশনগুলির স্থানান্তর এবং অবশেষে পরীক্ষা এবং অপ্টিমাইজেশান হয়। এখানে প্রক্রিয়াটির একটি সাধারণ রূপরেখা রয়েছে:

1. প্রস্তুতি : এতে থাকা ডেটা, অ্যাপ্লিকেশন এবং নির্ভরতা সহ আপনার বর্তমান হ্যাডোপ স্থাপনাটি বুঝুন। রূপান্তরটিতে কিছু হারিয়ে যায়নি তা নিশ্চিত করার জন্য সমস্ত প্রাসঙ্গিক বিবরণ নথিভুক্ত করুন।

2. কুবারনেটস এনভায়রনমেন্ট সেটআপ করুন : আপনার সাংগঠনিক প্রয়োজন অনুযায়ী আপনার কুবারনেটস ক্লাস্টার ইনস্টল এবং কনফিগার করুন। এটি আপনার ইলম-পরিচালিত স্পার্ক ক্লাস্টারগুলির ভিত্তি হিসাবে কাজ করবে।

3. ইলাম ইনস্টল করুন : হেলম ব্যবহার করে আপনার কুবারনেটস ক্লাস্টারে ইলুম স্থাপন করুন, কুবারনেটসের জন্য একটি প্যাকেজ ম্যানেজার। আপনার স্পার্ক ক্লাস্টারগুলি পরিচালনা করতে ইলাম সঠিকভাবে কনফিগার করা আছে তা নিশ্চিত করুন।

4. ডাটা মাইগ্রেশন : আপনার Hadoop ক্লাস্টার থেকে আপনার নতুন পরিবেশে ডেটা স্থানান্তর শুরু করুন। এর মধ্যে আপনার কুবারনেটস ক্লাস্টার দ্বারা অ্যাক্সেসযোগ্য একটি বিতরণ ফাইল সিস্টেমে ডেটা স্থানান্তরিত করা জড়িত থাকতে পারে, বা যদি এটি আপনার নতুন আর্কিটেকচারের অংশ হয় তবে একটি এস 3 সামঞ্জস্যপূর্ণ স্টোরেজ সিস্টেমে।

5. আবেদন মাইগ্রেশন : আপনার স্পার্ক অ্যাপ্লিকেশনগুলি হ্যাডোপ পরিবেশ থেকে নতুন কুবারনেটস পরিবেশে স্থানান্তরিত করুন। এটি হ্যাডোপ ইয়ার্ন এবং কুবারনেটসের মধ্যে পার্থক্যের সাথে খাপ খাইয়ে নেওয়ার জন্য আপনার অ্যাপ্লিকেশনগুলিতে পরিবর্তনগুলি জড়িত থাকতে পারে।

6. নির্ভরতা আপডেট করুন : আপনার অ্যাপ্লিকেশনগুলির যে কোনও নির্ভরতা আপডেট করুন, যেমন এইচডিএফএস থেকে নতুন স্টোরেজ অবস্থানে ডেটা উত্স পরিবর্তন করা।

7. পরীক্ষা : নতুন পরিবেশে আপনার অ্যাপ্লিকেশনগুলি সঠিকভাবে চলছে তা নিশ্চিত করার জন্য পুঙ্খানুপুঙ্খ পরীক্ষা পরিচালনা করুন। এর মধ্যে কার্যকরী পরীক্ষার পাশাপাশি পারফরম্যান্স টেস্টিং অন্তর্ভুক্ত করা উচিত যাতে আপনার অ্যাপ্লিকেশনগুলি হ্যাডোপ পরিবেশে যেমন তারা করেছিল তেমন সম্পাদন করছে তা নিশ্চিত করার জন্য।

8. অপ্টিমাইজেশান : আপনার পরীক্ষার উপর ভিত্তি করে, সেরা পারফরম্যান্সের জন্য আপনার কুবারনেটস এবং ইলুম কনফিগারেশনগুলি অপ্টিমাইজ করুন।

9. নজরদারি : একবার সবকিছু স্থানান্তরিত এবং অপ্টিমাইজ হয়ে গেলে, সবকিছু সুচারুভাবে কাজ করছে তা নিশ্চিত করার জন্য আপনার অ্যাপ্লিকেশন এবং অবকাঠামো পর্যবেক্ষণ চালিয়ে যান। ইলাম একটি ওয়েব ইন্টারফেস সরবরাহ করে যা আপনার স্পার্ক ক্লাস্টার এবং কাজগুলি নিরীক্ষণ করা সহজ করে তোলে।

এটি একটি উচ্চ-স্তরের রূপরেখা এবং আপনার বর্তমান হ্যাডোপ সেটআপ, আপনার নির্দিষ্ট ব্যবহারের ক্ষেত্রে এবং আপনার নতুন পরিবেশের আর্কিটেকচারের উপর নির্ভর করে সুনির্দিষ্টগুলি পৃথক হবে। এটিও লক্ষণীয় যে মাইগ্রেশন একটি জটিল প্রক্রিয়া হতে পারে এবং বিশেষজ্ঞদের সাথে কাজ করা বা মাইগ্রেশনে সহায়তা করার জন্য বিশদ গাইড বা সংস্থানগুলি সন্ধান করা উপকারী হতে পারে।

মাইগ্রেশন সাপোর্ট ​

অ্যাপাচি হাডুপ থেকে ইলম পরিচালিত একটি নতুন পরিবেশে রূপান্তর করা চ্যালেঞ্জিং বলে মনে হতে পারে তবে আপনি এই প্রক্রিয়াতে একা নন। আমরা বুঝতে পারি যে ডেটা এবং অ্যাপ্লিকেশনগুলি মাইগ্রেট করা, একটি নতুন পরিবেশ সেট আপ করা এবং সবকিছু প্রত্যাশিত হিসাবে কাজ করে তা নিশ্চিত করা একটি জটিল কাজ হতে পারে।

এই প্রক্রিয়াতে আপনাকে সহায়তা করার জন্য, ইলুমে আমাদের দল ব্যাপক সহায়তা প্রদানের জন্য প্রস্তুত। আপনার যদি ইলুম স্থাপন, আপনার স্পার্ক ক্লাস্টারগুলি স্থানান্তরিত করা বা রূপান্তর প্রক্রিয়াটির অন্য কোনও দিকের সাহায্যের প্রয়োজন হয় তবে দয়া করে নির্দ্বিধায় আমাদের সাথে যোগাযোগ করুন। আমরা ইলুমের সহজ স্থাপনার জন্য একটি হেলম চার্ট সরবরাহ করতে পারি এবং আপনার বিদ্যমান হ্যাডোপ ক্লাস্টারকে নতুন পরিবেশে স্থানান্তরিত করার জন্য প্রয়োজনীয় পদক্ষেপগুলির মাধ্যমে আপনাকে গাইড করতে পারি।

আমরা আপনার জন্য মাইগ্রেশন প্রক্রিয়াটি যতটা সম্ভব মসৃণ করতে প্রতিশ্রুতিবদ্ধ। আপনার প্রযুক্তিগত প্রশ্ন থাকুক না কেন, সর্বোত্তম অনুশীলনের বিষয়ে গাইডেন্স প্রয়োজন বা মাইগ্রেশনের সময় কোনও সমস্যার মুখোমুখি হোন না কেন, আমরা এখানে সহায়তা করতে এসেছি।

দয়া করে আমাদের সাথে যোগাযোগ করুন [email protected] ইলুমে আপনার মাইগ্রেশনে সহায়তার জন্য যে কোনও সময়। আমাদের ডেডিকেটেড সাপোর্ট টিম ইলুমের সাথে দক্ষ এবং পরিচালনাযোগ্য অ্যাপাচি স্পার্ক ক্লাস্টার ম্যানেজমেন্টের দিকে আপনার যাত্রায় আপনাকে সহায়তা করার জন্য প্রস্তুত এবং আগ্রহী।

মাইগ্রেশন নোট ​

মাইগ্রেটিং 5.*.* থেকে 6.0.0 ​

সংস্করণ 6.0.0 প্রকাশের সাথে, আমরা নতুন নিরাপত্তা বাস্তবায়ন চালু করেছি যা মাইগ্রেশন প্রক্রিয়ার সময় মনোযোগ প্রয়োজন। ডিফল্ট প্রশাসক অ্যাকাউন্টে কোনও পরিবর্তন করা হয়ে থাকলে বিদ্যমান ব্যবহারকারীর অ্যাকাউন্টগুলি অবশ্যই পুনরায় তৈরি করতে হবে।

সফলভাবে 6.0.0 সংস্করণে মাইগ্রেট করতে নীচের পদক্ষেপগুলি অনুসরণ করুন। একটি উদাহরণ কমান্ড দুটি অ্যাকাউন্ট তৈরি করে: একটি প্রশাসকের জন্য এবং দ্বিতীয়টি নিয়মিত ব্যবহারকারীর জন্য।

হেলম আপগ্রেড \ 
--সেট ilum-core.security.internal.users[0].username=admin \ 
--সেট ilum-core.security.internal.users[0].password=adminPassword \ 
--সেট ilum-core.security.internal.users[0].roles[0]=Admin \ 
--সেট ilum-core.security.internal.users[1].username=user \ 
--সেট ilum-core.security.internal.users[1].password=userPassword \ 
--সেট ilum-core.security.internal.users[1].roles[0]=USER\ 
--পুনঃব্যবহার-মান ইলুম ইলুম / ইলুম 

সমস্ত সমর্থিত প্রমাণীকরণ পদ্ধতি ও তাদের পরামিতিগুলি পরীক্ষা করতে ইলুম-কোর চার্টে README.md ফাইলগুলি দেখুন।

6.0.* থেকে 6.1.0 এ মাইগ্রেট করা হচ্ছে ​

সংস্করণ 6.1.0 প্রকাশের সাথে, আমরা একটি নতুন ইলাম স্পার্ক স্টোরেজ বাস্তবায়ন চালু করেছি যা মাইগ্রেশন প্রক্রিয়া চলাকালীন মনোযোগ প্রয়োজন। নতুন স্কিমার সাথে মেলে বিদ্যমান বালতি কনফিগারেশনটি অবশ্যই ফর্ম্যাট করতে হবে।

পূর্বে স্পার্ক রিসোর্স সংরক্ষণের জন্য ইলাম দ্বারা ব্যবহৃত এস 3 বালতি ব্যবহার করে কনফিগার করা হয়েছিল ilum-core.kubernetes.s3.bucket হেলম ভ্যালু। সংস্করণ 6.1.0 থেকে এটি দুটি নতুন পরামিতি দিয়ে প্রতিস্থাপিত হয়েছে:

1. ilum-core.kubernetes.s3.sparkBucket - পূর্ববর্তী প্যারামিটারের মতো একই ভূমিকা পালন করে
2. ilum-core.kubernetes.s3.dataBucket - ইলাম-টেবিল সংরক্ষণের জন্য বালতি কনফিগার করতে ব্যবহৃত হয়