দেড় বছর বিকাশের পরে, অ্যাপাচি সফটওয়্যার ফাউন্ডেশন প্রকাশ করেছে এর নতুন সংস্করণ চালু করা অ্যাপাচি হাদুপ ৩.৩.০, সংস্করণ এতে তিনি এআরএম প্ল্যাটফর্মগুলির জন্য উন্নতি যুক্ত করেছেন, নির্ধারিত ধারক প্রবর্তন এবং অন্যান্য জিনিসগুলির জন্য সমর্থন।
অ্যাপাচি হাদুপ একটি মুক্ত প্ল্যাটফর্ম হিসাবে নিজেকে অবস্থান করে সংগঠিত করতে ব্যবহার করে বিপুল পরিমাণে ডেটা বিতরণ প্রক্রিয়াকরণ মানচিত্র / দৃষ্টান্ত হ্রাস, যার মধ্যে একটি টাস্ককে অনেকগুলি ছোট বিচ্ছিন্ন খণ্ডে বিভক্ত করা হয়েছে, যার প্রত্যেকটি পৃথক ক্লাস্টার নোডে চলতে পারে।
হ্যাডোপ-ভিত্তিক স্টোরেজ এটি হাজার হাজার নোড বিস্তৃত করতে পারে এবং এতে এক্সাবাইটের ডেটা থাকতে পারে।
অ্যাপাচি হাদোপ সম্পর্কে
Hadoop হ্যাডোপ বিতরণ করা ফাইল সিস্টেমের একটি বাস্তবায়ন অন্তর্ভুক্ত (এইচডিএফএস), যা স্বয়ংক্রিয়ভাবে ডেটা রিডানডেন্সি সরবরাহ করে এবং ম্যাপ্রেডস অ্যাপ্লিকেশনগুলির জন্য অনুকূলিত।
একটি মূল কার্যকারিতা হ'ল কার্যকর কাজের সময় নির্ধারণের জন্য, প্রতিটি ফাইল সিস্টেমের অবশ্যই তার অবস্থানটি জানতে হবে এবং র্যাকটির নাম (আরও সুনির্দিষ্টভাবে, কর্মী নোড) রয়েছে।
হডোপ অ্যাপ্লিকেশনগুলি নোড যেখানে ডেটা রয়েছে সেখানে কাজ চালাতে এই তথ্যটি ব্যবহার করতে পারে এবং একই র্যাক / সুইচে ব্যর্থ হয়ে এভাবে নেটওয়ার্ক ট্র্যাফিক হ্রাস করে।
ডেটা অ্যাক্সেস সরলকরণ হাদুপ স্টোরেজে, HBase ডাটাবেস এবং এসকিউএল-এর মতো পিগ ভাষা তৈরি করা হয়েছে, যা ম্যাপ্রেডিউসের জন্য একটি এসকিউএল টাইপ, যার অনুসন্ধানগুলি বিভিন্ন হ্যাডোপ প্ল্যাটফর্মগুলি দ্বারা সমান্তরালভাবে প্রসেস করা যেতে পারে।
প্রকল্পটি সম্পূর্ণ স্থিতিশীল এবং শিল্প পরিচালনার জন্য প্রস্তুত হিসাবে মূল্যায়ন করা হয়। হ্যাডোপ বৃহত শিল্প প্রকল্পগুলিতে সক্রিয়ভাবে ব্যবহৃত হয়, গুগল বিগ টেবিল / জিএফএস / ম্যাপ্রেডস প্ল্যাটফর্মের অনুরূপ ক্ষমতা সরবরাহ করে, গুগল আনুষ্ঠানিকভাবে হ্যাডোপ এবং অন্যান্য অ্যাপাচি প্রকল্পগুলি ম্যাপ্রেডস পদ্ধতি সম্পর্কিত পেটেন্ট-কভার্ড প্রযুক্তি ব্যবহারের অধিকারী হয়।
হ্যাডোপ আপাচি সংগ্রহস্থলের মধ্যে প্রথম পরিবর্তনের সংখ্যা অনুসারে এবং পঞ্চম বৃহত্তম কোড বেস (কোডের প্রায় 4 মিলিয়ন লাইন) এর মধ্যে রয়েছে terms
অ্যাপাচি হাদুপ ৩.৩-এ নতুন কী?
হাদোপের এই নতুন সংস্করণ এটির প্রথম সংস্করণ হিসাবে অবস্থান রয়েছে el এআরএম-ভিত্তিক প্ল্যাটফর্মগুলির জন্য সমর্থন, যার সাহায্যে এই প্ল্যাটফর্মটি কার্যকর করতে আগ্রহী তারা ইতিমধ্যে উপলব্ধ এআরএমের বাইনারি আবিষ্কার করতে সক্ষম হবে।
এই নতুন সংস্করণে উপস্থাপিত প্রধান পরিবর্তনগুলির মধ্যে একটি হ'ল প্রোটোবুফ ফর্ম্যাটটির নতুন সংস্করণটি কার্যকর করা (প্রোটোকল বাফার) কাঠামোগত ডেটা সিরিয়ালাইজ করতে ব্যবহৃত হয় 3.7.1 সংস্করণে আপডেট করা হয়েছে প্রোটোবুফ -২.০.০ শাখার জীবনচক্র শেষ হওয়ার কারণে।
এটি ছাড়াও এস 3 এ সংযোগকারীটির ক্ষমতা ইতিমধ্যে প্রসারিত হয়েছে এখন তাকে আছে টোকেন ব্যবহার করে প্রমাণীকরণের জন্য সমর্থন যোগ করা হয়েছে, 404 কোড, উচ্চতর এস 3 গার্ডের কার্যকারিতা এবং অপারেশনাল নির্ভরযোগ্যতার উন্নতি সহ প্রতিক্রিয়া ক্যাচিংয়ের জন্য উন্নত সমর্থন।
এছাড়াও ডিএনএস সমাধানকারী পরিষেবা যুক্ত করা হয়েছে ক্লায়েন্টের জন্য হোস্টের নাম দ্বারা ডিএনএসের মাধ্যমে সার্ভার নির্ধারণ করার জন্য, যা আপনাকে কনফিগারেশনে সমস্ত হোস্টের তালিকা সরবরাহ করতে দেয়।
পাশাপাশি একটি কেন্দ্রীভূত সংস্থান ব্যবস্থাপকের মাধ্যমে নির্ধারিত ধারক প্রবর্তনের জন্য সমর্থন (রিসোর্স ম্যানেজার) এমনকি প্রতিটি নোডের বোঝা বিবেচনা করে পাত্রে বিতরণ করার ক্ষমতা সহ।
অন্যান্য পরিবর্তনগুলি যে দাঁড়িয়ে আছে Of এই নতুন সংস্করণ:
- স্বয়ংক্রিয় টিউনিংয়ের সমস্যাগুলি এবিএফএস ফাইল সিস্টেমে সমাধান করা হয়েছে।
- COS অবজেক্ট স্টোরেজ অ্যাক্সেস করতে টেনসেন্ট ক্লাউড সিওএস ফাইল সিস্টেমের জন্য স্থানীয় সমর্থন যুক্ত করা হয়েছে।
- জাভা 11 এর জন্য সম্পূর্ণ সমর্থন যুক্ত করা হয়েছিল।
- এইচডিএফএস আরবিএফ (রাউটার ভিত্তিক ফেডারেশন) বাস্তবায়ন স্থিতিশীল করেছে। সুরক্ষা নিয়ন্ত্রণগুলি এইচডিএফএস রাউটারে যুক্ত করা হয়েছে।
- YARN অ্যাপ্লিকেশন ডিরেক্টরি অনুসন্ধান করুন (অন্য সংস্থান আলোচনাকারী) যোগ করা হয়েছে।
অবশেষে, আপনি যদি এটি সম্পর্কে আরও জানতে চান তবে নতুন সংস্করণটির বিশদটি এখানে পরীক্ষা করতে পারেন মূল পোস্ট
যারা নতুন সংস্করণটি অর্জন করতে আগ্রহী তাদের জন্য তারা প্রস্তুত বাইনারিগুলি ডাউনলোড করতে পারেন নীচের লিঙ্কে।