মেশিন লার্নিং কেন ভবিষ্যত

এই মাসের এসসি 16 সুপারকম্পিউটিং সম্মেলনে দুটি ট্রেন্ড দাঁড়িয়েছিল। প্রথমটি বিশ্বের দ্রুততম কম্পিউটারগুলির শীর্ষ 500 তালিকায় ইন্টেলের সর্বশেষ শিওন ফি (নাইটস ল্যান্ডিং) এবং এনভিডির সর্বশেষ টেস্টলা (পাস্কেল ভিত্তিক পি 100) উপস্থিতি; দুটি সিস্টেমই শীর্ষ 20 এ পৌঁছেছে। দ্বিতীয়টি হ'ল আধুনিক মেশিন লার্নিং সিস্টেমগুলি থেকে কীভাবে চিপ এবং সিস্টেম নির্মাতারা ধারণাগুলি গ্রহণ করছে এবং এগুলি সুপার কম্পিউটারগুলিতে প্রয়োগ করছে তার একটি বড় জোর।

টপ 500 এর তালিকার বর্তমান পুনর্বিবেচনায়, যা বছরে দুবার আপডেট হয়, চার্টের শীর্ষটি এখনও দৃ still়ভাবে ওউসির চীনের ন্যাশনাল সুপারক্রমপুটিং সেন্টার থেকে সানওয়ে তাইহলাইট কম্পিউটার এবং চীনের ন্যাশনাল সুপার কম্পিউটার থেকে তিয়ানহ -২ কম্পিউটারের হাতে রয়েছে জুনের আইএসসি 16 শো হওয়ার পর থেকে গুয়াংজুতে কেন্দ্র। তৃতীয় এবং চতুর্থ স্থানের সিস্টেমগুলির সাথে অন্য কোনও কম্পিউটার মোট পারফরম্যান্সের কাছাকাছি নেই - এখনও ওক রিজে টাইটান সুপার কম্পিউটার এবং লরেন্স লিভারমোরের সিকোইয়া সিস্টেম - উভয়ই তিয়ানহে -২ এর অর্ধেক পারফরম্যান্স সরবরাহ করে।

এর মধ্যে প্রথমটি একটি অনন্য চীনা প্রসেসরের উপর ভিত্তি করে, 1.45GHz এসডাব্লু 26010, যা 64৪-বিট আরআইএসসি কোর ব্যবহার করে। এটিতে তুলনামূলকভাবে 10, 649, 600 টি কোর রয়েছে যা তাত্ত্বিক পিক থ্রুপুট এর 125.4 পেটফ্লপগুলি সরবরাহ করে এবং লিনপ্যাক বেঞ্চমার্কে 15.4 মেগাওয়াট বিদ্যুৎ ব্যবহার করে সর্বোচ্চ পরিমাপকৃত কর্মক্ষেত্রের 93 পেটফ্লপগুলি সরবরাহ করে। এটি লক্ষ করা উচিত যে এই মেশিনটি লিনপ্যাকের পারফরম্যান্সে একটি বিশাল ব্যবধানে চার্টকে শীর্ষে রাখে, অন্য পরীক্ষাগুলিতেও এটি তেমন ভাড়া দেয় না। হাই পারফরম্যান্স কনজুগেট গ্রেডিয়েন্টস (এইচপিসিজি) বেঞ্চমার্কের মতো অন্যান্য মানদণ্ড রয়েছে, যেখানে মেশিনগুলি তাদের তাত্ত্বিক শিখর পারফরম্যান্সের শুধুমাত্র 1 থেকে 10 শতাংশ দেখতে পায় এবং যেখানে শীর্ষস্থানীয় সিস্টেম - এই ক্ষেত্রে রিকেন কে মেশিন এখনও কম সরবরাহ করে ivers 1 টির চেয়ে বেশি

তবে লিনপ্যাক পরীক্ষাগুলি উচ্চ-পারফরম্যান্স কম্পিউটিং (এইচপিসি) এবং টপ 500 তালিকা তৈরি করতে কী ব্যবহার করা হয় সে সম্পর্কে কথা বলার জন্য আদর্শ। লিনপ্যাক পরীক্ষাগুলি ব্যবহার করে, টিয়ানহে -২ নাম্বার 2 নম্বর মেশিনটি গত কয়েক বছর ধরে চার্টে 1 নম্বরে ছিল এবং এতে জিওন ই 5 এবং আরও পুরোনো জিয়ন ফাই (নাইটস কর্নার) এক্সিলিটর ব্যবহার করা হয়েছিল। এটি তাত্ত্বিক পিক পারফরম্যান্সের 54.9 পেটলফ্ল্যাপগুলি এবং লিঙ্কপ্যাকের 33.8 পেটলফ্ল্যাপগুলিতে অফার করে। অনেক পর্যবেক্ষক মনে করেন যে শিওন ফি (নাইটস ল্যান্ডিং) এর নতুন সংস্করণ রফতানিতে নিষেধাজ্ঞার ফলে চীনারা তাদের নিজস্ব সুপার কম্পিউটার প্রসেসর তৈরি করতে পরিচালিত করেছিল।

নাইটস ল্যান্ডিং, আনুষ্ঠানিকভাবে সিওন ফি 7250, তালিকার নতুন সিস্টেমগুলিতে একটি বড় ভূমিকা পালন করেছে, লরেন্স বার্কলে ন্যাশনাল ল্যাবরেটরির কোরি সুপার কম্পিউটার থেকে শুরু করে পঞ্চম স্থানে এসেছিল, ২ 27.৮ পেটফ্ল্যাপের শীর্ষে পারফরম্যান্স এবং ১৪ টি পেটফ্ল্যাপের একটি পরিমাপ সম্পাদনা । এটি একটি ক্রে XC40 সিস্টেম, মেষগুলির আন্তঃসংযোগ ব্যবহার করে। মনে রাখবেন নাইটস ল্যান্ডিং একটি প্রধান প্রসেসর হিসাবে কাজ করতে পারে, প্রসেসরে প্রতি 68 টি কোর দিয়ে 3 টি পিক টেরিফলপ সরবরাহ করে। (ইন্টেল তার মূল্য তালিকার শীর্ষ তাত্ত্বিক দ্বিগুণ নির্ভুল পারফরম্যান্সের 3.46 টেরিফলপসে 72 কোরের সাথে চিপের আরও একটি সংস্করণ তালিকাভুক্ত করে, তবে তালিকার কোনও মেশিনই এই সংস্করণটি ব্যবহার করে না, সম্ভবত এটি প্রাইরিয়ার এবং আরও বেশি শক্তি ব্যবহার করে))

এর আগে জিয়ন ফিস কেবলমাত্র এমন সিস্টেমে এক্সিলিটার হিসাবে চালাতে পারতেন যা traditionalতিহ্যবাহী জিয়ন প্রসেসর দ্বারা নিয়ন্ত্রিত ছিল। ষষ্ঠ স্থানে ছিল জাপানের জয়েন্ট সেন্টার ফর অ্যাডভান্সড হাই পারফরম্যান্স কম্পিউটারের ওকফেরস্ট-প্যাকস সিস্টেম, ২৪.৯ শিখর পেটফ্লপ স্কোর করেছে। এটি নাইটস ল্যান্ডিং এবং ইন্টেলের ওমনি-পাথ আন্তঃসংযোগ ব্যবহার করে ফুজিৎসু তৈরি করেছেন। নাইটস ল্যান্ডিংটি 12 নম্বরের সিস্টেমে (ইতালির সিআইএনসিএ-র মার্কোনি কম্পিউটার, লেনোভো নির্মিত এবং ওমনি-পাথ ব্যবহার করে) এবং নং 33 সিস্টেম (জাপানের কিয়োটো বিশ্ববিদ্যালয়ে কর্পূর 2, ক্রে দ্বারা নির্মিত এবং মেষগুলি ব্যবহার করে) ইন্টারকানেক্ট)।

নতুন তালিকায় এনভিডিয়াকেও ভালভাবে উপস্থাপন করা হয়েছিল। Sw নং সিস্টেম, সুইস ন্যাশনাল সুপারকম্পিউটিং সেন্টারে পিজ ডেইনটকে জিওনস এবং এনভিডিয়া টেসলা পি 100 এর সাথে একটি ক্রে এক্সসি 50 তে আপগ্রেড করা হয়েছে এবং এখন তাত্ত্বিক পিক পারফরম্যান্সের 16 টির অধীনে পেটফ্ল্যাপ এবং লিনপ্যাকের কর্মক্ষেত্রের 9.8 পেটল্লফ-এটি একটি বড় এনভিডিয়া কে 20 এক্স এক্সিলারস সহ ক্রে এক্সসি 30 এর উপর ভিত্তি করে এর পূর্ববর্তী পুনরাবৃত্তির শীর্ষ পর্যায়ের পারফরম্যান্সের 7.8 পেটফ্ল্যাপস এবং লিনপ্যাকের পারফরম্যান্সের 6.3 পেটফ্ল্যাপগুলি থেকে আপগ্রেড করুন।

তালিকার অন্যান্য পি 100-ভিত্তিক সিস্টেমটি ছিল এনভিডির নিজস্ব ডিজিএক্স শনি ভি, যা কোম্পানির নিজস্ব ডিজিএক্স -1 সিস্টেম এবং ইনফিনিব্যান্ড আন্তঃসংযোগের উপর ভিত্তি করে তালিকার 28 নম্বরে এসেছিল। দ্রষ্টব্য যে এনভিডিয়া এখন প্রসেসর এবং ডিজিএক্স -1 অ্যাপ্লায়েন্স উভয়ই বিক্রি করছে, যার মধ্যে সফ্টওয়্যার এবং আটটি টেসলা পি 100 রয়েছে। ডিজিএক্স স্যাটান ভি সিস্টেম, যা এনভিডিয়া অভ্যন্তরীণ এআই গবেষণার জন্য ব্যবহার করে, প্রায় ৪.৯ পিক পেটল্লফ এবং ৩.৩ লিনপ্যাক পেটলফ্লোর স্কোর করে। তবে এনভিডিয়া যা উল্লেখ করেছেন তা হ'ল এটি কেবল ৩৫০ কিলোওয়াট শক্তি ব্যবহার করে, এটি আরও বেশি শক্তি দক্ষ করে তোলে। ফলস্বরূপ, এই সিস্টেমটি সর্বাধিক শক্তি-দক্ষ সিস্টেমগুলির গ্রীন 500 তালিকায় শীর্ষে রয়েছে। এনভিডিয়া উল্লেখ করেছেন যে এটি জিওন ফি-ভিত্তিক ক্যাম্পোর 2 সিস্টেমের তুলনায় যথেষ্ট কম শক্তি, যার পারফরম্যান্স রয়েছে (প্রায় 5.5 পেটাফ্লপস পিক এবং 3.1 লিনপ্যাক পেটফ্লপস)।

এটি একটি আকর্ষণীয় তুলনা, জিপিইউগুলিতে এনভিডিয়া আরও ভাল শক্তির দক্ষতা এবং ইন্টেলের সাথে আরও পরিচিত প্রোগ্রামিং মডেল টাউট করে with আমি নিশ্চিত যে আগত বছরগুলিতে আমরা আরও প্রতিযোগিতা দেখতে পাব, কারণ বিভিন্ন আর্কিটেকচারগুলি দেখার জন্য প্রতিযোগিতা করে যেগুলির মধ্যে প্রথমটি "এক্সাস্যাকেল কম্পিউটিং" এ পৌঁছে যাবে বা তার পরিবর্তে চাইনিজ গৃহ-প্রাপ্ত পদ্ধতি সেখানে পাবে কিনা। বর্তমানে, মার্কিন জ্বালানী বিভাগের এক্সকাসেল কম্পিউটিং প্রকল্পটি আশা করছে যে ২০২২ সালে প্রথম এক্সেস্কেল মেশিনগুলি ইনস্টল করা হবে এবং পরের বছর লাইভ হবে।

আমি এটি আকর্ষণীয় বলে মনে করি যে এনভিডিয়া টেসলা এবং ইন্টেল শিওন ফি সমাধানের মতো বহু-কোর ত্বরণকারীদের উপর জোর দেওয়া সত্ত্বেও, কেবলমাত্র 96 টি সিস্টেমে এই ধরণের এক্সিলিটর ব্যবহার করে (একা যারা শিওন ফি ব্যবহার করেন); এক বছর আগে 104 সিস্টেমের বিপরীতে। ইনটেল শীর্ষস্থানীয় 500 সিস্টেমে 462-এর চিপস সহ 22 টিতে আইবিএম পাওয়ার প্রসেসরগুলির পরে সবচেয়ে বড় চিপ সরবরাহকারী হিসাবে অবিরত রয়েছে He হিউলেট প্যাকার্ড এন্টারপ্রাইজ 140 টি সিস্টেম তৈরি করেছে (সিলিকন গ্রাফিক্স দ্বারা নির্মিত সেগুলি সহ, যা এইচপিই অর্জন করেছিল), লেনোভো নির্মিত 92, এবং ক্রে 56।

মেশিন লার্নিং প্রতিযোগিতা

শোতে বা তার আশেপাশে বেশ কয়েকটি ঘোষণা ছিল, যার বেশিরভাগই কতিপয় কৃত্রিম বুদ্ধিমত্তা বা মেশিন লার্নিংয়ের সাথে কাজ করে। এনভিডিয়া আইবিএম পাওয়ারএআই নামক একটি নতুন গভীর-লার্নিং সফটওয়্যার টুলকিটে আইবিএমের সাথে একটি অংশীদারিত্বের ঘোষণা করেছিল যা এনভিডির এনভিলিংক আন্তঃসংযোগ ব্যবহার করে আইবিএম পাওয়ার সার্ভার চালায়।

এএমডি, যা এইচপিসি এবং মেশিন-লার্নিং পরিবেশ উভয় ক্ষেত্রেই চিন্তাভাবনা করেছে, এটি পরিবর্তন করতে কাজ করছে। এই ক্ষেত্রে, সংস্থাটি তার নিজস্ব রেডিয়ন জিপিইউগুলিতে ফোকাস করেছে, তার ফায়ারপ্রো এস9300 এক্স 2 সার্ভার জিপিইউগুলিকে ঠেলে দিয়েছে এবং এটি মেঘের উপরে ব্যবহারের জন্য Google ক্লাউড প্ল্যাটফর্মের সাথে অংশীদারিত্বের ঘোষণা দিয়েছে। তবে এএমডি প্রোগ্রামিং জিপিইউগুলির জন্য সফ্টওয়্যারটিতে তেমন কোনও বিনিয়োগ করেনি, কারণ এটি এনভিডিয়ায় আরও স্বত্বাধিকারী পদ্ধতির উপর ওপেনসিএলকে জোর দিচ্ছে। শোতে, এএমডি তার র্যাডিয়ন ওপেন কম্পিউট প্ল্যাটফর্মের একটি নতুন সংস্করণ (আরওসিএম) প্রবর্তন করে, এবং তার আগত "জেন" x86 সিপিইউ সহ একাধিক সিপিইউ সহ জিপিইউগুলিকে সমর্থন করার পরিকল্পনার প্রতি আহ্বান জানিয়েছিল, ক্যাভিয়ামের থান্ডারএক্স এবং আর্ম আর্কিটেকচার সহ শুরু হয়। আইবিএম পাওয়ার 8 সিপিইউস।

শোতে, ইন্টেল তার বর্তমান Xeon E5v4 (ব্রডওয়েল) চিপটির ভাসমান পয়েন্ট কাজের চাপের জন্য সুরযুক্ত নতুন সংস্করণ এবং পরবর্তী বছর স্কাইলেক প্ল্যাটফর্মের উপর ভিত্তি করে পরবর্তী সংস্করণটি সম্পর্কে আলোচনা করেছিল। কিন্তু সেই সপ্তাহের পরবর্তী ইভেন্টে, ইন্টেল তার চিপগুলি কৃত্রিম বুদ্ধিমত্তা বা মেশিন-লার্নিং স্পেসে স্থাপনের জন্য ডিজাইন করা একাধিক ঘোষণার কাজ করেছিল। (এখানে এক্সট্রিমটেকের গ্রহণযোগ্যতা রয়েছে)) এর বেশিরভাগ ক্ষেত্রে উচ্চ-পারফরম্যান্সের কম্পিউটিংয়ের জন্য প্রভাব রয়েছে তবে বেশিরভাগই এটি পৃথক। প্রথমত, স্ট্যান্ডার্ড শিওন প্রসেসরের পাশাপাশি, সংস্থাটি নিউরাল নেটওয়ার্কগুলিতে অনেক বেশি ইনফারেন্সিং করার জন্য এফপিজিএগুলিকেও প্রচার করছে। এটি একটি বড় কারণ যে সংস্থাটি সম্প্রতি আলটিরা কিনেছিল এবং এই জাতীয় এফপিজিএগুলি এখন মাইক্রোসফ্টের মতো সংস্থাগুলি ব্যবহার করে।

তবে গত সপ্তাহে এআই-তে ফোকাসটি আরও কিছু নতুন চিপ নিয়ে কাজ করেছে। প্রথমত, শিওন ফি আছে, যেখানে ইন্টেল নির্দেশ করেছে যে "নাইট লার্নিং" বাজারের লক্ষ্য নিয়ে নাইটস মিল নামে একটি নতুন সংস্করণ দিয়ে বর্তমান নাইটস ল্যান্ডিং সংস্করণটি পরের বছর পরিপূরক হবে। আইডিএফ-তে ঘোষিত, এটি আরও একটি 14nm সংস্করণ তবে অর্ধ-নির্ভুল গণনার জন্য সমর্থন সহ, যা প্রায়শই নিউরাল নেটওয়ার্ক প্রশিক্ষণে ব্যবহৃত হয়। প্রকৃতপক্ষে, ডিপ লার্নিংয়ের বর্তমান এনভিডিয়া চিপের একটি বড় সুবিধা হ'ল অর্ধ-নির্ভুল গণনা এবং 8-বিট পূর্ণ সংখ্যার ক্রিয়াকলাপের জন্য তাদের সমর্থন, যা এনভিডিয়া প্রায়শই গভীর শেখার হিসাবে উল্লেখ করে "তেরা-অপ্স"। ইনট বলেছে যে নাইটস মিল গভীর শিক্ষার জন্য নাইটস ল্যান্ডিংয়ের চারগুণ পারফরম্যান্স দেবে। (এই চিপটি পরে নাইটস হিল নামে একটি 10nm সংস্করণ অনুসরণ করবে, সম্ভবত, তিহ্যবাহী উচ্চ-পারফরম্যান্স কম্পিউটিং মার্কেটের দিকে লক্ষ্য রেখে imed)

পরের বছরের জন্য সবচেয়ে আকর্ষণীয় হ'ল নারভানার একটি নকশা, যা ইন্টেল সম্প্রতি অর্জন করেছে, যা হাই-ব্যান্ডউইথ মেমরি (এইচবিএম) এর সাথে সংযুক্ত সাধারণ গণিত ক্রিয়াকলাপগুলি সম্পাদনের জন্য ডিজাইন করা প্রসেসিং ক্লাস্টারের একটি অ্যারে ব্যবহার করে। এই পরিবারের মধ্যে প্রথমটি হ'ল লেক ক্রেস্ট, যা ইন্টেল সংস্থাটি কেনার আগে এবং 28nm টিএসএমসি প্রক্রিয়াতে প্রস্তুত করার আগে ডিজাইন করা হয়েছিল। পরের বছরের প্রথমার্ধে পরীক্ষার সংস্করণগুলির কারণে, ইন্টেল বলেছে এটি জিপিইউর চেয়ে আরও কাঁচা গণনা সম্পাদন করবে performance এটি অবশেষে নাইটস ক্রেস্টের পরে আসবে, যা জিয়নের পাশাপাশি নারভানার প্রযুক্তি প্রয়োগ করে, এখনও অঘোষিত বিবরণ সহ।

"আমরা আশা করি যে নার্ভানার প্রযুক্তিগুলি আগামী তিন বছরে জটিল নিউরাল নেটওয়ার্কগুলি প্রশিক্ষণের জন্য কর্মক্ষমতাতে 100 গুণ বৃদ্ধি পাবে এবং তথ্য বিজ্ঞানীদের তাদের সবচেয়ে বড় এআই চ্যালেঞ্জগুলি দ্রুত সমাধান করতে সক্ষম করবে, " লিখেছেন ইনটেলের প্রধান নির্বাহী ব্রায়ান ক্র্যাজনিচ।

ইন্টেল সম্প্রতি মুভিডিয়াস অর্জনের পরিকল্পনাও ঘোষণা করেছিল যা ডিএসপি-ভিত্তিক চিপগুলি কম্পিউটার ভিশন ইনফারেন্সিংয়ের জন্য আবার বিশেষভাবে উপযোগী করে তোলে - পূর্বে প্রশিক্ষিত মডেলগুলির উপর ভিত্তি করে সিদ্ধান্ত গ্রহণ করে।

এটি একটি জটিল এবং বিকশিত গল্প - অবশ্যই এনভিডিয়া যে কোনও জায়গাতেই তার জিপিইউয়ের জন্য ধাক্কা দেয় না straight তবে এটি যা স্পষ্ট করে তা হ'ল মেশিন লার্নিংটি কত দ্রুত বন্ধ হচ্ছে এবং এনভিডিয়া এবং এএমডি-এর মতো জিপিইউ থেকে শুরু করে জিওন ফি-র মতো অনেকগুলি মূল এক্স 86 প্রসেসর, এফপিজিএ-তে সমস্যা সমাধানের বিভিন্ন পরিকল্পনা রয়েছে companies, যেমন নারভানা এবং আইবিএম এর ট্রুওনर्थের প্রশিক্ষণের জন্য বিশেষায়িত পণ্যগুলিতে, গুগলের টেনসর প্রসেসিং ইউনিটগুলির মতো কাস্টম ডিএসপি-মতো ইনফারেন্সিং ইঞ্জিনগুলিতে। বাজারে এই সমস্ত পদ্ধতির জন্য জায়গা রয়েছে কিনা তা দেখতে খুব আকর্ষণীয় হবে।