মাইক্রোস্কোপের নিচে সুপার-হিউম্যান এআই চিপ লেআউটের দাবি গুগলের

মাইক্রোস্কোপের নিচে সুপার-হিউম্যান এআই চিপ লেআউটের দাবি গুগলের

মাইক্রোস্কোপ প্লাটোব্লকচেন ডেটা ইন্টেলিজেন্সের নীচে সুপার-হিউম্যান এআই চিপ লেআউটের গুগলের দাবি। উল্লম্ব অনুসন্ধান. আ.

বিশেষ প্রতিবেদন নেচারে প্রকাশিত Google-এর নেতৃত্বাধীন একটি গবেষণা পত্র, দাবি করেছে যে মেশিন-লার্নিং সফ্টওয়্যার মানুষের চেয়ে দ্রুত ভাল চিপ ডিজাইন করতে পারে, একটি নতুন গবেষণার ফলাফলগুলিকে বিতর্কিত করার পরে এটিকে প্রশ্নবিদ্ধ করা হয়েছে।

2021 সালের জুনে, গুগল তৈরি করেছে শিরোনাম স্বয়ংক্রিয়ভাবে অপ্টিমাইজড মাইক্রোচিপ ফ্লোরপ্ল্যান তৈরি করতে সক্ষম একটি শক্তিবৃদ্ধি-শিক্ষা-ভিত্তিক সিস্টেম বিকাশের জন্য। এই পরিকল্পনাগুলি চিপের মধ্যে ইলেকট্রনিক সার্কিট্রির ব্লকগুলির বিন্যাস নির্ধারণ করে: যেখানে সিপিইউ এবং জিপিইউ কোর এবং মেমরি এবং পেরিফেরাল কন্ট্রোলারের মতো জিনিসগুলি প্রকৃতপক্ষে ফিজিক্যাল সিলিকনের উপর বসে থাকে।

গুগল বলেছে যে তারা এই এআই সফ্টওয়্যারটি ব্যবহার করছে তার স্বদেশী টিপিইউ চিপ ডিজাইন করতে যা এআই কাজের চাপকে ত্বরান্বিত করে: এটি তার অন্যান্য মেশিন-লার্নিং সিস্টেমগুলিকে দ্রুত চালানোর জন্য মেশিন লার্নিং নিযুক্ত করছে। 

একটি চিপের ফ্লোর প্ল্যান গুরুত্বপূর্ণ কারণ এটি প্রসেসর কতটা ভাল পারফর্ম করে তা নির্দেশ করে। আপনি চিপের সার্কিটগুলির ব্লকগুলিকে সাবধানে সাজাতে চাইবেন যাতে, উদাহরণস্বরূপ, সংকেত এবং ডেটা এই অঞ্চলগুলির মধ্যে একটি পছন্দসই হারে প্রচারিত হয়। সর্বোত্তম কনফিগারেশন খুঁজে বের করার চেষ্টা করার জন্য ইঞ্জিনিয়াররা সাধারণত তাদের ডিজাইনগুলি পরিমার্জন করতে সপ্তাহ বা মাস ব্যয় করে। একটি চিপ যতটা শক্তিশালী, শক্তি সাশ্রয়ী এবং যতটা সম্ভব ছোট তৈরি করার জন্য বিভিন্ন সাবসিস্টেমকে একটি নির্দিষ্ট উপায়ে স্থাপন করতে হবে। 

আজ একটি ফ্লোরপ্ল্যান তৈরি করতে সাধারণত চিপ ডিজাইন অ্যাপ্লিকেশন ব্যবহার করে ম্যানুয়াল কাজ এবং অটোমেশনের মিশ্রণ জড়িত। Google-এর দল দেখাতে চেয়েছিল যে এর শক্তিবৃদ্ধি-শিক্ষার পদ্ধতি শিল্প সরঞ্জাম ব্যবহার করে মানব প্রকৌশলীদের দ্বারা তৈরি করা ডিজাইনের চেয়ে আরও ভাল ডিজাইন তৈরি করবে। শুধু তাই নয়, গুগল বলেছে যে তার মডেল লেআউটের উপর প্রকৌশলীদের পুনরাবৃত্তির চেয়ে অনেক দ্রুত তার কাজ সম্পন্ন করেছে।

"পাঁচ দশকের গবেষণা সত্ত্বেও, চিপ ফ্লোর প্ল্যানিং অটোমেশনকে অস্বীকার করেছে, যার জন্য ফিজিক্যাল ডিজাইন ইঞ্জিনিয়ারদের কয়েক মাসের তীব্র প্রচেষ্টার জন্য ম্যানুফ্যাকচারেবল লেআউট তৈরি করতে হয় … ছয় ঘন্টার কম সময়ে, আমাদের পদ্ধতি স্বয়ংক্রিয়ভাবে চিপ ফ্লোরপ্ল্যান তৈরি করে যা মানুষের দ্বারা উত্পাদিতগুলির তুলনায় উচ্চতর বা তুলনীয়। মূল মেট্রিক্স," Googlers লিখেছেন তাদের প্রকৃতি কাগজে।

গবেষণাটি ইলেকট্রনিক ডিজাইন অটোমেশন সম্প্রদায়ের মনোযোগ পেয়েছে, যারা ইতিমধ্যে তাদের সফ্টওয়্যার স্যুটগুলিতে মেশিন-লার্নিং অ্যালগরিদমগুলিকে অন্তর্ভুক্ত করার দিকে এগিয়ে চলেছে৷ এখন Google এর মানুষের চেয়ে ভালো মডেলের দাবিকে ক্যালিফোর্নিয়া বিশ্ববিদ্যালয়ের একটি দল চ্যালেঞ্জ করেছে, সান দিয়েগো (UCSD)।

অন্যায্য সুবিধা?

কম্পিউটার বিজ্ঞান ও প্রকৌশলের অধ্যাপক অ্যান্ড্রু কাহং-এর নেতৃত্বে, এই দলটি প্রকৃতিতে বর্ণিত ফ্লোর প্ল্যানিং পাইপলাইন গুগলের বিপরীত প্রকৌশলীকরণে কয়েক মাস ব্যয় করেছে। ওয়েব জায়ান্ট বাণিজ্যিক সংবেদনশীলতার উদ্ধৃতি দিয়ে তার মডেলের অভ্যন্তরীণ কাজের কিছু বিবরণ আটকে রেখেছে, তাই ইউসিএসডিকে গুগলারদের অনুসন্ধানগুলি যাচাই করার জন্য কীভাবে তাদের নিজস্ব সম্পূর্ণ সংস্করণ তৈরি করতে হবে তা খুঁজে বের করতে হয়েছিল। প্রফেসর কাহং, আমরা মনে করি, Google-এর পেপারের পিয়ার-রিভিউ প্রক্রিয়া চলাকালীন প্রকৃতির একজন পর্যালোচক হিসেবে কাজ করেছেন।

বিশ্ববিদ্যালয়ের শিক্ষাবিদরা শেষ পর্যন্ত আসল গুগল কোডের নিজস্ব বিনোদন খুঁজে পান, যাকে সার্কিট ট্রেনিং (CT) বলা হয় তাদের অধ্যয়ন, আসলে ঐতিহ্যগত শিল্প পদ্ধতি এবং সরঞ্জাম ব্যবহার করে মানুষের চেয়ে খারাপ সঞ্চালিত.

কি এই অমিল হতে পারে? কেউ বলতে পারে বিনোদনটি অসম্পূর্ণ ছিল, যদিও অন্য ব্যাখ্যা থাকতে পারে। সময়ের সাথে সাথে, UCSD টিম শিখেছে যে Google ইলেকট্রনিক ডিজাইন অটোমেশন (EDA) স্যুটগুলির একটি প্রধান নির্মাতা Synopsys দ্বারা তৈরি বাণিজ্যিক সফ্টওয়্যার ব্যবহার করেছে, চিপের লজিক গেটগুলির একটি সূচনা বিন্যাস তৈরি করতে যা ওয়েব জায়ান্টের শক্তিবৃদ্ধি শেখার সিস্টেমটি অপ্টিমাইজ করা হয়েছে৷

পরীক্ষাগুলি দেখায় যে প্রাথমিক স্থান নির্ধারণের তথ্য থাকা CT ফলাফলগুলিকে উল্লেখযোগ্যভাবে উন্নত করতে পারে

গুগল পেপারে উল্লেখ করা হয়েছে যে শিল্প-মানের সফ্টওয়্যার সরঞ্জাম এবং ম্যানুয়াল টুইকিং ব্যবহার করা হয়েছিল পরে মডেলটি একটি লেআউট তৈরি করেছিল, প্রাথমিকভাবে নিশ্চিত করার জন্য যে প্রসেসরটি উদ্দেশ্য অনুযায়ী কাজ করবে এবং এটিকে বানোয়াট করার জন্য চূড়ান্ত করবে। Googlers যুক্তি দিয়েছিলেন যে ফ্লোরপ্ল্যানটি একটি মেশিন-লার্নিং অ্যালগরিদম দ্বারা তৈরি করা হয়েছিল বা স্ট্যান্ডার্ড সরঞ্জাম সহ মানুষের দ্বারা তৈরি করা হয়েছিল, এবং এইভাবে এর মডেলটি অপ্টিমাইজ করা শেষ পণ্যের জন্য ক্রেডিট প্রাপ্য।

তবে, ইউসিএসডি টিম বলেছে যে ইডিএ সরঞ্জামগুলি ব্যবহার করা হচ্ছে তার নেচার পেপারে কোনও উল্লেখ নেই পূর্বে মডেলটি পুনরাবৃত্তি করার জন্য একটি লেআউট প্রস্তুত করতে। এটি যুক্তি দেওয়া হয়েছে যে এই Synopsys সরঞ্জামগুলি মডেলটিকে একটি শালীন যথেষ্ট মাথার সূচনা দিয়েছে যে এআই সিস্টেমের প্রকৃত ক্ষমতাগুলিকে প্রশ্নবিদ্ধ করা উচিত।

"পেপার পর্যালোচনার সময় এটি স্পষ্ট ছিল না," বিশ্ববিদ্যালয়ের দলটি মডেলটির জন্য একটি লেআউট প্রস্তুত করার জন্য Synopsys স্যুট ব্যবহার সম্পর্কে লিখেছিল, "এবং প্রকৃতিতে উল্লেখ করা হয়নি। পরীক্ষাগুলি দেখায় যে প্রাথমিক স্থান নির্ধারণের তথ্য থাকা CT ফলাফলগুলিকে উল্লেখযোগ্যভাবে উন্নত করতে পারে।"

প্রকৃতি গুগলের গবেষণা তদন্ত করে

কিছু শিক্ষাবিদ তখন থেকে UCSD-এর গবেষণার আলোকে Google-এর পেপার পর্যালোচনা করার জন্য নেচারকে অনুরোধ করেছেন। দ্বারা দেখা জার্নাল ইমেল মধ্যে নিবন্ধনকর্মী, গবেষকরা প্রফেসর কাহং এবং তার সহকর্মীদের দ্বারা উত্থাপিত উদ্বেগগুলি তুলে ধরেন এবং Google এর কাগজটি বিভ্রান্তিকর কিনা তা নিয়ে প্রশ্ন তোলেন।

ডালাসের টেক্সাস বিশ্ববিদ্যালয়ের বৈদ্যুতিক প্রকৌশল শিক্ষাদানকারী একজন সিনিয়র লেকচারার বিল সোয়ার্টজ বলেছেন, নেচার পেপার "অনেক [গবেষকদের] অন্ধকারে রেখে গেছে" কারণ ফলাফলগুলি ইন্টারনেট টাইটানের মালিকানাধীন TPUs জড়িত ছিল এবং তাই, যাচাই করা অসম্ভব।

গুগলের সফ্টওয়্যারকে প্রাইম করার জন্য সিনোপসিস সফ্টওয়্যার ব্যবহার তদন্ত করা দরকার, তিনি বলেছিলেন। "আমরা সকলেই প্রকৃত অ্যালগরিদম জানতে চাই যাতে আমরা এটি পুনরুত্পাদন করতে পারি। যদি [গুগলের] দাবিগুলো সঠিক হয়, তাহলে আমরা তা বাস্তবায়ন করতে চাই। বিজ্ঞান থাকতে হবে, সবই বস্তুনিষ্ঠ হওয়া উচিত; যদি এটি কাজ করে তবে এটি কাজ করে, "তিনি বলেছিলেন।

প্রকৃতি বলেছে নিবন্ধনকর্মী এটি গুগলের কাগজে অনুসন্ধান করছে, যদিও এটি ঠিক কী তদন্ত করছে বা কেন তা জানায়নি।

"গোপনীয়তার কারণে আমরা পৃথক মামলার বিবরণ সম্পর্কে মন্তব্য করতে পারি না," প্রকৃতির একজন মুখপাত্র আমাদের বলেছেন। “তবে, সাধারণভাবে বলতে গেলে, যখন জার্নালে প্রকাশিত কোনো পেপার নিয়ে উদ্বেগ উত্থাপিত হয়, তখন আমরা একটি প্রতিষ্ঠিত প্রক্রিয়া অনুসরণ করে সেগুলিকে সাবধানে দেখি।

“এই প্রক্রিয়ায় লেখকদের সাথে পরামর্শ করা এবং যেখানে উপযুক্ত, সমকক্ষ পর্যালোচক এবং অন্যান্য বহিরাগত বিশেষজ্ঞদের কাছ থেকে পরামর্শ নেওয়া জড়িত। একবার আমাদের কাছে সিদ্ধান্ত নেওয়ার জন্য পর্যাপ্ত তথ্য থাকলে আমরা সেই প্রতিক্রিয়াটি অনুসরণ করি যা সবচেয়ে উপযুক্ত এবং যা আমাদের পাঠকদের ফলাফল সম্পর্কে স্পষ্টতা প্রদান করে।"

এটি প্রথমবার নয় যে জার্নালটি গবেষণায় প্রকাশ-পরবর্তী তদন্ত করেছে, যা নতুন করে যাচাই-বাছাইয়ের মুখোমুখি হচ্ছে। Googlers এর পেপারটি 2022 সালের মার্চ মাসে যোগ করা একটি লেখক সংশোধনের সাথে অনলাইন থেকে গেছে, যার মধ্যে একটি অন্তর্ভুক্ত ছিল লিংক যারা অধ্যয়নের পদ্ধতি অনুসরণ করার চেষ্টা করছেন তাদের জন্য Google-এর কিছু ওপেন সোর্স সিটি কোডে।

নো-প্রিট্রেনিং এবং যথেষ্ট গণনা না?

গুগলের কাগজের প্রধান লেখক, আজালিয়া মিরহোসেইনি এবং আনা গোল্ডি বলেছেন, ইউসিএসডি দলের কাজ তাদের পদ্ধতির সঠিক বাস্তবায়ন নয়। তারা উল্লেখ করেছে যে প্রফেসর কাহং-এর গোষ্ঠী খারাপ ফলাফল পেয়েছে কারণ তারা তাদের মডেলকে কোনো ডেটার উপর প্রি-ট্রেইন করেনি।

"একটি শিক্ষা-ভিত্তিক পদ্ধতি অবশ্যই খারাপ কাজ করবে যদি এটি পূর্ব অভিজ্ঞতা থেকে শেখার অনুমতি না দেওয়া হয়। আমাদের নেচার পেপারে, আমরা 20 টি ব্লকে প্রাক-প্রশিক্ষন দিয়েছি এবং অনুষ্ঠিত পরীক্ষার ক্ষেত্রে মূল্যায়ন করার আগে, "দুজন একটি বিবৃতিতে বলেছেন [পিডিএফ].

প্রফেসর কাহং-এর দলও তাদের সিস্টেমকে Google এর মতো একই পরিমাণ কম্পিউটিং শক্তি ব্যবহার করে প্রশিক্ষণ দেয়নি এবং পরামর্শ দিয়েছে যে এই পদক্ষেপটি সঠিকভাবে করা হয়নি, মডেলের কর্মক্ষমতাকে বিকল করে। মিরহোসেইনি এবং গোল্ডি আরও বলেছেন যে ইডিএ অ্যাপ্লিকেশনগুলি ব্যবহার করে প্রি-প্রসেসিং পদক্ষেপ যা তাদের নেচার পেপারে স্পষ্টভাবে বর্ণিত হয়নি তা উল্লেখ করার মতো যথেষ্ট গুরুত্বপূর্ণ ছিল না। 

“[ইউসিএসডি] কাগজটি শারীরিক সংশ্লেষণ থেকে ক্লাস্টার স্ট্যান্ডার্ড কোষে প্রাথমিক স্থান নির্ধারণের উপর দৃষ্টি নিবদ্ধ করে, তবে এটি কোনও ব্যবহারিক উদ্বেগের বিষয় নয়। কোনো বসানো পদ্ধতি চালানোর আগে শারীরিক সংশ্লেষণ অবশ্যই করা উচিত, "তারা বলেছিল। "এটি চিপ ডিজাইনে আদর্শ অনুশীলন।"

ইউসিএসডি গ্রুপ, তবে, বলেছেন তারা তাদের মডেলকে প্রাক-প্রশিক্ষণ দেয়নি কারণ তাদের Google মালিকানাধীন ডেটাতে অ্যাক্সেস ছিল না। তারা দাবি করেছে, তবে, তাদের সফ্টওয়্যারটি ইন্টারনেট জায়ান্টের অন্য দুই ইঞ্জিনিয়ার দ্বারা যাচাই করা হয়েছে, যারা নেচার পেপারের সহ-লেখক হিসাবে তালিকাভুক্ত ছিল। প্রফেসর কাহং এই বছরের ফিজিক্যাল ডিজাইনের আন্তর্জাতিক সিম্পোজিয়ামে তার দলের গবেষণা উপস্থাপন করছেন সম্মেলন মঙ্গলবার।

ইতিমধ্যে, Google তার TPU গুলিকে উন্নত করতে শক্তিবৃদ্ধি-লার্নিং-ভিত্তিক কৌশলগুলি ব্যবহার করে চলেছে, যা সক্রিয়ভাবে তার ডেটাসেন্টারগুলিতে ব্যবহৃত হয়।

বরখাস্ত Googler দাবি করেছেন যে গবেষণা একটি লাভজনক ক্লাউড চুক্তির জন্য প্রচারিত হয়েছিল

আলাদাভাবে, গুগলের নেচার পেপারের অতিমানবীয় কর্মক্ষমতার দাবিগুলি ইন্টারনেট গোলিয়াথের মধ্যে অভ্যন্তরীণভাবে বিতর্কিত হয়েছিল। গত বছরের মে মাসে, সত্রাজিৎ চ্যাটার্জি, একজন AI গবেষক, Google থেকে কারণ দেখিয়ে বহিস্কার করা হয়েছিল; তিনি দাবি করেছিলেন যে তাকে ছেড়ে দেওয়া হয়েছিল কারণ তিনি প্রকৃতি গবেষণার সমালোচনা করেছিলেন এবং কাগজের ফলাফলের প্রতিদ্বন্দ্বিতা করেছিলেন। চ্যাটার্জীকে আরও বলা হয়েছিল যে গুগল তার প্রথম গবেষণার সমালোচনা করে পেপার প্রকাশ করবে না।

অন্যান্য গুগলারদের দ্বারা তার সমালোচনায় অনেক দূর যাওয়ার জন্যও তাকে অভিযুক্ত করা হয়েছিল - যেমন, উদাহরণ স্বরূপ, কথিত মৌখিকভাবে কাজটিকে "ট্রেনের ধ্বংসাবশেষ" এবং "টায়ার ফায়ার" হিসাবে বর্ণনা করা - এবং তার কথিত আচরণের জন্য HR তদন্তের অধীনে রাখা হয়েছিল।

এরপর থেকে চ্যাটার্জী সান্তা ক্লারায় ক্যালিফোর্নিয়ার সুপিরিয়র কোর্টে গুগলের বিরুদ্ধে মামলা করেছেন ভুলভাবে সমাপ্তির দাবি করে। চ্যাটার্জি এই গল্পের জন্য মন্তব্য করতে অস্বীকৃতি জানান, এবং তিনি কোনো অন্যায়কে অস্বীকার করেন। চ্যাটার্জিকে বাদ দেওয়ার পর মিরহোসেইনি এবং গোল্ডি 2022 সালের মাঝামাঝি সময়ে Google ত্যাগ করেন।

গুগলের বিরুদ্ধে তার অভিযোগ, যা সংশোধন করা হয়েছিল [পিডিএফ] গত মাসে, চ্যাটার্জির আইনজীবীরা দাবি করেছিলেন যে ওয়েব জায়ান্ট তার AI-ভিত্তিক ফ্লোরপ্ল্যান-জেনারেটিং সফ্টওয়্যারকে "কোম্পানি এস"-এর সাথে বাণিজ্যিকীকরণের কথা ভাবছিল যখন এটি সেই সময়ে S-এর সাথে $120 মিলিয়ন মূল্যের Google ক্লাউড চুক্তির বিষয়ে আলোচনা করছিল। চ্যাটার্জি দাবি করেছেন যে Google এই গুরুত্বপূর্ণ বাণিজ্যিক চুক্তিতে কোম্পানি এসকে রাজি করাতে সাহায্য করার জন্য ফ্লোরপ্ল্যান পেপারে চ্যাম্পিয়ন হয়েছে।

"অধ্যয়নটি আংশিকভাবে [কোম্পানি এস] এর সাথে সম্ভাব্য বাণিজ্যিকীকরণের দিকে প্রথম পদক্ষেপ হিসাবে করা হয়েছিল (এবং [কোম্পানী এস] এর সংস্থানগুলির সাথে পরিচালিত)। যেহেতু এটি একটি বৃহৎ সম্ভাব্য ক্লাউড চুক্তির প্রেক্ষাপটে করা হয়েছিল, তাই এটি বোঝানো অনৈতিক ছিল যে আমাদের পরীক্ষাগুলি অন্যথায় দেখালে আমাদের কাছে বৈপ্লবিক প্রযুক্তি ছিল,” চ্যাটার্জি গুগলের সিইও সুন্দর পিচাইকে একটি ইমেলে লিখেছেন, ভাইস প্রেসিডেন্ট এবং ইঞ্জিনিয়ারিং ফেলো জে. ইয়াগনিক, এবং গুগল রিসার্চের ভিপি রাহুল সুকথাঙ্কর, যা মামলার অংশ হিসাবে প্রকাশ করা হয়েছিল।

তার আদালতে দায়ের করা অভিযোগে Google তার অধ্যয়নের ফলাফলকে "অতিরিক্ত" করার জন্য অভিযুক্ত করেছে, এবং "ইচ্ছাকৃতভাবে কোম্পানি এস থেকে উপাদান তথ্য আটকে রেখে একটি ক্লাউড কম্পিউটিং চুক্তিতে স্বাক্ষর করতে প্ররোচিত করেছে," কার্যকরভাবে অন্য ব্যবসায়কে প্ররোচিত করেছে যা সে সন্দেহজনক প্রযুক্তি হিসাবে দেখেছিল।

কোম্পানি এসকে আদালতের নথিতে একটি "ইলেক্ট্রনিক ডিজাইন অটোমেশন কোম্পানি" হিসেবে বর্ণনা করা হয়েছে। বিষয়টি পরিচিত লোকজন জানান নিবন্ধনকর্মী কোম্পানি এস হল Synopsys.

Synopsys এবং Google মন্তব্য করতে অস্বীকার করেছে। ®

কৃত্রিম বুদ্ধিমত্তার জগতের মধ্যে কি এমন একটি গল্প আছে যা আপনি শেয়ার করতে চান? আমাদের সাথে কথা বল আত্মবিশ্বাস.

সময় স্ট্যাম্প:

থেকে আরো নিবন্ধনকর্মী