সাতটি ফ্রি ওপেন সোর্স GPT মডেল প্রকাশিত হয়েছে

সিলিকন ভ্যালি এইত্তম তথ্য প্রযুক্তি কোম্পানি "সেরেব্রাস" প্রকাশ করেছে সাতটি ওপেন সোর্স জিপিটি মডেল, যা সীমিতভাবে নিয়ন্ত্রিত এবং স্বতন্ত্র ব্যবহার করা যায় না তা প্রদান করার জন্য।

সিলিকন ভ্যালি ভিত্তিক একটি এআই অ্যাপ্লিকেশন কোম্পানি সেরেব্রাস দ্বারা, কমপরিধানশূন্য ওপেন সোর্স জি.পি.টি মডেলগুলি, যা ওইট এবং প্রশিক্ষণ ইনস্ট্রাকশনকে সহ আন্দোলিত করে, খুবই মন্দনীয় আপাচি 2.0 লাইসেন্সে মুক্তি পেয়েছে।

এক নির্দিষ্ট মাত্রায়, সাতটি GPT মডেলটি Cerebras Andromeda AI সুপারকম্পিউটারের জন্য প্রমাণ হিসাবে ধারণাটির নিশান হিসেবে।

সেরিব্রাস বাহিতকরণ তাদের গ্রাহকদের, যেমন জ্যাসপার এইআই কপিরাইটার, তাদের নিজস্ব কাস্টম ভাষা মডেল দ্রুত প্রশিক্ষণ দেওয়ার সুযোগ দেয়।

হার্ডওয়্যার প্রযুক্তি সম্পর্কে সেরব্রাস একটি ব্লগ পোস্ট উল্লেখ করেছে:

"আমরা সমস্ত সিরেব্রাস-জিপিটি মডেলগুলি একটি ১৬টাইলে প্রশিক্ষণ দিয়েছি, যা আন্দ্রোমেদা নামক ১৬x সিরেব্রাস ওয়েফার-স্কেল ক্লাস্টারে বসবাস করে।"

"ক্লাস্টারটি সর্বশেষ সম্পাদনা করা সম্ভব করেছে, বিভাজন সিস্টেম ইঞ্জিনিয়ারিং এবং যে জিপিইউ ক্লাস্টারে দরকার ছিল সেসব মডেল পারালেল টিউনিং ছাড়াও।"

"সবচেয়ে গুরুত্বপূর্ণ হিসাবে, এটি আমাদের গবেষকদেরকে প্রতিষ্ঠানটির বহুল নগরীর জন্য বিশাল মডেল প্রশিক্ষণে সহায়তা করে, যাতে বিত্তবহ সিস্টেমের কথার চিন্তা করতে হয় না। আমরা বিশ্বব্যাপী সম্প্রদায়ের জন্য বড় মডেলগুলি সহজেই প্রশিক্ষণ দেয়ার সম্ভাবনা মনে করি, তাই আমরা সিরেব্রাস ওয়েফার-স্কেল ক্লাস্টারটিকে সিডাব্লিউ ইয়াফ্লে মডেল স্টুডিওর মাধ্যমে ক্লাউডে উপস্থাপন করেছি।"

সিরেব্রাস GPT মডেল এবং স্পষ্টতা

সেরেব্রাসে একটি কারণ হিসাবে কয়েকটি কোম্পানির মাত্রা উদ্ধৃতি হিতৈষী বি.আই. প্রযুক্তি মালিকানাধীনতাকে প্রবর্তিত ছয়টি ওপেন সোর্স জিপিটি মডেল তৈরির জন্য একটি কারণ হিসাবে উল্লেখ করে।

ওপেনএআই, মেটা এবং ডিপমাইন্ড তাদের সিস্টেম সম্পর্কে একটি বৃহত পরিমাণ তথ্যকে ব্যক্তিগতভাবে প্রামাণ্য বজায় রাখে এবং সেই তথ্যের সঙ্গে নতুন নবীনতা সীমাবদ্ধ করতে বাধা দেয়, যা অন্যরা সঙ্গতপূর্ণ কাজ করতে পারে তা মাত্র এই তিনটি প্রতিষ্ঠানের নির্ধারণ করে।

আইয়ের উদ্ভবের জন্য বন্ধ সোর্স সিস্টেম সেরা হলেও ওপেন সোর্স কি ভবিষ্যতের দিকে?

সেরেব্রাস লিখেনঃ

এলএলএম একটি খোলা এবং প্রবেশযোগ্য প্রযুক্তি হিসাবে থাকতে পারবে, এমনকি একটি অস্ত্রাগার, প্রকাশ্য মডেলগুলি প্রযুক্তিগত নবীনতম পদ্ধতি এবং খোলা ডেটাসেটগুলি ব্যবহার করে তাদের জন্য স্বতন্ত্র এবং কর্তব্যবিমুক্ত হয়ে উন্নীত করতে হবে বিশ্বাস রাখি।

তার উপযুক্ত, সর্বশেষ পদ্ধতি এবং খোলা ডেটাসেটগুলি ব্যবহার করে আমরা একটি ট্রান্সফরমার মডেলের পরিবার প্রশিক্ষণ দেয় যা আমরা চিনাচিলা সূত্র ব্যবহার করে অঙ্গিভূত কিংবদন্তী মডেল হিসেবে সন্মিত করি এবং এটিগুলি আপাচি ২.০ লাইসেন্স ধারণ করে প্রকাশ করি।

এই মডেলগুলি ছিল প্রথম পরিবার এইচপিটি মডেলগুলি যারা চিনাচিলা ফর্মুলা ব্যবহার করে প্রশিক্ষিত এবং আপাততপ করে আপাতটি করে প্রকাশ করা হয়।”

অতএব, এই সাতটি মডেলটি হাগিং ফেস এবং গিটহাবে মুক্ত প্রবেশের মাধ্যমে আরো গবেষণা উৎসাহিত করার জন্য প্রকাশিত হয়।

এই মডেলগুলি সিরিব্রাসের এড্রোমেডা এইআই সুপারকম্পিউটার দিয়ে প্রশিক্ষিত হয়েছে, যা শুধুমাত্র সপ্তাহের মধ্যে সম্পন্ন হয়েছে।

সিরেব্রাস-জিপিটি সম্পূর্ণরূপে খোলা এবং স্বচ্ছ, নিউট্রাল এবং বিশ্বস্ত হয়। এটি অপেনএআই (জিপিটি-৪), ডিপমাইন্ড এবং মেটা ওপ্টি গুলির সর্বশেষ জিপিটি মডেলের মতো নয়।

অপেনএআই এবং ডিপমাইন্ড চিঞ্চিলা মডেলগুলি ব্যবহারের জন্য লাইসেন্স প্রদান করে না। মেটা অপটি কেবলমাত্র একটি বাণিজ্যিক নয় লাইসেন্স প্রদান করে।

ওপেনএআই-র GPT-4 এর প্রশিক্ষণের উপর কোনও সাদস্যপদ সম্পর্কে পর্যবেক্ষণ নেই। তারা কি কমন ক্রল ডেটা ব্যবহার করেছেন? তারা কি ইন্টারনেট কাঁটা করে নিজেদের ডেটাসেট তৈরি করেছেন?

ওপেনএআই এই তথ্যটি (এবং আরও কিছু) গোপন রেখেছে, যা সম্পূর্ণ প্রকাশ্য সেরেব্রাস-জিপিটি পদ্ধতির বিপরীত।

নিম্নলিখিতটি সম্পূর্ণ খোলা এবং প্রত্যক্ষপ্রকাশযোগ্য:

• মডেল স্থাপত্য
• প্রশিক্ষণ তথ্য
• মডেল ওজন
• চেকপয়েন্ট
• কম্পিউট অপটিমাল প্রশিক্ষণের অবস্থা (হ্যাঁ)
• ব্যবহারের লাইসেন্স: এপাচি 2.0 লাইসেন্স

সাতটি সংস্করণ আছে 111M, 256M, 590M, 1.3B, 2.7B, 6.7B এবং 13B মডেলে।

এটি ঘোষণা করা হয়েছিল:

"এখানে মোটভাবে, এক্ষেত্রে Cerebras গবেষকরা আন্দ্রোমেডা AI সুপারকম্পিউটারের সাহায্যে ১১১এম, ২৫৬এম, ৫৯০এম, ১.৩বি, ২.৭বি, ৬.৭বি, এবং ১৩বিলিয়ন প্যারামিটার সম্পন্ন সাতটি GTM মডেল প্রশিক্ষণ করেছে।"

সাধারণতঃ একটি মাল্টি মাসকেশন কাজ, কিন্তু Cerebras CS-2 সিস্টেমের অবাজ্ঞায়ন জন্য অন্দ্রোমেডা গঠিত সিস্টেমগুলির অবিশ্রম্ণভাবে গতিশীলতা এবং Cerebras' ওজন স্ট্রিমিং বাস্তবায়নকে একরক্ষনের মহাবিপদ সরে ফেলেছে।"

এই ফলাফলগুলি প্রমাণ করে যে Cerebras' সিস্টেমগুলি আজকে সর্বাধিক এবং সম্প্রসারণপূর্ণ AI লোডগুলি প্রশিক্ষণ করতে পারে।"

এই একটি অভিজ্ঞতার সূচনা যে সর্বোচ্চ স্বাভাবিকতা দিয়ে প্রশিক্ষণ প্রদান করতে গঠনীয়তা প্রযুক্তিগুলিতে বিভিন্ন GPT মডেলের সূচনা প্রকাশিত হয়েছে।"

এই মডেলগুলি একটি নির্ধারিত কম্পিউট বাজেট (অর্থাৎ চিঞ্চিলা রেসিপি ব্যবহার করে) লভ্যায়নের জন্য সর্বোচ্চ নির্ধারিততার জন্য প্রশিক্ষণ করা হয়, এভাবে এদের প্রশিক্ষণের সময়, প্রশিক্ষণ খরচ এবং শক্তির প্রয়োজন বেশি হয়।"

ওপেন সোর্স এইআই

মোজিলা ফাউন্ডেশন, জনপ্রিয় ওপেন সোর্স সফটওয়্যার ফায়ারফক্সের তৈরি করেছে এমনকি প্রাইসাই একটি কোম্পানি, মোজিলা.এইআই, যা নিরাপত্তার দৃষ্টিতে বিশ্বস্ত এবং গোপনীয়তা সম্মত ওপেন সোর্স জিপিটি এবং রিকমেন্ডার সিস্টেম তৈরি করবে।

ডেটাব্রিকস সাম্প্রতিকে একটি ওপেন সোর্স জিপিটি ক্লোন ডলি নামক মুক্তপ্রেরণ করেছে, যা "চ্যাটজিপিটির জাদু" সহজলভ্য করার লক্ষ্য রাখে।

সপ্তটি সিরেব্রাস জিপিটি মডেলের পাশাপাশি, অন্যান্য একটি কোম্পানি নমিক এআই প্রকাশ করেছে জিপিটি4অল, যা একটি ল্যাপটপে চলতে পারে একটি ওপেন সোর্স জিপিটি।

ওপেন সোর্স এইচ.এইচ.এল (HTML) ইনটারনেটের একটি চরমাঙ্গল বাংলা পরিবেশ তৈরি করতে ব্যবহৃত হচ্ছে।

GPT প্রযুক্তি বিভিন্ন শিল্পে মারাত্মক পরিবর্তন জন্মাচ্ছে এবং সম্ভবতঃ, সম্ভবতঃ এর সঙ্গে যুক্ত হতে পারে, যে যাত্রাপথে এই পরিবর্তন চালনা করা হচ্ছে সেই উদ্যোগগুলি শিল্পগুলির মুখমন্ডলকে পরিবর্তন করতে পারে।

যদি ওপেন সোর্স আন্দোলন এই গতি অবলম্বন করতে থাকে, তবে আমরা একটি পরিবর্তনের উপায়ে খড়ি হতে পারি যা AI উদ্ভাবনের কিছু কর্পোরেশনের কাছে শক্তি দেয় না।

অফিসিয়াল ঘোষণা পড়ুন:

সেরাবাস সিস্টেমস সিএস-২ ওয়াফার-স্কেল সিস্টেমে প্রশিক্ষিত সাতটি নতুন জিপিটি মডেল মুক্তি দিয়েছে।