ভারতে একটি, দুটি বা তিনটি নয়, অনেকগুলি ভাষায় কথা বলা হয়, মজার বিষয় হল ভারতের এমন অনেক এলাকা রয়েছে যেখানে প্রায় প্রতি 5 কিলোমিটারে ভাষা পরিবর্তন হয়। AI প্রযুক্তির সাহায্যে, Google একটি দুর্দান্ত টুল তৈরি করেছে যা সমস্ত ভাষা বুঝতে পারে। গুগল ডেভেলপাররা এমন প্রযুক্তি তৈরি করেছে যা শুধুমাত্র মানুষের ভাষা বুঝতে পারে না, তাদের নিজস্ব ভাষায় তাদের প্রতিক্রিয়াও দিতে পারে।
আগে এরকম অনেক মডেল তৈরি করা হয়েছিল যেগুলি ইংরেজি ভাষার ডেটার উপর প্রশিক্ষিত হয়েছিল এবং এখন একটি মডেল তৈরি করা হয়েছে যা ভারতের অনেক ভাষার উপর প্রশিক্ষিত। Google Gemma কোম্পানির খোলা মডেলের অংশ। জেমাকে সমস্ত চ্যালেঞ্জ মোকাবেলা করার জন্য ডিজাইন করা হয়েছে, এর শক্তিশালী টোকেনাইজার এবং বৃহৎ টোকেন শব্দভান্ডার এটিকে বিভিন্ন ভাষায় প্রতিক্রিয়া জানাতে সক্ষম করে।
টোকেনাইজেশন এর অর্থ
যখন পাঠ্যকে প্রাকৃতিক ভাষা প্রক্রিয়াকরণ এবং মেশিন লার্নিংয়ের মাধ্যমে ছোট অংশে রূপান্তর করা হয়, তখন তাকে টোকেন বলা হয়। এই টোকেনগুলি অক্ষরের মতো ছোট বা শব্দের মতো দীর্ঘ হতে পারে।
Google Gemma কী এবং এটি কীভাবে কাজ করে?
একই গবেষণা এবং প্রযুক্তি যা জেমিনি মডেল তৈরি করেছে তা জেমাকেও বিকাশ করতে ব্যবহার করা হয়েছে। Google Gemma হল একটি হালকা ওজনের খোলা মডেল যা Google DeepMind এবং অন্যান্য Google টিম দ্বারা তৈরি করা হয়েছে।
