এআই গ্লসারি
কৃত্রিম বুদ্ধিমত্তার সম্পূর্ণ অভিধান
মাল্টি-মোডাল ডিফিউশন
একটি শেয়ার্ড বা সমন্বিত ডিফিউশন প্রক্রিয়ার মাধ্যমে একাধিক মোডালিটি (টেক্সট, ইমেজ, অডিও) এর উপর যৌথ সম্ভাবনা বন্টন শেখার জেনারেটিভ মডেলের শ্রেণী।
ইউনিফাইড লেটেন্ট স্পেস
একটি সাধারণ ভেক্টর উপস্থাপনা যেখানে বিভিন্ন মোডালিটির ডেটা প্রজেক্ট করা হয়, যা একটি ডিফিউশন মডেলের মধ্যে তাদের মিথস্ক্রিয়া এবং পারস্পরিক রূপান্তর সম্ভব করে।
ক্রস কন্ডিশনিং
একটি কৌশল যেখানে একটি মোডালিটির জেনারেশন প্রক্রিয়া অন্য মোডালিটির তথ্য দ্বারা পরিচালিত হয়, উদাহরণস্বরূপ একটি টেক্সট থেকে ইমেজ জেনারেট করা বা একটি ইমেজ থেকে অডিও জেনারেট করা।
মাল্টি-মোডাল স্ট্রাকচার্ড নয়েজ
একটি নয়েজ যোগ করার প্রক্রিয়া যা ইন্টার-মোডাল পারস্পরিক সম্পর্ক সংরক্ষণ করে, বিভিন্ন মোডালিটিকে যৌথভাবে অবনতি করে ডিফিউশন প্রক্রিয়া জুড়ে তাদের সেমান্টিক অ্যালাইনমেন্ট বজায় রাখার জন্য।
কো-অর্ডিনেটেড ডিনয়েজিং
ডিনয়েজিং ধাপ যেখানে প্রতিটি মোডালিটির জন্য নিবেদিত নিউরাল নেটওয়ার্কগুলি তথ্য বিনিময় করে তাদের শেয়ার্ড নয়েজড ভার্সন থেকে সামঞ্জস্যপূর্ণভাবে ডেটা পুনর্গঠন করার জন্য।
মাল্টি-মোডাল এনকোডার
একটি নিউরাল নেটওয়ার্ক যা বিভিন্ন মোডালিটির ডেটাকে ইউনিফাইড লেটেন্ট স্পেসে প্রজেক্ট করার দায়িত্বে থাকে, তাদের প্রয়োজনীয় বৈশিষ্ট্য এবং সম্পর্কগুলি ক্যাপচার করে।
মাল্টি-মোডাল ডিকোডার
একটি নিউরাল নেটওয়ার্ক যা ডিনয়েজিং প্রক্রিয়ার পরে ইউনিফাইড লেটেন্ট স্পেস থেকে তাদের উপস্থাপনা থেকে প্রতিটি মোডালিটির ডেটা পুনর্গঠন করে।
ইন্টার-মোডাল অ্যালাইনমেন্ট
একটি লার্নিং উদ্দেশ্য যা একই ধারণা বর্ণনাকারী বিভিন্ন মোডালিটির লেটেন্ট উপস্থাপনার মধ্যে দূরত্ব কমানোর লক্ষ্য রাখে, তাদের সেমান্টিক সামঞ্জস্য নিশ্চিত করে।
ইউনিফাইড ডিফিউশন মডেল
একটি একক মডেল আর্কিটেকচার যা একটি একক ডিফিউশন প্রক্রিয়া এবং শেয়ার্ড ওয়েট সেট ব্যবহার করে একই সাথে একাধিক মোডালিটি প্রসেস ও জেনারেট করে।
মাল্টি-মোডাল গাইডেন্স
একটি ইনফারেন্স টেকনিক যা একটি মাল্টি-মোডাল ক্লাসিফিকেশন মডেলের গ্রেডিয়েন্ট ব্যবহার করে স্যাম্পলিং প্রক্রিয়াকে একটি প্রদত্ত কন্ডিশনের সাথে ভালভাবে এলাইন করা আউটপুটের দিকে গাইড করে।
মাল্টি-আর্ম ডিফিউশন
একটি আর্কিটেকচার যেখানে একটি কেন্দ্রীয় ডিফিউশন প্রক্রিয়ার প্রতিটি মোডালিটির জন্য স্পেসিফিক নয়েজিং ও ডিনয়েজিং হ্যান্ডেল করার জন্য স্পেশালাইজড 'আর্ম' থাকে, যেখানে একটি কমন ট্রাঙ্ক শেয়ার করা হয়।
মাল্টি-মোডাল কনসিসটেন্সি লস
একটি লস ফাংশন যা জেনারেটেড মোডালিটিগুলোর মধ্যে সেমান্টিক ইনকনসিসটেন্সি পেনালাইজ করে, উদাহরণস্বরূপ ইউনিফাইড ল্যাটেন্ট স্পেসে কসাইন ডিসটেন্সের মাধ্যমে পরিমাপ করা হয়।
ইন্টার-মোডাল স্যাম্পলিং
একটি জেনারেশন প্রক্রিয়া যেখানে একটি মোডালিটি স্যাম্পল করা হয় যখন অন্য একটি মোডালিটি ইতিমধ্যে বিদ্যমান বা একই সাথে জেনারেটেড কন্ডিশন হিসেবে ব্যবহার করা হয়।
শেয়ার্ড নয়েজ প্রেডিকশন নেটওয়ার্ক
ডিফিউশন মডেলের কেন্দ্রীয় কম্পোনেন্ট, প্রায়শই একটি U-Net আর্কিটেকচার, যার লোয়ার লেয়ারগুলো মোডালিটিগুলোর মধ্যে শেয়ার করা হয় এবং আপার লেয়ারগুলো স্পেশালাইজড হয়।
মাল্টি-মোডাল টাইম এম্বেডিং
ডিফিউশন প্রক্রিয়ার টাইম স্টেপের রিপ্রেজেন্টেশন যা মডেলে ইনজেক্ট করা হয়, প্রায়শই মোডালিটি দ্বারা কন্ডিশন্ড হয় যাতে ভিন্ন নয়েজ ডাইনামিক্স হ্যান্ডেল করা যায়।
মাল্টি-মোডাল সিকোয়েন্স ডিফিউশন
সিকোয়েন্সিয়াল ডেটাতে ডিফিউশনের অ্যাপ্লিকেশন যা একাধিক মোডালিটি জড়িত, যেমন ভিডিও জেনারেশন (ইমেজ + টাইম) বা সিঙ্ক্রোনাইজড ডায়লগ (অডিও + টেক্সট)।
মাল্টি-মোডাল টোকেনাইজেশন
বিভিন্ন মোডালিটির ডেটাকে একটি একীভূত টোকেন সিকোয়েন্সে বিচ্ছিন্ন করার প্রক্রিয়া, যা ডিফিউশন কাঠামোর মধ্যে ট্রান্সফরমার-ধরনের আর্কিটেকচার দ্বারা প্রক্রিয়াকরণ করা যেতে পারে।