AdaDelta

গ্রেডিয়েন্ট স্বাভাবিকীকরণ

প্রশিক্ষণ স্থিতিশীল করতে ঐতিহাসিক পরিসংখ্যান ব্যবহার করে গ্রেডিয়েন্টগুলিকে স্কেল করার প্রক্রিয়া। AdaDelta তাদের বর্গের চলমান গড়ের বর্গমূল দ্বারা ভাগ করে গ্রেডিয়েন্টগুলিকে স্বাভাবিক করে।

← ফিরে যান