সপ্তাহ ১১
$$\gdef \sam #1 {\mathrm{softargmax}(#1)}$$
$$\gdef \vect #1 {\boldsymbol{#1}} $$
$$\gdef \matr #1 {\boldsymbol{#1}} $$
$$\gdef \E {\mathbb{E}} $$
$$\gdef \V {\mathbb{V}} $$
$$\gdef \R {\mathbb{R}} $$
$$\gdef \N {\mathbb{N}} $$
$$\gdef \relu #1 {\texttt{ReLU}(#1)} $$
$$\gdef \D {\,\mathrm{d}} $$
$$\gdef \deriv #1 #2 {\frac{\D #1}{\D #2}}$$
$$\gdef \pd #1 #2 {\frac{\partial #1}{\partial #2}}$$
$$\gdef \set #1 {\left\lbrace #1 \right\rbrace} $$
% My colours
$$\gdef \aqua #1 {\textcolor{8dd3c7}{#1}} $$
$$\gdef \yellow #1 {\textcolor{ffffb3}{#1}} $$
$$\gdef \lavender #1 {\textcolor{bebada}{#1}} $$
$$\gdef \red #1 {\textcolor{fb8072}{#1}} $$
$$\gdef \blue #1 {\textcolor{80b1d3}{#1}} $$
$$\gdef \orange #1 {\textcolor{fdb462}{#1}} $$
$$\gdef \green #1 {\textcolor{b3de69}{#1}} $$
$$\gdef \pink #1 {\textcolor{fccde5}{#1}} $$
$$\gdef \vgrey #1 {\textcolor{d9d9d9}{#1}} $$
$$\gdef \violet #1 {\textcolor{bc80bd}{#1}} $$
$$\gdef \unka #1 {\textcolor{ccebc5}{#1}} $$
$$\gdef \unkb #1 {\textcolor{ffed6f}{#1}} $$
% Vectors
$$\gdef \vx {\pink{\vect{x }}} $$
$$\gdef \vy {\blue{\vect{y }}} $$
$$\gdef \vb {\vect{b}} $$
$$\gdef \vz {\orange{\vect{z }}} $$
$$\gdef \vtheta {\vect{\theta }} $$
$$\gdef \vh {\green{\vect{h }}} $$
$$\gdef \vq {\aqua{\vect{q }}} $$
$$\gdef \vk {\yellow{\vect{k }}} $$
$$\gdef \vv {\green{\vect{v }}} $$
$$\gdef \vytilde {\violet{\tilde{\vect{y}}}} $$
$$\gdef \vyhat {\red{\hat{\vect{y}}}} $$
$$\gdef \vycheck {\blue{\check{\vect{y}}}} $$
$$\gdef \vzcheck {\blue{\check{\vect{z}}}} $$
$$\gdef \vztilde {\green{\tilde{\vect{z}}}} $$
$$\gdef \vmu {\green{\vect{\mu}}} $$
$$\gdef \vu {\orange{\vect{u}}} $$
% Matrices
$$\gdef \mW {\matr{W}} $$
$$\gdef \mA {\matr{A}} $$
$$\gdef \mX {\pink{\matr{X}}} $$
$$\gdef \mY {\blue{\matr{Y}}} $$
$$\gdef \mQ {\aqua{\matr{Q }}} $$
$$\gdef \mK {\yellow{\matr{K }}} $$
$$\gdef \mV {\lavender{\matr{V }}} $$
$$\gdef \mH {\green{\matr{H }}} $$
% Coloured math
$$\gdef \cx {\pink{x}} $$
$$\gdef \ctheta {\orange{\theta}} $$
$$\gdef \cz {\orange{z}} $$
$$\gdef \Enc {\lavender{\text{Enc}}} $$
$$\gdef \Dec {\aqua{\text{Dec}}}$$
লেকচার ভাগ এ
এই বিভাগে আমরা পাইটর্চের সাধারণ এক্টিভেশন ফাংশন নিয়ে আলোচনা করেছি। বিশেষত আমরা কিঙ্ক এর সাথে স্মুথ একটিভেশন ফাংশনের তুলনা করেছি - প্রথমটি ডিপ নিউরাল নেটয়ার্কে বেশী ব্যবহৃত হয়, কারণ দ্বিতীয়তিতে গ্রেডিয়েন্ট শুন্য হয়ে যাওয়ার সমস্যা রয়েছে। এরপরে আমরা পাইটর্চের সাধারন লস ফাংশন শিখেছি।
লেকচার ভাগ বি
এই বিভাগে আমরা লস ফাংশন এর ব্যাপারে শিখা চালিয়ে গিয়েছি - বিশেষত, মার্জিন-বেজড লস এবং তাদের ব্যবহার। এর পরে আমরা আলোচনা করেছি কিভাবে ইবিএম এর জন্য একটি ভালো লস ফানশন নকশা করা যায়, সাথে ইবিএম এর বহুল ব্যবহৃত লস ফানশনগুলোও। আমরা বিশেষত মার্জিন-বেজড লস এর দিকে মনযোগ দিয়েছি, সেইসাথে “মোস্ট অফেন্ডিং ইনকরেক্ট আন্সার” এর ব্যাখাও করেছি।
ব্যবহারিক পাঠ্যক্রম
এই ব্যবহারিক পাঠ্যক্রমটি, ঘন যানবাহনের মাঝে গাড়ি চালনার জন্য, এফেক্টিভ পলিসি লার্নিং উত্থাপন করে। আমরা বাস্তব বিশ্বের গতিশীলতায় শিক্ষিত একটি মডেলকে উদঘাটিত করে, বিভিন্ন কস্ট ফানশনকে অপ্টিমাইজেশনের মাধ্যমে বিভিন্ন নীতিকে ট্রেইনিং দিয়েছি। ধারণাটি হলো, একটি কস্ট ফাংশনের প্রবর্তনের মাধ্যমে মডেলের ডাইভার্জেন্স কে প্রকাশ করা, যাতে মডেলটির প্রেডিকশনের অনিশ্চয়তা যতোতা সম্ভব কমানো যায়।
Aditya Chakma