Episode 15: Transformers - האבולוציה של ניתוח סדרות בזמן

Episode 15 • March 02, 2021 • 00:19:31
Episode 15: Transformers - האבולוציה של ניתוח סדרות בזמן
Amlek.AI: ML & AI Podcast
Episode 15: Transformers - האבולוציה של ניתוח סדרות בזמן

Mar 02 2021 | 00:19:31

/

Hosted By

Ariel Munafo

Show Notes

בפרק זה, נסקור את ההשתלשלות של ניתוח סדרות בזמן החל מ-RNN, דרך Attention Models ועד ל-Transformers.
נדבר על Self Attention, Multi Headed Attention, LSTM, RNN, GRU, Transformers ו-DeTR.

קישורים רלוונטיים:

Other Episodes

Episode 5

October 14, 2020 • 00:16:55
Episode Cover

Episode 05: NLPH (NLP In Hebrew)

בפרק זה נדבר על עיבוד טקסט בעברית, ונציג כיצד הוא שונה משפות אחרות, ובפרט מאנגלית. נשוחח על ה-NLP Pipeline ועל למה הוא שבור בעברית,...

Listen

Episode 10

December 23, 2020 • 00:14:12
Episode Cover

Episode 10: Fourier Transform - אינטרו לפורייה

בפרק זה, נשוחח על מהי התמרת פורייה. מוטיבציות, שימושים, Time Series והקשר ללמידה עמוקה.קישורים רלוונטיים:  But what is the Fourier Transform? A visual introduction...

Listen

Episode 1

August 19, 2020 • 00:21:00
Episode Cover

Episode 01: The Lottery Ticket Hypothesis

בפרק זה, נעסוק ב-Neural Network Pruning, כאשר נתקמד בפרט במאמר פורץ דרך מ2019, שנקרא "THE LOTTERY TICKET HYPOTHESIS: FINDING SPARSE TRAINABLE NEURAL NETWORKS", מבית...

Listen