Episode 01: The Lottery Ticket Hypothesis

Episode 1 August 19, 2020 00:21:00
Episode 01: The Lottery Ticket Hypothesis
Amlek.AI: ML & AI Podcast
Episode 01: The Lottery Ticket Hypothesis

Aug 19 2020 | 00:21:00

/

Hosted By

Ariel Munafo

Show Notes

בפרק זה, נעסוק ב-Neural Network Pruning, כאשר נתקמד בפרט במאמר פורץ דרך מ2019, שנקרא "THE LOTTERY TICKET HYPOTHESIS: FINDING SPARSE TRAINABLE NEURAL NETWORKS", מבית היוצר של MIT.

במאמר זה, מציעים דרך מעניינת לקצץ רשת גדולה במעל 80% מהמשקלים שלה בצורה כזו שהביצועים (ה-accuracy) לא ייפגעו. קישורים שהוזכרו בפרק:

Other Episodes

Episode 14

February 16, 2021 00:17:04
Episode Cover

Episode 14: Graph Neural Nets - שיכון גרפים

בפרק זה נארח את אלה בור, שתספר לנו על מהם גרפים (קשתות וצמתים), על בעיות המיוצגות ע"י גרפים ועל שיכון גרפים במרחב אוקלידי (GNN,...

Listen

Episode 0

August 19, 2020 00:06:09
Episode Cover

Episode 00: Who are we and what do we want?

זהו פרק מבוא קצרצר בו אנו מספרים מי הוא תמיר נווה ומי הוא אורי גורן, למה החלטנו להתחיל עם הפודקאסט, ומה היינו רוצים שיהיה...

Listen

Episode 8

November 25, 2020 00:23:57
Episode Cover

Episode 8: הורדת מימדים

בפרק זה נדבר על הורדת מימדים - Dimensionality reduction. נעסוק במוטיבציות (קללת המימדים), ובאלגוריתמים PCA, T-SNE, AutoEncoders, SOM. קישורים רלוונטיים: https://onlinecourses.science.psu.edu/stat505/lesson/11 https://distill.pub/2016/misread-tsne/

Listen