學習率與信心

這是幾項 Playground 練習的第一項。 Playground 是一項計畫 專門為這堂課程編寫機器學習原則 本課程的每項遊樂場運動均包含嵌入式遊樂場 套用預設設定的執行個體

每項 Playground 運動都會產生資料集。這項動作的標籤 有兩個可能的值你可以想到這兩個 可能的值是垃圾與非垃圾資訊 或可疑的樹或生病 大部分運動的目標在於微調各種超參數來建立 能夠成功分類 (分離或區別) 一個模型的模型 靜態標籤值請注意,大多數資料集都包含 導致無法成功分類的雜訊 每次範例。

本練習的介面提供三個按鈕:

圖示 名稱 功用
重設按鈕。 重設 將「Iterations」重設為 0。將模型產生的任何權重歸零
步驟按鈕。 步驟 進行一項疊代作業。每次疊代時 變動 - 有時候可能會有些許細微,甚至大幅度調整。
「重新產生」按鈕。 重新生成 產生新的資料集。不會重設疊代

在第一個 Playground 練習中 學習率

工作 1:請留意右上方的「學習率」選單 遊樂場。指定的學習率 (3) 非常高。觀察 點選「Step」圖示,就能瞭解高學習率對模型的影響 按鈕 10 或 20 次每次早期疊代後 圖表的呈現方式大幅改變甚至可能出現不穩定的問題 。同時請注意 從 x1 和 x2 轉換為模型視覺化權重 這些線條代表模型中這些特徵的權重也就是說 粗線條表示體重較高。

工作 2:執行下列操作:

  1. 按下「重設」按鈕。
  2. 降低學習率
  3. 多按幾下「步驟」按鈕。

較低的學習率會如何影響收訊?檢查 模型對話所需的步驟數,以及流暢度 並穩定地收縮模型盡量實驗看看 學習率你能找出學習率太慢,不覺得實用嗎?(您將 請參閱練習下方的討論)。