2017-11-10 205 views
-1

我對RNN和LSTM相當陌生,但花了相當多的時間從互聯網上找到的各種資源中學習。我收集到的是,循環神經網絡中的時間步長與前饋神經網絡中的正向傳遞時間步長相同。但事實證明這是錯誤的。那這是什麼 ?參考循環神經網絡的時間步驟是什麼?

回答

1

正向傳遞涉及完全通過網絡運行一個數據項目(例如完整句子),直到項目被完全處理(即,我們具有分類輸出)。

時間步是通道的一部分,其中節點輸入被處理成輸出,然後這些輸出被饋送到下一個節點 - 通常反饋到先前的輸入。

+0

所以你想說的是基本上前一層激活下一層是一個時間步驟。那麼時間步長的「長度」是多少?我們如何控制它? –

+0

對 - 這是描述它的好方法。 「長度」由拓撲控制:感知器在一次輸入到輸出通道中處理什麼單位的信息時間?我習慣於音頻流將輸入解析爲不同大小的剪輯,每個剪輯長几毫秒,對應於一個子音素音素。文本流通常每次進行一個單詞(忽略停用詞)。 – Prune

+0

你描述了我們如何控制長度。但是時間步長是多少? –