阿帕奇星火：參考指針父RDD

Question

據我瞭解，SPARK保持一個RDD譜系信息。假設我有一個RDD「a」並使用了一些轉換，我生成了一個新的RDD「b」。在這種情況下，「a」是「b」的父RDD。是否有可能通過引用父指針從RDD「b」中獲取RDD「a」？

謝謝！

Answer 1

這取決於什麼是真正的問題：

• 是 - 如果您例如延長RDD。對於大多數compute方法的實現來說這是必要的。
• 沒有 - 依賴是不能公開訪問，所以你不能從RDD的一個實例得到父母。