使用Spark寫入AWS SQS隊列

Question

有沒有什麼方法可以使用庫將數據流式傳輸或從Spark寫入Amazon SQS隊列？

在星火包裝上市無 - https://spark-packages.org/

我GOOGLE了一下，但發現沒有什麼。

有什麼想法嗎？

Answer 1

一個想法是使用Alpakka's SQS connector，它建立在Akka Streams上。