distributed-computing

    0熱度

    1回答

    有沒有任何方法可以在kubernetes中的豆莢之間分配任務。我在HDFS上有一堆文件,我想將它們分發到我的應用程序窗口中。 像Helix分區分佈功能也適用於我。

    1熱度

    2回答

    我想在非常大的語料庫上訓練word2vec模型,以便嵌入的單詞不能分配給RAM。 我知道現有的算法並行解決方案,例如Spark implementation,但我想使用tensorflow庫。 可能嗎?

    0熱度

    1回答

    我有一個50維的數組,其維數爲255 x 255 x 255 x ...(50倍).. x255。所以它總共有50^255個浮點數。它只是在範圍之外,甚至想到裝入RAM中。此外,我需要對此陣列進行50維快速傅立葉變換(DFT)。我無法在普通PC上使用python。我甚至不能想象在GPU上做它。所以我猜我必須藉助硬盤內存,但即使這樣也太大了。我實時不需要這些,我甚至可以負擔得起的日子。我不知道我需要

    0熱度

    2回答

    我有一個用例,其中應用程序的輸入分批進入XML文件。例如,每晚的一批銀行交易。我正在嘗試查看是否可以使用事件採購創建事件日誌。根據我目前閱讀的內容,這些示例似乎基於用戶驅動的輸入(點擊流,來自用戶界面的更新等)。使用分佈式日誌機制(如Kafka)的事件採購是基於批處理/文件的輸入的有效方法嗎? 下面是我想採取的方法: 接受輸入的文件/ XML 運行在內存的一些基本驗證了一批。 將批量輸入轉換爲一系

    1熱度

    1回答

    我偶然發現了這個術語,讀取AWS文檔,建議一些實例用於構建車隊,但我不知道那是什麼。什麼是前端艦隊?

    0熱度

    1回答

    這是應用程序出現的方式:UI Chat socket java application 嗨,大家好! 我寫了這個FXML java應用程序,這是一個簡單的聊天。我想測試許多客戶端模擬消息發送的併發性。換句話說,我想編寫一個運行客戶機類(擴展應用程序)和服務器之一的許多接口的代碼。此時,客戶端必須自動同時發送消息來測試併發性。 我知道我不能在同一個JVM上執行許多客戶端程序,所以還有另一種方法。 這

    1熱度

    2回答

    我讀了下面的文章:Elements of Scale: Composing and Scaling Data platforms 我卡上理解下面的句子: 的第二個指標是不是主鍵索引。這意味着數據將不會被索引中的值分區。通過哈希函數定向路由不再是一種選擇。我們必須向所有機器廣播請求。 任何人都可以解釋爲什麼這種情況?我是數據平臺的初學者,但已經得到了很多,並且理解了這篇文章。 具體來說,爲什麼我們不

    -2熱度

    1回答

    我想詢問有關回答以下問題 對於通過使每個進程發送一個 值執行通信此MPI程序段,正,以環形模式轉到其旁邊的過程。也就是說,如果有N個進程,則進程0 將發送值爲1,進程1將發送到2,依此類推。最後一個進程將其值 發送到0.這些消息將全部並行發生。 if (my_rank%2 == 0) { MPI_SEND(msg,size,MPI_INT,(my_rank+1)%comm_sz,0,comm);

    2熱度

    1回答

    我想在一個集羣通知所有節點時,較長的運行過程中我JavaEE 7 Web應用程序的狀態發生變化,讓每一個節點都可以反過來有關變化通過WebSocket的通知他們的客戶。 我與Wildfly 10在集羣環境中工作。 什麼JavaEE 7 API /編程模型或Wildfly服務將實現,今天的最佳做法?

    0熱度

    1回答

    比特幣如何部署新功能並管理不同版本的兼容性? 例如,如果將新功能添加到比特幣,那麼如何部署和管理它?也就是說,當新版本可用時,網絡上的每個人都不會被迫升級? 如果不強制升級/更新,比特幣如何在網絡上管理不同版本的比特幣?網絡中是否有最低要求的版本?