large-data-volumes

    7熱度

    4回答

    讓我們馬上清楚:這不是關於內存泄漏的問題! 我有一個頁面,允許用戶輸入一些數據和JavaScript來處理這些數據併產生結果。 中的JavaScript產生一個DIV增量輸出,這樣的事情: (function() { var newdiv = document.createElement("div"); newdiv.innerHTML = produceAnswer();

    0熱度

    3回答

    我們有一個建立在三個大型表上的索引視圖。其中兩個表(A & B)不斷更新用戶事務,另一個表(C)包含需要每週更新一次的數據產品信息。該產品表包含超過600萬條記錄。 對於我們的核心業務流程,我們需要在這三個表中使用此視圖,但不幸的是,我們無法更改此方面。我們甚至有一個sql server MVP來幫助在負載下進行測試,以確保我們擁有最高效的配置。產品表中有一列在視圖中使用,並且必須每週更新一次。

    2熱度

    4回答

    我有一些龐大的(幾個千兆字節)ASCII文本文件,需要逐行讀取,將某些列轉換爲浮點數,然後執行一些簡單的操作在這些數字上。這是非常簡單的東西,除了我認爲必須有一種方法來加速它的一大堆。該程序從不使用100%的CPU核心,因爲它花費了很多時間等待I/O。與此同時,它花費足夠的時間進行計算而不是I/O,它只需要〜8-10 MB /秒的原始磁盤I/O。我看到我的硬盤比這做得好多了。 它可能有助於在單獨的

    2熱度

    1回答

    我正在開發一個程序,該程序應該能夠顯示長的(最多500個項目)數據列表,當它們的內容更改時需要使用這些數據。 從本質上講,我有與包含與結合到圖形用戶界面,其中顯示在ListView觀察到的數據類可觀察到的集合的視圖模型。 的數據必須進行排序,但數據也可以隨時更改,並且需要每次都使出列表。 什麼是最好的機制/比喻顯示,並保持不鎖定了GUI使出了整個事情?我有一個使用NotifyCollectionC

    3熱度

    3回答

    在SQL Server 2008中存儲大量圖像數據的最佳做法是什麼?我預計會使用大約5個存儲空間存儲大約50,000張圖像。目前我使用一個單一的表中的列這樣做: ID: int/PK/identity Picture: Image Thumbnail: Image UploadDate: DateTime 我很擔心,因爲在10%左右我預計總產能的好像刀片花費很長的時間。典型的圖像大約在2

    5熱度

    5回答

    我目前正在運行一個awk腳本來處理一個大的(8.1GB)訪問日誌文件,並且它將永久完成。在20分鐘內,它寫了14MB(1000 + - 500)MB我期望它寫,我不知道我能否以更快的速度處理它。 這裏是awk腳本: #!/bin/bash awk '{t=$4" "$5; gsub("[\[\]\/]"," ",t); sub(":"," ",t);printf("%s,",$1);sys

    3熱度

    5回答

    將只保留數字數據的記錄轉換爲固定格式字符串並將它們寫入Python文件中的最快方式是什麼?例如,假設record是一個包含屬性爲id,x,y和wt的對象的巨大列表,我們經常需要將它們刷新到外部文件。沖洗可以用下面的代碼片段來完成: with open(serial_fname(), "w") as f: for r in records: f.write("%07d %11.

    0熱度

    1回答

    如何標記3d點雲數據集?有沒有一種軟件可以加載一個包含x,y,z值的文本文件,然後將其可視化,以便我可以標記它?

    1熱度

    4回答

    我有一個事務表的存儲過程的問題,用戶有一個Web表單來查找幾個值的事務。 該過程耗時過長,我不知道如何設置正確的索引。 這裏是我的存儲過程: CREATE PROCEDURE dbo.cg_searchTransactions ( @id_Ent tinyint, @transactionTypeID int = NULL, @transactionID numeri

    16熱度

    2回答

    我寫了一個方法insert()中,我想使用JDBC批處理用於插入五十萬條記錄到MySQL數據庫: public void insert(int nameListId, String[] names) { String sql = "INSERT INTO name_list_subscribers (name_list_id, name, date_added)"+