在MySQL中，如何避免加載同樣的數據文件導入表，如果已經存在

Question

我使用下面的命令

LOAD DATA INFILE '/sample.txt' INTO TABLE TEST FIELDS TERMINATED BY '\t' LINES TERMINATED BY '\n'; 

只要執行這個查詢，表「TEST」會從樣品添加的值.txt文件。

如何避免table.i中的多個條目如果表格尚未加載此文件，則希望加載此文件。

Answer 1

diEcho的評論幾乎是正確的 - 識別數據中的唯一列組合，並將它們聲明爲表格上的唯一索引 - 但重要的是，您還需要修改LOAD DATA語句 - 因爲它的立場，它會在首次出現重複記錄。您需要添加一個忽略：

LOAD DATA INFILE '/sample.txt' IGNORE INTO TABLE `test` 
    FIELDS TERMINATED BY '\t' LINES TERMINATED BY '\n'; 

雖然首選項，你應該考慮加載完整數據集到一個臨時表中，然後處理重複多一點優雅。