使用CSVhelper合併具有不同標題的CSV文件C＃

Question

嘗試使用CSVhelper將多個.csv文件從目錄合併到一個.csv文件時。在目錄中有50個.csv文件，在這50個文件中，有兩組文件結構，一個包含7列，另一個包含6.每個文件具有完全相同的前5個文件頭，但根據文件最後兩列更改。 CSVfile格式1的

實施例：

CSVfile格式2的實施例：

在目錄中的每個文件將持有任一這些結構的與在列中不同的數據。新文件的輸出將具有來自所有列的數據行Action，Code和Error Message。如果我只用示例1的結構使用文件，則文件完美地結合在一起。不過，如果我包括與這兩個結構的文件，並嘗試在我的新文件中使用「ErrorIPAddress」自實施例2我得到以下錯誤：

An unhandled exception of type 'CsvHelper.TypeConversion.CsvTypeConverterException' occurred in CsvHelper.dll

在這一行：`IEnumerable的dataRecord = reader.GetRecords（）。 ToList（）;

我的問題是：如何使用不在另一個文件中的列？我試圖將它與以下映射：Map(m => m.ErrorIPAddress).Index(5);，我相信這是導致我的問題，如果我註釋它的錯誤不會持續，但顯然我不會將我需要的數據到新的.csv。如果我嘗試按以下名稱映射：Map(m => m.ErrorIPAddress).Name("ErrorIPAddress");我收到ErrorIPAddress不在.csv文件中的錯誤消息，因爲不是所有文件都有該列。

輸出.csv格式：

的最後一列將由ErrorIPAddress列格式2.

Answer 1

代碼我假設你正在使用一個類定義的所有字段看起來是這樣的：

public class StudentWebAccess 
{ 
    public int StudentID { get; set; } 
    public string Gender { get; set; } 
    public int Grade { get; set; }   
    public int IPAddress { get; set; } // Also ErrorIPAddress? 
    public DateTime DateTime { get; set; } 
    public string Action { get; set; } 
    public string Code { get; set; } // Also ErrorMessage? 
} 

所以爲了讀取文件格式2使用的是CsvClassMap但沒有正確匹配屬性和字段名稱。它應該看起來像這樣：

public class CsvFile2Map : CsvClassMap<StudentWebAccess> 
{ 
    public CsvFile2Map() 
    {    
     Map(m => m.IPAddress).Name("ErrorIPAddress"); 
     Map(m => m.Code).Name("ErrorMessage"); 
    } 
} 

如果您的類文件使用ErrorIPAddress而不是IPAddress，則必須反轉映射。

Map(m => m.ErrorIPAddress).Name("IPAddress"); 

Answer 2

產生不需要外部庫。使用下面

using System; 
using System.Collections.Generic; 
using System.Linq; 
using System.Text; 
using System.Globalization; 
using System.Data; 
using System.Data.OleDb; 
using System.IO; 


namespace ConsoleApplication1 
{ 
    class Program 
    { 
     const string FOLDER = @"c:\temp\test"; 
     static void Main(string[] args) 
     { 
      CSVReader reader = new CSVReader(); 

      //table containing merged csv files 
      DataTable dt = new DataTable(); 

      //get csv files one at a time 
      foreach (string file in Directory.GetFiles(FOLDER, "*.csv")) 
      { 
       //read csv file into a new dataset 
       DataSet ds = reader.ReadCSVFile(file, true); 
       //datatable containing new csv file 
       DataTable dt1 = ds.Tables[0]; 

       //add new columns to datatable dt if doesn't exist 
       foreach(DataColumn col in dt1.Columns.Cast<DataColumn>()) 
       { 
        //test if column exists and add if it doesn't 
        if (!dt.Columns.Contains(col.ColumnName)) 
        { 
         dt.Columns.Add(col.ColumnName, typeof(string)); 
        } 
       } 

       //array of column names in new table 
       string[] columnNames = dt1.Columns.Cast<DataColumn>().Select(x => x.ColumnName).ToArray(); 

       //copy row from dt1 into dt 
       foreach(DataRow row in dt1.AsEnumerable()) 
       { 
        //add new row to table dt 
        DataRow newRow = dt.Rows.Add(); 

        //add data from dt1 into dt 
        for(int i = 0; i < columnNames.Count(); i++) 
        { 
         newRow[columnNames[i]] = row[columnNames[i]]; 
        } 
       } 
      } 

     } 
    } 
    public class CSVReader 
    { 

     public DataSet ReadCSVFile(string fullPath, bool headerRow) 
     { 

      string path = fullPath.Substring(0, fullPath.LastIndexOf("\\") + 1); 
      string filename = fullPath.Substring(fullPath.LastIndexOf("\\") + 1); 
      DataSet ds = new DataSet(); 

      try 
      { 

       //read csv file using OLEDB Net Library 
       if (File.Exists(fullPath)) 
       { 
        string ConStr = string.Format("Provider=Microsoft.Jet.OLEDB.4.0;Data Source={0}" + ";Extended Properties=\"Text;HDR={1};FMT=Delimited\\\"", path, headerRow ? "Yes" : "No"); 
        string SQL = string.Format("SELECT * FROM {0}", filename); 
        OleDbDataAdapter adapter = new OleDbDataAdapter(SQL, ConStr); 
        adapter.Fill(ds, "TextFile"); 
        ds.Tables[0].TableName = "Table1"; 
       } 

       //replace spaces in column names with underscore 
       foreach (DataColumn col in ds.Tables["Table1"].Columns) 
       { 
        col.ColumnName = col.ColumnName.Replace(" ", "_"); 
       } 
      } 

      catch (Exception ex) 
      { 
       Console.WriteLine(ex.Message); 
      } 
      return ds; 
     } 
    } 
}