將XML數據導入到數據庫中

Question

作爲體育運動的書呆子，我期待每天使用由美國職業棒球大聯盟網站製作的XML文件，並將它們導入到Access或MySQL數據庫中。我遇到的問題是，他們生產的幾乎每個XML文件都與上一次的略有不同。例如，一個遊戲文件可能有一個名爲batter23的字段，它與event22相鄰，而另一個文件將其稱爲batter24，並且位於pitcher25的旁邊。我知道XML文件可能不一致，但我知道必須有一種方法來持續將數據存入數據庫。無論如何要標準化這些XML文件？一些代碼將解析列表中的每個文件，並將它們組織成特定的樣式併爲其提供一致的字段名稱？目前，我首先將XML文件導入到Excel工作表中，在那裏將文件類型更改爲CSV，但從那裏字段名稱和列位置仍然不同於文件。

我的目標是讓結構中的所有文件每天都可以快速導入到數據庫中，而無需手動更改列位置或字段名稱。我願意接受任何選擇，但我在大多數語言中的體驗都是最好的菜鳥級別，所以請原諒我缺乏知識。

Answer 1

這些文件是非常標準的，只要XML去..，你只需要確定每個文件所代表的。

我做了周圍紅襪v皇家遊戲咋一看，從9月14日（轉到紅襪！） 在year_2014/month_09/day_14/gid_2014_09_14_bosmlb_kcamlb_1/players.xml 我可以看到，奧爾蒂斯爲120074的ID。

如果我看着他的球員Id的擊球手，我可以看到他的那場比賽的數據。 （year_2014/month_09/day_14/gid_2014_09_14_bosmlb_kcamlb_1/batters/120074.xml）

它繼續。基本上，爲了將這些文件加載​​到數據庫中，您需要執行某些級別的處理才能使其具有意義。 這些ID在遊戲間似乎沒有改變，但我只是粗略一瞥。

至於加載數據，perl中的XML :: Simple可以很容易地接受一個XML並且吐出一個perl數據結構。除非你需要更重的東西，否則這應該會掩蓋你。

加載players.xml：

#!/bin/env perl 
use strict; use warnings; 

use Data::Dumper; 
use XML::Simple; 

my $players_xml = XMLin('players.xml'); 

print Dumper $xml; 

給你的東西，如：

$VAR1 = { 
    'venue' => 'Kauffman Stadium', 
    'date' => 'September 14, 2014', 
    'team' => { 
     'Boston Red Sox' => { 
      'id' => 'BOS', 
      'player' => { 
       '605141' => { 
        'avg' => '.283', 
        'team_abbrev' => 'BOS', 
        'parent_team_id' => '111', 
        'hr' => '4', 
        'team_id' => '111', 
        'status' => 'A', 
        'last' => 'Betts', 
        'rl' => 'R', 
        'parent_team_abbrev' => 'BOS', 
        'first' => 'Mookie', 
        'rbi' => '12', 
        'game_position' => '2B', 
        'num' => '50', 
        'position' => '2B', 
        'current_position' => '2B', 
        'boxname' => 'Betts', 
        'bats' => 'R', 
        'bat_order' => '1' 
       }, 
       ... 

它是那麼微不足道瀏覽這些散列和插入DB行，只要你喜歡。