熊貓性能：一列中有多個dtypes還是分裂成不同的dtype？

Question

我有我工作的大熊貓數據框。 20mm排，30列。行有很多數據，每行都有一個使用特定列的「類型」。正因爲如此，我目前設計的DataFrame有一些混合dtypes的行，無論這個行是哪一種「類型」。

我的問題是，性能方面，我應該把混合的dtype列分成兩個單獨的列還是保持一致？我遇到了一些問題，讓一些DataFrame甚至保存（to_pickle）並儘可能地提高效率。

這些列可以是當前構造的float/str，float/int，float/int/str的混合。

Answer 1

在我看來，它可能取決於你的後續用例。但恕我直言，我會使每列獨特的類型，否則功能，如總計和其他常見的熊貓功能，將無法正常工作。