為什么要和CSV再見？

雖然用CSV沒有行數(shù)限制，相對輕便，但是面對大數(shù)據(jù)量時還是略顯拉夸，百萬數(shù)據(jù)量儲存加載時也要等好久。。不過很多同學都借此機會抻抻懶腰、摸摸魚，充分利用時間也不錯。

Feather是什么？

如何在Python中操作Feather？

import feather
import numpy as np
import pandas as pd

np.random.seed = 42
df_size = 10000000

df = pd.DataFrame({
    'a': np.random.rand(df_size),
    'b': np.random.rand(df_size),
    'c': np.random.rand(df_size),
    'd': np.random.rand(df_size),
    'e': np.random.rand(df_size)
})
df.head()

feather.write_dataframe(df, '1M.feather')

df =feather.read_dataframe('1M.feather')

和CSV的區(qū)別

結(jié)語

說了這么多，可能很多同學還是甩出一句話：謝謝大佬，我選CSV。 這個東西怎么說呢，當你需要它時，它就有用，如果日常沒有速度和空間的強烈需求，還是老老實實CSV吧。CSV已經(jīng)用慣了，改變使用習慣還是挺難的。