PythonとPandasを使用して複数のファイルを一度に読み込む方法を紹介します。この方法は、データ分析や機械学習のタスクで頻繁に使用されます。
Pandasを使用した複数ファイルの読み込み
以下に、PythonとPandasを使用して複数のファイルを一度に読み込む基本的なコードを示します。
import pandas as pd
import glob
path = "/path/to/your/files" # ファイルへのパスを指定します
all_files = glob.glob(path + "/*.txt") # 指定したパス内の全ての.txtファイルを取得します
li = []
for filename in all_files:
df = pd.read_csv(filename, header=None, delimiter=" ")
li.append(df)
frame = pd.concat(li, axis=0, ignore_index=True)
このコードでは、まずglobモジュールを使用して指定したパス内の全ての.txtファイルを取得します。次に、各ファイルをPandasのDataFrameとして読み込み、それらをリストに追加します。最後に、pd.concat関数を使用してリスト内の全てのDataFrameを結合します。
注意点
このコードは、全てのファイルが同じカラムを持ち、それらが同じ順序で配置されていることを前提としています。また、read_csv関数のheader=Noneとdelimiter=" "の部分は、ファイルの形式によって適宜変更してください。
以上がPythonとPandasを使用して複数のファイルを一度に読み込む基本的な方法です。この方法をマスターすることで、大量のデータを効率的に処理することが可能になります。.