0

dataframe型のビックデータがあります。
このデータからuser_id毎にデータを分離し、user_idがファイル名になるcsvファイルとして書き込みしたいです。

出来るところまでコードを組んでみましたが、ディレクトリのパスの指定からディレクトリ名の設定方法について教えてもらえますか?

user_unique = list(set(df["user_id"]))
for i in range(len(user_unique)):
    a=df[df["user_id"]==user_unique[i]]
    a=a.sort_values(by='utc')
    a=a.reset_index(drop=True)
    dflist=pd.DataFrame(a)
    dflist.to_csv(str(user_unique[i])+'.csv',index=False)

対象のデータ

画像の説明をここに入力

1 件の回答 1

1

pandas.DataFrameのgroupbyを使えば少し簡単に出来るでしょう。

フォルダ・ファイル名操作はフォルダが既に有れば文字列の連結だけで出来ます。
作成する場合はpathlibなどですね。

例えばこれらの記事です。
Looping over groups in a grouped dataframe
Python、pathlibモジュールを使う

上記にならえば、以下のように考えられます。(もう少し工夫すれば行数は削減出来そうですが)

import pandas as pd
from pathlib import Path

targetfolder = Path('C:/WorkSpace/')
targetfolder.mkdir(parents=True, exist_ok=True) # フォルダを作成する場合
for user_id, grouped in df.groupby('user_id'):
    dfwork = grouped.sort_values('utc')
    dfwork = dfwork.reset_index(drop=True)
    filename = Path(targetfolder, (user_id + '.csv'))
    dfwork.to_csv(filename, index=False)
3
  • 助かりました。groupby機能教えてくださいありがとうございます。本当に簡単に使えますね。
    – HG.KIM
    Commented 2020年4月7日 3:51
  • ちなみに以前の質問でもそうですが、サンプルデータもスクリーンショットでは無くテキスト化した方が良いですね。検討・回答する際の手間が大幅に省けます。
    – kunif
    Commented 2020年4月7日 3:57
  • 良いアドバイスありがとうございます。
    – HG.KIM
    Commented 2020年4月7日 4:01

この質問に回答するには、ログインする必要があります。

求めていた回答ではありませんか? のタグが付いた他の質問を参照する。