0

やりたいこと:

  1. 添付画像のようなcsvファイルが複数ある
  2. 各ファイルからプロファイル1の列のデータを抽出
  3. 列方向にデータを結合
  4. csvファイルとして保存

画像の説明をここに入力

import csv
import glob
import os
import pandas as pd

df_dir = './sample1'
df_file = '*.csv'

if __name__ == "__main__":
   for f in glob.glob(os.path.join(df_dir, df_file)):
       with open(f) as file:
           df = pd.read_csv(file, header=2,usecols=[1])
       df_tp = df.transpose()
       with open('./transpose.csv','a') as g:
           writer = csv.writer(g, lineterminator='\n')
           writer.writerows(df_tp)

こんな感じで書いていますが、

Error: iterable expected, not int

というエラーが出てしまいます。
df_tpの中身を見てみると、プロファイル1の数値だけでなくデータ番号(画像のNo.ではなく抽出後のナンバリング(?))も含まれてしまっているのが原因な気がしますがその取り除き方がわかりません。
画像の説明をここに入力

わかる方いらっしゃいましたらご教示願います。

2
  • iterable expected と表示されていますので、writer.writerows(df_tp.itertuples()) としてみてはどうでしょうか。また、df = pd.read_csv(file, header=2,usecols=[1]) とされていますが、これは header=1 ではないでしょうか。
    – user39889
    Commented 2020年1月13日 7:25
  • 1
    writer.writerows(df_tp.itertuples())にしたらできました!!ありがとうございます!headerに関しては説明が足りていなかったのですがプロファイル1というのもいらず数値だけほしかったのでheader=2で大丈夫でした🙇
    – moomin
    Commented 2020年1月13日 7:45

1 件の回答 1

2

既にコメントにて解決しているようですが、もう一つ別の方法として、元のcsvから1つの列だけ取り出すならpandasやDataFrame操作が不要になる以下のやり方が取れるでしょう。
変更部分にコメントを付けています。

import csv
import glob
import os

df_dir = './sample1'
df_file = '*.csv'

if __name__ == "__main__":
   for f in glob.glob(os.path.join(df_dir, df_file)):
      with open(f) as file:
         reader = csv.reader(file)  # pandas ではなく csv を使う
         next(reader)  # 不要な行をスキップ
         next(reader)
         valuelist = [row[1] for row in reader]  # リスト内包表記で指定の列を抽出
      with open('./transpose.csv','a') as g:
          writer = csv.writer(g, lineterminator='\n')
          writer.writerow(valuelist)  # writerows を writerow に変更
1
  • なるほど!pandas使わなくてもできるんですね!ありがとうございます。
    – moomin
    Commented 2020年1月14日 9:11

この質問に回答するには、ログインする必要があります。

求めていた回答ではありませんか? のタグが付いた他の質問を参照する。