ほぼ初心者のため、ご教授のほどよろしくお願いいたします。
とあるファイル(length.txt
、約40万行×2列、画像左参照)を1行ずつ参照してデータ取得し、そのデータをもとに別のファイル(effect.txt
、約4万行×2列、画像右参照)のデータを検索、照合し、データをテキストファイルに書き出すということを行いたいです。
具体的には、以下の流れです。
length.txt
内のlocus
列、length
列の値を1行ずつ取得。この例では、1行目はlocus
が1で、length
が191です。effect.txt
内のsnp
列で、1.で取得したlocus
の値を検索し、照合したlocus
値の行のeffect
列の値を、1.で取得したlength
個分(どの要素も大体200個前後です)そこから下のeffect
列の値を取得する。この例では、-0.03460835、0、-0.03001576、・・・、0、0、0、0.2164842、・・・(全部で191個分)。- 取得した
effect
列の値を、行方向に書き出す。 - この作業を
length
列の終わりまで行い、テキストファイル(タブ区切り)として書き出す。すなわち約40万行×約200列のデータです。(空白要素は#N/A
や-
で表現したいです)
初心者ながら以下のようなコードを書いてみましたがうまくいきません。
import pandas as pd
length = pd.read_table('length.txt', delim_whitespace=True)
effect = pd.read_table('effect.txt', delim_whitespace=True)
with open('effect_out.txt', "w") as ew:
for i, j in zip(length['locus'], length['length']):
effect[effect['snp'] == i]
effect.head(j).T
for ext in effect:
ew.write(ext+'\n')