0

Decimal型の数値を含むDataFrame(Series)を、matplotlibでグラフ表示したいのですが、
Decimal型そのままのデータではエラーとなり、グラフ表示できないようです。
そこで、float型に変換しグラフ表示したいのですが、それぞれの列がDecimal型であるか判定するにはどうしたらよいでしょうか?
pd.Series.dtypeでは、object型と表示されてしまい判断できないようです。
要素まで参照しなければ、分からないものなのでしょうか?

import decimal
import pandas as pd

df = pd.DataFrame(
    data=[
        {'aa': 'A0', 'bb': 100.1, 'cc': decimal.Decimal('100.1')},
        {'aa': 'A1', 'bb': 200.2, 'cc': decimal.Decimal('200.2')},
        {'aa': 'A2', 'bb': 250.9, 'cc': decimal.Decimal('250.9')},
    ],
    index=[
        pd.Timestamp('2023/04/01', tz='Asia/Tokyo'),
        pd.Timestamp('2023/04/02', tz='Asia/Tokyo'),
        pd.Timestamp('2023/04/03', tz='Asia/Tokyo'),
    ]
)

df.info()
display(df)
print(f"cc列のdtype:[{df['cc'].dtype}]")
# ↑DataFrameもしくはSeriesからでは、object型と表示されてしまうので、
# Decimal型かどうか判定できない?

for item in df['cc']:
    print(type(item), item)

↓確認用コードの実行結果です。
画像の説明をここに入力

【追記】
以下のように、Seriesを抽出してplotするとエラーが発生します。
多数の列があり、どの列がどの型か分からなくて、質問しました。

import decimal
import pandas as pd

df = pd.DataFrame(
    data=[
        {'aa': 'A0', 'bb': 100.1, 'cc': decimal.Decimal('100.1')},
        {'aa': 'A1', 'bb': 200.2, 'cc': decimal.Decimal('200.2')},
        {'aa': 'A2', 'bb': 250.9, 'cc': decimal.Decimal('250.9')},
    ],
    index=[
        pd.Timestamp('2023/04/01', tz='Asia/Tokyo'),
        pd.Timestamp('2023/04/02', tz='Asia/Tokyo'),
        pd.Timestamp('2023/04/03', tz='Asia/Tokyo'),
    ]
)

# ax = df['bb'].plot()  # ←正しくグラフが書ける
# ax = df['cc'].plot()  # ←エラー(no numeric data to plot)が発生する。
ax = df['cc'].astype(float).plot()  # ←正しくグラフが書ける
3
  • 「Decimal型そのままのデータではエラーとなり、グラフ表示できないようです。」とのことですが、どのようなコードを書いてどのようなエラーが発生したのでしょうか?
    – merino
    4月21日 11:15
  • df['cc'].plot()とするとエラー(no numeric data to plot)が発生しました。
    – Sasaki
    4月21日 11:46
  • 「どの列がどの型か分からなくて」に関しては、print(df.applymap(type)) を実行して結果を確認してみてください。
    – metropolis
    4月21日 12:08

4 件の回答 4

0

Decimal型を含む列

dfx = df.applymap(type).eq(decimal.Decimal)
col = dfx.loc[:, dfx.any()].columns
print(col)

# ['cc']
1
  • ありがとうございます。decimal型の列を検出することができました。
    – Sasaki
    4月21日 13:34
0

変換するだけなら以下のように

df['cc_float'] = df['cc'].astype(float)

df.iloc[1,1] = 207
df.plot()

plot

0

下記のようなコードで型変換するのはどうでしょうか?

df2 = df.applymap(lambda x: float(x) if type(x) == decimal.Decimal else x)
print(df2.dtypes)
# aa     object
# bb    float64
# cc    float64
# dtype: object
1
  • できました。ありがとうございます。各セルの型を見る必要があること分かりました。 型変換に、だいたい50万件で5秒程かかりました。データ量との兼ね合いをみて盛り込んでいきます。
    – Sasaki
    4月21日 13:00
0

Decimal型を検出する方法ではないですが、エラーを無視して変換することで、
パフォーマンスの低下をおさえつつ、グラフ表示できるようになりました。
df[col_name] = df[col_name].astype(float, errors='ignore')

import decimal
import pandas as pd

df = pd.DataFrame(
    data=[
        {'aa': 'A0', 'bb': 100.1, 'cc': decimal.Decimal('100.1')},
        {'aa': 'A1', 'bb': 200.2, 'cc': decimal.Decimal('200.2')},
        {'aa': 'A2', 'bb': 250.9, 'cc': decimal.Decimal('250.9')},
    ],
    index=[
        pd.Timestamp('2023/04/01', tz='Asia/Tokyo'),
        pd.Timestamp('2023/04/02', tz='Asia/Tokyo'),
        pd.Timestamp('2023/04/03', tz='Asia/Tokyo'),
    ]
)

df.info()
print('')

for col_name in df:
    df[col_name] = df[col_name].astype(float, errors='ignore')
df.info()

この質問に回答するには、ログインする必要があります。

求めていた回答ではありませんか? のタグが付いた他の質問を参照する。