Python pandasのinterpolateで欠損値NaNを前後の値から補間する方法

Pythonのpandasを使って欠損値NaNを前後の値から補間する方法を解説します。

Pythonのpandasで欠損値を前後の値から補間する方法ってあるんですか？

pandasには便利なinterpolateというメソッドがあり、これを使うことで欠損値を前後の値を考慮して補間することができます。

欠損値の補間とは

データ分析や機械学習の前処理において、欠損値（NaN）の存在はよく見られます。

欠損値が含まれるデータを扱う際には、それらの値を適切に補間する必要があります。欠損値の補間は、データの完全性を保ちながら正確な分析や予測を行うために重要な手法です。

Pythonのpandasライブラリには、欠損値の補間を行うための便利なメソッドが用意されています。

その中でも特に有用なのがinterpolateメソッドです。このメソッドを使うことで、欠損値を前後の値を考慮して推測し、補間することができます。

pandasのinterpolateメソッドの概要

interpolateメソッドは、pandasのSeriesやDataFrameオブジェクトに対して適用することができます。このメソッドは、欠損値を線形補間やスプライン補間などの方法で推測し、補間します。

interpolateメソッドの主なパラメータには、以下のようなものがあります:

例えば、以下のようなデータがあったとします:

   A     B     C
0  1.0   NaN   3.0
1  NaN   5.0   NaN
2  7.0   NaN   NaN
3  NaN   NaN   12.0

このデータに対してinterpolateメソッドを適用すると、欠損値が前後の値から推測され、補間されます。

   A     B     C
0  1.0   NaN   3.0
1  4.0   5.0   7.5
2  7.0   9.5   10.0
3  7.0   9.5   12.0

このように、interpolateメソッドを利用することで、欠損値が適切に補間されたデータを取得することができます。

interpolateメソッドの使用方法

interpolateメソッドは、pandasのSeriesやDataFrameオブジェクトに対して適用することができます。以下では、具体的な使用方法として、前方向への補間、後方向への補間、および前後の値を考慮した補間について説明します。

前方向への補間

前方向への補間では、欠損値を前の値で補間します。

interpolateメソッドにmethod='linear'を指定することで、線形補間による前方向への補間が行われます。

df.interpolate(method='linear', limit_direction='forward')

上記のコードでは、dfは補間を行いたいDataFrameオブジェクトを表しています。limit_direction='forward'を指定することで、欠損値が前方向の値でのみ補間されるように制限されます。

後方向への補間

後方向への補間では、欠損値を後ろの値で補間します。

interpolateメソッドにmethod='linear'を指定し、limit_direction='backward'を追加することで、線形補間による後方向への補間が行われます。

df.interpolate(method='linear', limit_direction='backward')

上記のコードでは、欠損値が後方向の値でのみ補間されます。

前後の値を考慮した補間

前後の値を考慮した補間では、欠損値を前後の値を組み合わせて推測し、補間します。

interpolateメソッドにmethod='linear'を指定し、limit_direction='both'を追加することで、前後の値を考慮した線形補間が行われます。

df.interpolate(method='linear', limit_direction='both')

上記のコードでは、欠損値が前後の値を考慮した補間が行われます。

これらの補間方法を使って、欠損値を適切に補間することができます。

サンプルプログラムの解説

ここでは、実際のサンプルプログラムを用いて、interpolateメソッドの実行と結果について解説します。

import pandas as pd
import numpy as np

data = {
    'A': [1.0, np.nan, 7.0, np.nan],
    'B': [np.nan, 5.0, np.nan, np.nan],
    'C': [3.0, np.nan, np.nan, 12.0]
}

df = pd.DataFrame(data)

df_interpolated = df.interpolate(method='linear', limit_direction='both')

print(df_interpolated)

上記のコードでは、method='linear'を指定して線形補間を行い、limit_direction='both'を設定して前後の値を考慮した補間を行っています。補間された結果は、df_interpolatedという新しいDataFrameオブジェクトに格納されます。

補間結果の出力は以下のようになります:

     A    B     C
0  1.0  5.0   3.0
1  4.0  5.0   6.0
2  7.0  5.0   9.0
3  7.0  5.0  12.0

補間された結果、欠損値が適切に補間されていることがわかります。各列の欠損値は、前後の値を線形補間することで推測されました。

このように、interpolateメソッドを使って欠損値を補間することで、データの完全性を保ちながら分析や予測を行うことができます。

リスキリングでキャリアアップしてみませんか？

リスキリング(学び直し)は、経済産業省が推奨しており、

今だけ、最大７０％のキャッシュバックを受けることができます。

最大70％の給付金が出るおすすめのプログラミングスクール！

リスキリングで給付金が出るスクールを７つ紹介 ≫

国策で予算が決められているため申し込みが多い場合は早期に終了する可能性があります！

興味のある方はすぐに確認しましょう。

まとめ

Pythonのpandasを使って欠損値NaNを前後の値から補間する方法を解説しました。

interpolateメソッドを使った欠損値の補間方法について理解するのに役立ちました。特にサンプルプログラムの解説が分かりやすかったです。ありがとうございました！

欠損値の補間には様々な手法がありますが、interpolateメソッドはシンプルで効果的な方法です。ただし、データの特性や目的に合わせて適切な補間方法を選ぶことが重要です。

さまざまな方法を試して、最適な結果を得るようにしましょう。