pythonのpandasでcsvを開いて、条件を満たす行に加工をする + ある行をファイル末尾にコピーして追記したい

pandasというのを使うのは初めてだった
・勝手にindexという列ができていたり、そのindexは加工不可だったりで色々と大変だった・・・
・astropyの単位みたいに、printしたら勝手にヘッダーにあるkeyも表示されてたりしてその対処が必要
・ある列、ある行の要素を取り出すのに、リストみたいに通し番号で指定できるのかと思ったらそれはできなかった・・・ ilocといかいうのを使う必要がある


コード

---

以下、メモ

pd.read_csvはファイルを開いて、読み込んで、さらに閉じてくれるのでその後の処理が楽

■ 参考 : pythonでのcsvファイルの読み込み

最初はpandasのreplaceでなんとかすればいいと思ったが、うまくいかなかった

■ 参考 : pandas.DataFrame, Seriesの要素の値を置換するreplace

---

pandasで読み込んだcsvのindexをいじりたいとき用↓
df1 = df.set_index("filename")
とか

■ 参考 : pandasでcsvの読み込みをしてIndexをいじってみる


■ 参考 : pandas.DataFrameの列をインデックス（行名）に割り当てるset_index

---

いつか使うかも
これは便利そう
indexにdatatime型を指定すると、ある日付の範囲のデータのみを取り出す、とかがかんたんにできる
■ 参考 : pandasのindexはdatetimeにすると便利

---

ファイル末尾に追加する方法について
最初はappendでやろうとしたが、うまくいかなかった

一応メモ↓
■ 参考 : pandas.DataFrameに列や行を追加（assign, appendなど）

今回は
n = len(df["gain"])
df.loc[n] = df[df.index==13].values[0]
みたいにして追加した

任意の位置の値を取得するには at, iat, loc, ilocを使う
今回はilocしか使ってないけど・・・

■ 参考 : pandasで任意の位置の値を取得・変更するat, iat, loc, iloc



ilocとかを使わずにdfをfor文に打ち込むと、warningが出る
chained indexingというらしい

■ 参考 : pandas の SettingWithCopyWarning で苦労した話

■ 参考 : pandasのSettingWithCopyWarningの対処法

---

修正したdfをcsvでもう一度書き出す方法
index=Falseを付けないと、indexという列が新しく追加されるので注意
あと、headerがいるかどうかも選べる

■ 参考 : Pandasのto_csv関数を使ってCSVファイルに書き出す方法

---

(2022/12/19 追記)

data frameの仕様でハマったのでメモ

data frameの内容をコピーするのに = を使うと参照渡し(C言語のアドレス)みたいなことになって、単純な値をコピーすることにはならない
コピー元が修正されたら、=の左辺も置き換わってしまう(ここにハマった・・・)

(これは別にdata frameに限った話じゃなくてpythonもこういう仕様らしい、が今の所これで変なことが起こったことはないんだよなぁ・・ 謎)

単純な値のコピーをしたいなら、
hoge = df.copy(deep=True)

deepcopyというのは新しいidで作成されるので、新しい変数になる