2件の記事
pd.read_csv() で大きなCSVを読み込むとメモリを大量に使ってしまう問題を、dtype指定・category型・usecols・chunksizeの4つの方法で実際に測定しながら解決します。
ワークフローをコードで定義・スケジュール・監視できるApache Airflowの入門記事です。導入が求められる背景から、インストール手順、DAGを使った基本操作までを、これから使い始める人向けに整理しました。
