Posted inPython
Polars vs Pandas: Rustの力を活用してDataFrame処理を10倍高速化する
Polarsを使用してDataFrameの処理を10倍から100倍高速化。PandasからPolarsへの移行方法、Lazy APIの活用、マルチコアCPUの性能を最大限に引き出す大規模データ処理のヒントを詳しく紹介します。
Posted inDatabase
DuckDB：分析用SQLite – ノートPCで数十GBのデータをスムーズに処理する極意
DuckDBを体験しましょう。個人用PCで大規模データを処理する際の、Pandasに代わる完璧なソリューションです。この記事では、数十GBのCSVやParquetファイルを高速に直接クエリする方法と、実践的なパフォーマンス最適化のヒントを解説します。
Posted inPython
PythonのpandasでCSV・Excelファイルを処理する：アプローチの比較と実践的な実装ガイド
PythonでCSV・Excelを処理する3つのアプローチを比較：csvモジュール、pandas、openpyxl——それぞれのメリット・デメリットを分析し、場面に応じた適切なツールの選び方を実際の自動化プロジェクトの例とともに解説する。