日誌 vaexのdataframeのcolumnとrowの数による性能の違いの調査
手元のデータで特徴量の次元が10万超えのものがあり、vaexを使ってみたが、速く感じられない。そこで、dataframeの columnとrowによって処理性能に差があるのか試してみた。結果からみると、row数が多いものは高速に処理できるが...
Google Drive
日誌 
日誌 vaexをColab経由のGCPで試す
vaex による大容量データ処理を Google Colaboratoryを経由してGoogle Cloud Platform (GCP) で試した。「vaexをColab経由でGCPで試す」と同じ NY Taxiのデータを使っている。GC...
日誌 Google ColaboratoryからGoogle Driveの大容量データアクセス
「vaex を Google Colaboratoryで試す」のようにGoogle Colabでvaexを試していたが、同じjupyter notebook を実行しても vaex.open をすると次のようなエラーが出て処理できないように...