たれぱんのびぼーろく

わたしの備忘録、生物学とプログラミングが多いかも

2020-12-11から1日間の記事一覧

fsspecのZipFileSystem速度

素のファイルアクセスと比較して50%くらいのオーバーヘッドあり ただし最適化の余地あり 計測環境 Google Colab 処理 PyTorch.Tensorのload & processing PyTorch.Tensorをファイルに事前保存. load→ Tensor*2.0を数十ファイルに対して処理、これを1000ルー…