マルチGPU

PytorchでMulti-GPUを試す - Qiita
贅沢な環境素晴らしい(*°∀°*)
・・・それはさておき単純にフラグを立ててパラメータを2倍にすりゃいいってもんでもないか・・・。
その前にマルチGPU環境なんてない。

Google ColabのTPUで対GPUの最速に挑戦する - Qiita
TPU使いこなすのも難しそう・・・。