M1でdeeplearning系のあれこれをするのは厳しいな。PyTorchメインにしているののもあって、一旦coremlモデルに変換しないとgpuで動かせん。必然的に学習できん。
あくまでもメインをmacにするなら、Windowsかubuntuのgpu乗ってるマシンはサーバ機で置く感じにしないとだめだなぁ。