NavMeshSurfaceのベイクでオブジェクト上にできるメッシュをなくしたい

前提

ボクセルのステージでブロックを積み上げた際に、
NavMeshSurfaceで動的にメッシュを生成すると画像のようになってしまいます。
オブジェクトの上にメッシュを作りたくないのですがNotworkableなどを試してもうまくいきません。
解決方法がありましたらご教授ください。