「That goes without saying.(それは言わずに行きます)」とは「言わなくても大丈夫です」、つまり「もちろん」という意味です。「Of course」でも同じですが、こちらの表現の方が「そんなこと、当たり前」感がより出て、また多少フォーマルな表現でもあります。