こんなときよく言われるのは、“It's not important.”か“It's nothing important.”。どちらも「重要なことではないから＝あえて取り上げるまでもない」といったニュアンスです。

そしてそれに「いいから」とか「忘れて」といったことを足すなら、上記に“Forget it.”をつけ、“Forget it. It's not important.”か“Forget it. It's nothing important.”。