設定が見つけにくいかもしれないので一応書いておくと、
再生中にリモコンの↓←決定、←↑決定でオーディオの遅延という項目が出てくる。

でも50ms単位にしか設定できないというのもあるが、-300msにしてもなんかしっくりこないのよね。