リモコン側じゃなくて電波状況のせいじゃないの
FireTVのリモコンは電波が2.4GHzで普通のWifiとかぶってるから、日本みたいに過密かつ一家に数台Wifiって環境だとよく反応しなくなる