148さんの言っていることは、ある意味正解でもあるし、不正解でもありますね。

仮想メモリで遅くなる場合もあって、
・仮想メモリの処理にCPUパワーを食われる
・処理対象のアプリに使われるデーターが仮想メモリに格納されてしまったため、遅くなる


さらに言うと、androidの場合は、「Z-RAM」という仕組みがあって、ストレージの仮想メモリが使われる前に、
このZ-RAMという仕組みが使われる。ストレージの仮想メモリが使われるのは、Z-RAMで足りなくなった場合。

Z-RAMは実メモリの一部の区域に圧縮してデーターを格納する仕組みなので、
実メモリが足りなければ、Z-RAMの圧縮処理にCPUパワーが食われることになります。