> もし96MBでキャッシュが効いてないとすると、
> 64MBでキャッシュが効いていた状態（いわゆる自分の以前の環境）
> より体感的速度は落ちるんでしょうか？

キャッシュが効いていなくても、９６ＭＢの方がスワップの減少により快適さが向上しました。
一番良いのは、同じメモリー量で、Ｔａｇ付き時とＴａｇ無し時を比べるのがよいと思います。