CPUオフロードの話をしてるならyes
グラボのメモリを超えてメインメモリを使いつつ生成速度を落とさない方向で進歩してる
3060でも生成できる方向できてる、という話はコレ

メモリ自体が少なくていいかというとNo
小さいメモリに収まる生成モデルはあるが、解像度やプロンプト解釈、秒数制限など色々手間や品質低下などは避けられない

Macはユニファイドメモリだから全てをvramとして使えるのは利点だが、メインメモリを後増設できないので不利