無理なら何が無理なのかハッキリ伝えれば発注側も対応策を提示して来るでしょ
できるパートだけやる代わりに単価を下げるとか、ヘルプしながら一緒に作業進めるとか

もう辞めるって決まってるんでなければ、意固地にできないと突っぱねるよりは相談くらいのテンションで話してみたら？