Petit Kimonoさん、コメントありがとうございます！
中々難しいですよね！そのシチュエーションでは、「comme vous voulez（お好きなように）」が使えなくもないですが、「si vous voulez（よろしければ）」の方が自然かと思います。

例えば、
◎ Prenez ce parapluie, si vous voulez. （よろしければ、この傘をお持ちください）
〇 Vous pouvez prendre ce parapluie. (C’est / Faites) Comme vous voulez. （この傘をお持ちになっても良いですよ。どうぞ、お好きなように）
△ Prenez ce parapluie, mais comme vous voulez. （この傘をお持ちください、でもお好きなように）
✕ Prenez ce parapluie, comme vous voulez. （お好きなように、この傘をお持ちください）
このような感じになります。

考え方としては、「Comme vous voulez（お好きなように）」は選択肢に対して用いることが多い言葉なので、「○○をお持ちください」の場合には「oui / non」の二つの選択肢がはっきりしていれば使えるということになるかなと思います。(*^▽^*)