頼まれごとをしたとき、それが自分にとってことわりたい内容であれば、できるだけ速やかにことわったほうがいいです。
「考えさせてください」と言えば、相手はあなたが考えてくれる人（引き受けてくれるかもしれない人）だと思うのです。
そう思えば、もうすこしお願いしてみようということになって、さらに丁寧に繰り返し頼まれてしまうなんてことになりかねません。
最初にことわるより、こうなってからことわるほうが大変です。
相手の状況を考えると、「ほかに頼む人がいないのだろう」とか、「私がことわれば困るだろう」とか、ことわることが申し訳ないような気がしてしまうかもしれません。
でも引き受けたことでその後ストレスが大きくなることが目に見えているのなら、ことわりの理由を明確に（ただし伝え方はやさしい口調で）きっぱりとことわるほうがお互いのためです。
ことわったら嫌われるかなぁ？
こんなふうに思ってしまうかもしれませんが、そんなことはありません。
ことわり方を間違えなければ、嫌われたりしません。
引き受けたら好かれるかな？
嫌われることはありませんが、それで特別に好かれることになることのほうがマレでしょう。
いずれにしても期待すればするほど報われないと感じてしまうものです。
シンプルに考えてくださいね。
引き受けたければ引き受ける。
引き受けても困らないなら引き受ける。
それ以外はことわってもいいんですよ。