먼저 미안하다는 말과 태도인 것 같습니다.
죄송합니다만...
저도 정말 그렇게 도와드리고 싶은데...
그리고 최대한 미안한 표정이나 톤으로 이야기하면, 그사람도 이해하고 넘어가지 않을까 싶네요.