Война уже была, как я понял. Отказ ничего не ухудшит, только родит ненужные надежды.
Оченно мне сомнительно, что если просто секса охота, бывший муж (причем недавно еще муж) - первая кандидатура. Ерунда, тут другое. Капканом пахнет. И это тест на ваше отношение к идее в этот капкан попасть.

Вы вообще, может, восстанавливать отношения хотите? Если хотите, то флаг вам в руки. Я, например, убежден, что это мартышкин труд. Но если Вы так не считаете, то попробуйте.
Если же вы НЕ хотите отношения восстанавливать, или у вас есть сомнения - то ну его нафих, этот секс. К феям сходите