Процедура оплаты сделки при покупки недвижемости (квартиры)

Доброго времени суток. Нашли квартиру через агентство. По устному настоянию агентства \"повелся\" на не совсем удачный вариант. При составлении договора (составляло агентство) предал продавцу через агентство определенную сумму. Поразмыслив решили поискать вариант получше. Как вернуть деньги? Риэлтор говорит что это на совести продавца - хочет вернет, а имеет право и не возвращать. Так ли это? И все таки может существует какой то законный способ возвратить сумму.