★お答え★
基本的としては、手付金は返していただけないと思います。
契約解除の理由が自己都合になるため、手付金を放棄することになるでしょう。
（手付解除） また、売主が所有権移転のためのに何らか履行の着手を行っている
場合は手付解除はできませんので、 「違約金」を支払って契約を解除することに
なる可能性も考えられます。
　　
ただし、今回の場合にはイメージと違うとの事ですが、例えばパースや仕様書な
どと大幅に違うなどの点がはっきりとわかる場合には契約解除の正当理由になる
と思いますので売主の業者さんと相談してみてはいかがでしょうか？

とにかく、解約は解約まで至った理由がどうだったのか？
この点は重要なポイントです。
解約するにもしないにも、裁判などで解決すのではなく出来るだけお互いの相談
で解決することをオススメします。