谁来赔偿我损失？我看中了一套二手房，总价103万，面积100平方米，通过中介和卖方取得联系并签署了购房协议，给了4万