定金问题

80岁老人去看房被销售人员忽悠买房，老人没带钱，销售经理叫老人写借条借钱2万给老人做定金买房，第二天上门把现金拿走。这样的定金能算数吗？经协商退了1万7干给我们，还有3000元不肯退也不说什么原因。请问怎样才能要回这3000元？