好处费是否要退还

我和食堂老总是朋友，我介绍王某去该食堂做生意，我接受了王某好处费20000元整，并和王某写下一份协议，协议内容（介绍王某来食堂做生意，王某本人在了解考察后，看过餐饮公司合同后，无任何问题，给予我好处费，2万元整，以后生意经验好坏与我无关），现在王某不想生意不好了，叫我退钱给他，我应该退还吗？