房屋居住权

我有一套公租房一直在我名下，借给家人居住多年，现我想要回自己居住，家人不肯搬，可以诉讼要回吗？