工地老板扣押工人身份证

我爸在南京六合某工地打工 工地老板扣押所有工人身份证 工人跟他索要 被他以各种理由拒绝 态度恶劣 这应该属于侵权违法行为 我想咨询一下 如果他一直这样不还身份证 我们该怎么办？