身份证遗失

前段时间晚上6点去网吧上网，我身份证上网忘记拿就走了，第二天中午才去网吧拿回来，请问期间如果被人拿去贷款或借高利贷，能行吗，我会不会有危害，怎么避免危害，现在身份证在我身上。