事故责任书即使对方不签字，依然会有效力，并不会有什么影响。根据目前的法律规定，交通管理部门在认定书出具之后，并没有权利能扣留机动车辆，即收到事故责任书认定书之后，车主就可以去交警队提车。交通管理部门应当根据事故现场的勘查、鉴定结果，及时出具责任认定书，作为交通事故的证据。

交通管理部门已经对交通事故的责任作出了鉴定，无论当事人签不签字都不会改变这个阵容鉴定。让当事人签字，只是证明你已经知道了这个事故责任鉴定结果，而不是证明你接受了这个事故责任鉴定结果。如果当事人拒绝签收，交警会在一周之内邮寄到当事人的住所中，当事人签收或拒收，只要公安机关对拒收认定书的行为有记录在案，都会视为送达。

如果对方一直拖着，不在交通事故责任认定书上签字，那么交警部门可以根据《交通事故处理程序的规定》，出具单方面事故认定书，然后再根据这个认定书向法院起诉，维护自己的合法权益。向法院起诉前，维修车辆等损失的费用先由自己垫付，然后在通过起诉像对方追偿。当然，如果有购买保险，可以先由保险公司进行垫付，然后再由保险公司追偿。