认定书拿下来就可以要求拿回驾驶证。因为已经拿到了交通事故责任认定书的话,把车提出来了,就可以向扣你驾驶证的交警索要驾驶证,因为他已经没有理由扣你的驾驶证了。赔偿问题就是你与对方协商的事了,协商不成还有法院处理,就没有交警的事了,所以驾驶证就应当退还给你。