责任判定书对方不签字，不需要去交警大队处理。
当事人在发生交通事故后，对交警出具的交通事故认定书对方不签字。当事人签字与否，并不代表当事人对认定书的认可，交警部门送达交通事故认定书有两种方式：
1、直接送达，即由当事各方在送达回执上签字后交与当事人；
2、当事人拒绝签字的，可在七日内通过邮局邮寄送达，即视为已送达当事人。如果当事人对交警出具的交通事故责任认定书不服（有异议），可在接到认定书三日内向上级公安交警部门申请复核，复核内容写清复核请求及理由和主要证据。当事人是否签字，对以后事故损害索赔都不会受到影响。
对交通事故责任认定不服有以下办法解决：
1、在交警作出责任认定后，各方当事人如对责任不服，可以向上级交警部门申请复核，在复核期间，任何一方向法院提起民事诉讼，复核终止；公安交通管理机关作出的《事故认定书》，事故当事人既不能提起重新认定的申请，也不能依法提起行政诉讼。说明它不是一个具体行政行为。
2、如果当事人单纯就事故责任问题向法院提起民事诉讼，法院不会受理，只有在就民事赔偿提起诉讼的审理过程中，如果法院发现交警的事故认定书不合理的话，可以不予采纳。
法律依据：《中华人民共和国道路交通安全法 》第七十二条
公安机关交通管理部门接到交通事故报警后，应当立即派交通警察赶赴现场，先组织抢救受伤人员，并采取措施，尽快恢复交通。
交通警察应当对交通事故现场进行勘验、检查，收集证据；因收集证据的需要，可以扣留事故车辆，但是应当妥善保管，以备核查。
对当事人的生理、精神状况等专业性较强的检验，公安机关交通管理部门应当委托专门机构进行鉴定。鉴定结论应当由鉴定人签名。
因篇幅问题不能全部显示，请点此查看更多更全内容