交通事故责任认定不需要双方都在场:1。根据《道路交通安全法》第七十三条规定,公安机关交通管理部门应当根据交通事故现场勘验、检查、调查和有关检验鉴定结论,及时作出交通事故认定书,作为处理交通事故的证据。交通事故认定书应当载明基本事实、原因和当事人的责任,并交付当事人;2.根据《道路交通事故处理程序规定》第四十八条规定,道路交通事故认定书应当由办案民警签名或者盖章,加盖公安机关交通管理部门道路交通事故处理专用章,分别送达当事人,并告知当事人享有向公安机关交通管理部门申请复核、调解以及直接向人民法院提起民事诉讼的权利和期限;3.公安机关交通管理部门调解交通事故损害赔偿纠纷的期限为10日。达成调解协议的,公安机关交通管理部门应当制作调解书,送交各方当事人,调解书经各方当事人签字后生效;经调解未达成协议的,公安机关交通管理部门应当制作调解结论,发送各方当事人。