交通事故责任认定书是由双方协议的吗

不是。交通事故责任认定交警会给当事人，且不需要双方都签字，有一方签字，交通事故认定也是有效的。
公安机关交通管理部门对经过勘验、检查现场的交通事故应当在勘查现场之日起10日内制作交通事故认定书。对需要进行检验、鉴定的，应当在检验、鉴定结果确定之日起5日内制作交通事故认定书。

法律依据：中华人民共和国道路交通安全法实施条例（2017） 第九十三条

 公安机关交通管理部门对经过勘验、检查现场的交通事故应当在勘查现场之日起10日内制作交通事故认定书。对需要进行检验、鉴定的，应当在检验、鉴定结果确定之日起5日内制作交通事故认定书。