43岁的中年男子在高空作业中触碰高压线后坠楼身亡，然后抢救无效，该男子每年收入5万元左右，家中尚有七旬父母（母亲是脑梗，父亲有腰椎）均无劳动能力且常年吃药，妻子心脏不好也无劳动能力，有俩个儿子，一个10岁在上小学一个18岁在外打工，经过协商该工程负责人答应赔款61万元人民币，双方签订写了协议书，答应3天之内付20万元一个月内将61万元付清，但是事情过去10天了，对方一分钱没有付，并且对方律师说这61万元应该3方（1.该工程负责人。2.领工人。3.房子的主人）各出20万，现在应该怎么办？