依据我国相关法律的规定，骗犯家属无力退赃是不会加重处罚的，对诈骗犯罪嫌疑人的判刑，会依据犯罪情节、犯罪手段等的情节量刑。
《中华人民共和国刑法》
第六十一条 【量刑的一般原则】对于犯罪分子决定刑罚的时候，应当根据犯罪的事实、犯罪的性质、情节和对于社会的危害程度，依照本法的有关规定判处。
第六十二条 【从重处罚与从轻处罚】犯罪分子具有本法规定的从重处罚、从轻处罚情节的，应当在法定刑的限度以内判处刑罚。
第六十三条 【减轻处罚】犯罪分子具有本法规定的减轻处罚情节的，应当在法定刑以下判处刑罚;本法规定有数个量刑幅度的，应当在法定量刑幅度的下一个量刑幅度内判处刑罚。
犯罪分子虽然不具有本法规定的减轻处罚情节，但是根据案件的特殊情况，经最高人民法院核准，也可以在法定刑以下判处刑罚。
在实践中，诈骗退赃不影响定罪，但对量刑影响非常大：
按照《刑法》规定，行为人以非法占有为目的，用虚构事实或者隐瞒真相的方法，骗取数额较大的公私财物的行为，就构成了诈骗罪。
也就是说，只要犯罪嫌疑人实施了诈骗行为，不管有没有诈骗到钱，还是得手后积极退赃的，都构成诈骗罪，需要受到相应的刑事处罚。
但是，犯罪嫌疑人积极退赃的，可以作为积极认罪悔罪的表现，从而获得从轻、减轻处罚，甚至不起诉或免除刑事处罚的机会。
按照《最高人民法院、最高人民检察院关于办理诈骗刑事案件具体应用法律若干问题的解释》的规定，犯罪嫌疑人诈骗公私财物数额较大但又下列情况之一的，可以不予起诉或免除刑事处罚：
(1)具有法定从宽处罚情节的;
(2)一审宣判前全部退赃、退赔的;
(3)没有参与分赃或者获赃较少且不是主犯的;
(4)被害人谅解的;
(5)其他情节轻微、危害不大的。