没有退赔的，只能说依法判决，但不会加重处罚。诈骗罪，如果将钱退给对方，根据其恶劣程度来进行宣判，退还诈骗钱财只是作为减轻处罚的一种情形。
《中华人民共和国刑法》第二百六十六条：诈骗公私财物，数额较大的，处三年以下有期徒刑、拘役或者管制，并处或者单处罚金；数额巨大或者有其他严重情节的，处三年以上十年以下有期徒刑，并处罚金；数额特别巨大或者有其他特别严重情节的，处十年以上有期徒刑或者无期徒刑，并处罚金或者没收财产。本法另有规定的，依照规定。
《刑事诉讼法》第十五条，应当预见自己的行为可能发生危害社会的结果，因为疏忽大意而没有预见，或者已经预见而轻信能够避免，以致发生这种结果的，是过失犯罪。
过失犯罪，法律有规定的才负刑事责任。
