诈骗而来的钱，属于赃款，赃款，是必须退还的。如果不退还，依法不能从轻处罚。他人善意取得诈骗财物的，不予追缴。
二、诈骗被抓财物怎么处理？
行为人因为诈骗被抓，对于所得财物应当予以追缴或者责令退赔。对被害人的合法财产，应当及时返还。没有偿还能力的，亦应当分期偿还。行为人已将诈骗财物用于清偿债务或者转让给他人，他人善意取得诈骗财物的，不予追缴。
三、诈骗案法院退赔流程
诈骗案法院退赔流程如下：公安机关追回的赃款，在起诉过程中会移交检察院和法院，当事人也可以自行提起刑事附带民事诉讼。人民法院将根据追回的赃款和被告的可执行财产退还赃物。根据赃物返还原则，能够区分原主的可以返还原主。现金诈骗追回的金额不足以全额返还赃物的，按照受害人数平均返还。如果生活中真的有困难，急需用钱的可以协商后提前还款。根据有关法律法规，诈骗案件中涉及的赃款由公安机关追缴。如果财产确实属于被害人，就返还给被害人。
【本文关联的相关法律依据】
《最高人民法院、最高人民检察院关于办理诈骗刑事案件具体应用法律若干问题的解释》第十条，行为人已将诈骗财物用于清偿债务或者转让给他人，具有下列情形之一的，应当依法追缴：
(一)对方明知是诈骗财物而收取的;
(二)对方无偿取得诈骗财物的;
(三)对方以明显低于市场的价格取得诈骗财物的;
(四)对方取得诈骗财物系源于非法债务或者违法犯罪活动的。
他人善意取得诈骗财物的，不予追缴。
因篇幅问题不能全部显示，请点此查看更多更全内容