社保不买了一般情况下不可以退钱，但存在特殊情况可以退还部分或全部金额。具体如下：

特殊情况一：参保人去世

如果该参保人意外去世，那么其家人可以拿着死亡证明、销户证明等材料申请退保，社保个人账户中的资金是可以被合法继承的。如果该参保人是在职期间去世的，那么家属将材料提交给用人单位，用人单位会为其代办退保服务，然后领取该离世人员的社保资金，发放给家属；如果是个人参保灵活就业社保或者是居民社保，就需要家属到当地的社保部门自行办理。

特殊情况二：移民定居国外

如果该参保人决定移民定居国外，那么可以到移民局进行移民证明材料的办理，然后注销自己的居民身份和国籍，到当地的社保部门进行退保手续的办理，也能够提取相应的社保个人账户资金。

特殊情况三：退休时缴费年限不足

如果参保人达到法定退休年龄但缴费年限未满15年，且不想继续缴纳社保，可以选择退保，并取出个人账户中的余额。

特殊情况四：重复参保

如果参保人在多个地方重复缴纳社保，根据“先转后清”原则，不能转移合并的个人缴费本息会退还本人，能转移的则不予退还。

总的来说，在考虑不再缴纳社保并希望退回已缴纳费用时，务必仔细了解相关政策规定，确保自身权益得到最大程度的保障。同时，也建议咨询当地社保部门或专业机构以获取最准确的信息。