我该怎么办呢？

我于7月份向公司提出离职，离职信是交给我的直接上级了。可是到这个月8月初离职时，公司行政说我的离职信给我直接上级了，没有把离职信给她，她不知道我八月份不干了。她已经给我交了八月份的`社保钱。现在要我把公司给我交的社保钱给公司退回去。工资已经发给我了，社保我自己承担的那部分已经从工资里扣掉了，但我得还给公司交的那部分社保钱，一共700多呢，这合理吗？我觉得公司这是在欺负人！公司压着不给我开离职证明，也不给我就失业证和养老保险手册。我该怎么办呢？如果我自己补办养老保险手册和就失业证，该怎么办呢？