Steuerrückzahlung bei Elterngeld

Hallo alle zusammen!
wer von Euch hat denn schon das komplette Elterngeld bekommen und auch schon seine Lohnsteuer gemacht? Wie war das dann mit der Rückzahlung? Ich höre immer nur, daß die Leute total viel zurückzahlen müssen. Wir bekommen eigentlich immer sehr viel vom Finanzamt zurückgezahlt, aber diesmal sieht es so aus, als wenn wir sehr viel AN DAS Finanzanamt zurückzahlen müssen und das nur weil wir bis diesen Monat Elterngeld erhalten haben. Ist das tatsächlich so? Man bekommt vom Staat ein Jahr Geld, und muß es dann anschließend quasi wieder zurückzahlen?
Danke schon mal für Eure Antworten. Ihr braucht mir keine Beträge zu nennen, ich möchte nur wissen, ob ihr was zurückzahlen mußtet und ob es viel oder wenig war. Also viel fängt bei mir ab 500 € an.
Liebe Grüße