Gremzdówka to miejscowość należąca dawniej do Rzeszy Niemieckiej. W Rzeszy Niemieckiej miejscowość nazywała się Gremzdowka.
. Dziś miejscowość nazywa się Gremzdówka i należy do Polska.
| Historyczna nazwa miejscowości | Państwo | Administracja | Czas |
|---|---|---|---|
| Gremzdowka | Imperium Rosyjskie | Sejny | 1914 |
| Gremzdówka | Polska | Sejny | 1921 |
| Gremzdowka | Rzesza Niemiecka | Sudauen | 1939 |
| NN | Polska | Suwałki | 1945 |
| Gremzdówka | Polska | Suwałki | 1992 |