Gremzdowka to miejscowość w to miejscowość, która 1914 należała do Imperium Rosyjskie i znajdowała się w okręgu administracyjnym Sejny.
Gremzdowka to miejscowość należąca dawniej do Rzeszy Niemieckiej. W Rzeszy Niemieckiej miejscowość nazywała się Gremzdowka. Dziś miejscowość nazywa się Gremzdówka i należy do Polska.