Gremzdówka to miejscowość w to miejscowość, która 1921 należała do Polska i znajdowała się w okręgu administracyjnym Sejny.
Gremzdówka to miejscowość należąca dawniej do Rzeszy Niemieckiej. W Rzeszy Niemieckiej miejscowość nazywała się Gremzdowka. Dziś miejscowość nazywa się Gremzdówka i należy do Polska.