Dembszczyzna to miejscowość w to miejscowość, która 1914 należała do Imperium Rosyjskie i znajdowała się w okręgu administracyjnym Suvalki.
Dembszczyzna to miejscowość należąca dawniej do Rzeszy Niemieckiej. W Rzeszy Niemieckiej miejscowość nazywała się Dembszczyzna. Dziś miejscowość nazywa się Dębszczyzna Stara i należy do Polska.