Dembszczyzna to miejscowość należąca dawniej do Rzeszy Niemieckiej. W Rzeszy Niemieckiej miejscowość nazywała się Dembszczyzna.
. Dziś miejscowość nazywa się Dębszczyzna Stara i należy do Polska.
| Historyczna nazwa miejscowości | Państwo | Administracja | Czas |
|---|---|---|---|
| Dembszczyzna | Imperium Rosyjskie | Suvalki | 1914 |
| Dębszczyzna | Polska | Suwałki | 1921 |
| Dembszczyzna | Rzesza Niemiecka | Sudauen | 1939 |
| NN | Polska | Suwałki | 1945 |
| Dębszczyzna Nowa | Polska | Suwałki | 1992 |
| Dębszczyzna Stara | Polska | Suwałki | 1992 |