Cieńsza to miejscowość należąca dawniej do Rzeszy Niemieckiej. W Rzeszy Niemieckiej miejscowość nazywała się Ciensza.
. Dziś miejscowość nazywa się Cieńsza i należy do Polska.
| Historyczna nazwa miejscowości | Państwo | Administracja | Czas |
|---|---|---|---|
| Ciensza | Imperium Rosyjskie | Pultusk | 1914 |
| Cieńsza | Polska | Pułtusk | 1919 |
| Ciensza | Rzesza Niemiecka | Ostenburg | 1939 |
| Cieńsza | Polska | Pułtusk | 1945 |
| Cieńsza | Polska | Ostrołęka | 1992 |