Olszewka gehörte ehemals zum Deutschen Reich. Im Deutschen Reich hieß der Ort Olszewka.
Heute heißt der Ort Olszewka und gehört zu Polen.
| historischer Ortsname | Staat | Verwaltung | Zeit |
|---|---|---|---|
| Olszewka | Russisches Reich | Prasnyš | 1914 |
| Olszewka | Polen | Przasnysz | 1919 |
| Olszewka | Deutsches Reich | Praschnitz | 1939 |
| Olszewka | Polen | Przasnysz | 1945 |
| Olszewka | Polen | Ostrołęka | 1992 |