A 711 lelkes Ipolyszöget 1973-ban csatolták Balassagyarmathoz. Az addig önálló falu lakóinak nagy része kényszerházasságnak tartja a településegyesítést, és úgy véli, a környékbeli hasonló nagyságú települések jobban fejlődtek.
Az ipolyszögi településrész egy alkalommal már megkísérelte a leszakadást, az 1993-as népszavazásra azonban a 499 szavazópolgár fele sem ment el, így a helyi népszavazás érvénytelennek és eredménytelennek bizonyult.