Село Белогорщ известно со времен польского владычества, т.е. с XVII века.

Белогорщ (белогорища — белая горка, то есть светлая, обращенная к солнцу) был заселен польским магнатом, крупнейшим державцем многих населенных пунктов, в том числе и города Мглина, Николаем Абрамовичем. В 1654 году село запустело, но значилось в числе имений Бороздны, сподвижника Богдана Хмельницкого. В 1663 году стародубский полковник Петр Рославец вновь заселил его, но уже немного восточнее прежнего, около курганных могильников радимичей, где оно находится и сейчас.

С 1672 до 1687 годов село было свободным, а затем Мазепа отдал его почепскому сотнику Осипу Мартынову. После измены и бегства Мазепы в 1709 году село перешло к Афанасию Покорскому, писарю генеральной канцелярии гетмана. Через некоторое время генеральный судья гетманщины «насилием своим завладел селом. Только он оттоль выгнан указом гетмана Скоропадского и тое село Белогорща Афанасию Покорскому во владение по-прежнему превернено».

При первой ревизии в 1723 году в Белогорщи было более 20 дворов, столько же осталось и к 1781 году.

Село Белогорщ известно еще и тем, что 12 октября 1708 года в нем побывал шведский король Карл XII, который проходил по здешним землям со своим войском. Было это во времена Северной войны. Отсюда шведы двинули в район Полтавы, где летом следующего года, как известно, потерпели сокрушительное поражение от русской армии.

В давние времена Белогорщ славился производством деревянной посуды.

В районе Белогорща,  в урочище Шведские Могилы на берегу реки Тросна (правый приток Унечи) археологами был обнаружен древнеславянский языческий курган. Археолог А. В. Кашкин в 1971 году исследовал здесь шесть курганов. В двух из них погребений не было. Один из курганов представлял собой мужское погребение, три — женские. Умершие захоронены головой на запад. Одна женщина погребена в прямоугольном гробу из четырех широких досок с крышкой, который помещен в прямоугольный сруб. Дерево обуглено. Сохранились лишь сильно обгоревший череп, связка из пяти биллоновых височных колец и обломки горшка. На древней поверхности, на месте кострищ, обнаружены останки двух женщин. Здесь же найдены височные кольца, сердоликовая бусина, бронзовые нательный крест и пряжка, глиняные сосуды. Погребение датируется XII веком.

В советское время в Белогорщи функционировал сельский совет, были построены молочно-товарная ферма, тракторный стан, школа.

Белогорщ относится к Павловскому сельскому поселению. Сегодня население деревни составляет примерно 140 человек. Возле  Белогорщи расположено большое рукотворное водохранилище, созданное в 80-х годах прошлого столетия. Белогорщское водохранилище занимает площадь 0,54 кв.м, водоохранная зона 300 м., прибрежная полоса 100 м.