Усадьба появилась в первой трети XVIII в., принадлежала она представителю знаменитого рода Демидовых - Никите Никитичу Демидову. В селе он основал Брынский железный завод, который просуществовал около столетия. В 1910 г. в Брыни жил писатель М.М. Пришвин.