Modrzewie nie są typową wsią sudecką. Są to raczej połączone pod wspólną nazwą trzy niewielkie osady rozmieszczone w dolinie potoku mającego źródło na zboczach Tarczynki. Nie jest znany dokładny czas powstania tu pierwszych domostw,historycy oceniają początek osadnictwa na koniec XVI lub początek XVII wieku lecz pierwsze wiarygodne wzmianki pochodzą z okresu po wojnie trzydziestoletniej. Była to kolonia wchodząca w skład dóbr ziemskich właścicieli sąsiedniej wsi Gościradz /Arnsberg/, która obecnie jest częścią Wlenia.
Do dzisiaj z tych czasów pozostało niewiele śladów, najstarsze domy pochodzą z przełomu XIX w, wiele domów zniknęło albo nieremontowane popadły w ruinę, których resztki zarastają krzakami i zielskiem. Pierwotnie zabudowania Modrzewi zgrupowane były w dwóch rejonach. Główna część leżąca w dolinie potoku powyżej dwóch niewielkich stawów, licząca w 1825r. 43 domy, folwark i młyn wodny. Druga część licząca sześć budynków była rozmieszczona w rejonie występu skalnego zwanego Zimną Skałą. W późniejszym okresie powstała osada zwana Nowymi Modrzewiami. Było to sześć budynków przy drodze prowadzącej do Czernicy. Do dzisiaj pozostał tam tylko jeden budynek będący dawniej zajazdem.
