Das ehemalige Schloss Alverdissen in Lippe fand 1396 erstmals urkundliche Erwähnung als Herrensitz der Grafschaft Sternberg. Nach dem Aussterben der Linie ging Alverdissen an die Edelherren zu Lippe: Im 17. Jahrhundert übernahm Graf Philipp zu Lippe die Anlage und nutzte das Schloss als Repräsentationssitz auf dem Land. 1662 wurde von seinem Sohn Friedrich Christian der Grundstein für das Schloss gelegt. Nach der Zerstörung des Vorgängerbaus, von dem lediglich die Kellergewölbe und Grundmauern erhalten blieben, wurde 1662 bis 1663 ein dreigeschossiger Barockbau mit Krüppelwalmdach errichtet. Der ehemalige Treppenturm war vorgezogen und mit einem geschweiften Dach versehen.
Nach einigen Umbauten im 19. und 20. Jahrhundert präsentiert sich das Gebäude heute als schlichter zweigeschossiger Rechteckbau mit Satteldach. Die ehemaligen Wohn- und Wirtschaftsgebäude konnten nicht erhalten bleiben. Die schlicht verputzte Eingangsfassade weist einen Giebel mit Neorenaissanceelementen auf.
Von 1879 bis 1969 fungierte das Schloss als Sitz des Amtsgerichtes Alverdissen. Nach einer Nutzung als Archiv der Stadt Detmold ging Schloss Alverdissen 2009 in Privatbesitz über.