Die Landvogtei war jedoch nicht der einzige Landesherr in unserem Gemeindegebiet.
Ein großer Teil der heutigen Gemeinde gehörte zur Herrschaft der Reichsabtei Weingarten, ein weiterer war den Truchsessen, späteren Grafen und Fürsten von Waldburg untertan.
Auch das Herrschaftsgebiet des Klosters Weingarten war in Ämter unterteilt - seine Besitzungen in unserem Gemeindegebiet waren im Amt Karsee zusammen- gefasst.
Karsee war lange Zeit der politische wie kirchliche Mittelpunkt des jetzigen Gemeindegebietes, bis im letzten Jahrhundert allmählich Vogt an seine Stelle trat.
1952 wurde Karsee und die umliegenden Wohnplätze aus der Gemeinde Vogt losgelöst und eine eigene Gemeinde Karsee geschaffen, die freilich zwanzig Jahre später ihre Eigenständigkeit wieder an die Große Kreisstadt Wangen verlor.
Durch die extreme Kleinstaaterei des Alten Reiches in Oberschwaben überschnitten sich die Kompetenzen der einzelnen Herrschaften natürlich vielfach, was ein äußerst kompliziertes Bild ergab: Hochgericht, Niedergericht, Grundherrschaft, Leibherrschaft etc. waren oft unter verschiedenen Herren aufgeteilt.
So gehörte die heutige Allgäu-Apotheke, die Keimzelle der Ortschaft Vogt, 1453 erstmals als Hof "vor dem waldt" erwähnt, grundherrlich zum Karmeliterkloster in Ravensburg.
Der Ortsname "Vogt", der vermutlich auf die Zugehörigkeit zur Landvogtei verweist, ist seit dem späten 17. Jahrhundert belegt.
Eine Sonderausstellung nahm zudem das Rittergut Mosisgreut ein, seit 1690 im Besitz der Familie Werner von Kreit.