Redan 10 år efter BO Jonssons död 1386 lät drottning Magaretta förstöra Bjärkaholm för att häjda  adelns makt. Godset, som nu kallades Säby, tillhörde Bo Jonssons dotter Magareta och hennes man Detlet Bylow. Därefter ärvdes det så småning om av Johan Månsson Natt och Dag. Ätten Natt och Dag tillhörde den godsrika högadalen och kom att besitta Säby i sex  generationer som höll med. Först till sturarna och sedan till vasa-kungen.Måns Johansson deltog i Dackefejden och hjälpte Gustav Vasa att bygga Vadsrenaslott. Per Nilsson Natt och Dag började 1632 bygga den nya Sätesgården vid rengens strand som idag kallas gamla slottet. Då han själv gav sig ut i det 30 åriga kriget fick hans hustru Sofia Christina Stenbock fullfölja bygget.Hon överlevde sin man i 27 år och spelade en framträdande roll i byggden som driftig förvaltare av sina många gårdar och i ständig fejder med Ture Oxenstierna på Sturefors om vattenrätten till skilldafall längds Stångån. Hennes son Carl Persson hade vid moderns död 1661 flackat runt i Europa som diplomat och krigare i Karl x Gustavs krig. Bristande händigheter och framförallt reduktionen drabbade Carl Perssons godsförvalltning hårt. Han blev tvungen att lämna Säby i slutet av 1690-talet.