Kalsbøl har rødder tilbage til den ældre middelalder, hvor en mand ved navn Kals grundlagde en landsby, der senere gav navn til både stedet og gården. Endelsen "bøl" betyder gård eller bolig, og navnet Kalsbøl betyder således "Kals' gård".
I 1575 blev gården Blæsbjerg i Kalsbøl mageskiftet af Kronen til Holger Rosenkrantz på Boller Gods. Gården fik senere samme navn som landsbyen. Ved indførelsen af enevælden hørte Kalsbøl med 10 tdr. hartkorn under Barritskov og var da en almindelig bondegård.
I 1826 blev en gård i Klejs lagt ind under Kalsbøl, hvilket øgede ejendommens størrelse til 34 tdr. hartkorn og ca. 180 hektar jord. I perioden 1669–1895 skiftede ejendommen ejer flere gange.
I 1895 købte bryggeriejer Herman Levy Kalsbøl, men han døde samme år, og gården blev derefter drevet af hans enke, Sofie Levy. Senere ejere inkluderer:
Hovedbygningen på Kalsbøl blev opført i 1844–1845 og består af en hovedfløj i to etager med to sidefløje som er opført midten af 1700 talet. En del af ejendommen er i dag fredet. Den ældste af ladebygningerne er opført i 1689.
Landbrugets historie – med dets udvikling, mekanisering og specialisering – har også været Kalsbøls historie. Fra det store antal landarbejdere, skovarbejdere, tjenestefolk, kuske og gartnere for 200 år siden til i dag, hvor få effektive medarbejdere med moderne land- og skovbrugsmaskiner klarer alt arbejdet.
Kalsbøl har fulgt med tiden – både i gode og mindre gode perioder for landbruget – og er i dag et interessentskab bestående af Kalsbøl, Damgaard og Skævlundgård samt mindre ejendomme, som tilsammen dækker ca. 1.032 hektar agerjord inkl. forpagtning, 65 hektar skov, 6 hektar have/park til hovedbygningen og udlejningsboliger mv.