Obec Kadolec je známá z písemných pramenů z roku 1364, kdy byla součástí osovského panství. Polovina obce tehdy náležela Jindřichovi z Ronova. Druhá polovina patřila i s rychtářstvím bratřím z Ronova. Od roku 1372 patřila celá obec Janovi st. z Meziříčí.
Kadolec pak zůstal u Osové, v roce 1552 přešel k Ořechovu a s ním v roce 1687 ke Křižanovu. V letech 1850–1867 osada obce Křižanov, v letech 1975–1990 pod MNV Křižanov, od roku 1990 opět samostatná obec.