Замковий комплекс вперше згадується в 1095 році і, ймовірно, належав графу фон Візнеку та перейшов до графів Гогенбергів у середині 12 століття. У 1381 році все графство перейшло до Габсбургів.
В останні два століття замок дедалі більше втрачав значення, тому був незначним у війнах і був врятований від руйнування.
У 1975 році в замку Хайгерлох розмістили сільськогосподарську та адміністративну школу, потім замок купив підприємець Пауль Еберхард Швенк. Відтоді в замку розмістився готель із рестораном.
