做为一座民用军事防御堡垒，河山楼的设计非常科学，考虑极为周全。
河山楼三层以上才设有窗户，进入堡垒的石门高悬于二层之上，通过吊桥与地面相通。

河山楼建于公元1632年，工程尚未完工，流寇不期而至，陈氏家族及附近村民八百余人入楼避难。
流寇久攻不下，扬言要日夜封锁并采取火攻，楼内村民将井水从楼顶泼下，以显示准备充分，不惧围困，流寇知难而退，撤兵离去。
此后十个月里，流寇又先后三次进犯，依靠河山楼的庇佑而逃过兵灾的村民多达数千人次。