Името Боровица е получено от скалата Боров камък. Древното селище се е намирало до камъка, за да може населението да се крие в гората при евентуално нападение от турските поробители. След Освобождението то се е преместило постепенно до река Лом и покрай пътя за град Белоградчик.
Единствената останало от старото село е църква, построена през 1866 г.
Маршрут как да стигнем до Черверната църква, Боровица
От село Боровица започва поддържан черен път, който след около 1,5 километра излиза до самата църква. На отбивката от главния път има голяма указателна табела за „Боров камък“.