Имя холма (Часовой холм) было известно еще древним византийцам и римлянам.

В то время на восточных слонах находились водные часы, построенные в храме Венеры, на верху холма. Существовали и солнечные часы, доказательства существования которых были открыты в 1920 году во время раскопок. Такие водные и солнечные сооружения для измерения времени были открыты и в границах ранней Византии, с помощью их древние люди определяли время храмовой службы.

Первая башня с часами в виде деревянной часовой конструкции была построена на холме в период 1578-1611 гг. Она играла роль городского наблюдательного поста, с постовым, который смотрел, нет ли где-то в городе пожара.

Механизм часов был сделан итальянским конструктором Антонио Барбабеллой. Время измерялось не на циферблате, а с звоном колокола, который каждый день звонил в полдень.

В начале XIX века деревянная конструкция башни была полностью разрушена огнем. В 1809 году жители Пловдива восстановили объект, но на этот раз из камня, который был конической формы и был высотой более 17 метров. Имя мастера неизвестно, но в качестве модели использовались морские маяки.

Тринадцать лет спустя власти Пловдива заказали новый часовой механизм из Вены, а в 1909 году каменное здание было отремонтировано трудами бригады мастеров из Брацигово.

Во время смутных 40-х годов ХХ века механизм перестал работать и пловдивчане демонтируют его и вывозят на склад пожарной части. Позже они передают его Этнографическому музею, а затем следы уникального механизма часов исчезают.

Затем власти поручили старому капитану из Карнобата сделать копию часов только по рисункам с 1882 года. После долгой и деликатной работы механик справился с задачей. Новый механизм требует ручной намотки один или два раза в неделю, требуя огромной физической силы, т.к. вес часов превышает 100 килограммов.

В начале 21 века здание часовой башни разрушено, но в 2004 году механизм отремонтирован мастером Георги Долчинковым.