С тех пор город пережил немало трудностей. Однажды город был полностью выжжен и разграблен вместе с близлежащими поселениями, поэтому в городе практически нет достопримечательностей, построенных раньше девятнадцатого века, но их красоту и историческую значимость для России это не отменяет.
В Данилов в свое время заезжали достаточно известные исторические личности. Например, происхождение герба Данилова связывают с тем, что однажды таким заезжим был Петр Первый. Одна из церквей города, по его мнению, была в настолько непотребном состоянии, что выговор был сделан всему духовенству и властям.
Чтобы вернуть расположение императора, в городе построили Смоленский собор, который, к сожалению, был разобран в середине 20-го века, и отправили ему посылку, в которой рассказывалось о новом строительстве, и лежала шахматная доска с серебряными шахматами. Так как Петр Первый шахматы любил, и творение было нестандартным, он выставил доску в Эрмитаже. Так жители Данилова и вернули его расположение, что в последствие определило, и положительное отношение к городу дальнейших правителей и добавило символ на герб города.