Joomlaに限らずCMSのバックエンドはお決まりのURLを開くとログインフォームが現れます。
デフォルトの管理者ID：adminをリネームするだけでも多少は違うのかもしれませんが、Joomlaのデフォルト管理URL　http://siteaddress/administrator　でアクセスさせないのもいいかもしれません。