> имея авторизационную карточку уборщика можно целый час без надзора бродить по зданию

В кине - запросто. А в реальности, если контора мало-мальски заботится о безопасности, то не по зданию, а по коридору от лифта до туалета и обратно, и по подвалу от лифта до контейнера с мусором и обратно.
> Карточка уборщика вовсе необязательно принадлежит входящему человеку в с служебной форме уборщика

Дооо... Хочешь знать, как была устроена система с карточками в НИИ, где я проходил практику ещё при Союзе? Так вот, на проходной - 4 поста, 4 остеклённые будки, на каждой перед окошком охранника - панель с пронумерованными кнопками, примерно по 500 штук. Каждый работник знает свой пост и номер кнопки. Проходя пост, нажимает кнопку, внутри на стороне охранника из кармашка выщёлкивается карточка с должностью, ФИО и фотографией. Проходящий называет себя (полностью, должность и фамилию-имя-отчество), охранник сверяет их с записью в карточке, сверяет морду, после чего отдаёт карточку работнику и открывает проход (или не отдаёт и не открывает). Уходя, работник проходит через свой пост, сдаёт карточку, охранник опять сверяет морду на карточке и у человека, а перед тем, как поставить её в обратно в кармашек на панели, опять сверяет фотку на карточке с фоткой на кармашке. Давай, сделай постороннему лицу пропуск на такой объект вместо допущенного мойщика туалетов.