На каждом айпи:порту есть один веб-сервер, который default, то есть обрабатывает все запросы, не обработанные другими. В случае, если вы не указали его вручную, default будет назначен nginx'ом - первый в конфиге. Ну или единственный, если других в конфиге не описано.
Соответственно, если вы хотите чтобы другие обращения не попадали на этот сайт, опишите другой как default или создайте сайт-заглушку со своим конфигом server.