Hay varias razones por las que esto podría estar ocurriendo, pero lo más probable es que Safari acceda a tu base de datos de contactos para algo trivial. Apple debería solucionar estos problemas para que la gente no se encuentre con lo que tú estás viendo, pero:
Una posibilidad es "Shared With You", que mostrará el nombre del remitente. Esta información podría estar incrustada en la base de datos, pero puede ser sólo el número de teléfono que lo envió - en cuyo caso Safari tendría que buscar el nombre en los Contactos para mostrar "Compartido por <nombre de alguien>"
Otro ejemplo de otra aplicación es la App Store, que muestra tu foto de perfil en la esquina superior derecha: Esto proviene de tus contactos, y la App Store aparecerá como acceso a tus contactos.