
A Pesquisa Visual Aprimorada está habilitada por padrão em iPhones e Macs que executam o sistema operacional mais recente. | Crédito da imagem – Software Lapcat.
No entanto, a Apple mencionada pela primeira vez Pesquisa visual aprimorada somente no dia 24 de outubro, e isso muito discretamente. O recurso permite que seu iPhone identifique fotos de lugares, ou mais especificamente de pontos de referência, em sua biblioteca de fotos.
A pesquisa visual aprimorada de fotos, que permite ao usuário pesquisar locais específicos em sua biblioteca de fotos, como pontos de referência e pontos de interesse, é um exemplo ilustrativo de um recurso útil alimentado pela combinação de ML com HE e pesquisas de servidor privado. Usando o PNNS, o dispositivo de um usuário consulta de forma privada um índice global de pontos de referência e pontos de interesse populares mantido pela Apple para encontrar correspondências aproximadas para locais retratados em sua biblioteca de fotos.
Um modelo de aprendizado de máquina (ML) no dispositivo analisa uma foto e decide se há uma região de interesse (ROI) que pode incluir um ponto de referência. Se a resposta for afirmativa, uma solicitação criptografada é enviada ao servidor da Apple, onde realiza uma série de processos, como aplicação de criptografia homomórfica e privacidade diferencial, e envia de volta pontos de referência candidatos ao iPhone. Um modelo de reclassificação no dispositivo assume então o controle e prevê o melhor candidato.
Os metadados da foto são então atualizados com o rótulo do ponto de referência, permitindo que você a encontre facilmente pesquisando seu nome no seu iPhone.
Embora possa haver muitos casos de uso para o recurso e muitos possam considerá-lo útil, ele não deveria ter sido habilitado por padrão, considerando que envia informações relacionadas à sua foto para a Apple.
Para piorar a situação, a Apple nunca anunciou publicamente o recurso. Além disso, caso você esteja se perguntando, o recurso não faz parte do Inteligência da Apple. Encontrei a configuração no meu iPhone 14 Pro (e desativou-o imediatamente), que não funciona Inteligência da Apple.