Testando a Funcionalidade de Clean Up da Apple Intelligence
Estas duas fotos são a mesma foto.
Não acredita em mim? Eu sei, eu sei. À primeira vista, você pode pensar “uma foto é uma mesa com coisas de crochê e a outra é uma mesa vazia, não tem como serem a mesma foto”, mas a sua curiosidade pode começar a te incomodar e você passa a notar algumas coisas estranhas na segunda foto. Algumas sombras esquisitas e algumas linhas muito retas, quase retas demais, nos veios da madeira.
Bem, a resposta é que eu tirei a primeira foto e usei a Apple Intelligence para “limpar a mesa” com a funcionalidade “Clean Up” (limpar) dentro do aplicativo Photos. Continue lendo para saber um pouco mais sobre essa nova funcionalidade.
Apple Intelligence
Do meu ponto de vista, a Apple Intelligence é o aprendizado de máquina (machine learning ou ML) da Apple. Com o avanço da inteligência artificial (IA) e dos grandes modelos de linguagem (large language models ou LLMs), a Apple tinha resistido a usar a sigla “IA” e se mantinha usando aprendizado de máquina sempre que tinha alguma funcionalidade alimentada por algum tipo de algoritmo sequer parecido com IA.
Em uma jogada muito Apple, a empresa lançou a “Apple Intelligence”, e renomeou a IA que todos conhecemos para algo novo.
Sim, Apple, todos percebemos que você fez.
Agora com a Apple Intelligence, eles podem usar a sigla mais livremente. E, embora tenham lançado um novo telefone construído para IA, nenhuma funcionalidade da Apple Intelligence foi vista no iPhone 16 quando chegou às lojas em setembro de 2024.
Em outubro, com o iOS 18.1, começamos a receber algumas funcionalidades da Apple Intelligence e eu, como muitas outras pessoas, atualizei meus dispositivos Apple, o iPhone e iPad, para o iOS 18.1 para usar as primeiras funcionalidades da Apple Intelligence.
Testando Apple Intelligence no Photos
Conversando com um amigo, percebemos que ainda não tínhamos usado essas funcionalidades, então entrei em modo de aprendizado para descobrir exatamente quais eram os recursos e como eles poderiam se encaixar na minha vida.
De todas as novas funcionalidades, a que mais me chamou a atenção foi a “Clean Up” (limpeza) no aplicativo Photos.
Claro, remover objetos indesejados e até pessoas das fotos não é novidade, muitos telefones Android já têm essa funcionalidade há algum tempo, e softwares tradicionais de edição de fotos são ótimos nisso, mas este não é um post sobre os méritos de cada sistema operacional ou software de edição.
Se você me conhece, sabe que sempre tenho curiosidade sobre os limites das ferramentas e queria ver até onde eu poderia levar essa… Meu objetivo era “remover” um objeto por vez, salvar uma nova foto com o objeto removido e continuar assim até ter “uma mesa limpa”.
iPhone ou iPad?
Para as pessoas curiosas de plantão, aqui estão minhas especificações: Estou usando o iPhone 16 Pro Max com 256GB e o iPad Pro 13” M4 256GB lançado em 2024.
Começando no iPhone
Comecei pelo celular. Organizei as coisas na mesa, tirei a foto e sentei no sofá com o telefone na mão para remover o primeiro objeto.
Consegue notar a diferença? Olhe para o canto inferior direito. Parecia mágica quando, após um simples círculo, o objeto simplesmente desapareceu.
Salvei a edição, dupliquei a foto e parti para o segundo objeto: era hora de remover meu pequeno canivete no canto inferior esquerdo. Demorou um pouco mais que o primeiro para desaparecer, mas foi. No entanto, deixou uma “sombra”, então tive que circular a sombra também e esperar um pouco para que ela também sumisse.
Depois de duplicar a nova foto, o iPhone já estava oficialmente quente e começou a travar durante o processo de edição, então mudei para o iPad para continuar com a diversão.
Duas observações aqui:
- Primeiro, quando o iPhone 16 foi lançado, a Apple disse que este iPhone foi construído para IA, mas este pequeno teste que fiz sugere que o iPhone 17 pode ser melhor nisso,
- segundo, que duplicar fotos também salva todas as edições da foto anterior como uma edição, então você pode reverter uma foto duplicada de volta ao original, por exemplo.
Com isso em mente, eu simpatizo com as pessoas com iPhone 15 que vão querer usar este recurso extensivamente e espero que a Apple lance atualizações no futuro para resolver isso e alguns outros comportamentos estranhos que você verá abaixo.
Continuando no iPad
Considerando tudo, foi super divertido simplesmente circular o objeto que você quer remover, esperar alguns segundos e vê-lo fazer poof e simplesmente desaparecer.
Depois de “fazer desaparecer” um objeto, às vezes eu também tinha que lidar com algumas manchas escuras que sobravam, eu só precisava circular a área novamente para me livrar de quaisquer manchas escuras restantes (como mostrado no vídeo abaixo).
Como eu esperava, o iPad teve um desempenho melhor que o iPhone, não notei ele travando, embora a resposta da ferramenta tenha ficado mais lenta conforme fui avançando.
E quanto à temperatura, o iPad só ficou morno, mas sempre que eu chegava perto da tela podia sentir o calor emanando de leve.
Coisas estranhas começaram a acontecer
Depois que todos os objetos, exceto um, foram removidos individualmente, eu tinha um último desafio: remover o maior item de toda a foto: O livro de crochê e terminar com uma mesa vazia.
Mas o que parecia uma coisa simples depois de tudo que já tinha feito acabou sendo o momento em que as coisas estranhas começaram a acontecer. Eu me pergunto… Será que a Apple Intelligence, como qualquer outro modelo de IA, alucina?
Alucinação é um comportamento conhecido do aprendizado de máquina, especialmente em LLMs, e na minha opinião um dos mais perigosos. Uma alucinação em ML acontece quando um modelo produz uma resposta coerente, mas que é de fato incorreta.
Como não sei se podemos qualificar se a Apple Intelligence estava tendo uma alucinação aqui, especialmente porque não estamos interagindo textualmente, vou chamar tudo no reino dos resultados inesperados de “comportamento estranho”.
Apenas um “blur” para você
As duas primeiras tentativas de remover o livro não foram bem sucedidas. A ferramenta de limpeza parou de remover coisas completamente e começou a “borrar” as coisas em vez de remover objetos.
Depois de algumas tentativas fracassadas, uma delas você pode ver neste vídeo abaixo, eu finalmente consegui fazer o que queria e o livro foi removido. Note que isso exigiu um trabalho extra da minha parte, já que circular não estava tendo o resultado esperado.
Eu queria que houvesse uma maneira de dizer à ferramenta que ela fez a coisa errada e que deveria tentar novamente, como muitos LLMs baseados em texto, mas não existe tal maneira. Aqui você tem que esperar que a funcionalidade entenda o que você quer que ela faça. ¯\_(ツ)_/¯
Fantasmas de objetos
Ainda no espectro dos comportamentos estranhos, quando tentei pintar sobre a parte onde muitas das edições foram feitas anteriormente, apareceu o “recorte” dos objetos que haviam sido removidos previamente.
No final, deu tudo certo e consegui as fotos que você viu no início.
Limpeza é Cansativo, Até Mesmo Para IA
Outro detalhe importante é que essa foi uma tarefa que consumiu muita bateria. A edição em si não demorou muito, cada remoção de objeto levou apenas alguns segundos.
No entanto, eu podia ver a porcentagem da bateria diminuindo constantemente. Acredito que desde que comecei o processo de edição no iPad e até terminar, essa funcionalidae consumiu cerca de 20% da bateria disponível.
Já fiz algumas tarefas intensivas no iPad antes, como editar vídeos e desenhar digitalmente com várias camadas, mas nada chegou perto disso.
Também notei que o consumo começou a aumentar quanto mais edições eu acumulava em uma foto. Então, definitivamente não recomendaria usar isso quando depender apenas da bateria e não puder carregar seus dispositivos. Caso contrário, talvez seja bom ter um powerbank como esse.
O Resultado Final
Depois de conseguir todas as minhas fotos, só faltava uma coisinha: fazer este pequeno vídeo usando “apenas uma foto”.
Eu poderia simplesmente tirar todas as fotos em metade do tempo que levei para fazer toda a “limpeza” virtual? Claro que poderia. Mas qual seria a graça disso?
Recapitulando
Se você leu até aqui, pode estar se perguntando qual é a utilidade disso tudo. Bem, imagine que você tem uma alface no meio dos dentes, mas tirando isso a foto está perfeita, agora você pode simplesmente removê-la.
Um amigo me apontou que você também poderia remover pessoas que você não gosta mais de uma foto antiga ou alguém fazendo photobomb na sua foto legal de férias.
Em resumo, o novo recurso é útil, mas é importante estar ciente de suas limitações e peculiaridades, bem como do consumo de bateria.
Obrigada por ler.
Esse post contém links afiliados.
