Pergunta de entrevista da empresa Avanade

How to identify duplicates using Spark SQL from a datasets