tornou-se um padr?o sensato para nossos times no espa?o de qualidade de dados, e por isso recomendamos adot¨¢-lo ¡ª n?o apenas pela falta de alternativas melhores, mas tamb¨¦m porque nossos times relataram ¨®timos resultados em v¨¢rios projetos de clientes. Great Expectations ¨¦ um framework que permite criar controles internos que sinalizam anomalias ou problemas de qualidade em pipelines de dados. Assim como os testes de unidade s?o executados em um pipeline de compila??o, Great Expectations faz asser??es durante a execu??o de um pipeline de dados. Gostamos de sua simplicidade e facilidade de uso ¡ª as regras armazenadas em JSON podem ser modificadas por nossa equipe de especialistas em dom¨ªnio de dados sem necessariamente precisar de habilidades de engenharia de dados.
Escrevemos sobre na edi??o anterior do Radar. Continuamos gostando e o movemos para o anel Avalie nesta edi??o. Great Expectations ¨¦ um framework que permite criar controles integrados que sinalizam anomalias ou problemas de qualidade em pipelines de dados. Assim como os testes de unidade s?o executados em um pipeline de compila??o, o Great Expectations faz afirma??es durante a execu??o de um pipeline de dados. Gostamos de sua simplicidade e facilidade de uso ¡ª as regras armazenadas em JSON podem ser modificadas por especialistas em dom¨ªnio de dados sem necessariamente precisar de habilidades de engenharia de dados.
Com o crescimento de CD4ML, os aspectos operacionais da engenharia e ci¨ºncia de dados t¨ºm recebido mais aten??o. A governan?a de dados automatizada ¨¦ um aspecto desse desenvolvimento. ¨¦ um framework que permite criar controles integrados que sinalizam anomalias ou problemas de qualidade em pipelines de dados. Assim como os testes de unidade s?o executados em um pipeline de compila??o, o Great Expectations faz afirma??es durante a execu??o de um pipeline de dados. Isso ¨¦ ¨²til n?o apenas para implementar uma esp¨¦cie de para pipelines de dados, mas tamb¨¦m para garantir que algoritmos baseados em modelo permane?am dentro da faixa operacional determinada por seus dados de treinamento. Controles automatizados como esses podem ajudar a distribuir e democratizar o acesso e a cust¨®dia dos dados. O Great Expectations tamb¨¦m vem com uma ferramenta de cria??o de perfil para ajudar a entender as qualidades de um determinado conjunto de dados e definir os limites apropriados.
