Відео

Olá, Tudo bem? O Framework, possui uma série de ferramentas, para ETL, Ingestão e Integração, e em contexto de qualidade, teria que ser considerado alguns componentes e possíveis processos de sanitização, onde depende do processo de limpeza esperado. Em contexto geral, alguns serviços integrados, seria possível ter uma gestão de qualidade e linhagens, bem integradas.

O Ambari é um serviço de monitoramento dos serviços e recursos do ambiente. Envolve algumas funcionalidades para dados, porém seu foco é a administração do cluster.

Olá, para uma mensuração produtiva de Big Data, uma estratégia seria avaliar e listar os processos atuais e a partir desse raio-x inicial, projetar configurações que proporcionem escalabilidade para 1 a 2 anos de crescimento. Com isso, as definições de hardware poderão ser avaliadas com os padrões de VMs existentes.

Muito obrigado pelo feedback! Estamos preparando novas aulas e conteúdos para compartilhar! Vamos revisitar o tema hadoop e trazer novas aulas. Continue nos acompanhando!

Olá, muito obrigado pelo feedback!! Esse roteiro é para a instalação do pacote Hortonwork Hadoop. Com a fusão e reestruturação da Cloudera, o modelo de instalação deve seguir em formato de cloudera manager, não utilizando mais o Ambari. Atualmente os formatos possíveis de instalação, seriam, hadoop direto pelo site da Apache, ter uma licença Cloudera ou baixar uma imagem Sandbox da Cloudera e publicar em um VM. Como esse roteiro tem um tempo, eu recomendaria para estudos, o upload de uma imagem SANDBOX.

Olá, Patrícia. Tudo bem? Respondendo sua pergunta. Integrar com Excel por exemplo em uma rede não é usual, visto que nessa estrutura de arquivos, o Amundsen ou mesmo outra ferramenta de catalogação, não consegue recuperar a estrutura de metadados, que é o que compõe a base do Amundsen. Uma opção seria você estruturar todos os seus arquivos em uma base de dados ou repositório, que viabilize essa gestão de ativo. Dessa forma seria possível realizar a integração com o Amundsen ou outra ferramenta similar.

@@MaestriaDados Vou bem tb. Pensei nisso tb, vou jogar td para uma base, um sql da vida e integrar. Mto obg e valeu pelos vídeos, achei vcs por acaso e qto conteúdo bacana, ja salvei vários. Abs

@@MaestriaDados será q tem integração com o SQL? por um plug etc? No site eu não vi.

@@PatriciaMake Olá, desculpe a demora. Como a tecnologia é dedicada somente a gestão dos metadados, não se disponibiliza uma camada semântica SQL para leituras e querys variadas.

Obrigado pelo feedback!

Olá Pedro! Muito obrigado pelo feedback! Estamos preparando muitos outros materias e ficamos à disposição para ouvir suas sugestões de novos assuntos de interesse. Acessa nosso site e manda uma sugestão em nosso contato. Vlw e obrigado pelo apoio!!!

Olá, muito obrigado pelo feedback. Eu irei atualizar o GITHUB com os códigos das aulas realizadas na TRILHA. Assim que disponibilizado eu aviso!! Vlw!

Olá Fernando! Muito obrigado pelo seu feedback, nesse vídeo foi demonstrado algumas infraestruturas de dados que apoiam nas disponibilização e entrega de dados como produto, e nesse primeiro conteúdo, detalhamos as possibilidades e principais pilares. Data mesh é fundamentalmente uma abordagem de consumo de dados que foca em organização por domínios de negócio e habilita mecanismos e integrações para uma arquitetura descentralizada. Por favor, compartilhe suas sugestões para evoluir o conteúdo. Ficaremos felizes em otimizar. Obrigado!

@@MaestriaDadosobrigado pela resposta. Minha sugestão é falar dos conceitos e técnicas de DataMesh, e se possível um case. Penso que a grande mudança que traz o ganho é a mudança de arquitetura e como usamos a stack que você apresentou.

@@fpinheirocampos Excelente! Sua sugestão foi muito boa! Irei validar um case e logo disponibilizaremos. Muito obrigado!

O data mesh são os amigos que fazemos pelo caminho

Olá Higor! Muito obrigado pelo feedback! Na plataforma da Maestriadados estamos estruturando uma área para a disponibilização dos Scripts e Arquivos demonstrados, logo estará utilizável. Temos o GITHUB do Maestriadados, link do notebook e arquivo: github.com/maestriadados/maestriadados/tree/main/8_ETAPAS_DE_UMA_ANALISE_DE_DADOS_DIR

Demais meu amigo. Seu feedback é essencial para a evolução e continuidade de manter a melhor qualidade nos conteúdos!

Muito obrigado pelo apoio e feedback!

Olá Juliana, excelente o seu feedback! Mande um email pra maestriadados@gmail.com com os detalhes que eu lhe respondo com um direcionamento mais adequado. Muito obrigado pelo apoio!

Muito importante o seu feedback. Muito obrigado e continue acompanhando nosso canal!!

Olá Cláudio! Muito obrigado pelo feedback e apoio. Sim, nos próximos dias serão disponibilizados a evolução da engenharia da solução apresentada na aula 10. Continue nos acompanhando!

Muito feliz pelo feedback Marcelo! Estamos trabalhando para gerar diversos outros conteúdos, que agreguem valor e tenham embasamento de negócios reais. Isso motiva ainda mais na geração de conteúdos! Obrigado pelo apoio 🙂!