COMO APRENDER ENGENHARIA DE DADOS? | O QUE PRECISO SABER?
Вставка
- Опубліковано 15 жов 2024
- Neste vídeo, vamos te orientar sobre quais as ferramentas necessárias para ingressar na área de engenharia de dados, os cursos básicos que te levarão a entender a lógica de programação do Databricks e Lake House. Aqui apresentamos algumas dicas simples que tornarão o seu processo de aprendizagem muito mais empolgante.
O conteúdo deste vídeo é ideal para quem está começando a trabalhar com o Databricks e quer entender os principais tópicos a serem considerados.
Acesse nossas aulas gratuitas:
alunos.aprende...
-
Não perca essa oportunidade de ampliar seus conhecimentos e alavancar sua carreira nessa área promissora.
#AprenderDados #Databricks #DataEngineering #SparkTeam
Aprender Dados | Bernardo Cambruzzi
há 1 dia
os links estão na descrição, mas vou deixar aqui para facilitar a sua vida!
VIDEO SOBRE ENGENHARIA DE DADOS - ua-cam.com/video/hE-J74kHrIo/v-deo.html
VIDEO SOBRE ARQUITETURA MODERNA DE DADOS - ua-cam.com/video/1KFgxue9s_w/v-deo.html
Eu pensei da mesma forma que você, eu estudava sozinho e conseguia aprender, mas era limitado. Então resolvi me candidatar ás vagas de estágio em engenharia de dados pra realmente aprender a colocar mão na massa. Com muita luta consegui ser aprovado em um estágio em eng de dados remoto, o salário não é essas coisas toda, mas pra quem tá começando, o salário não pode ser o atrativo principal.
Você entendeu o principal mesmo! Tenho certeza que você tem aprendido muito mais do que conseguiria por conta, sem estar num projeto ou com alguém te desafiando tecnicamente
Ingestão incremental, ingestão full, cdc, scd
Excelente vídeo Bernardo, muito bom ter uma pessoa sincera compartilhando essas informações conosco 👏
Pergunta sincera, trabalhar como analista de dados ajuda no aprendizado? Na empresa que eu trabalho é um pouquinho difícil entrar na engenharia de dados, entao eu estou tentando uma vaga de analista de dados para me envolver mais, porem nao sei se é exatamente isso
Fiz todos esse processos, tirei dp-900, fiz ETL de ponta a ponta na plataforma da azure juntamente com databricks e alguns conceitos eu aprendo na pos que eu faço em engenharia de dados.Visando tudo isso, não consigo nem entrevistas para junior =/
Segue focado Gleison, realmente tudo o que ele falou nesse vídeo é verdade, é o nosso mundo na engenharia de dados... Uma dica tb é deixar o seu linkedin bem atualizado, sita todas as ferramentas que vc é familiarizado... e siga focado estudando e se preparando, que com certeza vai aparecer uma vaga na area de Dados.
meu comentario foi barrado pelo youtube. Enfim: Seu github ta vazio, sinal vermelho para os empregadores, faça um projetinho
Projetos, tem ? Sabe se vender ? Se não, a hora é essa.
Não desanima, Gleison! Se já fizeste tudo isso tu tá no caminho certo. Segue estudando e se aprimorando. Uma hora a oportunidade aparece!
Olá, nao sou da área! Tô pesquisando pra ver se vou pra esse nicho! Queria a opinião sincera se vale ou nao a pena virar Eng de dados com 42 anos, afim de ir para bancos?!
Top demais o canal!!
vou começar uma pos na xp de engenharia de dados
to começando agr, estou bom em python, mas to mais ou menos em SQL com essa dica, vou dar uma focada em sql.
to dando uma estudada em spark e vi seus videos de data bricks.
vlww pelas dicas!!!
Muito obrigado! bons estudos, estaremos aqui quando precisar!
Conselhos pra vida! Obrigado pelo vídeo
Bernardo, vídeo excelente! Parabéns! Sugestão: ter o link para aquele vídeo que vc recomenda.
Bem lembrado, eu coloque na Live original mas nao coloquei aqui
coloquei já
Ola Bernardo. Tudo bem? Obrigado por postar este vídeo.
Seguinte, eu quero me tornar um engenheiro de dados, mas sempre me esbarro no seguinte problema:
Como se aprende tantas ferramentas, quando muitas delas são tão inacessiveis ($$$) para o estudante?
Eu tenho um core bacana em sql, python, modelagem e etc, mas eu não tenho coragem de aplicar numa vaga sem que eu tenha vivência profissional em todas as ferramentas dos requisitos.
Muitas ferramentas tem versões community que ajudam bastante, mas muitas outras são, realmente, inacessíveis ($$$).
Como vocês, engenheiros, resolveram este problema (se é que passaram por isto)? Eu já conversei com tantos recrutadores, mas muitos deles já esperam um certo domínio no ecossistema.
Eu já estou inserido na área de dados (em dataviz), mas eu realmente quero migrar, pois não aguento mais DAX e Powerquery na minha vida kkkkkkkkk.
Muito boa sua pergunta. Te entendo total.
Eu já tirei muita grana do meu bolso para aprender Cloud, especialmente Databricks, eu diria.
Existem sim muitas ferramentas e tal.
Mas se você vem do ecossistema PowerBI, eu recomendo especializar na Azure (e Databricks é uma das principais ferramentas pra quem usa Azure).
Você pode aprender Databricks de graça - Eu postei um vídeo sobre isso já por aqui.
Isso também foi tema da minha mentoria, na aula passada.
-----
Mas, talvez você precisa entender os custos e assumir um pouco do risco.
Eu sei que uma hora de Databricks custa entre 4-10 reais.
E se eu fizer algo errado, posso pagar R$100 por dia. (experiência própria de quem queimou 2k já na cloud por erro).
Então se você quer migrar:
- Assiste as aulas
- Aplica no Community
- Cria sua azure e aprendar a cuidar dos custos - fazendo isso você vai se destacar de muita gente já!
Te ajudei?
@@AprenderDados Ajudou sim!
Essa área da pra empreender?! Ou é bem difícil conseguir empreender nesse nicho?!
Sugere matemática p engenharia de dados ?
Pode ajudar, mas não é o começo não.
Diferente das Engenharias tradicionais que precisam de cálculos e física, engenharia de dados trata puramente dos dados e infraestrutura.
Matemática pode te ajudar o dia que você for calcular uma métrica, alguma aplicação estatística.
Mas a prioridade é outra se você quer começar na área
Matemática serve mais para cientista de dados, pois esse vai ter que criar cálculos para implementar em algoritmos. A parte de engenharia de dados é mais voltada a programação, principalmente SQL e hoje em dia também é muito bom ter conhecimento em infra e cloud. Por exemplo, provisionar pipelines em containers e também orquestrar esses containers em um ambiente de cloud. Pra isso é necessário ter um conhecimento básico de containers como docker e também kubernetes e alguma plataforma de cloud, como Google cloud, AWS ou Azure, por exemplo.