Engenharia de dados com Confluent e Databricks

Notas do episódio

No episódio 174 do Podcast PPT Não Compila recebemos três especialistas de peso para um papo técnico e ao mesmo tempo acessível sobre Engenharia de Dados moderna. Juntos com o co-host Rômulo Barbosa, fundador da Techrom, contamos com a participação de Luiz Carrossoni, arquiteto de soluções na Databricks, e Lucas Melo, engenheiro de soluções na Confluent, que explicam como empresas podem simplificar fluxos de dados complexos — mesmo com legados pesados — usando tecnologias como Kafka, Flink e Delta Lake. A conversa aprofunda como unir o mundo transacional ao analítico, os desafios de ingestão e integração, e por que o Shift Left é mais que um jargão: é uma mudança cultural necessária. Os convidados também detalham a parceria estratégica entre Databricks e Confluent, revelando como o recurso TableFlow pode transformar o modo como dados são tratados e disponibilizados para consumo em tempo real, com governança e eficiência. Você vai entender como aplicar conceitos como arquitetura orientada a eventos, camadas de dados (bronze, silver e gold) e produtos de dados dentro da sua empresa. Além disso, o episódio é uma aula prática sobre maturidade em dados, modernização de TI e como preparar o terreno para a IA generativa com bases sólidas. 💡 🚀 Deixe sua dúvida nos comentários, compartilhe com seu time e espalhe esse conteúdo onde ele pode fazer a diferença! #Podcast #PPTNãoCompila #EngenhariaDeDados #IngestãoDeDados #Databricks #Confluent #Techrom [0:44] Abertura e apresentação [6:06] Visão sobre Ingestão de dados [12:53] Estratégias de integração de dados nas empresas [21:07] Parceria entre Databricks e Confluent [28:42] Shift Left e simplificação de fluxos de dados [34:31] Dados e uso de serviços gerenciados [36:50] Produto de dados [38:47] Maturidade operacional de empresas 43:56 Legado das ondas tecnológicas [48:27] Custos [51:55] Mudanças nas empresas em relação ao uso de dados [59:34] Uso de IA Generativa [1:04:51] Futuro de parceria entre Databricks e Confluent [1:08:00] Vantagens para Engenheiros De dados [1:10:47] Vantagens estratégicas [1:17:31] Facilidade e simplificação de processos [1:20:43] Agradecimentos e Considerações finais Convidados: Lucas Melo: linkedin.com/in/lmelodepaula/ Luiz Carrossoni: linkedin.com/in/luizcarrossoni/ Rômulo Barbosa: linkedin.com/in/rômulo-barbosa/ Youtube: https://youtu.be/HqraGPgUoD0 Outras plataformas: https://linktr.ee/pptnaocompila Acompanhe nas redes Instagram e Twitter: @pptnaocompila LinkedIn: https://www.linkedin.com/company/pptnaocompila Produção: Voz e conteúdo | https://www.vozeconteudo.com.br - @estudiosvoz