Encontro da Comunidade Apache Iceberg™ em NYC

Descrição

🧊 O Apache Iceberg está de volta à Grande Maçã! 🗽 Estamos trazendo a comunidade Apache Iceberg™ de volta a Nova Iorque para um dia de palestras técnicas, insights práticos e conversas com as pessoas que estão moldando o futuro da infraestrutura de dados abertos. Se você está executando o Iceberg em produção, avaliando-o para seu lakehouse ou explorando o ecossistema, este encontro é uma chance de aprender com praticantes, se conectar com outros engenheiros de dados e ouvir lições do mundo real de equipes de dados modernas. Data: 20 de agosto Interessado em palestrar? 🎤 Envie sua proposta aqui: https://forms.gle/K3SsWXpXJKgkrPc88 Local: Amazon JFK27 - Hank ​Agenda• 14:00 – 14:30: Abertura, Lanches & Networking Descrições das Palestras:Ali Alemi, AWS — Arquiteto de Soluções Pr. EspecialistaDetecção de Fraudes em Sub-Segundo Encontra AI Agente: Streaming, Iceberg e Forense AutomatizadoUm pagamento é sinalizado como fraude 800 milissegundos após entrar em uma conta, e dentro de cinco segundos um agente de IA reverte e investiga autonomamente seis meses de histórico, rastreando a atividade e entregando um relatório forense pronto para compliance — sem a intervenção humana. A palestra percorre essa jornada de dez segundos para mostrar como dados em tempo real e o Apache Iceberg dão à IA agente a velocidade e profundidade para não apenas detectar fraudes, mas resolvê-las, desde a remediação instantânea até a investigação automatizada. Ela termina com a questão de design mais difícil: quando o agente deve agir por conta própria e quando deve chamar um humano. Jayce Slesar, BETA Technologies — Engenheiro de Infraestrutura de DadosIceberg para Telemetria de Aeronaves MassivasUma visão geral de como a BETA Technologies utiliza o Iceberg e o Trino para consultar trilhões de pontos de dados em velocidades relâmpago, atendendo às necessidades de dezenas de equipes na organização que analisam dados de voo. Conor McCarter, Prequel — Co-FundadorVamos Fisicamente: Acelerando a Replicação de Tabelas IcebergFormatos de tabela abertos como o Iceberg oferecem motores independentes um manual compartilhado, que desbloqueia uma terceira opção de replicação além da replicação física proprietária e replicação lógica baseada em motor: replicação física não proprietária. À primeira vista, isso parece fácil — pegue uma instantânea, enumere seus arquivos a partir dos manifests, copie-os em paralelo e publique uma nova tabela — mas operar abaixo do motor de consulta levanta questões difíceis sobre autorização em lagos multi-inquilinos e se você realmente reproduziu o estado lógico da tabela de origem. A palestra aborda a implementação cross-cloud/cross-region da Prequel e os recursos do Iceberg que a complicam (transformações de partição e evolução, exclusões posicional vs. igualdade, evolução de esquema deixando colunas descartadas em Parquet, exposição de metadados históricos), compartilhando a arquitetura que emergiu e deixando os participantes com um checklist prático para construir diretamente contra o armazenamento do Iceberg. Sobre o PuppyGraph O PuppyGraph é o primeiro e único mecanismo de consulta gráfico em tempo real e sem ETL do mercado, capacitando empresas a transformar repositórios de dados relacionais existentes em um modelo gráfico unificado em menos de 10 minutos, evitando os custos, latências e desafios de manutenção dos bancos de dados gráficos tradicionais. 💬 Junte-se ao Slack da Comunidade PuppyGraph 📚 Confira o Blog de Engenharia do PuppyGraph 📲 Siga o PuppyGraph no LinkedIn & Twitter 🖥️ Inscreva-se no YouTube do PuppyGraph 💾 Baixe a Edição para Desenvolvedores Forever Free do PuppyGraph (sem formulário e sem pagamento necessário) ​​Sobre a AWS Seja você esteja em busca de IA generativa, poder computacional, armazenamento de dados, entrega de conteúdo ou outras funcionalidades, a AWS tem os serviços para ajudá-lo a construir aplicações sofisticadas com maior flexibilidade, escalabilidade e confiabilidade. A AWS é o maior provedor de Serviços em Nuvem do mundo. https://aws.amazon.com/ Na AWS, o Apache Iceberg é um formato de tabela de código aberto que simplifica a gestão de tabelas enquanto melhora o desempenho. Os serviços de análise da AWS, como Amazon SageMaker Lakehouse, Amazon S3Tables, Amazon EMR, Amazon Glue, Amazon Athena e Amazon Redshift incluem suporte nativo para o Apache Iceberg, para que você possa facilmente construir lagos de dados transacionais em cima do Amazon Simple Storage Service (Amazon S3) na AWS. Recursos e Informações Adicionais: 📚 Workshop: Executando o Apache Iceberg na AWS 📚 Blogs: Apache Iceberg na AWS 📚 Orientação Prescritiva da AWS: Usando o Apache Iceberg na AWS 🖥️ Inscreva-se para Eventos da AWS e para Desenvolvedores da AWS 💜 Estamos contratando, junte-se à nossa equipe Sobre o Microsoft Fabric À medida que a IA transforma cada indústria, uma verdade permanece constante: os dados não são mais apenas um ativo — são sua vantagem competitiva. O ritmo da IA exige fácil acesso a dados, insights rápidos e a capacidade de iterar sem atritos. No entanto, muitas organizações são impedidas por estates de dados fragmentados e sistemas legados. O Microsoft Fabric foi projetado para atender a este momento — unificar seus dados, simplificar sua arquitetura e acelerar seu caminho para se tornar uma organização liderada por IA. O Apache Iceberg é o elo conectivo que permite que nativos e terceiros integrem e interajam de maneira contínua, sem forçar os usuários a construir ou manter soluções complexas de gerenciamento de lagos. O Fabric OneLake é um único lugar para armazenar e acessar dados nos formatos Iceberg e Delta Lake. Além disso, ele fornece um catálogo unificado impulsionado pela especificação REST do Iceberg, permitindo uma integração sem costura com suas ferramentas favoritas, como motores nativos do Fabric, Databricks, Snowflake, ClickHouse e muitos mais. Apresentando o Microsoft Fabric Apresentando o Microsoft OneLake Saiba mais sobre o Iceberg no Microsoft Fabric Conecte-se ao OneLake usando as APIs de Tabelas baseadas em REST do Iceberg Sobre o ClickHouse Estabelecido em 2009, o ClickHouse lidera a indústria com seu sistema de banco de dados orientado a colunas de código aberto, impulsionado pela visão de se tornar o banco de dados OLAP mais rápido do mundo. A empresa capacita os usuários a gerar relatórios analíticos em tempo real através de consultas SQL, enfatizando a velocidade na gestão de volumes de dados crescentes. 📚 Comece no ClickHouse Github 💬 Junte-se ao Canal do Slack do ClickHouse ​💜 Estamos contratando, junte-se à nossa equipe!