O Databricks Unity Catalog oferece uma camada de governança unificada para dados e IA dentro da Databricks Data Intelligence Platform. Com o Unity Catalog, as organizações podem governar perfeitamente seus dados estruturados e não estruturados, modelos de machine learning, notebooks, dashboards e arquivos em qualquer cloud ou plataforma. Data scientists, analistas e engenheiros de dados podem usar o Unity Catalog para descobrir, acessar e colaborar com segurança em dados confiáveis e ativos de IA, aproveitando a IA para aumentar a produtividade e desbloquear todo o potencial da arquitetura do lakehouse. Essa abordagem unificada de governança acelera as iniciativas de dados e AI, ao mesmo tempo que simplifica a compliance regulatória.
“O Unity Catalog simplificou muito nossa implementação de controle de acesso baseado em funções. Agora, temos a capacidade de proteger dados em nível de catálogo, banco de dados, tabela e coluna. Fornecemos, de forma transparente, o nível adequado de acesso a todos os usuários. Conseguimos adequar o gerenciamento e a segurança do acesso aos dados com confiança para atender às nossas rígidas políticas de conformidade e privacidade.”
— Chris Locklin, gerente de engenharia de plataformas de dados
Como funciona
Visibilidade unificada dos dados e da IA
Descubra e classifique dados estruturados e não estruturados, ML, notebooks, dashboards e arquivos arbitrários em qualquer cloud. Consolide, mapeie e consulte dados de várias plataformas, incluindo MySQL, PostgreSQL, Amazon Redshift, Snowflake, Azure SQL, Azure Synapse e BigQuery do Google num só lugar. Acelere suas iniciativas de dados e IA com um único ponto de acesso para exploração de dados. Aumente a produtividade pesquisando, entendendo e extraindo insights com segurança de seus dados e IA usando linguagem natural.
✔ Modelo de permissão única para dados e IA
Simplifique o gerenciamento de acesso com uma interface unificada para definir políticas de acesso em dados e ativos de IA e aplicar e auditar essas políticas de forma consistente em qualquer cloud ou plataforma de dados. Acesse com segurança dados de outras plataformas de compute usando interfaces abertas, com permissões consistentes gerenciadas num só lugar. Aumente a segurança com o controle refinado de linhas e colunas e, ao mesmo tempo, gerencie com eficiência o acesso por meio de políticas de acesso baseadas em atributos de baixo código que podem ser dimensionadas sem problemas.
✔ Monitoramento e observabilidade baseados em IA
Aproveite o poder da IA para automatizar o monitoramento, diagnosticar erros e manter a qualidade dos dados e do modelo de ML. Beneficie-se de alertas proativos que detectam automaticamente dados de informações de identificação pessoal (PII), rastreiam o drift do modelo e resolvem efetivamente problemas em seus pipelines de dados e IA para manter a precisão e a integridade. Simplifique a depuração, a análise de causa raiz e a avaliação de impacto com linhagem de dados automatizada em nível de coluna. Obtenha uma observabilidade abrangente de seus dados e IA com inteligência operacional usando tabelas de sistema integradas para cobrança, auditoria, linhagem e muito mais.
Compartilhamento de dados abertos
Compartilhe facilmente dados e ativos de IA em clouds, regiões e plataformas com o Delta Sharing de código aberto, integrado nativamente ao Unity Catalog. Colabore com segurança com qualquer pessoa, em qualquer lugar, para desbloquear novos fluxos de receita e gerar valor comercial, sem depender de formatos proprietários, processos de ETL complexos ou replicação de dados dispendiosa.
"O Unity Catalog nos permitiu criar uma view unificada do nosso patrimônio de dados, simplificando a colaboração entre as equipes no BlackBerry. Agora, temos uma abordagem padrão para gerenciar permissões de acesso e auditar arquivos ou tabelas em nosso lake, com a capacidade de definir controles de acesso refinados em linhas e colunas. A linhagem de dados automatizada nos ajudou a ver de onde vêm os dados para identificar a fonte de uma possível ameaça e entender quais projetos ou equipes de pesquisa estão aproveitando os dados para detectar ameaças."
"O Unity Catalog nos permite gerenciar todos os usuários em vários workspaces num local central, facilitando significativamente o gerenciamento de usuários. Além disso, o recurso de linhagem de dados está pronto para uso, o que nos ajuda a identificar as dependências downstream sem quaisquer sobrecargas manuais. No caso dos dados de BI, podemos descobrir como os dados de BI estão fluindo e onde os usuários os estão colocando usando a linhagem de dados."
"O Unity Catalog nos permite gerenciar todos os usuários em vários workspaces num local central, facilitando significativamente o gerenciamento de usuários. Além disso, o recurso de linhagem de dados está pronto para uso, o que nos ajuda a identificar as dependências downstream sem quaisquer sobrecargas manuais. No caso dos dados de BI, podemos descobrir como os dados de BI estão fluindo e onde os usuários os estão colocando usando a linhagem de dados."
Integrações
O Unity Catalog funciona com seus catálogos de dados existentes, sistemas de armazenamento de dados e soluções de governança: você preserva seus investimentos existentes enquanto cria um modelo de governança preparado para o futuro, sem os altos custos de uma migração.
