Azure Data Lake Storage

Azure O Data Lake Storage (ADLS) é um serviço escalável de armazenamento e análise de dados hospedado na nuvem Azure pública da Microsoft. A Microsoft Azure Data Lake Storage conexão suporta acesso a repositórios Data Lake Storage Gen2Azure e Gen1.

Selecione Azure Data Lake Storage na seção Storage da janela Add component.

Azure O Data Lake Storage (ADLS) Gen1 está obsoleto e será removido em uma versão futura. Você deve fazer a transição para o ADLS, Gen2 pois o ADLS não Gen1 estará mais disponível.

Se você selecionar Azure Data Lake Storage Gen1 Blob no menu suspenso Type, configure os seguintes detalhes:

Armazenamento de registros
Campo Descrição
Nome de exibição Digite o nome a ser exibido.
Nome do contêiner Digite o nome do contêiner.
Nome da conta de armazenamento Digite o nome da conta de armazenamento.
Terminal O URL do endpoint é gerado automaticamente.
Chave de acesso Digite sua chave de acesso.
Status da conexão Clique no link Test connection (Testar conexão) para testar a conexão de armazenamento. Se a conexão for bem-sucedida, uma mensagem de sucesso será exibida.
Associar catálogo Ative o botão de alternância para adicionar um catálogo ao seu armazenamento. Esse catálogo está associado ao seu armazenamento e serve como interface de consulta com os dados armazenados nele.
Tipo de catálogo Selecione o tipo de catálogo na lista. O catálogo recomendado é Apache Iceberg. As outras opções de catálogo são Apache Hive, Apache Hudi e Delta Lake.
Nome do catálogo Digite o nome do seu catálogo.
Caminho base (opcional)
Observação: este campo está disponível apenas na instância watsonx.data Lite. Este campo aparece apenas quando você seleciona Apache Iceberg como o tipo de catálogo.
Insira o caminho base para o catálogo no armazenamento de objetos. Isso permite associar vários catálogos Iceberg a um único armazenamento.
Observação: não é possível compartilhar um armazenamento entre catálogos Iceberg e não Iceberg.
Associar Clique em Associate (Associar) para criar o armazenamento.

Se você selecionar Azure Data Lake Storage Gen2 no menu suspenso Type, configure os seguintes detalhes:

Armazenamento de registros
Campo Descrição
Nome de exibição Digite o nome a ser exibido.
Nome do contêiner Digite o nome do contêiner.
Nome da conta de armazenamento Digite o nome da conta de armazenamento.
Terminal O URL do endpoint é gerado automaticamente.
Modo de Autenticação Com base em seus requisitos, selecione um dos seguintes modos de autenticação:
i. Account Key (Chave da conta): Se você selecionar Account Key (Chave da conta), digite a chave de acesso no campo Access Key (Chave de acesso).
ii. Service Principal: se você selecionar Service Principal, digite o ID do aplicativo, o ID do diretório e a chave secreta.
Status da conexão Clique no link Test connection (Testar conexão) para testar a conexão de armazenamento. Se a conexão for bem-sucedida, uma mensagem de sucesso será exibida.
Associar catálogo Ative o botão de alternância para adicionar um catálogo ao seu armazenamento. Esse catálogo está associado ao seu armazenamento e serve como interface de consulta com os dados armazenados nele.
Tipo de catálogo Selecione o tipo de catálogo na lista. O catálogo recomendado é Apache Iceberg. As outras opções de catálogo são Apache Hive, Apache Hudi e Delta Lake.
Nome do catálogo Digite o nome do seu catálogo.
Caminho base (opcional)
Observação: este campo está disponível apenas na instância watsonx.data Lite. Este campo aparece apenas quando você seleciona Apache Iceberg como o tipo de catálogo.
Insira o caminho base para o catálogo no armazenamento de objetos. Isso permite associar vários catálogos Iceberg a um único armazenamento.
Observação: não é possível compartilhar um armazenamento entre catálogos Iceberg e não Iceberg.
Associar Clique em Associate (Associar) para criar o armazenamento.

Se o ADLS já estiver inativo em instâncias antigas, o sistema exibirá o botão Activate. Quando você ativar o ADLS, o sistema removerá automaticamente o botão Activate.