Créer un stockage Cloud externe pour un catalogue

Cet article décrit comment créer un stockage Cloud externe pour les tables Apache Iceberg™ pour les fournisseurs de stockage cloud suivants :

  • Amazon S3

  • Cloud Storage de Google

  • Conteneur Microsoft Azure

Avant de pouvoir créer un catalogue interne dans votre compte Snowflake Open Catalog, vous devez d’abord créer et configurer un stockage cloud externe pour celui-ci.

Création d’un compartiment Amazon S3

  1. Connectez-vous à la console de gestion AWS.

  2. Dans le tableau de bord d’accueil, recherchez et sélectionnez S3.

  3. Sélectionnez Créer un compartiment.

  4. Pour Nom du compartiment, saisissez un nom pour le compartiment.

  5. Configurez les paramètres de votre compartiment de stockage ou utilisez les paramètres par défaut.

  6. Sélectionnez Créer un compartiment.

  7. Recherchez et sélectionnez le compartiment de stockage que vous avez créé.

  8. Pour créer un dossier, sélectionnez Créer un dossier.

    Remarque

    Nous vous recommandons de créer ce dossier.

  9. Pour Nom du dossier, saisissez le nom du dossier dans lequel vous souhaitez stocker les tables Apache Iceberg™, puis sélectionnez Créer un dossier.

  10. Sélectionnez le dossier que vous avez créé.

  11. Sélectionnez Copier l’URI S3, puis stockez l’URI pour une utilisation ultérieure.

    Remarque

    Lors de la création d’un catalogue dans Open Catalog, vous saisissez l’URI S3 dans le champ Emplacement de base par défaut.

Création d’un compartiment Cloud Storage

  1. Connectez-vous à la console Google Cloud en tant qu’éditeur de projet.

  2. Dans le menu de navigation, sélectionnez Solutions> Tous les produits.

  3. Sous Stockage, sélectionnez Cloud Storage.

  4. Sélectionnez Créer.

  5. Sous Démarrer, saisissez un nom pour votre compartiment Cloud Storage.

  6. Facultatif : configurez les paramètres de votre compartiment de stockage.

  7. Sélectionnez Créer.

  8. Sur la page Détails du compartiment, sélectionnez CREATE FOLDER.

  9. Saisissez un nom de dossier dans lequel vous souhaitez stocker les tables Apache Iceberg™, puis sélectionnez Créer.

  10. Sur la page Détails du compartiment, à côté du nom du dossier que vous avez créé, sélectionnez Copier et enregistrez le chemin pour une utilisation ultérieure.

    Capture d'écran illustrant l'icône Copier dans Google Cloud Console.

    Remarque

    Lors de la création d’un catalogue dans Open Catalog, vous saisissez le chemin d’accès au dossier que vous avez créé dans le champ Emplacement de base par défaut.

Création d’un conteneur Microsoft Azure

Pour créer un conteneur Microsoft Azure pour vos tables Apache Iceberg, utilisez l’un des services de stockage Cloud Azure suivants :

  • Stockage d’objets blob

  • Data Lake Storage Gen2

  • Usage général v1

  • Usage général v2

Ces services sont les services de stockage Cloud Azure qu’Open Catalog prend en charge pour les intégrations de stockage. Une intégration de stockage est un objet Open Catalog qui stocke une entité générée pour la gestion des identités et des accès (IAM) pour votre stockage Cloud externe et est créée lorsque vous créez un catalogue.

Étape 1 : créer un compte de stockage

  1. Connectez-vous à Azure.

  2. Dans le tableau de bord d’accueil, recherchez et sélectionnez Compte de stockage.

  3. Sélectionnez + Créer.

  4. Pour Groupe de ressources, sélectionnez un groupe de ressources pour votre compte de stockage ou sélectionnez Créer pour créer un nouveau groupe de ressources.

  5. Pour Nom du compte de stockage, saisissez un nom pour votre compte de stockage.

  6. Facultatif : activez l’espace de noms hiérarchique pour utiliser le compte de stockage pour les charges de travail Azure Data Lake Storage Gen2. Pour plus d’informations, voir Créer un compte de stockage.

  7. Facultatif : configurez les paramètres de votre compte de stockage.

  8. Sélectionnez Examiner + créer.

  9. Sélectionnez Créer.

Étape 2 : créer un conteneur dans votre compte de stockage

  1. Dans Azure, accédez au compte de stockage que vous avez créé.

  2. Dans le menu de gauche, sélectionnez Stockage de données.

  3. Sous Stockage de données, sélectionnez Conteneurs.

  4. Sélectionnez + Conteneur.

  5. Saisissez un nom pour votre conteneur, puis sélectionnez Créer.

  6. Copiez et enregistrez le nom de votre conteneur. Vous devez spécifier ce nom lorsque vous créez un catalogue dans Open Catalog.

  7. Facultatif : si vous utilisez un espace de noms hiérarchique et que vous devez ajouter un répertoire :

    a. Sélectionnez le conteneur que vous avez créé.

    b. Sélectionnez + Ajouter un répertoire.

    c. Saisissez un nom pour le répertoire, puis sélectionnez Enregistrer.

    d. Copiez et enregistrez le nom de ce répertoire. Vous devez spécifier ce nom lorsque vous créez un catalogue dans Open Catalog.

Étape 3 : copier le chemin d’accès au point de terminaison dans votre conteneur

  1. Dans Azure, accédez au compte de stockage que vous avez créé.

  2. Dans le menu de gauche, sélectionnez Paramètres.

  3. Sous Paramètres, sélectionnez Points de terminaison.

  4. Copiez et stockez le chemin d’accès au point de terminaison principal de votre conteneur :

    • Si vous utilisez le stockage blob, sous Service blob, sélectionnez l’icône Copier dans le presse-papiers pour le champ Point de terminaison principal : service blob.

    • Si vous utilisez Azure Data Lake Storage, sous Data Lake Storage, sélectionnez l’icône Copier dans le presse-papiers pour le champ Point de terminaison principal : Data Lake Storage.

    Remarque

    Lors de la création d’un catalogue dans Open Catalog, vous saisissez le chemin d’accès au point de terminaison principal de votre conteneur dans le champ Emplacement de base par défaut. Les étapes de création d’un catalogue dans Open Catalog incluent des instructions sur la manière de formater ce chemin dans le format requis pour le champ Emplacement de base par défaut.

Langage: Français