2 février 2024

Les journaux d'application sont désormais disponibles dans accueil de l'instance

Les journaux d'application sont maintenant transférés à Analytics Engine répertoire principal de l'instance par défaut. Vous pouvez accéder aux informations du journal à partir du IBM Cloud Object Storage (COS) bucket. Vous pouvez télécharger le fichier journal de n'importe quelle application spécifique à partir du chemin <instance_id>/logs/<app_id> à des fins d'enregistrement, de partage et de débogage. Pour plus d'informations, voir Transfert des journaux vers le répertoire principal de l'instance.

Nouvel emplacement pour la journalisation des événements d'application Spark

A partir du 7 février 2024, les événements de l'application Spark sont consignés sur un nouveau chemin (/<instance_id>/spark-events) disponible dans le compartiment instance-home. Pour afficher les anciennes applications dans l'interface d'historique Spark, copiez les événements de l'application Spark dans un nouvel emplacement. Pour plus d'informations sur la copie des événements, voir Spark history server

1er décembre 2023

Chiffrement des données réseau internes pour la charge de travail Spark

Vous pouvez désormais activer le chiffrement de données pour les données réseau internes en transit (communication interne entre les composants de l'application Spark) en configurant les propriétés IBM Analytics Engine au niveau de l'instance ou du travail. Pour plus d'informations sur le chiffrement des données réseau internes pour la charge de travail Spark, voir Chiffrement des données réseau internes pour la charge de travail Spark.

22 novembre 2023

Configuration des informations de niveau de journalisation Spark

Le niveau de journalisation par défaut dans l'application IBM Analytics Engine Serverless Spark doit être remplacé par'ERROR'au plus tard le 3 janvier 2023. Vous pouvez modifier la configuration de journalisation existante au niveau'INFO'pour afficher des messages pertinents et concis. Pour plus d'informations sur la modification du niveau de journalisation, voir Configuration des informations de niveau de journalisation Spark.

19 octobre 2023

Suppression des packages de développement (*-devel)

Pour des raisons de sécurité, les packages *-devel (packages de développement du système d'exploitation) ne sont pas préinstallés sur l'environnement d'exécution Spark à partir de maintenant. Si vous utilisez déjà les packages de développement, les programmes qui les utilisent ne peuvent pas être compilés. Pour toute requête, contactez le support IBM.

09 octobre 2023

Retrait de la prise en charge de Spark 3.1

IBM Analytics Engine ne prend plus en charge Spark 3.1. Mettez à niveau vos instances IBM Analytics Engine existantes vers Spark 3.3 pour obtenir les dernières fonctions et améliorations. Pour plus d'informations sur la mise à niveau, voir Remplacement de l'environnement d'exécution par défaut de l'instance.

A partir de l'édition actuelle, Spark 3.3 est la version d'exécution par défaut pour les instances IBM Analytics Engine.

29 septembre 2023

Intégration à watsonx.data

IBM Analytics Engine s'intègre désormais à IBM® watsonx.data pour optimiser les capacités fonctionnelles de watsonx.data. Pour plus d'informations sur l'intégration et l'utilisation de watsonx.data, voir Utilisation de watsonx.data.

6 septembre 2023

Prise en charge de Spark 3.4

Vous pouvez désormais mettre à disposition des instances de plan IBM Analytics Engine sans gravité avec l'environnement d'exécution Spark par défaut défini sur Spark 3.4, ce qui vous permet d'exécuter des applications Spark sur Spark 3.4.

23 août 2023

Dépréciation de la prise en charge de R v3.6 à partir des environnements d'exécution Spark 3.1 et Spark 3.3

Le IBM Analytics Engine supprime la prise en charge de R v3.6 à partir des runtimes Spark 3.1 et Spark 3.3 d'ici le 6 septembre 2023. Le support de R v4.2 est déjà déployé pour Spark 3.1 et Spark 3.3 runtime. Veillez à tester votre application Spark avec la nouvelle version de R v4.2 pour toute défaillance avant le 06 septembre 2023. Contact IBM Support for any issues. Pour tester l'application Spark, voir API REST de l'application Spark.

09 août 2023

Dépréciation de la prise en charge de Spark 3.1

La prise en charge de la version 3.1 de Spark sur IBM Analytics Engine est obsolète et sera bientôt supprimée (pour le 09 octobre 2023). Pour garantir une expérience transparente et tirer parti des dernières fonctions et améliorations, mettez à niveau vos instances IBM Analytics Engine existantes vers Spark 3.3. Pour mettre à niveau votre instance vers Spark 3.3, voir Remplacement de l'environnement d'exécution par défaut de l'instance. A partir de cette édition, Spark 3.3 sera la version d'exécution par défaut pour toutes les nouvelles instances IBM Analytics Engine créées. Cette modification vous permet de bénéficier des fonctionnalités améliorées et des optimisations disponibles dans la version la plus récente.

7 juillet 2023

Mise à jour de la version de l'édition de maintenance Spark pour 3.3

Les applications Spark dont l'environnement d'exécution est défini sur Spark 3.3 s'exécuteront en interne à l'aide de Spark 3.3.2 à partir de maintenant. La version de correctif est désormais mise à niveau de 3.3.0 vers 3.3.2.

29 mai 2023

Retrait de la prise en charge de Python v3.9 des environnements d'exécution Spark 3.1 et Spark 3.3

L'application IBM Analytics Engine- Serverless Spark prévoit d'interrompre Python v3.9 de Spark 3.1 et Spark 3.3 d'ici au June15 2023. La prise en charge de Python v3.10 est déjà déployée pour les runtimes Spark 3.1 et Spark 3.3. En fonction de la charge de travail, veillez à tester votre application spark avec la nouvelle version de Python, v 3.10 pour toute défaillance avant le 15 juin 2023. Contact IBM Support for any issues. Voir la procédure de test de l'application Spark Exécution d'une application Spark avec une version de langue autre que la version par défaut.

25 mai 2023

Pagination de la liste d'applications dans l'API REST et l'interface de ligne de commande

Vous pouvez désormais limiter le nombre d'applications renvoyées par le noeud final d'API REST sans serveur Analytics Engine, la méthode SDK et la commande CLI pour répertorier les applications. Utilisez la limite des paramètres de requête pour spécifier le nombre d'applications à renvoyer et spécifiez la valeur de next.start ou previous.start dans la réponse de l'API comme valeur du paramètre de requête de début pour extraire la page suivante ou précédente des résultats. Les applications sont répertoriées par ordre décroissant en fonction de l'heure de soumission, la dernière application étant la première.

La pagination est une fonction facultative dans cette édition. A partir de la prochaine édition du service, les résultats seront paginés par défaut.

21 septembre 2022

Prise en charge de Spark 3.3

Vous pouvez désormais mettre à disposition des instances de plan IBM® Analytics Engine sans gravité avec l'environnement d'exécution Spark par défaut défini sur Spark 3.3, qui vous permet d'exécuter des applications Spark sur Spark 3.3.

09 septembre 2022

Vous pouvez désormais utiliser le métamagasin Hive pour gérer les métadonnées liées aux tables, colonnes et informations de partition de vos applications lors de l'utilisation de Spark SQL.

Vous pouvez choisir d'externaliser cette base de données de métamagasin dans un magasin de données externe, comme dans une instance IBM Cloud Data Engine (précédemment SQL Query) ou IBM Cloud Databases for PostgreSQL. Pour plus de détails, voir Utilisation de Spark SQL et d'un métamagasin externe.

12 juillet 2022

Vous pouvez désormais mettre à disposition des instances sans serveur IBM® Analytics Engine dans une nouvelle région.

Outre la région IBM Cloud® us-south (Dallas), vous pouvez également mettre à disposition des instances sans serveur dans la région eu-de (Frankurt).

08 juillet 2022

Nouvelle API pour la journalisation de plateforme

Commencez à utiliser l'API log_forwarding_config pour transférer les journaux de plateforme d'une instance IBM Analytics Engine vers IBM Log Analysis. Bien que vous puissiez toujours utiliser l'API logging, elle est obsolète et sera supprimée dans un avenir proche. Pour plus de détails sur l'utilisation de l'API log_forwarding_config, voir Configuration et affichage des journaux.