Comment configurer le paramètre dataSource pour différentes sources de données avec addCaslib?

Configuration Avancée du paramètre dataSource

Le paramètre dataSource est un paramètre structuré qui permet de spécifier le type de source de données (srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.) et les paramètres spécifiques à ce type. Par exemple, pour une source de type PATHUn PATH (chemin) dans SAS Viya est une caslib pointant vers un répertoire de système de fichiers local ou réseau permettant au serveur CAS d'accéder directement aux fichiers de données. (système de fichiers), vous pourriez spécifier un chemin local. Pour une source ORACLE, vous devrez fournir des détails de connexion tels que le serveur, le port et les informations d'authentification. Chaque srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS. a son propre ensemble de paramètres obligatoires et facultatifs pour établir la connexion et la configuration appropriées avec la source de données.

srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="ADLS": Spécifie les détails d'un compte de stockage Azure Data Lake Storage, y compris le nom du compte et le système de fichiers.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="BIGQUERY": Permet la connexion à Google BigQuery, nécessitant des paramètres tels que l'ID du projet et le schéma.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="CAS": Utilisé pour connecter une caslibEspace de stockage logique dans SAS Viya. Elle définit l’accès aux données (source physique) et leur chargement en mémoire (serveur CAS) pour permettre des analyses distribuées haute performance. à une autre caslibEspace de stockage logique dans SAS Viya. Elle définit l’accès aux données (source physique) et leur chargement en mémoire (serveur CAS) pour permettre des analyses distribuées haute performance. sur un serveur CASMoteur analytique "in-memory" de SAS Viya. Il traite les données en parallèle (MPP) sur plusieurs nœuds pour offrir une puissance de calcul massive et une exécution ultra-rapide des actions. distant, en spécifiant le nom d'hôte et la caslibEspace de stockage logique dans SAS Viya. Elle définit l’accès aux données (source physique) et leur chargement en mémoire (serveur CAS) pour permettre des analyses distribuées haute performance. distante.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="CLOUDDEX": Désigne une connexion via un Data Agent CloudDEX, impliquant un serveur, un port et un type d'authentification.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="DB2": Configure l'accès à une base de données IBM DB2, avec des options pour le chargement en masse et les informations de connexion.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="DEFAULT": Ne nécessite aucun paramètre spécifique et se réfère à la configuration par défaut du système.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="DNFSSystème de fichiers en réseau distribué utilisé par SAS Viya pour stocker des tables CAS de manière permanente. Il permet un accès parallèle et performant depuis tous les nœuds du cluster.": Indique une caslibEspace de stockage logique dans SAS Viya. Elle définit l’accès aux données (source physique) et leur chargement en mémoire (serveur CAS) pour permettre des analyses distribuées haute performance. basée sur un système de fichiers distribué, avec des options de cryptage.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="ESP": Permet la connexion à un serveur SAS Event Stream Processing, nécessitant le nom d'hôte et l'authentification.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="FEDSVR": Désigne une caslibEspace de stockage logique dans SAS Viya. Elle définit l’accès aux données (source physique) et leur chargement en mémoire (serveur CAS) pour permettre des analyses distribuées haute performance. pour un serveur fédéré, avec des paramètres de connexion à la base de données sous-jacente.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="GCS": Permet la connexion à Google Cloud Storage, nécessitant le nom du compartiment (bucket).
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="GREENPLUM": Configure l'accès à une base de données Greenplum, avec des paramètres de connexion habituels.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="HADOOPFramework open-source permettant le stockage distribué (HDFS) et le traitement de données massives sur des clusters de serveurs, souvent utilisé avec SAS Viya pour l'analyse Big Data.": Connecte à un clusterEnsemble de nœuds (machines) interconnectés, gérés par Kubernetes, qui collaborent pour exécuter les microservices et le moteur CAS de SAS Viya, assurant haute disponibilité et passage à l'échelle. HadoopFramework open-source permettant le stockage distribué (HDFS) et le traitement de données massives sur des clusters de serveurs, souvent utilisé avec SAS Viya pour l'analyse Big Data. (Hive), avec des options de configuration spécifiques à HadoopFramework open-source permettant le stockage distribué (HDFS) et le traitement de données massives sur des clusters de serveurs, souvent utilisé avec SAS Viya pour l'analyse Big Data. et Kerberos.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="HANA": Pour les bases de données SAP HANA, spécifiant le serveur, l'instance et les options SSL.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="HDFS": Similaire à DNFSSystème de fichiers en réseau distribué utilisé par SAS Viya pour stocker des tables CAS de manière permanente. Il permet un accès parallèle et performant depuis tous les nœuds du cluster., mais spécifiquement pour HadoopFramework open-source permettant le stockage distribué (HDFS) et le traitement de données massives sur des clusters de serveurs, souvent utilisé avec SAS Viya pour l'analyse Big Data. Distributed File System, avec des options de chemins distants.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="IMPALA": Pour les bases de données Impala, avec des options de connexion et d'authentification Kerberos.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="INFORMIX": Configure l'accès à une base de données Informix, avec des chemins d'accès aux utilitaires et options de chargement.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="JDBC": Un connecteur générique pour toute base de données compatible JDBC, nécessitant la classe du pilote et l'URL.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="LASR": Pour les tables chargées dans un serveur SAS LASR Analytic Server, spécifiant le serveur et le port.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="MONGODB": Permet l'accès à MongoDB, avec des paramètres d'hôte, de port et de base de données, ainsi que des options de schéma.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="MYSQL": Connecte à une base de données MySQL, avec des paramètres de connexion standard et d'options SSL.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="NETEZZA": Pour les bases de données Netezza, avec des détails de connexion au serveur et à la base de données.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="ODBC": Un connecteur générique pour toute source de données compatible ODBC, utilisant un DSN (Data Source Name).
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="ORACLE": Configure l'accès à une base de données Oracle, avec des chemins de pilote et des options de chargement en masse.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="PATHUn PATH (chemin) dans SAS Viya est une caslib pointant vers un répertoire de système de fichiers local ou réseau permettant au serveur CAS d'accéder directement aux fichiers de données.": Indique une caslibEspace de stockage logique dans SAS Viya. Elle définit l’accès aux données (source physique) et leur chargement en mémoire (serveur CAS) pour permettre des analyses distribuées haute performance. basée sur un chemin de système de fichiers local, avec des options de cryptage.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="POSTGRESPostgreSQL (Postgres) est le moteur de base de données relationnelle open source intégré à SAS Viya pour gérer les métadonnées, le stockage de configuration et les services d'infrastructure internes.": Connecte à une base de données PostgreSQL, avec des paramètres de serveur, de port, de base de données et des options SSL.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="REDSHIFT": Pour les bases de données Amazon Redshift, avec des paramètres AWS S3 pour le chargement et le déchargement.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="S3": Permet l'accès à Amazon S3, nécessitant le nom du compartiment (bucket) et les informations d'authentification AWS.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="SAPIQ": Configure l'accès à une base de données SAP IQ, avec des paramètres de connexion et des options de chargement en masse.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="SFORCE": Pour les données Salesforce, avec des informations d'authentification et des options d'API en masse.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="SINGLESTORE": Connecte à une base de données SingleStore, avec l'hôte, la base de données et les options SSL.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="SINGLESTORE_STANDARD": Variante de SingleStore avec des options de connexion standard.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="SNOWFLAKE": Permet l'accès à une base de données Snowflake, avec des paramètres de compte, de base de données, de schéma et des options de stockage cloud.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="SPARKMoteur de calcul distribué open-source conçu pour le traitement rapide de données massives en mémoire, s'intégrant à SAS Viya pour optimiser les performances sur des clusters Hadoop ou Cloud": Connecte à un clusterEnsemble de nœuds (machines) interconnectés, gérés par Kubernetes, qui collaborent pour exécuter les microservices et le moteur CAS de SAS Viya, assurant haute disponibilité et passage à l'échelle. SparkMoteur de calcul distribué open-source conçu pour le traitement rapide de données massives en mémoire, s'intégrant à SAS Viya pour optimiser les performances sur des clusters Hadoop ou Cloud (SparkMoteur de calcul distribué open-source conçu pour le traitement rapide de données massives en mémoire, s'intégrant à SAS Viya pour optimiser les performances sur des clusters Hadoop ou Cloud ThriftServer), avec des paramètres d'hôte, de port et de configuration HadoopFramework open-source permettant le stockage distribué (HDFS) et le traitement de données massives sur des clusters de serveurs, souvent utilisé avec SAS Viya pour l'analyse Big Data..
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="SPDE": Pour les tables SAS Parallel Data Engine, avec des chemins de fichiers et des options de compression/cryptage.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="SQLSERVER": Configure l'accès à une base de données Microsoft SQL Server, avec des paramètres d'hôte, de port et d'authentification.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="TERADATASystème de gestion de base de données relationnelle hautement parallèle, conçu pour le stockage et l'analyse massive de données (Data Warehouse) en parfaite intégration avec SAS Viya.": Connecte à une base de données TeradataSystème de gestion de base de données relationnelle hautement parallèle, conçu pour le stockage et l'analyse massive de données (Data Warehouse) en parfaite intégration avec SAS Viya., avec des paramètres de serveur, de base de données et d'authentification.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="VERTICA": Pour les bases de données Vertica, avec des paramètres de serveur, de base de données et des options ODBC.
srcTypeAttribut identifiant le type de source de données d'un caslib (DNFS, S3, Oracle, etc.). Il détermine les connecteurs et les options disponibles pour charger les données dans le serveur CAS.="YELLOWBRICK": Connecte à une base de données Yellowbrick, avec des paramètres de serveur, de base de données et des options SSL.

Schéma : Comment configurer le paramètre dataSource pour différentes sources de données avec addCaslib?

Exemple de Code Additionnel

1	<pre>/* Exemple 1 : Configuration d'une source de type PATH (Fichiers plats) */
2	PROC CAS;
3	TABLE.addCaslib /
4	name="MaCaslibFichier"
5	description="Caslib pointant vers le système de fichiers partagé"
6	path="/chemin/vers/donnees_locales"
7	dataSource={srcType="path"}
8	subDirectories=TRUE;
9	RUN;
10	/* Exemple 2 : Configuration d'une source ORACLE (Base de données) avec sécurité optimale */
11	TABLE.addCaslib /
12	name="MaCaslibOracle"
13	description="Caslib connectée à Oracle utilisant un domaine d'authentification"
14	dataSource={
15	srcType="oracle",
16	path="MYSID",
17	schema="SCHEMA_PROD",
18	authenticationDomain="Oracle_Auth_Domain",
19	dataTransferMode="auto"
20	};
21	RUN;
22	QUIT;</pre>

Exemples pour l'action addCaslib

Ajouter une Caslib basée sur un chemin de fichiers système (PATH)

Cet exemple ajoute une caslib basique pointant vers un dossier local du serveur. Un grand classique indémodable !

Ajouter une Caslib vers une base de données Oracle

Cet exemple illustre l'ajout d'une caslib connectée à Oracle. Notez l'utilisation du bloc %%dataSource%% pour spécifier les informations de connexion, afin de lire directement depuis le SGBD.

Vous pourriez aussi aimer...

Conseil de l'Expert

Il est crucial de comprendre que la puissance de SAS Viya 4 réside dans sa capacité à fédérer des sources de données disparates via les CASLibs. La flexibilité du paramètre dataSource est ce qui permet au moteur CAS (Cloud Analytic Services) de déléguer intelligemment le traitement à la source (Data Pushdown).

Ne placez jamais vos mots de passe dans la définition de votre dataSource. Utilisez toujours un domaine d'authentification (authenticationDomain) configuré au préalable par votre administrateur dans SAS Environment Manager. Cela garantit la sécurité de vos flux, facilite la rotation des mots de passe sans retoucher au code, et assure une traçabilité parfaite. De plus, pensez toujours à vérifier les options d'optimisation spécifiques à votre srcType (comme dataTransferMode="auto" pour les bases relationnelles) afin de maximiser les performances de transfert vers la mémoire CAS.

Architecture Technique des Paramètres de Source

Discrimination du srcType : Ce paramètre est le pivot ; il détermine quel connecteur de données (Data Connector) CAS doit instancier (ex: postgres, s3, adls, path).
Encapsulation des Options de Transfert : Pour les sources SQL, l'utilisation de readBuff et maxSessRead dans dataSource est vitale pour optimiser les performances de chargement parallèle.
Contextualisation Cloud Native : Pour S3 ou Azure Data Lake (ADLS), le paramètre dataSource inclut des options spécifiques comme region, accountName ou filesystem qui n'existent pas pour les sources traditionnelles.
Gestion des Schémas et Catalogues : Contrairement au moteur de bibliothèque SAS 9, CAS permet de définir précisément le schema au niveau de la CASLib pour isoler les accès à la base de données.
Persistance de la Définition : Utilisez l'option saveDf pour que la définition de la source de données soit persistée dans le catalogue des services de données, rendant la CASLib disponible après un redémarrage du serveur.