Ces propriétés sont utilisées pour configurer le tCassandraOutputBulkExec s'exécutant dans le framework de Jobs Standard.
Le composant tCassandraOutputBulkExec Standard appartient aux familles Big Data et Databases.
Le composant de ce framework est disponible dans tous les produits Big Data de Talend.
Basic settings
Schema et Edit Schema |
Un schéma est une description de lignes. Il définit le nombre de champs (colonnes) dans le Repository. Lorsque vous créez un Job Spark, évitez le mot réservé line lors du nommage des champs. Modifiez le schéma en cliquant sur Edit Schema. Si le schéma est en mode Repository, trois options sont disponibles :
|
|
Built-in : le schéma est créé et conservé localement pour ce composant seulement. |
|
Repository : le schéma existe déjà et est stocké dans le Repository. Ainsi, il peut être réutilisé dans des Jobs et projets. Lorsque le schéma à réutiliser contient des valeurs par défaut de type Integer ou Function, assurez-vous que ces valeurs par défaut ne sont pas entourées de guillemets. Si elles le sont, supprimez manuellement les guillemets. Pour plus d'informations, consultez Vérification des valeurs par défaut dans un schéma récupéré. |
Table type |
Sélectionnez le type du modèle de données à utiliser pour la table à créer. Le type peut être CQL (plus précisément CQL3) ou non-CQL (L'API basée Thrift héritée de Cassandra avant CQL3). Cette liste déroulante est disponible uniquement lorsque la version sélectionnée dans la liste DB version est Cassandra 2.0.0. Pour les versions de Cassandra supérieures à 2.0.0, CQL devient le seul modèle utilisé par ce composant et la liste n'est plus disponible. |
DB Version |
Sélectionnez la version de Cassandra que vous utilisez. Avertissement :
|
Host |
Saisissez le nom de l'hôte ou l'adresse IP du serveur Cassandra. |
Port |
Saisissez le numéro du port d'écoute du serveur Cassandra. |
Required authentication |
Cochez cette case afin de fournir les informations d'authentification pour Cassandra. Avertissement :
Cette case n'apparaît pas si vous sélectionnez Cassandra 1.1.2 dans la liste DB Version. |
Username |
Saisissez dans ce champ le nom d'utilisateur pour l'authentification à Cassandra. |
Password |
Saisissez dans ce champ le mot de passe pour l'authentification à Cassandra. Pour saisir le mot de passe, cliquez sur le bouton [...] à côté du champ Password, puis, dans la boîte de dialogue qui s'ouvre, saisissez le mot de passe entre guillemets doubles et cliquez sur OK afin de sauvegarder les paramètres. |
Keyspace |
Saisissez le nom du Keyspace dans lequel écrire la table SSTable. |
Column family |
Saisissez le nom de la famille de colonnes dans laquelle écrire la table SSTable. |
Partitioner |
Sélectionnez le partitionneur déterminant comment les données sont partitionnées à travers le cluster Cassandra.
Pour plus d'informations concernant le partitionneur, consultez http://wiki.apache.org/cassandra/Partitioners (en anglais). |
Schema statement |
Saisissez l'instruction pour définir le schéma de la famille de colonnes à utiliser ou à créer à la volée.
Un exemple d'instruction pour ce schéma est fourni dans le champ Schema statement :
create table ks.tb (id int, name text, birthday timestamp, primary key(id, birthday)) with clustering order by (birthday desc)Cette instruction va appeler une famille de colonnes nommée tb et contenant les colonnes id, name et birthday sous le Keyspace ks. Pour plus d'informations concernant une famille de colonnes, consultez Standard column family (en anglais). Ce champ est disponible uniquement lorsque la version sélectionnée de votre base de données Cassandra est supérieure à 2.0.0. Lorsque votre version est 2.0.0, ce champ est disponible lorsque vous avez sélectionné CQL dans la liste Table type. |
Insert statement |
Saisissez l'instruction pour écrire les données du flux d'entrée dans les colonnes de la famille à utiliser. Cette instruction est une instruction préparée Cassandra, stockant localement les résultats de requête dans le répertoire SSTable directory défini via ce composant, avant de les envoyer au serveur. Pour plus d'informations concernant les instructions préparées, consultez Prepared statements (en anglais). Un exemple de cette instruction d'insertion est fourni dans le champ Insert statement :
insert into ks.tb (id, name, birthday) values (?, ?, ?)Cette instruction va écrire des données dans les colonnes id, name et birthday, respectivement d'une famille de colonnes nommée tb dans le Keyspace ks. Les points d'interrogation dans l'instruction sont les marqueurs des variables liées pour les trois colonnes. Pour plus d'informations concernant les variables liées et leur utilisation, consultez Bound parameters (en anglais). Ce champ est disponible uniquement lorsque la version sélectionnée de votre base de données Cassandra est supérieure à 2.0.0. Lorsque votre version est 2.0.0, ce champ est disponible lorsque vous avez sélectionné CQL dans la liste Table type. |
Column name comparator |
Sélectionnez le type de données pour le nom des colonnes, utilisé pour trier les colonnes. Pour plus d'informations concernant les comparateurs, consultez http://www.datastax.com/docs/1.1/ddl/column_family#about-data-types-comparators-and-validators (en anglais). |
SSTable directory |
Spécifiez le répertoire local de la table SSTable à charger dans Cassandra. Notez que le chemin d'accès complet à la table SSTable comprend le répertoire local à la suite du Keyspace spécifié et du nom de la famille de colonnes. Par exemple, si vous configurez le répertoire local à /home/talend/sstable et que vous spécifiez testk comme nom du Keyspace et testc comme nom de la famille de colonnes, le chemin d'accès complet à la table SSTable est /home/talend/sstable/testk/testc/. |
Buffer size |
Spécifiez la taille à partir de laquelle écrire la table SSTable dans Cassandra. |
Advanced settings
tStatCatcher Statistics |
Cochez cette case pour collecter les données de log au niveau Job ainsi qu'au niveau des composants. |
Global Variables
Global Variables |
ERROR_MESSAGE : message d'erreur généré par le composant lorsqu'une erreur survient. Cette variable est une variable After et retourne une chaîne de caractères. Cette variable fonctionne uniquement si la case Die on error est décochée, lorsque le composant contient cette case. Une variable Flow fonctionne durant l'exécution d'un composant. Une variable After fonctionne après l'exécution d'un composant. Pour renseigner un champ ou une expression à l'aide d'une variable, appuyez sur les touches Ctrl+Espace pour accéder à la liste des variables. À partir de cette liste, vous pouvez choisir la variable que vous souhaitez utiliser. Pour plus d'informations concernant les variables, consultez le Guide utilisateur du Studio Talend . |
Utilisation
Règle d'utilisation |
Ce composant est généralement utilisé lorsqu'aucune transformation n'est requise sur les données à charger dans la base de données. |
Limitation |
L'exécution de ce composant provoque la fin du Job. |