Amazon S3 Champs de configuration de l’entrée de données
Description des champs sur le Amazon S3 formulaire de configuration des entrées de données.
Configuration de base
| Champ | Description |
|---|---|
| Nom | Nom de la nouvelle entrée de données. Ce champ est obligatoire. |
| Description | Description de l’entrée de données. |
| Exécuter sur | Option permettant de choisir d’utiliser une grappe spécifique Serveur MID ou une Serveur MID grappe. Ce champ est obligatoire. |
| MID |
(Uniquement lorsque le champ Exécuter sur est défini sur Serveur MID spécifique) Serveur MID vers lequel les données de Amazon S3 journal sont extraites.Remarque : Ce champ est obligatoire.
|
| Grappe de serveurs MID | (Uniquement lorsque Exécuter sur est défini sur Grappe spécifique Serveur MID .) Grappe Serveur MID vers laquelle les données de journal sont extraites. Ce champ est obligatoire.L’entrée de données s’exécute sur une seule Serveur MID entrée dans le cluster jusqu’à ce que cela Serveur MID échoue. Le système déplace ensuite toutes les tâches d’entrée de données vers la prochaine tâche disponible Serveur MID dans le cluster en fonction de l’ordre configuré. Remarque : Pour plus d’informations sur Serveur MID les grappes, consultez Configurer une grappe de serveur MID.
|
| Instance de service | Instance de service à laquelle lier les données de journal. Remarque : Ce champ est obligatoire.S’il n’existe aucune instance de service pertinente, Créer un instance de service et y ajouter des CI. Définissez l’état de la nouvelle instance de service sur Opérationnel. |
Les champs suivants affichent des informations en lecture seule :
| Champ | Description |
|---|---|
| Statut | État de l’entrée de données. |
| Transport | Protocole utilisé pour diffuser les données de journal. Cette entrée de données est utilisée Amazon S3 pour diffuser les données du journal vers votre instance. |
| Nombre de sources | nombre de sources de journal créées par cette entrée de données. |
| Désactivé depuis | Heure à laquelle l’entrée de données s’est arrêtée ou a échoué. |
| Heure du dernier journal | Heure à laquelle le dernier journal a été diffusé dans l’entrée de données. |
| Message d'erreur | L’erreur de diffusion. Ce champ est renseigné automatiquement. Il s’affiche uniquement lorsqu’une erreur de diffusion s’est produite. |
| Champ | Description | Exemple |
|---|---|---|
| De/À | Dates de début et de fin et heure de lecture des données.
|
De : Maintenant -1 semaine À : 2300-01-01 15:59:59 |
| Nom de la catégorie | Catégorie Amazon S3 à diffuser. Ce champ est obligatoire. |
mon-s3-compartiment |
| Préfixe | Préfixe des objets à rechercher. L’entrée de données extrait uniquement les objets qui commencent par ce préfixe. Ce champ est généralement utilisé pour extraire uniquement des dossiers spécifiques dans une catégorie. | /uniquement/ce/dossier/ |
| Inclure | Fichier ou objet à inclure lorsque le système effectue une correspondance de schémas. | .*incluez-moi.* |
| Exclure | Fichier ou objet à exclure lorsque le système effectue une correspondance de modèle. | .*Sautez-moi.* |
| Champ | Description |
|---|---|
| Informations d'identification AWS | Champ faisant référence à la liste d’informations d’identification AWS (aws_credentials.list). La liste contient les clés d’accès AWS et d’accès secrètes. |
| Région AWS | Région AWS où se trouve la Amazon S3 catégorie, par exemple, us-west-1. Pour obtenir la liste des régions AWS, consultez https://docs.aws.amazon.com/AWSEC2/latest/UserGuide/using-regions-availability-zones.html#concepts-regions Ce champ est obligatoire. |
Configuration avancée
| Champ | Description | Valeur par défaut |
|---|---|---|
| Anonyme | Option permettant de forcer l’accès à la catégorie sans informations d’identification, tout en ignorant les Amazon S3 informations d’identification par défaut, le cas échéant. | Faux |
| Traversée | Option permettant d’accéder à chaque répertoire de la catégorie. | Faux |
| Objet trié par Heure de la dernière modification | Option permettant d’extraire des objets si les objets de la catégorie sont triés par heure. | Faux |
| Délai de connexion | Nombre de millisecondes à attendre avant d'interrompre la tentative d'établissement d'une connexion à AWS. | 100 |
| Taille du pool de threads | Nombre de threads simultanés téléchargeant des fichiers à partir de la catégorie. | 1 |
| Taille de la mémoire tampon | Taille en octets de la mémoire tampon de téléchargement | 100MB |
| Délai d'expiration du socket | Nombre de millisecondes à attendre avant l'expiration du transfert de données sur une connexion établie. | 10 000 |
| Nombre maximal de tentatives pour le fichier | Nombre maximal de tentatives de traitement des fichiers en cas d'échec. | 10 |
| Fuseau horaire par défaut | Le fuseau horaire par défaut si le journal n'inclue pas d'informations de fuseau horaire. | UTC |
| Taux d'abandon du sous-échantillon | Nombre d'événements à regrouper par lot, dont un sera ignoré. Ce paramètre permet de réduire le nombre d’événements extraits. | -1 |
| Taux de réception de sous-échantillon | Nombre d'événements à regrouper par lot, dont un sera ignoré. Ce paramètre permet de réduire le nombre d’événements reçus. | -1 |
| Limite du taux | Nombre maximum d'événements par seconde que cette entrée de données traite. | -1 |
| Longueur maximale en octets | La longueur maximale, en octets, des événements. | 32766 |
| Codage des caractères | Le codage des caractères pour cette entrée de données. | UTF-8 |
| Intervalle de sommeil | L'intervalle, en secondes, à attendre avant d'effectuer une nouvelle requête lorsqu'une requête n'a renvoyé aucun événement. | 60 |
| Intervalle d'interrogation | Intervalle, en secondes, à attendre avant d'interroger de nouveaux événements. | 0 |
| Abandonner si la file d'attente est saturée | Option permettant d’ignorer les journaux en cas de chargement sur le Serveur MID. | Faux |