Contrôle d’accès aux données

Agent Observability vous permet de restreindre l’accès aux données potentiellement sensibles associées à vos applications d’IA à certaines équipes et certains rôles uniquement au sein de votre organisation. Ceci est particulièrement important lorsque vos applications d’IA traitent des informations sensibles telles que des données personnelles, des informations commerciales propriétaires ou des interactions utilisateur confidentielles.

Les contrôles d’accès dans Agent Observability reposent sur la fonctionnalité Data Access Control de Datadog, qui vous permet de réguler l’accès aux données jugées sensibles. Vous pouvez utiliser la balise ml_app pour identifier et restreindre l’accès à des applications d’IA spécifiques au sein de votre organisation.

Vous pouvez également restreindre des projets Agent Observability individuels, y compris leurs expériences, jeux de données, enregistrements de jeux de données et files d’attente d’annotation. Consultez Data Access Control in Agent Observability.

Masquage de données avec des processeurs de spans

Vous pouvez masquer ou modifier des données sensibles au niveau de l’application avant qu’elles ne soient envoyées à Datadog. Utilisez les processeurs de spans dans le SDK Agent Observability pour modifier conditionnellement les données d’entrée et de sortie sur les spans, ou empêcher totalement l’émission de spans.

Ceci est utile pour :

• Supprimer des informations sensibles des prompts ou des réponses
• Filtrer les workflows internes ou les données de test
• Masquer conditionnellement des données en fonction de balises ou d’autres critères

Pour des exemples d’implémentation détaillés et des modèles d’utilisation, consultez la section Span Processing dans la référence du SDK.

Intégration de Sensitive Data Scanner

Agent Observability s’intègre à Sensitive Data Scanner, ce qui aide à prévenir les fuites de données en identifiant et en masquant toute information sensible (telle que des données personnelles, des détails financiers ou des informations propriétaires) pouvant être présente à n’importe quelle étape de votre application d’IA.

En recherchant de manière proactive les données sensibles, Agent Observability aide à garantir que les conversations restent sécurisées et conformes aux réglementations sur la protection des données. Cette couche de sécurité supplémentaire renforce l’engagement de Datadog à maintenir la confidentialité et l’intégrité des interactions des utilisateurs avec vos applications d’IA.

Rétention des données

Les périodes de rétention dans Agent Observability dépendent du type de données et de votre plan. Les traces de vos applications instrumentées suivent la période de rétention des spans de votre plan, tandis que les expériences, les jeux de données et les prompts ont leurs propres périodes.

Traces et spans

Les traces et spans de vos applications instrumentées sont conservés par défaut pendant 15 jours sur tous les plans. Cela s’applique à tout ce qui est stocké sur le span, y compris les données opérationnelles par span telles que le coût, le nombre de jetons, la latence et les erreurs, ainsi que les scores d’évaluation attachés aux spans.

Un module complémentaire de rétention étend cette durée à 30, 60 ou 90 jours. Les modules complémentaires ne sont pas disponibles avec l’offre gratuite. Voir Modifier votre période de rétention.

La rétention s’applique aux spans bruts que vous interrogez dans l’explorateur de traces (Trace Explorer). Les métriques dérivées de ces spans sont conservées séparément, plus longtemps. Voir Métriques.

Experiments

Sur les plans avec engagement, les expériences sont conservées plus longtemps que les traces de production.

Si votre organisation dispose d’un contrat personnalisé, vos périodes de rétention peuvent ne pas correspondre à ce tableau. Contactez votre représentant de compte Datadog pour confirmer vos périodes.

Modifier votre période de rétention

La durée de rétention affecte votre facturation, car une période plus longue signifie que Datadog stocke davantage de vos données. Pour connaître les tarifs, consultez la page de tarification d’Agent Observability.

Les modules complémentaires de rétention sont mis en place par votre équipe de compte plutôt que d’être activés depuis la Datadog UI. Pour demander une période de rétention plus longue, contactez votre représentant de compte Datadog ou le support Datadog.

Lorsque vous ajoutez ou étendez un module complémentaire de rétention, la période plus longue s’applique rétroactivement à chaque span qui n’a pas encore expiré. Les spans qui ont expiré au cours de votre période précédente ne sont pas récupérables.

Par exemple, si vous utilisez la rétention par défaut de 15 jours et que vous ajoutez un module complémentaire de 60 jours aujourd’hui, les spans des 15 derniers jours bénéficient de la période de 60 jours, mais tout ce qui est plus ancien a déjà disparu.

Lorsque vous passez à une période de rétention plus courte, les spans antérieurs à la nouvelle période ne sont plus disponibles.

Interactions annotées

L’annotation d’une interaction étend sa rétention. Lorsque vous appliquez une étiquette d’annotation ou une note à une trace, un span ou une session — que ce soit directement ou via une file d’attente d’annotation — Datadog conserve l’interaction annotée pendant 90 jours à compter du moment de l’annotation, même si votre période de rétention des spans est plus courte. L’annotation d’un span conserve l’intégralité de sa trace parente, et l’annotation d’une trace appartenant à une session conserve l’intégralité de la session.

Les étiquettes d’annotation sont conservées pendant la même période que les interactions qu’elles annotent.

L’extension de la rétention par l’annotation d’une interaction n’entraîne pas de frais supplémentaires.

Enregistrements de jeux de données

Les enregistrements de la version actuelle d’un dataset sont conservés pendant 3 ans, indépendamment de votre période de rétention des spans.

Les enregistrements des versions précédentes d’un jeu de données sont conservés pendant 90 jours. Cette période est réinitialisée à chaque utilisation d’une version précédente, par exemple lorsqu’une expérience lit cette version. Après 90 jours consécutifs sans utilisation, une version précédente devient éligible à une suppression permanente. Pour plus de détails, consultez Dataset versioning.

Prompts

Les prompts du prompt registry sont conservés pendant 3 ans. Cette période est prolongée à chaque fois que le prompt est extrait par votre application, de sorte qu’un prompt en cours d’utilisation reste disponible. Un prompt qui n’est pas extrait pendant 3 ans peut être supprimé définitivement.

Métriques

Les ml_obs.* métriques générées à partir de vos spans sont des métriques Datadog standard et suivent la rétention standard des métriques Datadog : 15 mois avec une granularité complète. Elles sont conservées selon ce planning indépendamment de votre période de rétention des spans. Vous pouvez donc créer des dashboards et des monitors à long terme sur le nombre de spans, l’utilisation des jetons, le coût, la latence et les taux d’erreur, même après l’expiration des spans sous-jacents.

Pour obtenir la liste complète des métriques disponibles, consultez les métriques d’Agent Observability.

Pour aller plus loin

Documentation, liens et articles supplémentaires utiles:

En savoir plus sur les contrôles d'accès aux donnéesDOCUMENTATION Travailler avec des jeux de données et des versions de jeux de donnéesDOCUMENTATION Voir les périodes de rétention de données par défaut pour les produits DatadogDOCUMENTATION Tarification d'Agent ObservabilityTARIFICATION