Darya Data LakeDonnéesZS019000

Plateforme de data lake

Darya est la plateforme de data lake de Niadad qui ingère, stocke, catalogue et gouverne les données de l'entreprise pour l'analytique et l'IA.

Famille
Données
Propriétaire
Niadad
Statut
En développement

Problématique

Les données de l'entreprise sont dispersées dans des dizaines de systèmes, de fichiers et de capteurs, et chaque analyse commence par une nouvelle extraction manuelle. Sans un lieu unique et gouverné, doté d'un catalogue, de règles de qualité et d'un contrôle d'accès, les rapports se contredisent et les modèles d'IA ne disposent d'aucune donnée fiable pour apprendre.

Vue d'ensemble de la plateforme

Darya est le data lake de Niadad : il collecte les données des systèmes transactionnels, des fichiers, des API et des flux d'événements, les conserve dans des couches brute, affinée et organisée, et les expose aux analystes et aux modèles avec un catalogue, des politiques d'accès et le lignage. Binesh et Rayon fonctionnent directement au-dessus.

Capacités clés

Ingestion par lots et en flux

Charge les données depuis les bases de données, les fichiers, les API et les flux (via Jarian) grâce à des connecteurs prêts à l'emploi.

Stockage en couches

Conserve les données brutes, affinées et organisées dans des formats ouverts et en colonnes, avec versionnage.

Catalogue et lignage

Chaque jeu de données est consultable avec sa description, son propriétaire, sa classification et son lignage.

Qualité des données

Exécute des contrôles de validation et de qualité sur les pipelines et signale les écarts.

Contrôle d'accès et masquage

Applique l'accès au niveau des tables, des colonnes et des lignes au moyen de politiques et du masquage des données sensibles.

Accès analytique

Accessible à Binesh, à Rayon et aux outils analytiques via SQL, notebooks et API.

Architecture

01

Couche d'ingestion avec connecteurs et CDC

02

Stockage objet avec formats de tables ouverts

03

Moteur de traitement et pipelines de transformation

04

Catalogue, métadonnées et lignage

05

Couche de politiques d'accès et de masquage

06

Moteur de requêtes et API d'accès

Intégrations

Jarian (ingestion en flux)
Binesh (modèle sémantique et tableaux de bord)
Rayon (recherche et entraînement)
Shanasa (authentification et rôles)
Bases de données relationnelles et core banking
Stockage objet compatible S3

Cas d'usage

Référentiel de données de l'entreprise
Données de capteurs en agriculture intelligente
Données d'entraînement des modèles d'IA
Archivage des événements et des journaux
Base du reporting réglementaire

Construisons ensemble.

Si votre organisation, votre banque ou votre secteur est prêt à transformer les données en décisions, engagez la conversation ici.