Victa Data Collector (VDC) is een data pipeline managementoplossing die je volledig ontzorgt en lastige API-coderingen overbodig maakt. VDC haalt data op uit je (SaaS) applicatie en maakt deze toegankelijk voor verdere bewerking en direct beschikbaar in analytics oplossingen als Power BI en Qlik Sense.
Alle data die de VDC ophaalt wordt eerst centraal opgeslagen in bijvoorbeeld SQL, noSQL, Snowflake of als platte tekst. Daarna stuurt VDC de data naar een analytics omgeving of ander BI oplossingen, zoals een data management of data science omgeving. Door met een staging-laag te werken voorkomt VDC dat je onnodig vaak API’s aanroept van diverse SaaS-oplossingen en bespaar je extra kosten. Door data eerst centraal op te slaan en te valideren zorg je dat iedereen met dezelfde data werkt. Een ander groot voordeel van deze centrale tussenopslag is dat je de mogelijkheid hebt om incrementeel date te laden. Hierdoor haal je alleen nieuwe records op in plaats van steeds alle data te verversen.
Doordat VDC je data centraal opslaat heb je ook een back-up van al je SaaS data. Iets wat uniek is aangezien SaaS omgevingen zich typeren door het feit dat de data weliswaar van jou is maar alleen gedurende je abonnement. Met een extra back-up in VDC houd je beschikking over je data. Ook als je geen toegang meer hebt tot je SaaS applicatie.
Destination Plugins (Store)
We kunnen op eenvoudige wijze voor veel applicaties een plugin maken:
• Azure Blob
• File
• LiteDB (weer te ontsluiten met simpele API)• Snowflake (via Azure Blob)• Azure SQL