De Linux Foundation kondigt samen met Databricks OpenSharing aan. Dat is een open protocol voor het veilig uitwisselen van AI-modellen, agent-skills en data tussen organisaties en platformen, in de cloud en on-premises.
Databricks en de Linux Foundation introduceren OpenSharing. Dat neutrale protocol moet het mogelijk maken om data en AI-assets te delen en aan elkaar te koppelen, zonder af te stappen van zero copy-principes. Het project wordt beheerd door de Linux Foundation en bouwt voort op Delta Sharing.
OpenSharing kan je zien als de volgende stap na Delta Sharing, dat Databricks in 2021 lanceerde als onderdeel van het open Delta Lake-project. Waar Delta Sharing zich richtte op het veilig delen van gestructureerde data, breidt OpenSharing dat uit naar de volledige AI-stack.
Delen zonder te kopiëren
Het kernprobleem dat OpenSharing wil oplossen, is het ontbreken van een open standaard voor het uitwisselen van AI-componenten. Zonder zo’n standaard zoeken organisaties hun toevlucht tot maatwerkkoppelingen of gesloten marktplaatsen van één leverancier. OpenSharing biedt standaard API’s voor het ontdekken, autoriseren en openen van agent-skills en AI-modellen, ongeacht het platform.
Het protocol breidt ook het bestaande Delta Sharing-ecosysteem uit met ondersteuning voor Apache Iceberg-clients. Dataproviders kunnen zo via één enkel protocol een groter aantal ontvangers bereiken, ook zij die werken met Iceberg-native tools.
Minstens even belangrijk zijn de mogelijkheden die OpenSharing naar hybride omgevingen brengt. Via het protocol kunnen organisaties die data on-premises of in een private cloud bewaren rechtstreeks verbinding maken met cloudplatformen en moderne AI-tools die daar draaien, zonder dat data verplaatst moeten worden.
Everpure, MiniIO en Qumolo ondersteunen OpenSharing al als beheerde dienst. Grote namen waaronder HPE, NetApp, Nutanix, maar ook Rubrik, Commvault en Cohesity zullen volgen.
Bedrijven zouden niet moeten moeten kiezen tussen het op locatie houden van gevoelige data en het gebruik van moderne AI- en analyseplatforms
AB Periasamy, co-CEO MinIO
“Bedrijven zouden niet moeten moeten kiezen tussen het op locatie houden van gevoelige data en het gebruik van moderne AI- en analyseplatforms om waarde uit die data te halen,” reageert AB Periasamy, medeoprichter en co-CEO van MinIO. “OpenSharing opent de toegang tot data die niet verplaatst kunnen worden. Dit legt de basis om de enorme, onbenutte AI-waarde te ontsluiten die verborgen zit in bedrijfsdata-omgevingen.”
Neutrale standaard
Door het project onder te brengen bij de Linux Foundation wil Databricks OpenSharing uitdrukkelijk positioneren als een leveranciersneutrale standaard, vergelijkbaar met eerdere open standaarden die de internet- en cloudinfrastructuur hebben vormgegeven. Het project is beschikbaar op GitHub.
OpenSharing is een interessante en potentieel belangrijke stap in de uitbouw van AI-infrastructuur. Dat silo’s nefast zijn binnen een moderne omgeving die AI moet ondersteunen, is iedereen het intussen over eens. De consensus lijkt bovendien te zijn dat AI en data dicht bij elkaar dienen te staan.
Tegengewicht voor platform-argument
Daar zijn verschillende oplossingen voor. Platformspelers zoals Snowflake of Salesforce stellen zich relatief open op, door de connectie van databronnen toe te laten. Het zwaartepunt van een AI-implementatie ligt echter in het platform zelf, waar de AI-workloads draaien.
OpenSharing maakt het in theorie mogelijk om op een minder afhankelijke manier AI-capaciteiten aan data te koppelen. De openheid van de standaard maakt meer flexibiliteit mogelijk.
Openheid is in de context van data en AI wel hip. Geen enkel bedrijf is in de waan dat het geïsoleerd een sleutelrol zal spelen in de data- en AI-strategie van klanten. Dat speelt in het voordeel van het nieuwe protocol: bedrijven waaronder Atlassian, LSEG, SAP en Stripe geven aan OpenSharing te omarmen omdat het hen toelaat data en AI-assets te delen via elk platform, elke cloud en elk model.
De gedeelde motivatie is duidelijk: een open fundament vermijdt vendor lock-in en verlaagt de drempel voor samenwerking in het AI-tijdperk. Databricks toont in aanloop naar zijn Data+AI-summit volgende week dat het een centrale maar ook open rol wil spelen in de ontwikkeling van het IT-landschap.