OpenSharing, yapay zeka dünyasındaki özel veri silolarını ortadan kaldırmayı hedefliyor

Databricks, OpenSharing ile platform, bulut ve organizasyon sınırları arasında modeller, aracı becerileri ve yapılandırılmamış veriler gibi veri ve yapay zeka kaynaklarının güvenli alışverişini standartlaştırmayı amaçlayan açık bir protokolü kullanıma sundu. Proje artık Linux Vakfı tarafından açık kaynaklı bir topluluk projesi olarak barındırılıyor ve GitHub'da mevcut.

Eksiksiz ve standartlaştırılmış veri alışverişi

OpenSharing, Databricks tarafından 2021'de tanıtılan, güvenli veri alışverişi için açık kaynaklı bir protokol olan Delta Sharing'i temel alır. Delta Sharing, Delta Lake gibi tablo biçimlerindeki yapılandırılmış verilere odaklanırken, OpenSharing desteklenen veri ve format aralığını önemli ölçüde genişletir: Tablo verilerine ek olarak, yapay zeka modeli yapıları, aracı becerileri (otonom aracılar için işlevler ve araçlar) ve belgeler veya medya dosyaları gibi yapılandırılmamış veriler artık tek tip bir protokol aracılığıyla paylaşılabilir. Protokol aynı zamanda sıfır kopya ilkesine de dayanmaktadır: veriler kopyalanmaz ancak istemciler kaynak depolamaya doğrudan erişir.

Teknik olarak OpenSharing, keşif, yetkilendirme ve erişim için standartlaştırılmış API'leri tanımlar. Proje liderlerine göre kullanıcılar, temel platformdan bağımsız olarak tek tip bir arayüz setine erişebiliyor. OAuth2 veya OIDC'nin kullanılıp kullanılmadığı gibi belirli kimlik doğrulama mekanizmaları önceki yayınlarda ayrıntılı olarak belgelenmemiştir. Ancak tüm özellikler GitHub deposu aracılığıyla kullanıma sunulacaktır. Delta paylaşım mimarisinden, bir paylaşım sunucusunun bir kontrol düzlemi görevi gördüğü ve gerçek veri erişiminin, bulut veya nesne depolama alanındaki önceden imzalanmış URL'ler aracılığıyla gerçekleştiği bilinmektedir.

Delta Sharing'e göre önemli bir yenilik, Apache Iceberg istemcilerine yönelik destektir. Sağlayıcılar bunu hem Delta tabanlı hem de Iceberg tabanlı alıcılara tek bir protokol aracılığıyla hizmet vermek için kullanabilir. Lakehouse mimarilerinin operatörleri, açık veri ekosistemindeki parçalanmanın azalmasından yararlanır: Iceberg destekli Spark, Trino veya Flink gibi motorlar, özel adaptörlere başvurmak zorunda kalmadan, paylaşılan kaynaklara standartlaştırılmış bir erişim yolu alır.

Linux Foundation yönetişimin kontrolünü ele alıyor

Linux Vakfı, OpenSharing için satıcıdan bağımsız yönetim yapıları sağlar. Linux Vakfı CEO'su Jim Zemlin'e göre OpenSharing, “kuruluşların yapay zeka kaynaklarını platformlar ve ekosistemler arasında güvenli ve birlikte çalışabilir bir şekilde paylaşmasına olanak tanıyan ortak, satıcıdan bağımsız bir çerçeveye yönelik kritik ihtiyacı” karşılamayı amaçlıyor. Proje, Kubernetes, RISC-V ve MCP (ikincisi Linux Vakfı bünyesinde bir vakıf olan Agentic AI Vakfı aracılığıyla) dahil olmak üzere tarafsız yönetişimin daha geniş kabulü sağlamayı amaçladığı Linux Vakfı şemsiyesi altındaki diğer altyapı standartlarına katılıyor.

Databricks'in kurucu ortağı ve CTO'su Matei Zaharia'ya göre Delta Sharing, sektörün açık standartları tercih ettiğini zaten gösterdi. OpenSharing bu prensibi tüm yapay zeka yığınına ve platformlar arası ekosisteme genişletecek.

Avrupalı ​​şirketler için uygunluk

OpenSharing'in, örneğin bankacılık, sağlık hizmetleri veya Avrupa kamu yönetimi gibi düzenlenmiş sektörlerdeki katı veri koruma ve egemenlik gerekliliklerine sahip şirketlerin ilgisini çekmesi muhtemeldir. Sıfır kopya prensibi sayesinde veriler fiziksel olarak ister kendi veri merkeziniz ister Avrupa bulutu olsun mevcut depolama ortamında kalır. Verileri taşımaya gerek kalmadan protokol aracılığıyla bulut tabanlı yapay zeka hizmetlerine erişin. Bu, GDPR gereksinimlerine ve veri minimizasyon yaklaşımlarına uyumu kolaylaştırır çünkü artık ilgili herkes için ayrı kopyalar oluşturmaya gerek yoktur.

Projenin başlangıcında çok sayıda şirket kendilerini zaten destekçi olarak konumlandırıyor. Atlassian, bulut verilerine geniş ölçekte erişim sağlamak için OpenSharing'i kullanarak veri paylaşımlarını Atlassian Analytics'e sundu. SAP, protokolü Business Data Cloud'da kullanıyor, Stripe bunu yerel olarak Stripe Data Pipeline'a entegre ediyor ve London Stock Exchange Group (LSEG) bunu “LSEG Everywhere” stratejisine entegre ediyor.

Orta Avrupalı ​​bir yazılım sağlayıcısı olan SAP'nin protokolü erkenden benimsemesi ve Avrupa veri merkezlerinde güçlü bir varlığa sahip olan NetApp ve HPE gibi depolama üreticilerinin de desteklerini duyurmuş olmaları, düzenlenmiş şirket içi senaryolara odaklanıldığının altını çiziyor. OpenSharing kendisini büyük hiper ölçekleyicilerin özel veri pazarlarına açık bir alternatif olarak konumlandırıyor.

(harita)