Blok Zinciri Veri İndeksleme Teknolojisinin Evrimi: Düğümden AI Destekli Tam Zincir Veri Hizmetine

1 Giriş

2017'deki ilk dApp'lerin doğuşundan bu yana, Blok Zinciri uygulamaları finans, oyun ve sosyal gibi birçok alanda hızla gelişti. Merkeziyetsiz uygulamaları tartışırken, bu dApp'lerin kullandığı veri kaynaklarını hiç düşündük mü?

2024'te, AI ve Web3 sıcak konu haline geliyor. Yapay zeka alanında, veriler yaşam kaynağı gibidir ve AI sistemlerinin büyümesi ve evrimi için hayati öneme sahiptir. Bitkilerin sağlıklı büyümesi için güneş ışığına ve suya ihtiyaç duyması gibi, AI sistemleri de sürekli olarak "öğrenmek" ve "düşünmek" için büyük miktarda veriye bağımlıdır. Veri desteği olmadan, en karmaşık AI algoritmaları bile gereken zekayı ve etkinliği gösteremez.

Bu makale, Blok Zinciri verilerine erişilebilirlik açısından, sektör gelişimi sürecinde Blok verileri indeksinin evrim sürecini derinlemesine inceleyecektir. Ayrıca, köklü veri indeks protokollerini yeni ortaya çıkan Blok Zinciri veri hizmeti protokolleri ile karşılaştıracağız, özellikle AI teknolojisi ile birleştirilen yeni protokollerin veri hizmetleri ve ürün mimarisi özellikleri açısından benzerlik ve farklılıklarına odaklanacağız.

2 Veritabanı İndeksinin Karmaşası ve Basitliği: Blok Zinciri Düğümünden Tüm Zincir Veritabanına

2.1 Veri Kaynağı: Blok Zinciri Düğümü

Blok Zinciri genellikle merkeziyetsiz bir defter olarak tanımlanır. Blok Düğümleri, tüm ağın temelini oluşturur ve zincir üzerindeki tüm işlem verilerini kaydetme, depolama ve yayma görevini üstlenir. Her düğüm, tam bir blok zinciri veri kopyasını saklar ve ağın merkeziyetsiz özelliklerini güvence altına alır. Ancak, sıradan kullanıcılar için kendi düğümünü kurmak ve bakımını yapmak kolay bir iş değildir; bu yalnızca uzmanlık gerektirmekle kalmaz, aynı zamanda yüksek donanım ve bant genişliği maliyetleri de taşır. Sıradan düğümlerin sorgulama yetenekleri de sınırlıdır ve geliştiricilerin ihtiyaçlarını karşılamada zorlanır. Bu nedenle, teorik olarak herkes bir düğüm çalıştırabilirken, pratikte kullanıcılar daha çok üçüncü taraf hizmetlere güvenmeyi tercih etmektedir.

Bu sorunu çözmek için RPC düğüm sağlayıcıları ortaya çıkmıştır. Bu sağlayıcılar düğümün maliyetinden ve yönetiminden sorumludur ve RPC uç noktaları aracılığıyla veri hizmetleri sunar. Kullanıcılar, kendi düğümlerini kurmadan blok zinciri verilerine kolayca erişebilirler. Kamu RPC uç noktaları ücretsizdir ancak hız kısıtlamaları vardır, bu da dApp kullanıcı deneyimini etkileyebilir. Özel RPC uç noktaları daha iyi performans sunar, ancak karmaşık sorgular için verimliliği düşüktür ve ölçeklenmesi ile ağlar arası uyumluluğu zor olabilir. Yine de, düğüm sağlayıcılarının standartlaştırılmış API arayüzleri, kullanıcıların zincir üzerindeki verilere erişim eşiğini düşürerek sonraki veri ayrıştırma ve uygulama süreçlerine zemin hazırlamaktadır.

2.2 Veri Analizi: Prototip Verilerinden Kullanılabilir Verilere

Blok Zinciri düğümünden elde edilen veriler genellikle şifrelenmiş ve kodlanmış işlenmiş ham verilerdir. Bu veriler, Blok Zinciri'nin bütünlüğünü ve güvenliğini sağlasa da, veri çözümlemesini zorlaştırmaktadır. Sıradan kullanıcılar veya geliştiriciler için, bu prototip verileri doğrudan işlemek büyük miktarda teknik bilgi ve hesaplama kaynağı gerektirmektedir.

Veri analiz süreci bu bağlamda son derece önemlidir. Karmaşık prototip verilerini daha anlaşılır ve işlenebilir bir formata dönüştürerek, kullanıcılar bu verileri daha sezgisel bir şekilde anlayabilir ve kullanabilir. Veri analizinin etkisi, Blok Zinciri veri uygulamalarının verimliliği ve etkinliği üzerinde doğrudan bir etkiye sahiptir ve tüm veri indeksleme sürecinde kritik bir aşamadır.

2.3 Veri İndeksleyici'nin Evrimi

Blok Zinciri veri miktarının artmasıyla birlikte, veri indeksleyicilerine olan talep giderek artmaktadır. İndeksleyiciler, zincir üzerindeki verileri düzenlemede ve bunları sorgulama amacıyla veritabanına göndermede önemli bir rol oynamaktadır. İndeksleyiciler, Blok Zinciri verilerini indeksleyerek ve SQL benzeri sorgu dillerini (GraphQL API gibi) sağlayarak verilerin her zaman erişilebilir olmasını sağlamaktadır. Birleşik bir sorgu arayüzü sunarak, indeksleyiciler geliştiricilerin standartlaşmış sorgu dillerini kullanarak ihtiyaç duyulan bilgileri hızlı ve doğru bir şekilde elde etmelerine olanak tanır, süreci büyük ölçüde basitleştirir.

Farklı türdeki indeksleyiciler, veri alımını çeşitli yollarla optimize eder:

1. Tam Düğüm İndeksleyici: Verileri doğrudan tam Blok Zinciri düğümünden çıkarır, verilerin tam ve doğru olmasını sağlar, ancak büyük miktarda depolama ve işleme gücü gerektirir.
2. Hafif Dizinleyici: Tam düğümlerin ihtiyaç duyulduğunda belirli verileri almasına dayanarak depolama gereksinimlerini azaltır, ancak sorgu süresini artırabilir.
3. Özel İndeksleyici: Belirli türdeki veriler veya belirli bir blok zinciri için optimize edilmiş, örneğin NFT verileri veya DeFi işlemleri.
4. Birleştirilmiş İndeksleyici: Birden fazla blok zincirinden ve kaynaktan veri çıkarır, zincir dışı bilgileri içerir, birleşik sorgu arayüzü sağlar, çok zincirli dApp'ler için özellikle uygundur.

Şu anda, Ethereum arşiv düğümleri Geth istemcisinde yaklaşık 13.5 TB depolama alanı kaplarken, Erigon istemcisinde bu miktar yaklaşık 3 TB'dır. Blok zincirinin büyümesiyle birlikte, arşiv düğümlerinin veri depolama miktarı sürekli artacaktır. Bu kadar büyük bir veri hacmiyle karşılaşan ana akım dizinleyici protokolleri, yalnızca çoklu zincir dizinlemeyi desteklemekle kalmaz, aynı zamanda farklı uygulamaların veri ihtiyaçlarına göre özelleştirilmiş veri ayrıştırma çerçeveleri sunar.

İndeksleyicinin ortaya çıkması, verilerin indekslenmesi ve sorgulanma verimliliğini büyük ölçüde artırmıştır. Geleneksel RPC uç noktalarına kıyasla, indeksleyiciler büyük miktarda veriyi verimli bir şekilde indeksleyebilir ve yüksek hızlı sorgulamayı destekler. Kullanıcılar karmaşık sorgular gerçekleştirebilir, verileri kolayca filtreleyebilir ve çıkarım sonrası analiz yapabilirler. Bazı indeksleyiciler, birden fazla blok zincirinin veri kaynaklarını birleştirmeyi de destekleyerek, çok zincirli dApp'lerin birden fazla API dağıtma sorununu önler. Dağıtık çalışma ile indeksleyici, daha güçlü bir güvenlik ve performans sunar, merkezi RPC sağlayıcılarının getirebileceği kesinti riskini azaltır.

Buna karşın, dizinleyici önceden tanımlanmış bir sorgu dili aracılığıyla, kullanıcıların temel karmaşık verilerle uğraşmadan ihtiyaç duydukları bilgilere doğrudan ulaşmalarını sağlar. Bu mekanizma, veri alma verimliliğini ve güvenilirliğini önemli ölçüde artırarak Blok Zinciri veri erişiminde önemli bir yenilik olmuştur.

2.4 Tüm Zincir Veritabanı: Akışa Öncelik Verme

İndeks düğümünü kullanarak veri sorgulamak genellikle API'nin zincir üzerindeki verileri işlemek için tek giriş noktası haline gelmesi anlamına gelir. Ancak projeler genişleme aşamasına girdiğinde, genellikle daha esnek veri kaynaklarına ihtiyaç duyulmaktadır ve standart API'ler bu ihtiyacı karşılamakta zorluk çekmektedir. Uygulama talepleri karmaşıklaştıkça, birincil veri indeksleyicileri ve standartlaştırılmış indeks formatları giderek artan çeşitlilikteki sorgu taleplerini, arama, çapraz zincir erişimi veya zincir dışı veri eşleştirme gibi, karşılamakta zorlanmaktadır.

Modern veri boru hattı mimarisinde, "akış öncelikli" yaklaşım, geleneksel toplu işleme sınırlamalarını aşmanın bir yolu haline geldi ve gerçek zamanlı veri alma, işleme ve analizini sağladı. Bu paradigma değişikliği, organizasyonların gelen veriye anında yanıt vermesine, neredeyse gerçek zamanlı olarak içgörüler elde etmesine ve kararlar almasına olanak tanıdı. Benzer şekilde, blok zinciri veri hizmeti sağlayıcıları da blok zinciri veri akışları oluşturma yönünde gelişim göstermekte, geleneksel indeksleme hizmet sağlayıcıları ise gerçek zamanlı blok zinciri verilerini akış şeklinde elde eden ürünler sunmaya başladı.

Bu hizmetler, Blok Zinciri işlemlerinin gerçek zamanlı analizini sağlama ve daha kapsamlı sorgulama yetenekleri sunma ihtiyacını karşılamayı amaçlamaktadır. "Akış öncelikli" mimarisi, gecikmeyi azaltarak ve yanıt verme yeteneğini artırarak geleneksel veri boru hatlarındaki veri işleme yöntemlerini yenileyen bu Blok Zinciri veri akışı hizmet sağlayıcıları, daha gelişmiş ve olgun veri kaynakları aracılığıyla daha fazla uygulamanın gelişimini desteklemeyi ve zincir üzerindeki veri analizine yardımcı olmayı ummaktadır.

Zamansal veri boru hattı perspektifinden zincir üzerindeki verilerin yeniden tanımlanması, zincir üzerindeki verilerin yönetimi, depolanması ve sağlanmasının potansiyelini yeni bir açıdan görmemizi sağlıyor. Alt grafikler ve Ethereum ETL gibi indeksleyicileri nihai çıktı olarak değil, veri boru hattındaki veri akışı olarak görmeye başladığımızda, herhangi bir iş durumu için özel olarak tasarlanmış yüksek performanslı veri setlerinin mümkün olduğu bir dünyayı hayal edebiliriz.

3 The Graph, Chainbase ve Space and Time'ı Derinlemesine Karşılaştırma

3.1 The Graph

The Graph ağı, merkeziyetsiz düğüm ağı aracılığıyla çoklu zincir veri indeksleme ve sorgulama hizmetleri sunarak, geliştiricilerin blok zinciri verilerini indekslemesini ve merkeziyetsiz uygulamalar geliştirmesini kolaylaştırır. Ana ürün modelleri, veri sorgulama yürütme pazarı ve veri indeksleme önbellek pazarı olmak üzere, esasen kullanıcıların ürün sorgulama ihtiyaçlarına hizmet etmektedir.

Alt grafik, The Graph ağı içindeki temel veri yapısıdır ve blok zincirinden nasıl veri çıkarılacağını ve bu verilerin sorgulanabilir bir formata dönüştürüleceğini tanımlar. Herkes alt grafik oluşturabilir, birden fazla uygulama bu alt grafikleri tekrar kullanabilir, bu da veri yeniden kullanılabilirliğini ve kullanım verimliliğini artırır.

The Graph ağı, Web3 uygulamalarına veri desteği sağlamak için birlikte çalışan dört ana rol olan indeksleyiciler, küratörler, yetkilendirenler ve geliştiricilerden oluşmaktadır. Şu anda, The Graph tamamen merkeziyetsiz alt grafik barındırma hizmetine geçiş yapmıştır ve farklı katılımcılar arasında sistemin çalışmasını sağlamak için dolaşımda ekonomik teşvikler bulunmaktadır.

The Graph'ın ürünleri de AI dalgasında hızla gelişiyor. Semiotic Labs tarafından geliştirilen AutoAgora, Allocation Optimizer ve AgentC araçları, ekosistemin performansını çeşitli alanlarda artırıyor. Bu araçların kullanımı, The Graph'ın AI destekli sistemin zekasını ve kullanıcı dostluğunu daha da artırmasını sağladı.

3.2 Chainbase

Chainbase, tüm blok zinciri verilerini tek bir platformda birleştiren bir veri ağıdır ve geliştiricilerin uygulama inşa etmelerini ve sürdürmelerini kolaylaştırır. Eşsiz özellikleri arasında şunlar bulunmaktadır:

• Gerçek Zamanlı Veri Gölü: Blok zinciri veri akışları için özel olarak tasarlanmış gerçek zamanlı veri gölü sunarak verilerin üretildiği anda anında erişilmesini sağlar.
• Çift zincir mimarisi: Eigenlayer AVS üzerine inşa edilen yürütme katmanı, CometBFT konsensüs algoritması ile paralel bir çift zincir mimarisi oluşturur.
• Yenilikçi veri formatı standardı: Kripto sektöründe verilerin yapılandırılması ve kullanım şeklinin optimize edilmesi için "manuscripts" veri formatı standardı getirildi.
• Kripto Dünya Modeli: AI model teknolojisini birleştirerek, blockchain işlemlerini etkin bir şekilde anlayabilen, tahmin edebilen ve bunlarla etkileşime geçebilen AI modelleri oluşturmak.

Chainbase'in AI modeli Theia, onu diğer veri hizmeti protokollerinden ayıran anahtar özelliktir. Theia, NVIDIA tarafından geliştirilen DORA modeline dayanmaktadır ve zincir üstü (on-chain) ve zincir dışı (off-chain) verileri ile zaman ve mekan etkinliklerini birleştirerek, kripto düzenlerini öğrenir ve analiz eder, nedensel çıkarım yoluyla yanıtlar verir, zincir üstü verilerin potansiyel değerini ve düzenlerini derinlemesine keşfederek kullanıcılara daha akıllı veri hizmetleri sunar.

3.3 Uzay ve Zaman

Uzay ve Zaman (SxT), merkeziyetsiz veri ambarları üzerinde sıfır bilgi kanıtlarını genişleterek, doğrulanabilir bir hesaplama katmanı oluşturmayı amaçlamaktadır ve akıllı sözleşmeler, büyük dil modelleri ve işletmelere güvenilir veri işleme sağlamaktadır.

SxT, merkeziyetsiz veri ambarlarında gerçekleştirilen SQL sorgularının değiştirilemez ve doğrulanabilir olmasını sağlamak için yenilikçi bir sıfır bilgi kanıtı teknolojisi olan Proof of SQL'i tanıttı. Proof of SQL, sorgu sonuçlarının bütünlüğünü ve doğruluğunu doğrulayan şifreli kanıtlar üretir, böylece herhangi bir doğrulayıcı, verilerin işleme sürecinde değiştirilmediğini bağımsız olarak onaylayabilir.

SxT, kullanıcıların doğal dil işleme ile Blok zinciri verilerini kolayca kullanabilmesi için, Microsoft AI ile yenilikçi bir laboratuvar kurarak birlikte çalışmaktadır. Space and Time Studio'da, kullanıcılar doğal dil sorguları girebilir, AI otomatik olarak bunları SQL'e dönüştürüp sorgu ifadesini çalıştıracak ve kullanıcının ihtiyaç duyduğu nihai sonucu sunacaktır.

Sonuçlar ve Gelecek

Blok Zinciri veri indeksleme teknolojisi, ilk olarak Düğüm veri kaynağından başlayarak, veri ayrıştırma ve indeksleyici gelişimi ile en sonunda AI destekli tam zincir veri hizmetine evrim geçirdi ve bu süreç aşamalı olarak iyileştirildi. Bu teknolojilerin sürekli evrimi, yalnızca veri erişim verimliliğini ve doğruluğunu artırmakla kalmadı, aynı zamanda kullanıcılara eşi benzeri görülmemiş bir akıllı deneyim sundu.

Geleceğe baktığımızda, AI teknolojisi ve sıfır bilgi kanıtı gibi yeni teknolojilerin sürekli gelişimi ile, Blok Zinciri veri hizmetleri daha da akıllı ve güvenli hale gelecektir. Blok Zinciri veri hizmetleri, altyapı olarak önemli bir rol oynamaya devam edecek ve sektördeki ilerleme ve yeniliklere güçlü destek sağlayacaktır.