Evolusi Teknologi Indeks Data Blockchain: dari Node ke Layanan Rantai Penuh yang Didukung AI

1. Pendahuluan

Dalam beberapa tahun terakhir, aplikasi terdesentralisasi (dApp) telah berkembang pesat di bidang blockchain, mulai dari aplikasi keuangan, permainan, dan sosial awal, hingga kini banyaknya ekosistem multirantai yang bermunculan. Dalam proses ini, sumber data dan cara akses yang digunakan oleh dApp juga terus berkembang.

Pada tahun 2024, kecerdasan buatan (AI) dan Web3 menjadi topik hangat. Sistem AI memerlukan data dalam jumlah besar untuk terus belajar dan berevolusi, seperti halnya tanaman yang membutuhkan sinar matahari dan kelembapan untuk tumbuh subur. Tanpa dukungan data, bahkan algoritma AI yang paling canggih pun sulit untuk menunjukkan kecerdasan dan efisiensi yang seharusnya.

Artikel ini akan menganalisis secara mendalam evolusi indeks data blockchain dalam proses pengembangan industri dari sudut pandang aksesibilitas data blockchain. Kami juga akan membandingkan protokol indeks data tradisional The Graph dengan protokol layanan data blockchain yang muncul Chainbase dan Space and Time, serta membahas persamaan dan perbedaan dari protokol baru yang menggabungkan teknologi AI ini dalam layanan data dan arsitektur produk.

2. Kerumitan dan Kesederhanaan Indeks Data: Dari Node Blockchain ke Database Seluruh Rantai

2.1 Sumber data: Node Blockchain

Dasar dari blockchain adalah jaringan terdesentralisasi yang terdiri dari banyak node, di mana setiap node menyimpan salinan lengkap dari data blockchain. Namun, bagi pengguna biasa, membangun dan memelihara node bukanlah hal yang mudah, karena tidak hanya memerlukan keterampilan profesional, tetapi juga menghadapi biaya perangkat keras dan bandwidth yang tinggi. Sementara itu, kemampuan pencarian node biasa terbatas, sulit untuk memenuhi kebutuhan pengembang.

Untuk menyelesaikan masalah ini, penyedia node Remote Procedure Call (RPC) muncul. Penyedia layanan ini bertanggung jawab atas operasi dan manajemen node, menyediakan layanan akses data kepada pengguna melalui titik akhir RPC. Meskipun titik akhir RPC publik gratis, terdapat batasan kecepatan, yang mungkin mempengaruhi pengalaman pengguna dApp. Meskipun titik akhir RPC pribadi memiliki kinerja yang lebih baik, tetapi masih kurang efisien untuk kueri kompleks dan sulit untuk diperluas secara lintas jaringan. Meskipun demikian, antarmuka API standar dari penyedia node telah menurunkan hambatan akses pengguna ke data on-chain, dan meletakkan dasar untuk analisis data dan aplikasi selanjutnya.

2.2 Analisis Data: Dari Data Prototipe ke Data yang Dapat Digunakan

Data mentah yang disediakan oleh Node Blockchain biasanya telah melalui proses enkripsi dan pengkodean, sehingga sulit digunakan langsung oleh pengguna biasa dan pengembang. Proses pemrosesan data mengubah data prototipe yang kompleks menjadi format yang lebih mudah dipahami dan dioperasikan, yang merupakan tahap kunci dalam seluruh proses pengindeksan data.

2.3 Evolusi Pengindeks Data

Dengan meningkatnya jumlah data Blockchain, kebutuhan akan pengindeks data semakin jelas. Pengindeks dapat mengorganisir data di dalam rantai dan menyimpannya di dalam basis data, sehingga memudahkan pencarian. Mereka mengindeks data Blockchain dan menyediakan bahasa kueri mirip SQL ( seperti antarmuka GraphQL ), sehingga data selalu tersedia. Pengindeks memberikan bahasa kueri yang terstandarisasi kepada para pengembang, yang secara signifikan menyederhanakan proses pengambilan data.

Berbagai jenis pengindeks memiliki karakteristik masing-masing:

1. Pengindeks Node Lengkap: Mengambil data langsung dari node lengkap, memastikan integritas data, tetapi membutuhkan banyak penyimpanan dan sumber daya pemrosesan.
2. Pengindex ringan: bergantung pada node lengkap untuk mendapatkan data tertentu sesuai kebutuhan, mengurangi kebutuhan penyimpanan tetapi mungkin meningkatkan waktu query.
3. Pengindeks Khusus: Dioptimalkan untuk jenis data tertentu atau Blockchain, seperti data NFT atau transaksi DeFi.
4. Pengindeks Agregat: Mengambil data dari berbagai Blockchain dan sumber, termasuk informasi off-chain, menyediakan antarmuka pencarian yang seragam, cocok untuk dApp multi-chain.

Saat ini, kebutuhan penyimpanan untuk node arsip Ethereum bervariasi antara 3TB hingga 13,5TB di berbagai klien, dan seiring dengan pertumbuhan Blockchain yang berkelanjutan, jumlah data ini terus meningkat. Menghadapi volume data yang sangat besar, protokol pengindeks utama tidak hanya mendukung pengindeksan multi-rantai, tetapi juga telah menyesuaikan kerangka pemrosesan data untuk kebutuhan data aplikasi yang berbeda.

Dibandingkan dengan titik akhir RPC tradisional, pengindeks memiliki keunggulan signifikan dalam efisiensi pengindeksan dan kueri data. Mereka dapat mengindeks data dalam jumlah besar secara efisien, mendukung kueri kompleks dan penyaringan data, serta melakukan analisis setelah ekstraksi. Beberapa pengindeks juga mendukung agregasi sumber data dari beberapa Blockchain, menghindari masalah yang dihadapi aplikasi dApp multi-rantai yang perlu menerapkan beberapa API. Dengan menjalankan secara terdistribusi, pengindeks menyediakan keamanan dan kinerja yang lebih kuat, sambil mengurangi risiko gangguan yang mungkin ditimbulkan oleh penyedia RPC terpusat.

2.4 Database Blockchain: Mengatur Prioritas Aliran

Seiring dengan semakin kompleksnya permintaan aplikasi, format indeks API yang distandarisasi semakin sulit memenuhi kebutuhan kueri yang beragam, seperti akses lintas rantai atau pemetaan data off-chain. Dalam arsitektur saluran data modern, pendekatan "berbasis aliran" menjadi solusi untuk mengatasi keterbatasan pemrosesan batch tradisional, mewujudkan pemrosesan dan analisis data secara real-time.

Penyedia layanan data Blockchain juga sedang menuju arah pembangunan aliran data Blockchain. Penyedia layanan pengindeks tradisional berlomba-lomba meluncurkan produk yang mendapatkan data Blockchain secara real-time dengan cara aliran data, seperti Substreams dari The Graph dan Mirror dari Goldsky. Pada saat yang sama, muncul layanan danau data real-time seperti Chainbase dan SubSquid yang berbasis aliran data yang dihasilkan oleh Blockchain.

Layanan ini bertujuan untuk memenuhi kebutuhan analisis waktu nyata terhadap transaksi Blockchain dan menyediakan kemampuan pencarian yang lebih komprehensif. Dengan mendefinisikan kembali tantangan data on-chain dari perspektif saluran data modern, kita dapat membayangkan dunia yang mungkin dapat menyesuaikan dataset berkinerja tinggi untuk setiap kasus penggunaan bisnis.

3. AI + Database? Perbandingan Mendalam The Graph, Chainbase, Space and Time

3.1 The Graph

Jaringan The Graph menyediakan layanan indeks dan kueri data multi-rantai melalui jaringan node terdesentralisasi, memudahkan pengembang untuk mengindeks data blockchain dan membangun aplikasi terdesentralisasi. Model produk utamanya mencakup pasar eksekusi kueri data dan pasar cache indeks data, melayani kebutuhan kueri produk pengguna.

Subgraf ( adalah struktur data dasar dari jaringan The Graph, mendefinisikan bagaimana cara mengekstrak dan mengubah data dari Blockchain menjadi format yang dapat dicari. Siapa pun dapat membuat subgraf, beberapa aplikasi dapat menggunakan kembali subgraf ini, meningkatkan keterpakgunaan dan efisiensi data.

Jaringan The Graph terdiri dari empat peran kunci: Pengindeks, Kurator, Penjamin, dan Pengembang. Pengindeks menyediakan layanan pengindeksan dan pemrosesan query; Penjamin mempertaruhkan token untuk mendukung operasi node pengindeks; Kurator bertanggung jawab untuk memberikan sinyal tentang subgraf mana yang harus diindeks oleh jaringan; Pengembang sebagai pihak yang membutuhkan membuat dan mengirimkan subgraf.

Produk The Graph juga berkembang pesat di tengah gelombang AI. Alat AutoAgora, Allocation Optimizer, dan AgentC yang dikembangkan oleh Semiotic Labs masing-masing meningkatkan kinerja ekosistem dalam berbagai aspek, seperti mekanisme penetapan harga dinamis, alokasi sumber daya yang dioptimalkan, dan kueri bahasa alami.

![Membaca, mengindeks untuk analisis, ringkasan jalur pengindeksan data Web3])https://img-cdn.gateio.im/webp-social/moments-cf9a002b9b094fbbe3be7f611001b5c1.webp(

) 3.2 Chainbase

Chainbase adalah jaringan data seluruh rantai yang mengintegrasikan semua data blockchain ke dalam satu platform. Fitur uniknya termasuk:

• Danau data waktu nyata: menyediakan danau data waktu nyata yang khusus untuk aliran data Blockchain.
• Arsitektur dua rantai: dibangun di atas lapisan eksekusi Eigenlayer AVS, membentuk arsitektur dua rantai paralel dengan algoritma konsensus CometBFT.
• Standar format data inovatif: memperkenalkan standar format data "manuscripts", mengoptimalkan struktur dan pemanfaatan data di industri kripto.
• Model Dunia Kripto: Menggabungkan teknologi model AI, menciptakan model AI yang mampu memahami, memprediksi transaksi Blockchain dan berinteraksi dengannya.

Model AI Chainbase Theia adalah sorotan kunci, berdasarkan model DORA dari NVIDIA, menggabungkan data on-chain dan off-chain serta aktivitas waktu dan ruang, belajar dan menganalisis pola kripto, dan memberikan respons melalui penalaran kausal.

![Membaca, Indeks ke Analisis, Ringkasan Jalur Indeks Data Web3]###https://img-cdn.gateio.im/webp-social/moments-b343cab5112c1a3d52f4e72122ae0df2.webp(

) 3.3 Ruang dan Waktu

Space and Time ###SxT( berfokus pada menciptakan lapisan komputasi yang dapat diverifikasi, memperluas bukti tanpa pengetahuan di atas gudang data terdesentralisasi. Teknologi inovatifnya Proof of SQL adalah teknologi bukti tanpa pengetahuan yang memastikan bahwa kueri SQL yang dijalankan di atas gudang data terdesentralisasi adalah tahan terhadap pemalsuan dan dapat diverifikasi.

SxT bermitra dengan Microsoft AI Innovation Lab untuk mengembangkan alat AI generatif yang memudahkan pengguna memproses data blockchain melalui pemrosesan bahasa alami. Di Space and Time Studio, pengguna dapat memasukkan kueri bahasa alami, dan AI secara otomatis mengonversinya menjadi SQL dan mengeksekusi kueri.

![Membaca, mengindeks untuk analisis, ringkasan jalur pengindeksan data Web3])https://img-cdn.gateio.im/webp-social/moments-97443cbd177ac4ffd1665da670ffbf12.webp(

Kesimpulan dan Harapan

Teknologi indeks data Blockchain telah berevolusi dari sumber data node yang awal, melalui pengembangan pemrosesan data dan pengindeks, akhirnya berkembang menjadi layanan data penuh rantai yang didukung oleh AI, melalui proses yang bertahap. Evolusi teknologi ini tidak hanya meningkatkan efisiensi dan akurasi akses data, tetapi juga memberikan pengalaman yang cerdas bagi pengguna.

Di masa depan, seiring dengan perkembangan terus-menerus dari teknologi AI dan bukti nol pengetahuan, layanan data blockchain akan semakin cerdas dan aman. Sebagai infrastruktur, layanan data blockchain akan terus memberikan dukungan kuat untuk kemajuan dan inovasi industri.

![Membaca, Mengindeks ke Analisis, Ringkasan Jalur Indeks Data Web3])https://img-cdn.gateio.im/webp-social/moments-0742180b7da8a9dcddafc465a4dba9cb.webp(