Еволюція індексації даних Блокчейн: від первинних Нод до повнофункціональної бази даних з підтримкою ШІ
1. Вступ
З моменту виходу перших застосувань Блокчейн у 2017 році, децентралізовані застосунки (dApp) набули популярності, охоплюючи фінанси, ігри та соціальні мережі. З розвитком галузі, ми не можемо не задуматися: звідки ж насправді походять дані, на яких спираються ці dApp?
У 2024 році штучний інтелект і Web3 стануть центром уваги. У сфері ШІ дані є, як джерело життя, постійно живлять зростання та еволюцію системи. Без підтримки величезної кількості якісних даних навіть найтонші алгоритми ШІ не зможуть продемонструвати свою справжню інтелектуальність та ефективність.
Ця стаття глибоко досліджуватиме розвиток доступності даних Блокчейн, аналізуючи еволюцію технології індексації даних, а також порівнюючи основні протоколи, такі як The Graph, Chainbase та Space and Time, з акцентом на те, як останні два поєднують технології ШІ для забезпечення інноваційних послуг.
2. Складність і простота даних: від ноди Блокчейн до бази даних усієї ланцюга
2.1 Джерело даних: Блокчейн Нода
Блокчейн по суті є децентралізованим розподіленим реєстром, який підтримується безліччю нод. Кожна нода зберігає повну копію даних Блокчейн, що забезпечує децентралізовану природу мережі. Однак звичайні користувачі, які створюють і підтримують ноди, стикаються з багатьма труднощами, оскільки це вимагає професійних знань, а також високих витрат на апаратуру та пропускну спроможність. Крім того, запитувальні можливості звичайних нод обмежені, що ускладнює задоволення потреб розробників.
Щоб вирішити цю проблему, з'явилися постачальники RPC-нод. Вони беруть на себе витрати на обслуговування нод, надаючи користувачам доступ до даних через RPC-інтерфейси. Хоча публічні RPC-інтерфейси безкоштовні, вони мають обмеження швидкості; приватні RPC-інтерфейси працюють краще, але їхня ефективність при складних запитах не висока, і важко здійснити міжланцюгове масштабування. Незважаючи на це, стандартизовані API-інтерфейси постачальників нод значно знизили бар'єри для користувачів при доступі до даних на блокчейні.
2.2 Аналіз даних: від сирих даних до придатних для використання даних
Блокчейн нода надає сирі дані, які зазвичай підлягають шифруванню та кодуванню, безпосереднє використання цих даних є складним для звичайних користувачів та розробників. Тому,解析 даних стає ключовим етапом, який перетворює складні сирі дані в зрозумілий та зручний для роботи формат, значно підвищуючи доступність даних.
2.3 Еволюція індексатора даних
Зі зростанням обсягу даних Блокчейн, потреба в індексаторах даних стає все більш помітною. Індексатори організовують дані на ланцюгу та зберігають їх у базі даних, що полегшує запити. Вони надають єдиний інтерфейс запитів, що дозволяє розробникам швидко та точно отримувати потрібну інформацію, використовуючи стандартизовану мову запитів (, таку як GraphQL ).
Різні типи індексаторів мають свої особливості:
Повний індексатор нод: безпосередньо витягує дані з повного нода, забезпечуючи цілісність даних, але потребує великої кількості ресурсів.
Легкий індексатор: покладається на повні Ноди для отримання даних за запитом, зменшує потребу в зберіганні, але може збільшити час запиту.
Спеціалізований індексатор: оптимізація для певних типів даних або Блокчейн, таких як дані NFT або DeFi-транзакції.
Агрегатор індексів: витягує дані з кількох Блокчейн та джерел, включаючи поза ланцюгом інформацію, для зручності багатоланцюгових додатків.
Наразі вимоги до зберігання архівних нод Ethereum досягли кількох ТБ. З огляду на таку величезну кількість даних, основні протоколи індексації не лише підтримують багатоланцюгову індексацію, але й налаштовують фрейми для розбору даних відповідно до різних потреб застосування, як-от "підграф" The Graph (Subgraph).
Порівняно з традиційними RPC-ендиксами, індексатори значно підвищили ефективність індексації та запиту даних. Вони підтримують складні запити, фільтрацію даних та агрегаційний аналіз, а також можуть інтегрувати джерела даних з різних блокчейнів. Завдяки розподіленій роботі, індексатори забезпечують вищу безпеку та продуктивність, знижуючи ризик перерв.
2.4 Повна ланцюгова база даних: вирівнювання за пріоритетом потоку
Зі зростанням складності вимог до застосувань, стандартизовані API важко задовольнити різноманітні запити, такі як міжланцюговий доступ або відображення даних поза ланцюгом. Метод "пріоритету потоку" в сучасних даних знову надає нові ідеї для обробки даних у реальному часі, що дозволяє організаціям миттєво реагувати на дані та приймати рішення.
Постачальники послуг даних Блокчейн також розвиваються в напрямку створення потоків даних. Традиційні постачальники послуг індексації запустили продукти потокової передачі даних в реальному часі, такі як Substreams від The Graph, Mirror від Goldsky тощо. Нові постачальники послуг, такі як Chainbase і SubSquid, пропонують реальні озера даних, створені на основі Блокчейн.
Ці послуги призначені для задоволення потреб у实时解析 Блокчейн транзакцій та наданні всебічних можливостей запиту. Розглядаючи дані Блокчейн як потік даних, а не як остаточний вихід, ми можемо налаштувати високопродуктивні набори даних для різних бізнес-сценаріїв.
3. AI + База даних? Глибоке порівняння The Graph, Chainbase та Space and Time
3.1 Граф
Мережа The Graph надає послуги мульти-ланкового індексування та запиту даних через децентралізовані ноди. Її основними продуктами є ринок виконання запитів на дані та ринок кешування індексів даних, які обслуговують запити користувачів. Мережа The Graph складається з чотирьох ролей: індексаторів, кураторів, делегаторів та розробників, які забезпечують роботу системи через економічні стимули.
Екосистема The Graph активно впроваджує технології штучного інтелекту. Інструменти, такі як AutoAgora, Allocation Optimizer та AgentC, розроблені Semiotic Labs, покращують продуктивність системи в аспектах цінової стратегії, розподілу ресурсів та користувацького досвіду. Використання цих інструментів дозволяє The Graph підвищити рівень інтелектуалізації та зручності для користувачів.
3.2 Ланцюгова база
Chainbase є мережею даних всіх блоків, що інтегрує дані з кількох блокчейнів на одній платформі. Його унікальні функції включають:
Реальний дата-озеро: надає миттєвий доступ до потоків даних Блокчейн
Двошарова архітектура: побудована на базі Eigenlayer AVS виконавчого шару, паралельно з алгоритмом консенсусу CometBFT
Інноваційний стандарт формату даних: впровадження "manuscripts" для оптимізації структури даних
Модель крипто світу: поєднуючи технології моделей ШІ, створюємо модель ШІ для розуміння та прогнозування блокчейн-транзакцій
AI-модель Theia від Chainbase є її основною перевагою. Theia базується на моделі DORA від NVIDIA, поєднуючи аналіз даних на блокчейні та поза блокчейном з криптографічними методами, реагуючи на запити шляхом причинно-наслідкового висновку, забезпечуючи користувачів інтелектуальними даними.
3.3 Простір і час
Space and Time (SxT) прагне створити перевіряємий обчислювальний рівень, розширюючи нульові знання на децентралізованому сховищі даних. Його основна технологія Proof of SQL забезпечує незмінність і перевіряємність SQL-запитів, створюючи основу для блокчейн-дата додатків у галузях з високими вимогами до надійності даних.
SxT співпрацює з лабораторією інновацій Microsoft AI для розробки генеративних AI інструментів, які дозволяють користувачам обробляти дані Блокчейн за допомогою природної мови. У Space and Time Studio AI може автоматично перетворювати природну мову на SQL і виконувати запити.
Висновок та перспективи
Блокчейн даних індексування технології з початкових джерел даних нод, через розвиток解析 даних і індексаторів, врешті-решт еволюціонували в AI-уповноважене цілочасове обслуговування даних, пройшовши поступовий процес вдосконалення. Ці технологічні досягнення не лише підвищили ефективність і точність доступу до даних, але й принесли інтелектуальний досвід для користувачів.
В майбутньому, з розвитком нових технологій, таких як AI-технології та нульові документи, послуги з обробки даних Блокчейн стануть ще більш інтелектуальними та безпечними. Як інфраструктура, послуги з обробки даних Блокчейн продовжать надавати потужну підтримку для інновацій у галузі.
Ця сторінка може містити контент третіх осіб, який надається виключно в інформаційних цілях (не в якості запевнень/гарантій) і не повинен розглядатися як схвалення його поглядів компанією Gate, а також як фінансова або професійна консультація. Див. Застереження для отримання детальної інформації.
12 лайків
Нагородити
12
6
Поділіться
Прокоментувати
0/400
ChainDoctor
· 12год тому
Раніше сказали, що дані можуть бути використані як паливо.
Переглянути оригіналвідповісти на0
DataChief
· 12год тому
AI інтеграція Блокчейн? Я заздрю
Переглянути оригіналвідповісти на0
ZeroRushCaptain
· 12год тому
Пф! Скільки років минуло, а ви знову копаєте ями під даними? Все ще стара схема в новій упаковці!
Переглянути оригіналвідповісти на0
MetaverseLandlady
· 12год тому
Майже 2025 рік, у блокчейні дані вибухають неконтрольовано.
Еволюція індексації даних Блокчейн: від Ноди до AI-управлінської повноцінної бази даних
Еволюція індексації даних Блокчейн: від первинних Нод до повнофункціональної бази даних з підтримкою ШІ
1. Вступ
З моменту виходу перших застосувань Блокчейн у 2017 році, децентралізовані застосунки (dApp) набули популярності, охоплюючи фінанси, ігри та соціальні мережі. З розвитком галузі, ми не можемо не задуматися: звідки ж насправді походять дані, на яких спираються ці dApp?
У 2024 році штучний інтелект і Web3 стануть центром уваги. У сфері ШІ дані є, як джерело життя, постійно живлять зростання та еволюцію системи. Без підтримки величезної кількості якісних даних навіть найтонші алгоритми ШІ не зможуть продемонструвати свою справжню інтелектуальність та ефективність.
Ця стаття глибоко досліджуватиме розвиток доступності даних Блокчейн, аналізуючи еволюцію технології індексації даних, а також порівнюючи основні протоколи, такі як The Graph, Chainbase та Space and Time, з акцентом на те, як останні два поєднують технології ШІ для забезпечення інноваційних послуг.
2. Складність і простота даних: від ноди Блокчейн до бази даних усієї ланцюга
2.1 Джерело даних: Блокчейн Нода
Блокчейн по суті є децентралізованим розподіленим реєстром, який підтримується безліччю нод. Кожна нода зберігає повну копію даних Блокчейн, що забезпечує децентралізовану природу мережі. Однак звичайні користувачі, які створюють і підтримують ноди, стикаються з багатьма труднощами, оскільки це вимагає професійних знань, а також високих витрат на апаратуру та пропускну спроможність. Крім того, запитувальні можливості звичайних нод обмежені, що ускладнює задоволення потреб розробників.
Щоб вирішити цю проблему, з'явилися постачальники RPC-нод. Вони беруть на себе витрати на обслуговування нод, надаючи користувачам доступ до даних через RPC-інтерфейси. Хоча публічні RPC-інтерфейси безкоштовні, вони мають обмеження швидкості; приватні RPC-інтерфейси працюють краще, але їхня ефективність при складних запитах не висока, і важко здійснити міжланцюгове масштабування. Незважаючи на це, стандартизовані API-інтерфейси постачальників нод значно знизили бар'єри для користувачів при доступі до даних на блокчейні.
2.2 Аналіз даних: від сирих даних до придатних для використання даних
Блокчейн нода надає сирі дані, які зазвичай підлягають шифруванню та кодуванню, безпосереднє використання цих даних є складним для звичайних користувачів та розробників. Тому,解析 даних стає ключовим етапом, який перетворює складні сирі дані в зрозумілий та зручний для роботи формат, значно підвищуючи доступність даних.
2.3 Еволюція індексатора даних
Зі зростанням обсягу даних Блокчейн, потреба в індексаторах даних стає все більш помітною. Індексатори організовують дані на ланцюгу та зберігають їх у базі даних, що полегшує запити. Вони надають єдиний інтерфейс запитів, що дозволяє розробникам швидко та точно отримувати потрібну інформацію, використовуючи стандартизовану мову запитів (, таку як GraphQL ).
Різні типи індексаторів мають свої особливості:
Наразі вимоги до зберігання архівних нод Ethereum досягли кількох ТБ. З огляду на таку величезну кількість даних, основні протоколи індексації не лише підтримують багатоланцюгову індексацію, але й налаштовують фрейми для розбору даних відповідно до різних потреб застосування, як-от "підграф" The Graph (Subgraph).
Порівняно з традиційними RPC-ендиксами, індексатори значно підвищили ефективність індексації та запиту даних. Вони підтримують складні запити, фільтрацію даних та агрегаційний аналіз, а також можуть інтегрувати джерела даних з різних блокчейнів. Завдяки розподіленій роботі, індексатори забезпечують вищу безпеку та продуктивність, знижуючи ризик перерв.
2.4 Повна ланцюгова база даних: вирівнювання за пріоритетом потоку
Зі зростанням складності вимог до застосувань, стандартизовані API важко задовольнити різноманітні запити, такі як міжланцюговий доступ або відображення даних поза ланцюгом. Метод "пріоритету потоку" в сучасних даних знову надає нові ідеї для обробки даних у реальному часі, що дозволяє організаціям миттєво реагувати на дані та приймати рішення.
Постачальники послуг даних Блокчейн також розвиваються в напрямку створення потоків даних. Традиційні постачальники послуг індексації запустили продукти потокової передачі даних в реальному часі, такі як Substreams від The Graph, Mirror від Goldsky тощо. Нові постачальники послуг, такі як Chainbase і SubSquid, пропонують реальні озера даних, створені на основі Блокчейн.
Ці послуги призначені для задоволення потреб у实时解析 Блокчейн транзакцій та наданні всебічних можливостей запиту. Розглядаючи дані Блокчейн як потік даних, а не як остаточний вихід, ми можемо налаштувати високопродуктивні набори даних для різних бізнес-сценаріїв.
3. AI + База даних? Глибоке порівняння The Graph, Chainbase та Space and Time
3.1 Граф
Мережа The Graph надає послуги мульти-ланкового індексування та запиту даних через децентралізовані ноди. Її основними продуктами є ринок виконання запитів на дані та ринок кешування індексів даних, які обслуговують запити користувачів. Мережа The Graph складається з чотирьох ролей: індексаторів, кураторів, делегаторів та розробників, які забезпечують роботу системи через економічні стимули.
Екосистема The Graph активно впроваджує технології штучного інтелекту. Інструменти, такі як AutoAgora, Allocation Optimizer та AgentC, розроблені Semiotic Labs, покращують продуктивність системи в аспектах цінової стратегії, розподілу ресурсів та користувацького досвіду. Використання цих інструментів дозволяє The Graph підвищити рівень інтелектуалізації та зручності для користувачів.
3.2 Ланцюгова база
Chainbase є мережею даних всіх блоків, що інтегрує дані з кількох блокчейнів на одній платформі. Його унікальні функції включають:
AI-модель Theia від Chainbase є її основною перевагою. Theia базується на моделі DORA від NVIDIA, поєднуючи аналіз даних на блокчейні та поза блокчейном з криптографічними методами, реагуючи на запити шляхом причинно-наслідкового висновку, забезпечуючи користувачів інтелектуальними даними.
3.3 Простір і час
Space and Time (SxT) прагне створити перевіряємий обчислювальний рівень, розширюючи нульові знання на децентралізованому сховищі даних. Його основна технологія Proof of SQL забезпечує незмінність і перевіряємність SQL-запитів, створюючи основу для блокчейн-дата додатків у галузях з високими вимогами до надійності даних.
SxT співпрацює з лабораторією інновацій Microsoft AI для розробки генеративних AI інструментів, які дозволяють користувачам обробляти дані Блокчейн за допомогою природної мови. У Space and Time Studio AI може автоматично перетворювати природну мову на SQL і виконувати запити.
Висновок та перспективи
Блокчейн даних індексування технології з початкових джерел даних нод, через розвиток解析 даних і індексаторів, врешті-решт еволюціонували в AI-уповноважене цілочасове обслуговування даних, пройшовши поступовий процес вдосконалення. Ці технологічні досягнення не лише підвищили ефективність і точність доступу до даних, але й принесли інтелектуальний досвід для користувачів.
В майбутньому, з розвитком нових технологій, таких як AI-технології та нульові документи, послуги з обробки даних Блокчейн стануть ще більш інтелектуальними та безпечними. Як інфраструктура, послуги з обробки даних Блокчейн продовжать надавати потужну підтримку для інновацій у галузі.