Évolution de la technologie d'indexation des données Blockchain : des Nœuds aux services de chaîne complète pilotés par l'IA
1. Introduction
Depuis l'apparition des premières applications Blockchain en 2017, jusqu'à aujourd'hui où diverses applications financières, de jeux et sociales basées sur différentes Blockchain fleurissent, avons-nous réfléchi aux différentes sources des données utilisées dans ces interactions ?
En 2024, l'intelligence artificielle et le Web3 deviennent des sujets d'actualité. Dans le domaine de l'IA, les données sont la base de son développement. Tout comme une plante a besoin de lumière et d'eau, les systèmes d'IA dépendent également de vastes quantités de données pour apprendre et évoluer en permanence. Sans données, même les algorithmes d'IA les plus sophistiqués ont du mal à déployer leur intelligence et leur efficacité.
Cet article explorera en profondeur l'évolution de l'accessibilité des données sur la blockchain, analysera l'évolution de l'indexation des données dans l'industrie et comparera les différences et similitudes techniques entre les anciens protocoles d'indexation et les nouveaux protocoles de services de données.
2. L'évolution de l'indexation des données : des nœuds Blockchain à la base de données complète
2.1 Source de données : Nœud Blockchain
La Blockchain est un livre de compte décentralisé, les Nœuds constituent la base de l'ensemble du réseau, responsables de l'enregistrement, du stockage et de la propagation de toutes les données de transaction. Chaque Nœud a une copie complète des données de la Blockchain, maintenant la caractéristique décentralisée du réseau. Cependant, il n'est pas facile pour les utilisateurs ordinaires de créer et de maintenir des Nœuds, nécessitant non seulement des compétences techniques spécialisées, mais aussi des coûts matériels et de bande passante élevés. La capacité de requête des Nœuds ordinaires est également limitée, rendant difficile la satisfaction des besoins des développeurs. Par conséquent, les utilisateurs comptent souvent sur des services tiers.
Les fournisseurs de nœuds RPC ont vu le jour, responsables de la gestion des nœuds et fournissant des données via des points d'extrémité RPC. Cela permet aux utilisateurs d'accéder aux données de la blockchain sans avoir à créer leurs propres nœuds. Les points d'extrémité RPC publics sont gratuits mais ont des limites de taux, tandis que les points d'extrémité RPC privés offrent de meilleures performances mais restent inefficaces. Néanmoins, l'interface API standardisée des fournisseurs de nœuds a abaissé le seuil d'accès des utilisateurs aux données en chaîne, posant les bases pour l'analyse et l'application des données ultérieures.
2.2 Analyse des données : des données brutes aux données exploitables
Les données brutes fournies par les nœuds de la blockchain sont généralement cryptées et codées, garantissant l'intégrité et la sécurité, mais augmentant également la difficulté d'analyse. Pour les utilisateurs ordinaires et les développeurs, traiter directement ces données nécessite une grande quantité de connaissances techniques et de ressources de calcul.
Le processus d'analyse des données devient donc crucial. En transformant des données brutes complexes en un format facile à comprendre et à utiliser, les utilisateurs peuvent tirer parti de ces données de manière plus intuitive. La qualité de l'analyse influence directement l'efficacité et l'efficacité des applications de données blockchain, constituant un maillon clé de l'ensemble du processus d'indexation des données.
2.3 Évolution de l'indexeur de données
Avec l'augmentation du volume de données Blockchain, la demande d'indexeurs de données croît de plus en plus. Les indexeurs jouent un rôle important dans l'organisation des données sur la chaîne et leur envoi vers une base de données pour les requêtes. Ils indexent les données Blockchain et offrent une interface de langage de requête similaire à SQL (, comme l'API GraphQL ), rendant les données disponibles à tout moment. Cette interface de requête unifiée simplifie considérablement le processus pour les développeurs de récupérer les informations nécessaires.
Différents types d'indexeurs optimisent la récupération des données de différentes manières :
Nœud complet indexeur : extrait directement les données des nœuds de Blockchain complets, garantissant une précision complète, mais nécessitant une grande capacité de stockage et de traitement.
Indexeur léger : s'appuyant sur des nœuds complets pour obtenir des données spécifiques à la demande, réduisant les besoins de stockage mais pouvant augmenter le temps de requête.
Indexeur spécialisé : Optimisation de la recherche pour des types de données spécifiques ou de Blockchain, comme les données NFT ou les transactions DeFi.
Agrégateur d'index: extrait des données de plusieurs Blockchains et sources, y compris des informations hors chaîne, et fournit une interface de requête unifiée, adaptée aux applications multi-chaînes.
Actuellement, les nœuds d'archives Ethereum occupent entre 3 et 13,5 To d'espace de stockage selon les différents clients. Face à un volume de données aussi important, les protocoles d'indexation mainstream ne se contentent pas de prendre en charge l'indexation multi-chaînes, mais ont également personnalisé des cadres d'analyse des données en fonction des différents besoins des applications.
Comparé aux points de terminaison RPC traditionnels, les indexeurs améliorent considérablement l'efficacité de l'indexation et de la requête des données. Ils prennent en charge des requêtes complexes, le filtrage des données et l'analyse après extraction. Certains indexeurs prennent également en charge l'agrégation de plusieurs sources de données de blockchain, évitant ainsi le problème que les applications multi-chaînes doivent déployer plusieurs API. Grâce à un fonctionnement distribué, les indexeurs offrent une sécurité et des performances accrues, réduisant les risques potentiels liés aux fournisseurs RPC centralisés.
2.4 Base de données Blockchain: Alignement prioritaire sur le flux
Avec la complexification des besoins applicatifs, les indexeurs de données de base ont du mal à répondre à des demandes de requêtes de plus en plus variées, telles que la recherche, l'accès inter-chaînes ou la cartographie des données hors chaîne. Dans l'architecture moderne des pipelines de données, l'approche "priorité au flux" est devenue une solution pour surmonter les limites du traitement par lots traditionnel, permettant un traitement et une analyse des données en temps réel.
Les fournisseurs de services de données Blockchain évoluent également vers la construction de flux de données. Les fournisseurs de services d'indexation traditionnels ont lancé des produits de flux de données Blockchain en temps réel, tels que les Substreams de The Graph et le Mirror de Goldsky. Il existe également des lacs de données en temps réel basés sur la génération de flux de données Blockchain comme Chainbase et SubSquid.
Ces services visent à répondre à la demande d'analyse en temps réel des transactions sur la blockchain et à fournir une capacité de requête plus complète. En redéfinissant la gestion des données on-chain à travers le prisme des pipelines de données modernes, nous pouvons envisager un avenir où des ensembles de données haute performance sont sur mesure pour n'importe quel cas d'utilisation.
3. IA + Base de données : Comparaison entre The Graph, Chainbase et Space and Time
3.1 Le Graph
Le réseau The Graph fournit des services d'indexation et de requête de données multi-chaînes via des nœuds décentralisés. Ses principaux modèles de produits comprennent le marché d'exécution des requêtes de données et le marché de cache d'index de données, servant les besoins de requête de produits des utilisateurs.
Sous-graphes ( est la structure de données fondamentale du réseau The Graph, définissant comment extraire et transformer des données de la blockchain en un format interrogeable. Le réseau est composé de quatre rôles : indexeurs, conservateurs, délégataires et développeurs, qui soutiennent ensemble les besoins en données des applications web3.
Les produits de The Graph se développent rapidement dans la vague d'IA. AutoAgora, Allocation Optimizer et AgentC, développés par Semiotic Labs, optimisent respectivement les stratégies de tarification, l'allocation des ressources et l'expérience utilisateur, améliorant l'intelligence du système et la convivialité pour les utilisateurs.
![Lire, indexer et analyser, aperçu du secteur d'indexation des données Web3])https://img-cdn.gateio.im/webp-social/moments-cf9a002b9b094fbbe3be7f611001b5c1.webp(
) 3.2 Chainbase
Chainbase est un réseau de données sur toute la chaîne, intégrant toutes les données de blockchain sur une seule plateforme. Ses caractéristiques incluent :
Lac de données en temps réel : fournit un lac de données en temps réel spécialement conçu pour le flux de données Blockchain.
Architecture à double chaîne : Construction de la couche d'exécution basée sur Eigenlayer AVS, formant une architecture parallèle avec l'algorithme de consensus CometBFT.
Norme de format de données innovante : introduction de la norme de format de données "manuscripts".
Modèle du monde cryptographique : combiner la technologie AI pour créer un modèle capable de comprendre et de prédire les transactions Blockchain.
Le modèle AI Theia de Chainbase est basé sur le modèle DORA de NVIDIA, analyse les données externes sur la blockchain et les activités spatio-temporelles, et fournit aux utilisateurs des services de données intelligents.
![Lecture, indexation à l'analyse, résumé de la piste d'indexation des données Web3]###https://img-cdn.gateio.im/webp-social/moments-b343cab5112c1a3d52f4e72122ae0df2.webp(
) 3.3 Espace et Temps
Space and Time ###SxT( s'engage à créer une couche de calcul vérifiable, étendant les preuves à connaissance nulle sur un entrepôt de données décentralisé. Sa technologie de base Proof of SQL garantit l'intégrité et la vérifiabilité des requêtes SQL, offrant une solution efficace pour la validation des données.
SxT collabore avec le laboratoire d'innovation AI de Microsoft pour développer des outils d'IA générative, permettant aux utilisateurs de traiter des données blockchain par le biais du traitement du langage naturel. Dans l'espace et le temps du studio, l'IA peut convertir le langage naturel en SQL et exécuter des requêtes.
![Lecture, indexation et analyse, aperçu de la piste d'indexation des données Web3])https://img-cdn.gateio.im/webp-social/moments-97443cbd177ac4ffd1665da670ffbf12.webp(
Conclusion et perspectives
La technologie d'indexation des données Blockchain est passée des sources de données des nœuds à l'évolution des parseurs de données et des indexeurs, pour finalement évoluer vers un service de données de chaîne complète habilité par l'IA, à travers un processus de perfectionnement progressif. Ces avancées technologiques ont non seulement amélioré l'efficacité et la précision de l'accès aux données, mais ont également apporté une expérience intelligente.
À l'avenir, avec le développement de nouvelles technologies telles que l'IA et la preuve à divulgation nulle de connaissance, les services de données Blockchain seront davantage intelligents et sécurisés. En tant qu'infrastructure, les services de données Blockchain continueront de soutenir l'innovation dans l'industrie.
![Lire, indexer pour analyser, un aperçu de la piste d'indexation des données Web3])https://img-cdn.gateio.im/webp-social/moments-0742180b7da8a9dcddafc465a4dba9cb.webp(
Voir l'original
Cette page peut inclure du contenu de tiers fourni à des fins d'information uniquement. Gate ne garantit ni l'exactitude ni la validité de ces contenus, n’endosse pas les opinions exprimées, et ne fournit aucun conseil financier ou professionnel à travers ces informations. Voir la section Avertissement pour plus de détails.
14 J'aime
Récompense
14
5
Partager
Commentaire
0/400
ChainSpy
· Il y a 6h
Il suffit d'indexer toutes les données de la chaîne~
Voir l'originalRépondre0
ProbablyNothing
· Il y a 16h
Essayez de jouer.
Voir l'originalRépondre0
FUD_Whisperer
· Il y a 16h
bull ah l'indexeur monte en intelligence
Voir l'originalRépondre0
BearMarketNoodler
· Il y a 16h
Pas de nouveauté, ce piège a déjà été utilisé en 2008.
Voir l'originalRépondre0
HorizonHunter
· Il y a 16h
L'IA est puissante mais ne peut pas se concentrer uniquement sur la technique.
Histoire de l'évolution de l'indexation des données Blockchain : des Nœuds aux services de chaîne entière pilotés par l'IA
Évolution de la technologie d'indexation des données Blockchain : des Nœuds aux services de chaîne complète pilotés par l'IA
1. Introduction
Depuis l'apparition des premières applications Blockchain en 2017, jusqu'à aujourd'hui où diverses applications financières, de jeux et sociales basées sur différentes Blockchain fleurissent, avons-nous réfléchi aux différentes sources des données utilisées dans ces interactions ?
En 2024, l'intelligence artificielle et le Web3 deviennent des sujets d'actualité. Dans le domaine de l'IA, les données sont la base de son développement. Tout comme une plante a besoin de lumière et d'eau, les systèmes d'IA dépendent également de vastes quantités de données pour apprendre et évoluer en permanence. Sans données, même les algorithmes d'IA les plus sophistiqués ont du mal à déployer leur intelligence et leur efficacité.
Cet article explorera en profondeur l'évolution de l'accessibilité des données sur la blockchain, analysera l'évolution de l'indexation des données dans l'industrie et comparera les différences et similitudes techniques entre les anciens protocoles d'indexation et les nouveaux protocoles de services de données.
2. L'évolution de l'indexation des données : des nœuds Blockchain à la base de données complète
2.1 Source de données : Nœud Blockchain
La Blockchain est un livre de compte décentralisé, les Nœuds constituent la base de l'ensemble du réseau, responsables de l'enregistrement, du stockage et de la propagation de toutes les données de transaction. Chaque Nœud a une copie complète des données de la Blockchain, maintenant la caractéristique décentralisée du réseau. Cependant, il n'est pas facile pour les utilisateurs ordinaires de créer et de maintenir des Nœuds, nécessitant non seulement des compétences techniques spécialisées, mais aussi des coûts matériels et de bande passante élevés. La capacité de requête des Nœuds ordinaires est également limitée, rendant difficile la satisfaction des besoins des développeurs. Par conséquent, les utilisateurs comptent souvent sur des services tiers.
Les fournisseurs de nœuds RPC ont vu le jour, responsables de la gestion des nœuds et fournissant des données via des points d'extrémité RPC. Cela permet aux utilisateurs d'accéder aux données de la blockchain sans avoir à créer leurs propres nœuds. Les points d'extrémité RPC publics sont gratuits mais ont des limites de taux, tandis que les points d'extrémité RPC privés offrent de meilleures performances mais restent inefficaces. Néanmoins, l'interface API standardisée des fournisseurs de nœuds a abaissé le seuil d'accès des utilisateurs aux données en chaîne, posant les bases pour l'analyse et l'application des données ultérieures.
2.2 Analyse des données : des données brutes aux données exploitables
Les données brutes fournies par les nœuds de la blockchain sont généralement cryptées et codées, garantissant l'intégrité et la sécurité, mais augmentant également la difficulté d'analyse. Pour les utilisateurs ordinaires et les développeurs, traiter directement ces données nécessite une grande quantité de connaissances techniques et de ressources de calcul.
Le processus d'analyse des données devient donc crucial. En transformant des données brutes complexes en un format facile à comprendre et à utiliser, les utilisateurs peuvent tirer parti de ces données de manière plus intuitive. La qualité de l'analyse influence directement l'efficacité et l'efficacité des applications de données blockchain, constituant un maillon clé de l'ensemble du processus d'indexation des données.
2.3 Évolution de l'indexeur de données
Avec l'augmentation du volume de données Blockchain, la demande d'indexeurs de données croît de plus en plus. Les indexeurs jouent un rôle important dans l'organisation des données sur la chaîne et leur envoi vers une base de données pour les requêtes. Ils indexent les données Blockchain et offrent une interface de langage de requête similaire à SQL (, comme l'API GraphQL ), rendant les données disponibles à tout moment. Cette interface de requête unifiée simplifie considérablement le processus pour les développeurs de récupérer les informations nécessaires.
Différents types d'indexeurs optimisent la récupération des données de différentes manières :
Actuellement, les nœuds d'archives Ethereum occupent entre 3 et 13,5 To d'espace de stockage selon les différents clients. Face à un volume de données aussi important, les protocoles d'indexation mainstream ne se contentent pas de prendre en charge l'indexation multi-chaînes, mais ont également personnalisé des cadres d'analyse des données en fonction des différents besoins des applications.
Comparé aux points de terminaison RPC traditionnels, les indexeurs améliorent considérablement l'efficacité de l'indexation et de la requête des données. Ils prennent en charge des requêtes complexes, le filtrage des données et l'analyse après extraction. Certains indexeurs prennent également en charge l'agrégation de plusieurs sources de données de blockchain, évitant ainsi le problème que les applications multi-chaînes doivent déployer plusieurs API. Grâce à un fonctionnement distribué, les indexeurs offrent une sécurité et des performances accrues, réduisant les risques potentiels liés aux fournisseurs RPC centralisés.
2.4 Base de données Blockchain: Alignement prioritaire sur le flux
Avec la complexification des besoins applicatifs, les indexeurs de données de base ont du mal à répondre à des demandes de requêtes de plus en plus variées, telles que la recherche, l'accès inter-chaînes ou la cartographie des données hors chaîne. Dans l'architecture moderne des pipelines de données, l'approche "priorité au flux" est devenue une solution pour surmonter les limites du traitement par lots traditionnel, permettant un traitement et une analyse des données en temps réel.
Les fournisseurs de services de données Blockchain évoluent également vers la construction de flux de données. Les fournisseurs de services d'indexation traditionnels ont lancé des produits de flux de données Blockchain en temps réel, tels que les Substreams de The Graph et le Mirror de Goldsky. Il existe également des lacs de données en temps réel basés sur la génération de flux de données Blockchain comme Chainbase et SubSquid.
Ces services visent à répondre à la demande d'analyse en temps réel des transactions sur la blockchain et à fournir une capacité de requête plus complète. En redéfinissant la gestion des données on-chain à travers le prisme des pipelines de données modernes, nous pouvons envisager un avenir où des ensembles de données haute performance sont sur mesure pour n'importe quel cas d'utilisation.
3. IA + Base de données : Comparaison entre The Graph, Chainbase et Space and Time
3.1 Le Graph
Le réseau The Graph fournit des services d'indexation et de requête de données multi-chaînes via des nœuds décentralisés. Ses principaux modèles de produits comprennent le marché d'exécution des requêtes de données et le marché de cache d'index de données, servant les besoins de requête de produits des utilisateurs.
Sous-graphes ( est la structure de données fondamentale du réseau The Graph, définissant comment extraire et transformer des données de la blockchain en un format interrogeable. Le réseau est composé de quatre rôles : indexeurs, conservateurs, délégataires et développeurs, qui soutiennent ensemble les besoins en données des applications web3.
Les produits de The Graph se développent rapidement dans la vague d'IA. AutoAgora, Allocation Optimizer et AgentC, développés par Semiotic Labs, optimisent respectivement les stratégies de tarification, l'allocation des ressources et l'expérience utilisateur, améliorant l'intelligence du système et la convivialité pour les utilisateurs.
![Lire, indexer et analyser, aperçu du secteur d'indexation des données Web3])https://img-cdn.gateio.im/webp-social/moments-cf9a002b9b094fbbe3be7f611001b5c1.webp(
) 3.2 Chainbase
Chainbase est un réseau de données sur toute la chaîne, intégrant toutes les données de blockchain sur une seule plateforme. Ses caractéristiques incluent :
Le modèle AI Theia de Chainbase est basé sur le modèle DORA de NVIDIA, analyse les données externes sur la blockchain et les activités spatio-temporelles, et fournit aux utilisateurs des services de données intelligents.
![Lecture, indexation à l'analyse, résumé de la piste d'indexation des données Web3]###https://img-cdn.gateio.im/webp-social/moments-b343cab5112c1a3d52f4e72122ae0df2.webp(
) 3.3 Espace et Temps
Space and Time ###SxT( s'engage à créer une couche de calcul vérifiable, étendant les preuves à connaissance nulle sur un entrepôt de données décentralisé. Sa technologie de base Proof of SQL garantit l'intégrité et la vérifiabilité des requêtes SQL, offrant une solution efficace pour la validation des données.
SxT collabore avec le laboratoire d'innovation AI de Microsoft pour développer des outils d'IA générative, permettant aux utilisateurs de traiter des données blockchain par le biais du traitement du langage naturel. Dans l'espace et le temps du studio, l'IA peut convertir le langage naturel en SQL et exécuter des requêtes.
![Lecture, indexation et analyse, aperçu de la piste d'indexation des données Web3])https://img-cdn.gateio.im/webp-social/moments-97443cbd177ac4ffd1665da670ffbf12.webp(
Conclusion et perspectives
La technologie d'indexation des données Blockchain est passée des sources de données des nœuds à l'évolution des parseurs de données et des indexeurs, pour finalement évoluer vers un service de données de chaîne complète habilité par l'IA, à travers un processus de perfectionnement progressif. Ces avancées technologiques ont non seulement amélioré l'efficacité et la précision de l'accès aux données, mais ont également apporté une expérience intelligente.
À l'avenir, avec le développement de nouvelles technologies telles que l'IA et la preuve à divulgation nulle de connaissance, les services de données Blockchain seront davantage intelligents et sécurisés. En tant qu'infrastructure, les services de données Blockchain continueront de soutenir l'innovation dans l'industrie.
![Lire, indexer pour analyser, un aperçu de la piste d'indexation des données Web3])https://img-cdn.gateio.im/webp-social/moments-0742180b7da8a9dcddafc465a4dba9cb.webp(