Từ silo đến cộng tác: tầm quan trọng của đường dẫn dữ liệu gốc Web3
Tác giả:Jay : : FP
Biên soạn: Deep Tide TechFlow
Việc phát hành sách trắng Bitcoin vào năm 2008 đã làm dấy lên sự suy nghĩ lại về khái niệm niềm tin. Blockchain sau đó đã mở rộng định nghĩa của nó để bao gồm khái niệm về một hệ thống không cần sự tin cậy và nhanh chóng phát triển để lập luận rằng các loại giá trị khác nhau, chẳng hạn như chủ quyền cá nhân, dân chủ tài chính và quyền sở hữu, có thể được áp dụng cho các hệ thống hiện có. Tất nhiên, có thể cần phải xác thực và thảo luận nhiều trước khi blockchain có thể được sử dụng trong thực tế, bởi vì các đặc điểm của nó có vẻ hơi cấp tiến so với các hệ thống hiện có khác nhau. Tuy nhiên, nếu chúng ta lạc quan về những kịch bản này, việc xây dựng đường dẫn dữ liệu và phân tích thông tin có giá trị trong bộ lưu trữ blockchain có khả năng trở thành một bước ngoặt quan trọng khác trong sự phát triển của ngành, bởi vì chúng ta có thể quan sát thấy Web3 chưa từng tồn tại trước đây. Sự thông minh.
Bài viết này khám phá tiềm năng của các đường dẫn dữ liệu gốc Web3 bằng cách chiếu các đường ống dữ liệu thường được sử dụng trong các thị trường CNTT hiện tại vào môi trường Web3. Bài viết thảo luận về lợi ích của những đường ống này, những thách thức cần giải quyết và tác động của những đường ống này đối với ngành.
1. Tính đơn nhất đến từ đổi mới thông tin
Ngôn ngữ là một trong những khác biệt quan trọng nhất giữa con người và động vật bậc thấp. Nó không chỉ là khả năng tạo ra âm thanh mà còn là khả năng liên kết những âm thanh xác định với những suy nghĩ xác định và sử dụng những âm thanh đó làm biểu tượng để truyền đạt ý tưởng. - Darwin
Trong lịch sử, những tiến bộ lớn trong nền văn minh nhân loại luôn đi kèm với những đổi mới trong việc chia sẻ thông tin. Tổ tiên chúng ta đã sử dụng ngôn ngữ, cả nói và viết, để giao tiếp với nhau và truyền lại kiến thức cho thế hệ tương lai. Điều này mang lại cho chúng một lợi thế lớn so với các loài khác. Việc phát minh ra chữ viết, giấy và in ấn giúp cho việc chia sẻ thông tin được rộng rãi hơn, dẫn đến những tiến bộ lớn về khoa học, công nghệ và văn hóa. Việc in ấn bằng kim loại di động của Kinh thánh Gutenberg nói riêng là một bước ngoặt vì nó giúp việc sản xuất hàng loạt sách và các tài liệu in khác có thể thực hiện được. Điều này có tác động sâu sắc đến sự khởi đầu của Cải cách, Cách mạng Dân chủ và tiến bộ khoa học.
Sự phát triển nhanh chóng của công nghệ CNTT vào những năm 2000 cho phép chúng ta hiểu sâu hơn về hành vi của con người. Điều này đã dẫn đến sự thay đổi trong lối sống, nơi hầu hết mọi người ở thời hiện đại đều đưa ra nhiều quyết định khác nhau dựa trên thông tin kỹ thuật số. Chính vì lý do này mà chúng tôi gọi xã hội hiện đại là “Kỷ nguyên đổi mới CNTT”.
Chỉ 20 năm sau khi Internet được thương mại hóa hoàn toàn, công nghệ trí tuệ nhân tạo một lần nữa khiến cả thế giới phải kinh ngạc. Có rất nhiều ứng dụng có thể thay thế sức lao động của con người và nhiều người đang thảo luận về nền văn minh mà AI sẽ thay đổi. Một số thậm chí còn phủ nhận, tự hỏi làm thế nào một công nghệ như vậy lại có thể xuất hiện nhanh đến mức có thể làm lung lay nền tảng xã hội của chúng ta. Mặc dù có Định luật Moore cho thấy hiệu suất của chất bán dẫn sẽ tăng theo cấp số nhân theo thời gian, nhưng những thay đổi do sự xuất hiện của GPT mang lại quá đột ngột để có thể đối mặt ngay lập tức.
Tuy nhiên, điều thú vị là bản thân mô hình GPT không thực sự là một kiến trúc mang tính đột phá. Mặt khác, ngành công nghiệp AI sẽ liệt kê những yếu tố thành công chính sau đây cho các mô hình GPT: 1) Xác định các lĩnh vực kinh doanh có thể nhắm mục tiêu đến các nhóm khách hàng lớn và 2) Điều chỉnh mô hình thông qua các đường ống dữ liệu - từ thu thập dữ liệu đến cuối cùng kết quả và phản hồi dựa trên kết quả của. Nói tóm lại, các ứng dụng này cho phép đổi mới bằng cách cải tiến các mục đích cung cấp dịch vụ và nâng cấp quy trình xử lý dữ liệu/thông tin.
2. Các quyết định dựa trên dữ liệu có ở khắp mọi nơi
Hầu hết những gì chúng ta gọi là đổi mới thực ra đều dựa trên việc vận dụng dữ liệu tích lũy chứ không phải cơ hội hay trực giác. Như người ta thường nói: “Trong thị trường tư bản, không phải kẻ mạnh mới sống sót mà kẻ sống sót mới là kẻ mạnh”. Các doanh nghiệp ngày nay có tính cạnh tranh cao và thị trường đã bão hòa. Do đó, các doanh nghiệp đang thu thập và phân tích tất cả các loại dữ liệu để nắm bắt ngay cả những phân khúc nhỏ nhất.
Chúng ta có thể quá bị ám ảnh bởi lý thuyết “sự hủy diệt mang tính sáng tạo” của Schumpeter và quá chú trọng vào việc đưa ra quyết định dựa trên trực giác. Tuy nhiên, ngay cả trực giác tuyệt vời cuối cùng cũng là sản phẩm của dữ liệu và thông tin tích lũy của một cá nhân. Thế giới kỹ thuật số sẽ xâm nhập sâu hơn vào cuộc sống của chúng ta trong tương lai và ngày càng có nhiều thông tin nhạy cảm được trình bày dưới dạng dữ liệu số.
Thị trường Web3 đang nhận được nhiều sự chú ý vì tiềm năng cung cấp cho người dùng quyền kiểm soát dữ liệu của họ. Tuy nhiên, lĩnh vực blockchain, là công nghệ cơ bản của Web3, hiện đang quan tâm nhiều hơn đến việc giải quyết bộ ba bất khả thi (Deep Tide Note: Triangular Dilemma, tức là các vấn đề về bảo mật, phân cấp và khả năng mở rộng). Để các công nghệ mới có sức thuyết phục trong thế giới thực, điều quan trọng là phải phát triển các ứng dụng và trí thông minh có thể được sử dụng theo nhiều cách. Chúng tôi đã thấy điều này xảy ra trong không gian Dữ liệu lớn và các phương pháp xây dựng đường dẫn dữ liệu và xử lý Dữ liệu lớn đã tiến bộ đáng kể kể từ khoảng năm 2010. Trong bối cảnh Web3, cần phải nỗ lực để thúc đẩy ngành phát triển và xây dựng các hệ thống luồng dữ liệu để tạo ra trí thông minh dựa trên dữ liệu.
3. Cơ hội dựa trên luồng dữ liệu trên chuỗi
Vì vậy, chúng ta có thể nắm bắt những cơ hội nào từ các hệ thống phát trực tuyến gốc Web3 và chúng ta cần giải quyết những thách thức nào để nắm bắt những cơ hội này?
3.1 Ưu điểm
Nói tóm lại, giá trị của việc định cấu hình luồng dữ liệu gốc Web3 là dữ liệu đáng tin cậy có thể được phân phối một cách an toàn và hiệu quả cho nhiều thực thể để có thể trích xuất những hiểu biết có giá trị.
Dự phòng dữ liệu - dữ liệu trên chuỗi ít có khả năng bị mất và linh hoạt hơn do mạng giao thức lưu trữ các đoạn dữ liệu trên nhiều nút.
Bảo mật dữ liệu - Dữ liệu trên chuỗi không bị giả mạo vì nó được xác minh và đồng thuận bởi một mạng lưới các nút phi tập trung.
Chủ quyền dữ liệu - Chủ quyền dữ liệu là quyền của người dùng sở hữu và kiểm soát dữ liệu của chính họ. Với tính năng truyền dữ liệu trực tuyến, người dùng có thể xem dữ liệu của họ đang được sử dụng như thế nào và chọn chỉ chia sẻ dữ liệu đó với những người có nhu cầu chính đáng để truy cập dữ liệu đó.
Không cần cấp phép và minh bạch - dữ liệu trên chuỗi minh bạch và chống giả mạo. Điều này đảm bảo rằng dữ liệu đang được xử lý cũng là một nguồn thông tin đáng tin cậy.
Hoạt động ổn định - Khi các luồng dữ liệu được sắp xếp theo giao thức trong môi trường phân tán, mỗi lớp sẽ ít gặp phải thời gian ngừng hoạt động hơn đáng kể vì không có điểm lỗi duy nhất.
3.2 Các trường hợp ứng dụng
Sự tin cậy là cơ sở để các thực thể khác nhau tương tác với nhau và đưa ra quyết định. Do đó, khi dữ liệu đáng tin cậy có thể được phân phối một cách an toàn, điều đó có nghĩa là nhiều tương tác và quyết định có thể được thực hiện thông qua các dịch vụ Web3 có sự tham gia của nhiều thực thể khác nhau. Điều này giúp tối đa hóa vốn xã hội và chúng ta có thể tưởng tượng một số trường hợp sử dụng dưới đây.
3.2.1 Ứng dụng dịch vụ/giao thức
Hệ thống quyết định tự động dựa trên quy tắc - Giao thức sử dụng các tham số chính để chạy dịch vụ. Các thông số này được điều chỉnh thường xuyên để ổn định trạng thái dịch vụ và mang đến cho người dùng trải nghiệm tốt nhất. Tuy nhiên, giao thức không phải lúc nào cũng theo dõi trạng thái dịch vụ và thực hiện các thay đổi động đối với các tham số một cách kịp thời. Đây là những gì luồng dữ liệu trên chuỗi thực hiện. Luồng dữ liệu trên chuỗi có thể được sử dụng để phân tích trạng thái dịch vụ trong thời gian thực và đề xuất bộ tham số tốt nhất để phù hợp với yêu cầu dịch vụ (ví dụ: áp dụng cơ chế lãi suất thả nổi tự động cho các giao thức cho vay).
Tăng trưởng thị trường tín dụng - Tín dụng theo truyền thống được sử dụng trên thị trường tài chính như một thước đo khả năng trả nợ của một cá nhân. Điều này giúp nâng cao hiệu quả thị trường. Tuy nhiên, định nghĩa về tín dụng vẫn chưa rõ ràng trên thị trường Web3. Điều này là do sự khan hiếm dữ liệu cá nhân và thiếu quản trị dữ liệu giữa các ngành. Do đó, việc tích hợp và thu thập thông tin trở nên khó khăn. Bằng cách xây dựng quy trình thu thập và xử lý dữ liệu rời rạc trên chuỗi, có thể xác định lại thị trường tín dụng trên thị trường Web3 (ví dụ: tính điểm MACRO (nhà tiên tri rủi ro tín dụng đa tài sản) của Spectral).
Tiện ích mở rộng xã hội/NFT phi tập trung - Xã hội phi tập trung ưu tiên kiểm soát người dùng, bảo vệ quyền riêng tư, chống kiểm duyệt và quản trị cộng đồng. Điều này cung cấp một mô hình xã hội thay thế. Do đó, một quy trình có thể được thiết lập để kiểm soát và cập nhật nhiều siêu dữ liệu khác nhau một cách trơn tru hơn và tạo điều kiện thuận lợi cho việc di chuyển giữa các nền tảng.
Phát hiện gian lận - Các dịch vụ Web3 sử dụng hợp đồng thông minh dễ bị tấn công độc hại, có thể đánh cắp tiền, xâm phạm hệ thống và dẫn đến các cuộc tấn công tách rời và thanh khoản. Bằng cách tạo ra một hệ thống có thể phát hiện trước các cuộc tấn công này, các dịch vụ Web3 có thể phát triển các kế hoạch phản ứng nhanh và bảo vệ người dùng khỏi bị tổn hại.
3.2.2 Các sáng kiến hợp tác và quản trị
DAO hoàn toàn trên chuỗi - Các tổ chức tự trị phi tập trung (DAO) phụ thuộc rất nhiều vào các công cụ ngoài chuỗi để quản trị hiệu quả và tài trợ công. Bằng cách xây dựng quy trình xử lý dữ liệu trên chuỗi và tạo quy trình minh bạch cho các hoạt động DAO, giá trị của DAO gốc của Web3 có thể được nâng cao hơn nữa.
Giảm bớt sự mệt mỏi trong quản trị - Các quyết định về giao thức Web3 thường được thực hiện thông qua quản trị cộng đồng. Tuy nhiên, có nhiều yếu tố có thể gây khó khăn cho người tham gia tham gia quản trị, chẳng hạn như rào cản địa lý, áp lực giám sát, thiếu chuyên môn cần thiết cho quản trị, chương trình quản trị được công bố ngẫu nhiên và trải nghiệm người dùng bất tiện. Khung quản trị giao thức có thể hoạt động hiệu quả và hiệu suất hơn nếu có thể tạo ra một công cụ giúp đơn giản hóa quy trình để người tham gia đi từ hiểu biết đến thực hiện thực tế các mục trong chương trình nghị sự quản trị riêng lẻ.
Nền tảng dữ liệu mở cho các tác phẩm hợp tác – Trong giới học thuật và công nghiệp hiện có, nhiều dữ liệu và tài liệu nghiên cứu không được tiết lộ công khai, điều này có thể khiến sự phát triển chung của thị trường rất kém hiệu quả. Mặt khác, nhóm dữ liệu trên chuỗi có thể tạo điều kiện thuận lợi cho nhiều sáng kiến hợp tác hơn so với các thị trường hiện tại vì chúng minh bạch và có thể truy cập được đối với bất kỳ ai. Sự phát triển của nhiều tiêu chuẩn token và giải pháp DeFi là những ví dụ điển hình. Ngoài ra, chúng tôi có thể vận hành nhóm dữ liệu công cộng cho nhiều mục đích khác nhau.
3.2.3 Chẩn đoán mạng
Nghiên cứu chỉ mục - Người dùng Web3 tạo ra nhiều chỉ báo khác nhau để phân tích và so sánh trạng thái của giao thức. Nhiều số liệu khách quan (ví dụ: hệ số Satoshi của Nakaflow) có thể được nghiên cứu và hiển thị trong thời gian thực.
Số liệu giao thức - Bằng cách xử lý dữ liệu như số lượng địa chỉ hoạt động, số lượng giao dịch, dòng vào/ra tài sản và phí phát sinh bởi mạng, có thể phân tích hiệu suất của giao thức. Thông tin này có thể được sử dụng để đánh giá tác động của các bản cập nhật giao thức cụ thể, trạng thái của MEV và tình trạng của mạng.
3.3 Thử thách
Dữ liệu trên chuỗi có những lợi thế riêng có thể làm tăng giá trị của ngành. Tuy nhiên, để nhận ra đầy đủ những lợi ích này, nhiều thách thức phải được giải quyết cả trong và ngoài ngành.
Thiếu quản trị dữ liệu - Quản trị dữ liệu là quá trình thiết lập các chính sách và tiêu chuẩn dữ liệu nhất quán và chia sẻ để tạo điều kiện thuận lợi cho việc tích hợp từng dữ liệu nguyên thủy. Hiện tại, mỗi giao thức trên chuỗi thiết lập các tiêu chuẩn riêng và truy xuất các loại dữ liệu riêng. Tuy nhiên, vấn đề là thiếu quản trị dữ liệu giữa các đơn vị tổng hợp dữ liệu giao thức này và cung cấp dịch vụ API cho người dùng. Điều này làm cho việc tích hợp giữa các dịch vụ trở nên khó khăn và kết quả là người dùng khó có được những hiểu biết toàn diện và đáng tin cậy.
Không hiệu quả về chi phí - Lưu trữ dữ liệu nguội trong giao thức giúp tiết kiệm chi phí bảo mật dữ liệu và máy chủ của người dùng. Tuy nhiên, nếu dữ liệu cần được truy cập thường xuyên để phân tích hoặc yêu cầu tài nguyên máy tính đáng kể thì việc lưu trữ dữ liệu đó trên blockchain có thể không hiệu quả về mặt chi phí.
Vấn đề tiên tri - Hợp đồng thông minh chỉ có thể hoạt động đầy đủ khi chúng có quyền truy cập vào dữ liệu từ thế giới thực. Tuy nhiên, những dữ liệu này không phải lúc nào cũng đáng tin cậy hoặc nhất quán. Không giống như các blockchain duy trì tính toàn vẹn thông qua các thuật toán đồng thuận, dữ liệu bên ngoài không mang tính quyết định. Các giải pháp của Oracle phải phát triển để đảm bảo tính toàn vẹn, chất lượng và khả năng mở rộng của dữ liệu bên ngoài độc lập với lớp ứng dụng cụ thể.
Giao thức này đang ở giai đoạn sơ khai - giao thức sử dụng mã thông báo riêng để khuyến khích người dùng duy trì hoạt động của dịch vụ và trả tiền cho nó. Tuy nhiên, các tham số cần thiết để vận hành giao thức (ví dụ: định nghĩa chính xác và sơ đồ khuyến khích người dùng dịch vụ) thường được quản lý một cách đơn giản. Điều này có nghĩa là tính bền vững kinh tế của giao thức rất khó xác minh. Nếu nhiều giao thức kết nối một cách tự nhiên và tạo ra các đường dẫn dữ liệu thì sẽ có nhiều sự không chắc chắn hơn về việc liệu các đường ống có hoạt động tốt hay không.
Thời gian truy xuất dữ liệu chậm - Các giao thức thường xử lý các giao dịch thông qua sự đồng thuận của nhiều nút, điều này hạn chế tốc độ và khối lượng xử lý thông tin so với logic nghiệp vụ CNTT truyền thống. Nút thắt cổ chai này khó giải quyết trừ khi hiệu suất của tất cả các giao thức tạo nên đường ống được cải thiện đáng kể.
Giá trị đích thực của dữ liệu Web3 - Blockchain là các hệ thống biệt lập chưa được kết nối với thế giới thực. Khi thu thập dữ liệu Web3, chúng tôi cần xem xét liệu dữ liệu được thu thập có thể cung cấp thông tin chi tiết có ý nghĩa đủ để trang trải chi phí xây dựng đường dẫn dữ liệu hay không.
Cú pháp không quen thuộc - Cơ sở hạ tầng dữ liệu CNTT hiện tại và cơ sở hạ tầng blockchain hoạt động rất khác nhau. Ngay cả ngôn ngữ lập trình được sử dụng cũng khác nhau và cơ sở hạ tầng blockchain thường sử dụng các ngôn ngữ cấp thấp hoặc ngôn ngữ mới được thiết kế dành riêng cho nhu cầu blockchain. Điều này gây khó khăn cho các nhà phát triển và người dùng dịch vụ mới trong việc học cách xử lý từng dữ liệu nguyên thủy vì họ cần học một ngôn ngữ lập trình mới hoặc cách suy nghĩ mới về cách làm việc với dữ liệu blockchain.
4. Lego dữ liệu Web3 theo đường ống
Không có kết nối nào giữa các nguyên thủy dữ liệu Web3 hiện tại, chúng trích xuất và xử lý dữ liệu một cách độc lập. Điều này gây khó khăn cho việc thử nghiệm sự phối hợp trong xử lý thông tin. Để giải quyết vấn đề này, bài viết này giới thiệu một đường dẫn dữ liệu thường được sử dụng trong thị trường CNTT và ánh xạ các dữ liệu nguyên thủy Web3 hiện có vào đường dẫn này. Điều này sẽ làm cho trường hợp sử dụng cụ thể hơn.
4.1 Đường dẫn dữ liệu chung
Xây dựng đường dẫn dữ liệu giống như quá trình khái niệm hóa và tự động hóa các quy trình ra quyết định lặp đi lặp lại trong cuộc sống hàng ngày. Bằng cách đó, thông tin có chất lượng cụ thể luôn sẵn có và được sử dụng để ra quyết định. Càng xử lý nhiều dữ liệu phi cấu trúc, thông tin được sử dụng thường xuyên hơn hoặc càng cần phân tích thời gian thực nhiều hơn thì thời gian và chi phí để đạt được tính chủ động cần thiết cho các quyết định trong tương lai có thể được tiết kiệm bằng cách tự động hóa các quy trình này.
Sơ đồ trên cho thấy kiến trúc chung để xây dựng đường dẫn dữ liệu trong thị trường cơ sở hạ tầng CNTT hiện có. Dữ liệu phù hợp cho mục đích phân tích được thu thập từ nguồn dữ liệu chính xác và được lưu trữ trong giải pháp lưu trữ thích hợp tùy theo tính chất của dữ liệu và yêu cầu phân tích. Ví dụ: hồ dữ liệu cung cấp giải pháp lưu trữ dữ liệu thô để phân tích linh hoạt và có thể mở rộng, trong khi kho dữ liệu tập trung vào việc lưu trữ dữ liệu có cấu trúc để truy vấn và phân tích được tối ưu hóa cho logic kinh doanh cụ thể. Dữ liệu sau đó được xử lý thành thông tin chuyên sâu hoặc hữu ích theo nhiều cách khác nhau.
Mỗi cấp độ giải pháp cũng có sẵn dưới dạng dịch vụ đóng gói. Ngoài ra còn có sự quan tâm ngày càng tăng đối với các nhóm sản phẩm SaaS ETL (Trích xuất, Chuyển đổi, Tải) kết nối chuỗi quy trình từ trích xuất dữ liệu đến tải (ví dụ: FiveTran, Panoply, Hivo, Rivery). Trình tự này không phải lúc nào cũng một chiều và các lớp có thể được kết nối với nhau theo nhiều cách khác nhau, tùy thuộc vào nhu cầu cụ thể của tổ chức. Điều quan trọng nhất khi xây dựng đường dẫn dữ liệu là giảm thiểu rủi ro mất dữ liệu có thể xảy ra khi dữ liệu được gửi và nhận đến từng tầng máy chủ. Điều này có thể đạt được bằng cách tối ưu hóa việc tách rời các máy chủ và sử dụng các giải pháp xử lý và lưu trữ dữ liệu đáng tin cậy.
4.2 Đường ống với môi trường trên chuỗi
Sơ đồ khái niệm của đường dẫn dữ liệu được giới thiệu trước đó có thể được áp dụng cho môi trường trên chuỗi, như thể hiện trong hình trên, nhưng cần lưu ý rằng không thể hình thành một đường ống hoàn toàn phi tập trung, bởi vì mỗi thành phần cơ bản ở một mức độ nào đó phụ thuộc vào Giải pháp ngoài chuỗi tập trung. Ngoài ra, hình trên hiện không bao gồm tất cả các giải pháp Web3 và ranh giới phân loại có thể bị mờ—ví dụ: KYVE, ngoài vai trò là nền tảng phương tiện truyền phát trực tuyến, còn bao gồm chức năng của hồ dữ liệu, có thể được coi như một đường dẫn dữ liệu. Ngoài ra, Không gian và Thời gian được phân loại là cơ sở dữ liệu phi tập trung, nhưng nó cung cấp các dịch vụ cổng API như RestAPI và phát trực tuyến, cũng như các dịch vụ ETL.
4.2.1 Chụp/Xử lý
Để người dùng thông thường hoặc dApp sử dụng/vận hành dịch vụ một cách hiệu quả, họ cần có khả năng dễ dàng xác định và truy cập các nguồn dữ liệu được tạo chủ yếu trong giao thức, chẳng hạn như giao dịch, trạng thái và sự kiện nhật ký. Lớp này là nơi phần mềm trung gian phát huy tác dụng, hỗ trợ các quy trình bao gồm oracle, nhắn tin, xác thực và quản lý API. Các giải pháp chính như sau.
Nền tảng phát trực tuyến/lập chỉ mục
Bitquery, Ceramic, KYVE, Lens, Streamr Network, The Graph, trình khám phá khối của các giao thức khác nhau, v.v.
Nút dưới dạng dịch vụ và các dịch vụ RPC/API khác
Lời tiên tri
Lời tiên tri
API 3, Giao thức băng tần, Chainlink, Giao thức Nest, Pyth, Supra oracles, v.v.
4.2.2 Lưu trữ
So với giải pháp lưu trữ Web2, giải pháp lưu trữ Web3 có một số ưu điểm như tính bền bỉ và phân cấp. Tuy nhiên, chúng cũng có một số nhược điểm như giá thành cao, khó khăn trong việc cập nhật và truy vấn dữ liệu. Do đó, nhiều giải pháp khác nhau đã xuất hiện để giải quyết những thiếu sót này và cho phép xử lý hiệu quả dữ liệu động và có cấu trúc trên Web3 - mỗi giải pháp có các đặc điểm khác nhau như loại dữ liệu được xử lý, liệu nó có cấu trúc hay không và liệu nó có chức năng truy vấn được nhúng hay không, v.v. TRÊN.
Mạng lưu trữ phi tập trung
Arweave, Filecoin, KYVE, Sia, Storj, v.v.
cơ sở dữ liệu phi tập trung
Cơ sở dữ liệu dựa trên Arweave (Glacier, HollowDB, Kwil, WeaveDB), ComposeDB, OrbitDB, Polybase, Space and Time, Tableland, v.v.
* Mỗi giao thức có cơ chế lưu trữ liên tục khác nhau. Ví dụ: Arweave là mô hình dựa trên blockchain, tương tự như lưu trữ Ethereum, lưu trữ dữ liệu vĩnh viễn trên chuỗi, trong khi Filecoin, Sia và Storj là mô hình dựa trên hợp đồng, lưu trữ dữ liệu ngoài chuỗi.
4.2.3 Chuyển đổi
Trong ngữ cảnh của Web3, lớp dịch cũng quan trọng như lớp lưu trữ. Điều này là do cấu trúc của blockchain về cơ bản bao gồm một tập hợp các nút phân tán, giúp dễ dàng sử dụng logic phụ trợ có thể mở rộng. Trong ngành công nghiệp AI, mọi người đang tích cực khám phá việc sử dụng những lợi thế này để nghiên cứu trong lĩnh vực học tập liên kết và các giao thức dành riêng cho học máy và vận hành AI đã xuất hiện.
Đào tạo dữ liệu/Mô hình hóa/Máy tính
Akash, Bacalhau, Bittensor, Gensyn, Golem, Together, v.v.
* Học liên kết là phương pháp đào tạo các mô hình trí tuệ nhân tạo bằng cách phân phối mô hình gốc trên nhiều máy khách gốc, sử dụng dữ liệu được lưu trữ để huấn luyện mô hình đó, sau đó thu thập các tham số đã học trên máy chủ trung tâm.
4.2.4 Phân tích/sử dụng
Các dịch vụ bảng thông tin cũng như thông tin chi tiết về người dùng cuối và giải pháp phân tích được liệt kê bên dưới là các nền tảng cho phép người dùng quan sát và khám phá nhiều thông tin chi tiết khác nhau từ các giao thức cụ thể. Một số giải pháp này cũng cung cấp dịch vụ API cho sản phẩm cuối cùng. Tuy nhiên, điều quan trọng cần lưu ý là dữ liệu trong các giải pháp này không phải lúc nào cũng chính xác vì chúng chủ yếu sử dụng các công cụ ngoài chuỗi riêng biệt để lưu trữ và xử lý dữ liệu. Lỗi giữa các giải pháp cũng có thể được quan sát.
Đồng thời, có một nền tảng tên là Chức năng Web3 có thể tự động/kích hoạt việc thực hiện hợp đồng thông minh, giống như các nền tảng tập trung như Google Cloud kích hoạt/thực thi logic nghiệp vụ cụ thể. Bằng cách sử dụng nền tảng này, người dùng có thể triển khai logic kinh doanh theo cách gốc của Web3, thay vì chỉ xử lý dữ liệu trên chuỗi để hiểu rõ hơn.
dịch vụ bảng điều khiển
Phân tích Dune, Flipside Crypto, Footprint, Transpose, v.v.
Thông tin chi tiết và phân tích của người dùng cuối
Chainalaysis, Glassnode, Messari, Nansen, The Tie, Token Terminal, v.v.
Web3 Functions
Chức năng của Chainlink, Mạng Gelato, v.v.
5. Suy nghĩ kết luận
Như Kant đã nói, chúng ta chỉ có thể chứng kiến bề ngoài của sự vật chứ không thể chứng kiến bản chất của chúng. Tuy nhiên, chúng tôi sử dụng các bản ghi quan sát được gọi là dữ liệu để xử lý thông tin và kiến thức, đồng thời chúng tôi thấy những đổi mới trong công nghệ thông tin thúc đẩy sự phát triển của nền văn minh như thế nào. Do đó, việc xây dựng đường truyền dữ liệu trên thị trường Web3, ngoài việc được phân cấp, có thể đóng vai trò quan trọng như một điểm khởi đầu để thực sự nắm bắt những cơ hội này. Tôi muốn kết thúc bài viết này với một vài suy nghĩ.
5.1 Vai trò của giải pháp lưu trữ sẽ trở nên quan trọng hơn
Điều kiện tiên quyết quan trọng nhất để có đường dẫn dữ liệu là thiết lập quản trị dữ liệu và API. Trong một hệ sinh thái ngày càng đa dạng, các thông số kỹ thuật do mỗi giao thức tạo ra sẽ tiếp tục được tạo lại và các hồ sơ giao dịch bị phân mảnh thông qua hệ sinh thái đa chuỗi sẽ khiến các cá nhân khó có được những hiểu biết toàn diện hơn. Khi đó, “giải pháp lưu trữ” là những thực thể có thể cung cấp dữ liệu tích hợp ở định dạng thống nhất bằng cách thu thập thông tin rời rạc và cập nhật thông số kỹ thuật của từng giao thức. Chúng tôi nhận thấy rằng các giải pháp lưu trữ thị trường hiện tại như Snowflake và Databricks đang phát triển nhanh chóng, có lượng khách hàng lớn, được tích hợp theo chiều dọc bằng cách hoạt động ở nhiều cấp độ khác nhau trong quy trình và đang dẫn đầu ngành.
5.2 Cơ hội trên thị trường nguồn dữ liệu
Các trường hợp sử dụng thành công bắt đầu xuất hiện khi dữ liệu trở nên dễ tiếp cận hơn và quá trình xử lý được cải thiện. Điều này tạo ra hiệu ứng vòng tròn tích cực khi các nguồn dữ liệu và công cụ thu thập bùng nổ—kể từ năm 2010, loại và khối lượng dữ liệu kỹ thuật số được thu thập mỗi năm đã tăng theo cấp số nhân kể từ năm 2010, nhờ những tiến bộ vượt bậc trong công nghệ xây dựng đường dẫn dữ liệu. Áp dụng nền tảng này cho thị trường Web3, nhiều nguồn dữ liệu có thể được tạo đệ quy trên chuỗi trong tương lai. Điều này cũng có nghĩa là blockchain sẽ mở rộng sang nhiều lĩnh vực kinh doanh khác nhau. Tại thời điểm này, chúng ta có thể mong đợi việc thu thập dữ liệu sẽ tiến triển thông qua các thị trường dữ liệu như các giải pháp Ocean Protocol hoặc DeWi (không dây phi tập trung) như Helium và XNET, cũng như các giải pháp lưu trữ.
5.3 Điều quan trọng là dữ liệu và phân tích có ý nghĩa
Tuy nhiên, điều quan trọng nhất là hãy liên tục hỏi xem cần chuẩn bị những dữ liệu nào để rút ra những hiểu biết thực sự cần thiết. Không có gì lãng phí hơn việc xây dựng một đường dẫn dữ liệu nhằm mục đích xây dựng một đường dẫn dữ liệu mà không có các giả định rõ ràng để xác thực. Các thị trường hiện tại đã đạt được nhiều đổi mới thông qua việc xây dựng đường truyền dữ liệu, nhưng cũng phải trả giá vô cùng đắt đỏ khi lặp đi lặp lại những thất bại vô nghĩa. Cũng tốt khi có các cuộc thảo luận mang tính xây dựng về sự phát triển của kho công nghệ, nhưng ngành cần thời gian để suy nghĩ và thảo luận về các câu hỏi cơ bản hơn, chẳng hạn như dữ liệu nào sẽ được lưu trữ trong không gian khối hoặc dữ liệu nên được sử dụng cho mục đích gì. . Mục tiêu phải là hiện thực hóa giá trị của Web3 thông qua các trường hợp sử dụng và thông tin tình báo có thể hành động, đồng thời trong quá trình này, việc phát triển nhiều thành phần cơ bản và hoàn thiện quy trình là phương tiện để đạt được mục tiêu này.
