오리지널 - 오데일리

저자 - Nan Zhi

11월 초,Web3 데이터 분석 인프라 Dune, DuneAI 발표, 사용자는 자연어 엔진을 사용하여 어떤 언어로든 질문하고 SQL을 모르더라도 암호화된 데이터 통찰력을 얻을 수 있습니다. Odaily는 Dune AI의 유용성과 신뢰성을 검증하기 위해 단순한 것부터 복잡한 것까지 다양한 문제를 통해 Dune AI를 테스트할 것입니다.

사례 1 - 특정 프로토콜 거래량 쿼리

질문: 지난 7일 동안의 Blur 볼륨을 날짜별로 찾으십니까?

Dune AI의 답변과 Dune의 답변을 비교하세요.가장 좋아하는 흐림 쿼리(오른쪽 하단 사진) 데이터를 비교해보면 아래와 같으며, 거의 1% 정도의 차이가 있습니다.

사례 2 - 특정 네트워크 거래량 조회

질문: 오늘 중재에서 처리된 거래 수는 몇 개입니까?

왼쪽 사진은 Dune AI가 제시한 답변이고, 오른쪽 사진은 오데일리가 편집한 쿼리인데, 둘의 결과는 기본적으로 동일하다(차이는 쿼리 실행 시간의 차이에서 비롯된다).

사례 3 - 모호한 쿼리

질문: 지난주 Uniswap의 일별 총 거래량은 무엇입니까?

여기서 세 가지 질문이 생깁니다.

• Dune AI는 쿼리 범위를 Ethereum으로 제한하는 반면 Uniswap은 여러 체인에 배포되며 원래 질문에는 이러한 요구 사항이 없습니다.

• 그리고DefiLlama의 Uniswap데이터를 비교해 보면 차이가 상대적으로 크며, 24일부터 26일까지를 예로 들면 각각 6%, 9%, 11% 차이가 난다.

• 여기서 원래 쿼리는 전주의 월요일부터 일요일까지의 데이터이고, 여기서 마지막 주는 지난 7일로 해석되며, 추가적인 검증을 위해 쿼리문을 지난 한 주의 유니스왑 일일 거래량으로 수정합니다. (지난 일주일간 유니스왑의 일별 전체 거래량)으로 검색한 결과는 아래 그림과 같으며, 아직 조회된 데이터는 지난 7일간입니다.

사례 4 - 여러 조건이 포함된 복잡한 쿼리

질문: 지난 주 동안 Stargate를 사용하여 Ethereum과 Arbitrum 사이에 브리지된 일일 금액은 무엇입니까?

쿼리 결과가 비어있습니다. 오데일리에서 쿼리를 확인한 결과, 전반적인 쿼리 내용 및 구문에는 문제가 없었습니다. 쿼리 오류의 원인은 다음과 같습니다.잘못된 데이터세트가 선택되었습니다.stargate_arbitrum.ProxyOFT_evt_SendToChain, 이는 12개의 데이터로만 구성된 데이터 세트입니다.

사례 5 - 퍼지 쿼리

질문: Uniswap의 수익, Unibot의 수익?

Dune AI는 문제에 대한 추가 설명이 필요하며 총 거래량/일일 거래량과 같은 다양한 쿼리를 독립적으로 제공하지 않습니다.

유니스왑의 일일 수익이라는 질문을 더욱 명확히 하기 위해 듄AI는 질의를 시작했으나 결국 잘못된 답변을 내렸고, 일일 거래량을 유니스왑의 수익으로 계산했다.

사례 6 - 신개념 쿼리

질문: 폴의 비문 과정에 대한 세부 사항은 무엇입니까?

Dune AI는 비문의 개념을 이해하지 못하지만 사이트의 누군가가 pols와 관련된 쿼리를 작성했습니다.

요약

Dune AI의 기본적인 SQL 실력은 탄탄하여, 해당 데이터가 존재하는 한 해당 쿼리를 정확하게 작성할 수 있습니다.또한 자연적인 의미 처리 능력이 부족하고, 정확성이 부족하며, 추상적 이해 능력이 부족한 등의 문제도 있습니다.. 현재 상대적으로 간단한 질문을 제외하면 Dune AI는 쿼리 작성 도우미로만 사용할 수 있으며, 답변이 신뢰할 수 있는지 여부는 SQL 내용을 수동으로 확인해야 합니다.