하나의 기사로 Bacalhau 1.0 이해하기: 개인 데이터의 잠재력 활용

원본 출처:Filecoin Network

원본 출처:이 기사는 2023년 5월 보스턴 서밋에서 Simon Worthington이 발표한 내용을 바탕으로 작성되었습니다.。

Bacalhau연설

데이터를 로컬에 보관하는 또 다른 이유는 바로 제어입니다. HIPAA(건강 보험 이동성 및 책임에 관한 법률) 또는 GDPR(일반 데이터 보호 규정)과 같은 필수 규정을 통하거나 민감한 금융 또는 기업 비밀의 보호, 로컬 보호를 통해 거의 100%의 데이터가 어떤 형태로든 보호됩니다. 통치. 데이터를 컴퓨팅으로 이동하면 일반적인 안전 영역에서 벗어나 오용 위험이 높아집니다.

대부분의 데이터는 엄격하게 열리거나 닫히지 않고 일정 범위 내에 존재합니다. 이 범위 내에서 특정 개인에게 특정 목적을 위한 액세스 권한이 부여될 수 있습니다.

이미지 설명

데이터 거버넌스와 관련된 전 세계 벌금은 2008년 이후 총 2,500억 달러에 달했습니다. 따라서 대부분의 기업이 데이터 공유를 두려워하여 기업 데이터의 68%가 활용되지 않는 것은 놀라운 일이 아닙니다. 실제로 대부분의 통제된 데이터는 원칙적으로 더 효과적인 의사 결정을 위해 공유되고 사용될 수 있지만, 이는 올바른 사람과 올바른 목적을 위해서만 가능합니다.

첫 번째 수준 제목

데이터 공유에는 기술적 시행이 필요합니다.

대부분의 조직은 엄격한 데이터 공유 계약이나 계약을 통해 이러한 요구 사항을 충족하려고 합니다. 이러한 프로토콜은 설정하는 데 비용과 시간이 많이 걸립니다. 중앙 정부나 금융 기관과 같은 기업의 경우 내부 팀 간에 데이터를 공유할 수 있도록 데이터 거버넌스를 통과하는 데 몇 달이 걸릴 수 있습니다.

더 나쁜 것은 이러한 계약이 효과가 없다는 것입니다. 대부분의 데이터 공유 계약은 완전히 시행할 수 없으며 잘못된 보안 감각을 제공하는 역할만 합니다. 데이터가 신뢰 경계를 넘으면 소프트 메커니즘(예: 모든 사람이 계약을 준수하도록 신뢰)만이 남용을 방지할 수 있습니다. 데이터를 공유하는 실제 작업은 모든 사람이 볼 수 없으며 감독하기 어렵습니다.

데이터 제공자와 데이터 사용자 간의 계약이나 동의가 효과가 없는 경우가 종종 있는 것으로 나타났습니다.

Cambridge Analytica 스캔들에서는 계약 조건이 완전히 무시되었고 개인 데이터가 오용되었습니다.

——강력한 기술적 증거가 부족하면 법원에서 유효한 정보가 유출될 수 있으며 규제 기관, 정치인, 언론인 및 대중이 무슨 일이 일어났는지 이해하기 어려울 수 있습니다.

분명히 필요한 것은 신뢰 경계를 넘어 데이터를 재사용하는 새로운 방법입니다. 즉, 분석가에게 규제 벌금을 부과하고 데이터 소유자에게 헤드라인을 장식할 위험 없이 데이터에 대한 간단하고 제어된 액세스를 제공하는 방법입니다.

첫 번째 수준 제목

Bacalhau는 데이터 공유를 가시화하고 감사 가능하게 만듭니다.

Bacalhau에서는 데이터 네이티브 컴퓨팅이 데이터 거버넌스 문제에 대한 해답이라고 믿습니다. 데이터를 보존하고 계산을 위해 데이터에 대한 승인, 감사 및 제어를 허용함으로써 오용 위험을 줄이면서 더 많은 데이터를 사용할 수 있습니다.

Bacalhau 1.0의 일부로 작업 및 데이터 거버넌스 기능이 추가되었음을 발표하게 된 것을 자랑스럽게 생각합니다. Bacalhau를 사용하면 데이터 소유자는 자신의 개인 데이터에 대해 누가, 무엇을, 어디서, 왜, 어떻게 계산을 수행하는지 제어할 수 있습니다.

첫 번째 수준 제목

Bacalhau 거버넌스 코드 및 출력

인간이 항상 통제할 수 있지만 모든 결정을 인간이 내릴 필요는 없습니다. 사전 거버넌스 프로세스는 유연하며 필요에 따라 자동화될 수 있습니다. 데이터 소유자는 정책을 설정하고, 향후 계산을 심층적으로 검사하고, 사람들마다 다른 정책을 설정하고, 보안과 위험을 분석하는 복잡한 알고리즘을 호출할 수 있습니다. 작업이 자동 제어에 적합하지 않은 경우 인간이 최종 결정을 내릴 수 있습니다.

이미지 설명

Bacalhau는 계산을 위한 두 개의 게이트웨이(계산 전과 계산 후)를 제공합니다.

승인되면 Bacalhau는 요청된 데이터에만 액세스할 수 있고 호스트 시스템에서 안전하게 격리되는 적절한 실행자에게 작업을 보냅니다. Bacalhau는 처리 능력과 메모리 사용량을 제어하기 위해 작업에 리소스 제약을 적용합니다.사전 제어는 합리적인 첫 번째 신뢰 방어선을 제공하지만 일반적으로 컴퓨터 프로그램을 실행하지 않고 무엇을 할지 결정하는 것은 어렵고 기술적 능력이 필요합니다.ONS

우리는 수십 년 동안 데이터 및 기타 관련 통제된 연구 환경에 대한 통제된 액세스를 안전하게 허용하고 디지털 영역에서의 관행을 차용하면서 배웠습니다. 따라서 사전 실행 제어 외에도 Bacalhau는 작업 제출자에게 결과가 공개되기 전에 실행 후 결과 수정을 허용합니다.

Bacalhau는 계산을 완료하면 결과를 비공개 사전 출시 영역에 저장합니다. 그런 다음 관리자는 작업의 백그라운드 확인 결과를 사용하여 해당 결과가 작업에 예상되는지 여부를 결정합니다. 관리자가 공유하기에 적합한 콘텐츠라고 판단하면 결과를 다운로드할 수 있습니다. 또한, 개인 저장 영역에 대한 접근은 엄격하게 잠겨 있으며, 사용자는 Bacalhau의 다운로드 기능을 통해서만 자신의 작업에 대한 결과를 스트리밍할 수 있습니다.사전 제어와 마찬가지로 결과에 대해 전체 복잡한 분석 세트를 수행할 수 있습니다. 통과하다, 데이터 소유자는 개인 식별 정보(PII)를 자동으로 감지하고, CSV와 같은 표 형식의 데이터를 요약하고, 이미지 및 비디오 클립의 콘텐츠를 분석할 수 있습니다. 생성된 메타데이터는 결과를 자동으로 게시하고 인간의 의사 결정을 위한 귀중한 정보를 제공하는 데 사용될 수 있습니다.

첫 번째 수준 제목

관리와 통제가 새로운 공동 학습을 열어줍니다

신뢰 경계로 분리된 데이터를 컴퓨팅하면 대규모 데이터 공유가 가능하지만 현재 안전한 기술 솔루션은 없습니다. 조직이 보유하고 있는 데이터가 공유 가치를 생성하기 위해 보다 광범위하게 공유되는 경우 조직은 이제 복잡한 데이터 거버넌스 없이 Bacalhau 작업 조정 및 개방형 데이터 액세스를 적용할 수 있습니다.

예를 들어, 대학에서는 시민 과학자나 외부 연구자들에게 더 많은 데이터를 제공할 수 있고, 한 정부 부서에서 다른 부서가 데이터를 분석하도록 허용할 수 있으며, 규제가 엄격한 금융 기관의 한 팀에서 다른 팀이 해당 데이터를 심층적으로 분석하도록 허용할 수 있습니다. 요약하자면, 신뢰할 수 없는 사용자에게 원시 데이터를 공개하지 않는 것이 중요합니다. Bacalhau는 사용자가 분석 결과를 얻을 수 있도록 보장합니다.

동일한 분산 제어 컴퓨팅 모델을 사용하면 서로 다른 조직의 참여자 간의 연합 학습도 가능합니다. Bacalhau를 사용하면 독립 조직은 데이터를 공유하지 않고도 집계된 데이터에서 심층 분석을 수행할 수 있습니다. 연합 학습 기술을 통해 데이터 과학자는 이제 해당 조직에 데이터 제어권과 데이터 사용에 대한 정확한 가시성을 제공하지 않고도 다양한 독립 조직 또는 경쟁 조직의 데이터 세트에 대한 기계 학습 또는 AI 모델을 훈련할 수 있습니다.

데이터를 한곳에 중앙 집중화하면 귀중한 집계 데이터가 판매되거나 오용될 수 있지만, 데이터를 로컬에 보관하면 각 보험사는 해당 데이터가 상호 이익을 위해 상호 합의된 목적으로만 사용된다는 것을 확인할 수 있습니다.

첫 번째 수준 제목

특정 주제 분석을 위한 컴퓨팅 아일랜드

마지막으로 Bacalhau가 제공하는 작업 실행에 대한 세밀한 제어를 통해 이제 관리자는 컴퓨팅 섬으로 들어가는 관문이 될 수 있습니다. 이 구조에서는 특정 목적을 위한 리소스 제공에 관심이 있는 독립 컴퓨팅 제공업체와 데이터 소유자가 작업 권한을 신뢰할 수 있는 컨트롤러에 위임할 수 있습니다.

이러한 방식으로 과학자들은 외부 액세스 요청을 컨트롤러에 위임함으로써 더 큰 공익 목표에 집중할 수 있습니다. Bacalhau의 강력한 감사 로그를 통해 과학자들은 컨트롤러가 합의된 정책에 따라 작동했는지 나중에 확인할 수 있습니다.

첫 번째 수준 제목

Bacalhau는 데이터 공유의 미래입니다

Bacalhau 1.0에서 작업 및 데이터 거버넌스를 출시하게 되어 기쁘게 생각합니다! 우리는 데이터 컴퓨팅이 데이터 공유에 대한 새로운 사고 방식, 즉 데이터를 공유하지 않음으로써 안전하게 유지하는 방식을 나타낸다고 믿습니다.Bacalhau Slack현재 우리는 신뢰 경계를 넘어 관리되는 컴퓨팅의 잠재력을 인식하는 기업 및 정부 기관과 협력하고 있습니다. 이러한 기능이 어떻게 작동하는지 자세히 알아보려면 가입하세요.또는 저희에게 직접 연락주세요。