2023년 7월 7일, 세계 인공 지능 회의 조직위원회 사무소의 안내에 따라 Lingyu 오픈 소스 커뮤니티, Ant Group 및 Machine Heart가 공동 주최한 데이터 요소 및 개인 정보 컴퓨팅 포럼이 상하이 세계 엑스포에서 열렸습니다. 컨벤션 센터. 포럼에서 Ant Group 개인 정보 컴퓨팅 부서의 총책임자이자 Yinyu 커뮤니티 책임자인 Wang Lei는 Yinyu 1.0 버전을 출시하고 Yinyu 버전 1.0의 프레임워크 확장 및 업그레이드에 대해 전반적으로 소개했습니다. lingo 1.0 버전은 오픈 소스의 범위를 더욱 확장할 뿐만 아니라 전체 아키텍처를 최적화하고 확장합니다.핵심 콘텐츠는 제품 레이어, 리소스 레이어, 상호 연결 및 기타 부문을 포함하고 전체 효과는 성능 최적화, 사용 용이성을 포함합니다. , 상호 연결 리치.
그림: 인수 1.0 아키텍처 다이어그램
제품 계층: 원활한 학습 곡선으로 사용 편의성 향상
Lingyu 개방형 플랫폼은 작년에 경험을 위해 50개 이상의 기관에 개방되었습니다. 이번에 lingo 1.0 버전은 새로운 MVP(Minimum Viable Product) 배포 경험 패키지를 제공 합니다. **프라이버시 컴퓨팅 초보자를 위한 경량 기능 경험 도구, 내장 노드, 데이터 리소스, 노드 간 상호 인증, 설치 데이터 처리, 데이터 분석, 모델 개발 및 모델 평가와 같은 주요 공통 기능. **프로덕션 시나리오에 더 중점을 둔 Hidden Words 개방형 플랫폼에 비해 Hidden Words MVP 배포 경험 패키지는 다양한 방식으로 사용의 문턱을 낮추어 비즈니스 프로덕션의 정식 사용을 위한 길을 열어줍니다. (다운로드 주소: https://www.secretflow.org.cn/docs/quickstart/mvp-platform)
1. MVP 배포 경험 패키지는 어떤 문제를 해결할 수 있습니까?
산업 등급의 고가용성 개인 정보 보호 컴퓨팅 프레임워크인 Lingyu는 종종 성능과 안정성으로 찬사를 받습니다. 그러나 프라이버시 컴퓨팅의 많은 잠재 사용자와 초보 사용자에게 기본 요구 사항은 기능을 빠르게 인식하고 전체 프로세스를 이해하며 직관적인 효과를 얻어 판단이나 결정을 내리는 것입니다.
Lingyu MVP 배포 경험 패키지는 사용자 경험 피드백을 성숙한 제품 기능으로 변환합니다.프라이버시 컴퓨팅 초보자의 관점에서 준비 단계는 설치 및 배포 프로세스에 최대한 포함되어 간의 직접 대면 효율성을 향상시킵니다. 사용자 및 프라이버시 컴퓨팅 기능. 또한 원래 애플리케이션 검토 및 리소스 지원 제한을 깨뜨려 혁신적인 기술이 임계값 없이 더 넓은 범위의 사용자 경험에 도움이 될 수 있도록 했습니다.
2. Argot MVP 배포 경험 패키지의 구체적인 이점
- 장점 1: 복잡성을 단순화하고 준비 단계에서 막힌 지점을 줄입니다.
원래 경험 과정에서 사용자는 노드 자원과 데이터 자원을 스스로 구성해야 합니다. 긴 준비 링크와 많은 문제를 해결하기 위해 Argument MVP 배포 경험 패키지는 이러한 준비 단계를 패키지에 캡슐화하여 "원 클릭 설치 패키지"의 형태로 사용자에게 제공합니다. 설치 프로세스에는 공동 프로젝트를 위한 사전 절차 준비도 포함되어 있으므로 사용자는 프라이버시 컴퓨팅 기능을 보다 빠르게 경험할 수 있습니다.
- 장점 2: 템플릿 구성은 복잡한 구성 요소로 시작하는 어려움을 줄여줍니다.
처음 경험하는 사용자를 위해 Lingyu MVP 배포 경험 패키지는 시나리오 기반 교육 흐름 템플릿 옵션을 제공하며 각 구성 요소의 구성이 완료되었습니다. 이러한 템플릿은 결과가 나올 때까지 자동으로 실행될 수 있으므로 사용자가 구성 요소의 원리를 이해하고 맞춤형 교육 스트림의 구성 어려움을 줄이는 데 도움이 됩니다.
- 장점 3 : 초심자 수련원의 기능체험과 기능설명이 동시에 진행됩니다.
Lingyu MVP 배포 경험 패키지는 기능과 자습서를 하나로 결합하고 대화형 초보자 가이드를 추가하여 사용자가 학습하는 동안 실습을 완료할 수 있도록 하여 프라이버시 컴퓨팅의 학습 곡선을 더욱 원활하게 합니다.
리소스 계층: 기관 간 컴퓨팅 임무에서
어려운 차원 해결
Lingo 버전 1.0은 공식적으로 오픈 소스입니다. **Kuscia 프라이버시 컴퓨팅 작업 오케스트레이션 프레임워크: **Kuscia는 Lingo를 사용할 때 포트 병합 및 API 액세스와 같은 통합 문제를 해결할 수 있으며 타사의 상호 연결 또는 내장 배포와 같은 다양한 모드를 지원합니다. 시스템 및 타사 시스템 상호 운용성. (github 주소: https://github.com/secretflow/kuscia)
1. 인프라의 차이점은 무엇입니까? 기관 간 컴퓨팅 임무에서 어떤 문제가 발생합니까?
프라이버시 컴퓨팅은 여러 교차 기관 시나리오를 수반하며, 공동 프로젝트의 다양한 참가자는 데이터 저장, 데이터 전송, 컴퓨팅 리소스 및 보안 제어와 같은 여러 측면에서 서로 다르며, 이를 총칭하여 인프라 차이라고 할 수 있습니다.
참여자마다 운영 환경과 네트워크 링크가 다릅니다. 네트워크 링크는 당사자가 프라이버시 컴퓨팅 애플리케이션을 구축할 때 노드 간 통신 주소, 통신 프로토콜, 메시지 암호화, 요청 인증 등을 말하며 운영 환경은 물리적 머신, 가상 머신 등으로 나눌 수 있습니다.
기관 간 컴퓨팅 작업에는 여러 기관의 리소스 조정이 포함됩니다. 작업 스케줄링 과정에서 작업이 제 시간에 완료될 수 있도록 다양한 기관의 자원 할당을 조정하고 관리해야 하며, 전송 중 변조 또는 도난으로부터 데이터를 보호하기 위해 안전한 통신 프로토콜 및 메커니즘을 사용해야 합니다. . 자원의 효율적인 관리와 과학적인 스케줄링이 보장되지 않으면 비효율적인 컴퓨팅 작업, 컴퓨팅 리소스의 낭비 또는 중복, 불안정한 응용 프로그램 및 작업 실패와 같은 일련의 문제가 발생합니다.
2. Kuscia는 이러한 문제를 어떻게 해결합니까?
배치에서 기본적으로 경량 (경량 노드는 최소 2C4G 지원)의 요구 사항을 해결하고 액세스 시 비즈니스 조직의 다양한 포트 적응 요구 사항에 중점을 둡니다.조직의 단일 포트를 지원할 뿐만 아니라 다중 작업 포트도 지원합니다. 강화. 또한 현재 기업체들이 집중하고 있는 프라이버시 컴퓨팅 구축 이슈로는 네트워킹 모델 등이 있는데, Kuscia는 평등한 협력의 탈중앙화 P2P 모델, 관리와 통제가 용이한 중앙집중형 모델, 두 가지가 공존하는 하이브리드 모델을 지원한다. 다자간 협력에.
작업 예약에서 DAG 작업 예약과 같은 기본 표준 구성 외에도 Kuscia는 다중 작업 동시성 지원에 중점을 둡니다 . 프라이버시 컴퓨팅 작업은 일반적으로 계산 집약적이므로 여러 조직의 동시 실행 및 다중 작업 동시성은 컴퓨팅 리소스 경쟁을 유발합니다.Kuscia는 작업 간 리소스 격리 및 제어 가능한 작업 우선 순위를 통해 리소스의 합리적인 할당을 보장합니다.
외부 시스템과의 연결에서 Kuscia는 작업 예약 계층의 상호 연결 및 상호 통신을 실현했으며 UnionPay 블랙 박스 상호 연결 및 상호 통신 프로토콜을 지원합니다. Kuscia는 프라이버시 컴퓨팅 애플리케이션을 위한 통합 운영 인터페이스를 제공하며 사용자는 FATE와 같은 기존의 다양한 프라이버시 컴퓨팅 엔진을 직접 호출할 수 있습니다. 예를 들어 비즈니스 당사자 A는 비즈니스 플랫폼에서 특정 프레임워크의 연합 학습 기능을 사용하지만 비즈니스 확장 및 업그레이드로 인해 단일 기능이 더 이상 수요를 충족할 수 없습니다. 호출 및 원래 프레임워크의 컴퓨팅 성능 확장, 둘 다 수행.
알고리즘 계층 및 스케줄링 계층 전체 스택 상호 연결
2022년 말, Ant Group이 설계한 업계 최초의 화이트 박스 상호 연결 개방형 프로토콜인 "Privacy Computing Cross-Platform Open Algorithm Protocol Part I: ECDH-PSI"는 중국 정보 통신 기술 아카데미의 개인 정보 컴퓨팅 연합이 주도합니다. 가 공식적으로 공개되어 프라이버시 컴퓨팅이 더 깊은 수준에 진입했음을 표시하고 상호 통신 수준이 알고리즘 상호 통신의 새로운 상황에 진입했습니다.
SS-LR 프로토콜도 Lingo 버전 1.0에서 표준화되었습니다. SS-LR 상호 연결에는 전송 계층의 표준화, 암호화 프로토콜의 표준화, 보안 운영자 인터페이스의 표준화 및 응용 알고리즘의 표준화가 포함되며 거의 모든 argot 알고리즘 엔진 측면이 관련됩니다. 이를 기반으로 Cryptography Engine의 상호 연결 및 상호 통신 인프라가 구체화되기 시작했으며 다른 상호 운용성 알고리즘 프로토콜은 향후 더 빠르고 더 많이 출시되어 완전한 개방형 알고리즘(화이트 박스) 프로토콜 클러스터 집합을 형성할 것입니다.
동시에 Kuscia는 작업 스케줄링 측면에서 Beijing Financial Industry Alliance의 상호 연결 및 상호 운용성 요구 사항에서 최신 상호 연결 및 상호 운용성 프로토콜을 지원하여 플랫폼과 생태계 전반에서 알고리즘 컨테이너를 예약하고 실행할 수 있습니다. 현재 Kuscia는 Insight 플랫폼과 협력하고 있으며 Insight의 알고리즘 컨테이너는 Kuscia 플랫폼에서 실행할 수 있을 뿐만 아니라 Lingyu의 알고리즘 컨테이너도 Insight 플랫폼에서 실행할 수 있습니다.
알고리즘 엔진과 Kuscia 스케줄링 플랫폼의 전체 스택의 상호 연결을 통해 Lingyu는 보다 투명하고 열린 세상을 구축하기 위해 노력하고 있습니다. Yinyu는 전 세계적으로 상호 연결된 암호화 데이터 요소 순환 네트워크를 강화하고 개인 정보 컴퓨팅 산업의 발전을 촉진하기 위해 각계 각층과 손을 잡을 의향이 있습니다.
크립틱 버전 1.0의 더 많은 하이라이트
위에서 언급한 세 가지 사항 외에도 lingo 1.0 버전은 알고리즘 계층, 장치 계층, 암호화 기능 및 사용 편의성 측면에서 업데이트할 수 있습니다. (여러분의 ⭐️는 Yinyu 오픈 소스 커뮤니티에 가장 큰 격려입니다_ : https://github.com/secretflow/secretflow)
