Azure Synapse Analytics는 데이터를 수집, 변환, 모델링, 분석 및 배포하는 데 도움이 되는 다양한 분석 엔진을 제공합니다. Apache Spark 풀은 오픈 소스 빅 데이터 컴퓨팅 기능을 제공합니다. Synapse 작업 영역에서 Apache Spark 풀을 만든 후에는 더 빠른 분석 인사이트를 위해 데이터를 로드, 모델링, 처리 및 배포할 수 있습니다.
이 빠른 시작에서는 Azure Portal을 사용하여 Synapse 작업 영역에서 Apache Spark 풀을 만드는 방법을 알아봅니다.
중요합니다
Spark 인스턴스에 대한 청구는 사용 여부에 관계없이 분 단위로 비례 배분됩니다. Spark 인스턴스를 사용한 후 꼭 인스턴스를 종료하거나 짧은 시간 제한을 설정해야 합니다. 자세한 내용은 이 문서의 리소스 정리 섹션을 참조하세요.
Azure 구독이 아직 없는 경우 시작하기 전에 체험 계정을 만듭니다.
필수 조건
- Azure 구독이 필요합니다. 필요한 경우 체험 Azure 계정 만들기
- Synapse 작업 영역을 사용할 것입니다.
Azure Portal에 로그인
Azure 포털에 로그인하세요.
Synapse 작업 영역으로 이동
검색 창에 서비스 이름(또는 리소스 이름)을 직접 입력하여 Apache Spark 풀이 생성될 때 Synapse 작업 영역으로 이동합니다.
작업 영역 목록에서 열려는 작업 영역의 이름(또는 이름의 일부)을 입력합니다. 이 예제에서는 contosoanalytics라는 작업 영역을 사용합니다.
새 Apache Spark 풀 만들기
Apache Spark 풀을 만들려는 Synapse 작업 영역에서 새 Apache Spark 풀을 선택합니다.
기본 사항 탭에서 다음 정보를 입력합니다.
설정 제안된 값 설명 Apache Spark 풀 이름 다음과 같은 유효한 풀 이름 contosospark
Apache Spark 풀이 사용할 이름입니다. 노드 크기 작음(4 vCPU/32GB) 이 빠른 시작에서는 비용을 줄이기 위해 이 값을 가장 작은 크기로 설정합니다. 자동 크기 조정 비활성화 이 빠른 시작에서는 자동 크기 조정이 필요하지 않습니다. 노드 수 5 이 빠른 시작의 비용을 제한하려면 작은 크기를 사용합니다. 중요합니다
Apache Spark 풀에서 사용할 수 있는 이름에는 특정 제한 사항이 있습니다. 이름은 문자 또는 숫자만 포함해야 하고, 15자 이하여야 하고, 문자로 시작하고 예약어를 포함하지 않아야 하고, 작업 영역에서 고유해야 합니다.
다음: 태그를 선택합니다. Azure 태그 사용을 고려하세요. 예를 들어 리소스를 만든 사람을 식별하는 "소유자" 또는 "CreatedBy" 태그와 이 리소스가 프로덕션, 개발 등에 있는지 여부를 식별하는 "환경" 태그가 있습니다. 자세한 내용은 Azure 리소스에 대한 명명 및 태그 지정 전략 개발을 참조 하세요.
Review + create를 선택합니다.
프로비전이 완료되면 작업 영역으로 다시 이동하면 새로 만든 Apache Spark 풀에 대한 새 항목이 표시됩니다.
이 시점에서는 실행 중인 리소스가 없고, Spark에 대한 요금이 부과되지 않으며, 만들려는 Spark 인스턴스에 대한 메타데이터를 만들었습니다.
자원을 정리하세요
다음 단계에서는 작업 영역에서 Apache Spark 풀을 삭제합니다.
경고
Apache Spark 풀을 삭제하면 작업 영역에서 분석 엔진이 제거됩니다. 더 이상 풀에 연결할 수 없으며 이 Apache Spark 풀을 사용하는 모든 쿼리, 파이프라인 및 Notebook이 더 이상 작동하지 않습니다.
Apache Spark 풀을 삭제하려면 다음 단계를 수행합니다.
- 작업 영역에서 Apache Spark 풀 창으로 이동합니다.
- 삭제할 Apache Spark 풀을 선택합니다(이 경우 contosospark).
-
을 선택하고을 삭제합니다.
- 삭제를 확인하고 삭제 단추를 선택합니다.
- 프로세스가 성공적으로 완료되면 Apache Spark 풀이 작업 영역 리소스에 더 이상 나열되지 않습니다.