클라우드 분류
[KT클라우드]Data Lake Data Lake 상품 개요
작성자 정보
- 관리자 작성
- 작성일
컨텐츠 정보
- 1,622 조회
- 0 추천
-
목록
본문
App 기반의 빅데이터 분석시스템
NexR Enterprise 기반의 KT Data Lake 서비스는 원천 데이터 수집부터 데이터 가공 및 분석, 시각화 대시보드 구성까지 빅데이터 활용에 필요한 전체 기능을 제공합니다.
이 기능들은 App 시스템으로 불리우는 체계하에서 동작합니다.
활용 과정 전체를 각 단계별로 구분하여 해당 기능을 사용하는 사용자들이 각 작업에 맞는 화면상에서 집중해 작업할 수 있는 개별 App을 제공합니다.
App 시스템 개요
- 솔루션의 각 모듈은 MicroService 형태로 구성되어 동작하며 상호간에 최소한의 의존성을 가지도록 구현되어 있습니다.
- 가령 프로젝트 브라우저는 빅데이터 처리에 대한 기능을 제공하지 않는 대신에
- 마치 파일시스템처럼 동작하여 각 프로젝트의 요소를 정리할 수 있는 구조만을 제공합니다.
- 노트북은 데이터 처리의 기본적인 흐름을 정의할 수 있지만, 시각화나 품질 측정등의 다른 업무와 무관하게
- 빅데이터 처리용 코드를 작성하는데 필요한 기능만을 제공합니다.
- 아래 기술된 나머지 App들도 최대한 본연의 작업을하는데 필요한 기능만을 선별해 구성했으며,
- 이런 시스템 구조를 통해 빅데이터 프로젝트에 참여하는 여러 이해관계자들이 자신의 작업 영역 안에서 집중 할 수 있도록 구성했습니다.
- 버전이 올라감에 따라 이런 App간의 연동은 더 유연해질 예정입니다.
제공되는 App은 총 8종이며 각 App 별 역할 및 제공 기능을 대략적인 빅데이터 활용 순서에 맞춰 나열하면 아래 표와 같습니다.
기본 화면 구조
이 솔루션의 각 App은 상단 bar 영역과 메인 컨텐츠 영역으로 구성됩니다.
단, 환경설정 및 현황 App의 경우 우측에 메뉴 바를 가지는 특성이 있습니다.
상단 bar에는 공통적으로 사용되는 아이콘과 각 App의 로고가 자리잡고 있으며, 메인 컨텐츠 영역에는 각 기능에 필요한 요소들이 배치되어있습니다.
각 App별로 상단 bar 영역을 살펴보면 다음과 같습니다.
상단 bar 영역
모든 App의 상단바는 공통 요소을 가지며 아래 보이는 환경설정 및 현황 App을 기준으로 우측부터 살펴보면 다음과 같습니다.
사용자 클릭시 드롭다운 화면
상단 영역 우측의 사용자 아이콘을 클릭하면 다음 그림과 같이 사용자와 관련된 사용자 정보 , 비밀번호 변경 그리고 로그아웃 메뉴가 표시됩니다.
각 메뉴의 화면과 사용방법은 아래에서 설명합니다.
사용자 정보 화면
인증을 거쳐 시스템에 로그인한 사용자는 자신의 정보를 수정할 수 있습니다. 화면 예시는 다음과 같습니다.
아래 설명할 각 탭의 내용은 변경 버튼을 클릭했을 때 반영됩니다.
변경을 원치 않는 경우 취소 버튼을 클릭해 창을 닫을 수 있습니다.
기본 정보 탭
사용자 기본 정보 탭에서는 정보를 변경할 수 있습니다.
허용 자원 설정 탭
관리자는 사용자를 생성할 때 클러스터의 CPU, 메모리 그리고 GPU 코어를 할당할 수 있습니다.
사용자는 자신이 사용할 수 있는 자원 한도 안에서 서비스별로(워크벤치, 노트북, Subject) 스파크 데이터 처리에 사용할 드라이버와 익스큐터 자원을 결정 할 수 있습니다.
- 이와 관련된 예시는 다음과 같습니다. 설명을 위해 IAMUSER라는 사용자가 CPU 20 core, 40G MEM, 0 GPU를 관리자에게 할당받았다고 가정합니다.
| 항목 | 예시 |
| Driver cores | 2 |
| Driver Memory | 4G |
| Executor cores | 2 |
| Executor Memory | 4G |
| Executor Count | 8 |
위의 예시는 1개의 드라이버에 CPU 2 core, 4G 메모리를 할당하고, CPU 2 core, 4G 메모리로 구성된 익스큐터를 8개 실행하겠다는 의미입니다.
위와 같이 설정하면, 할당받은 자원 중 4G의 메모리가 유휴 상태로 남게 됩니다. 각 항목의 최적값은 사용 상황에 따라 달라집니다.
비밀번호 변경
비밀번호 를 변경하고자 하는 경우 기존 비밀번호를 입력하고, 새롭게 변경하고자 하는 비밀번호를 동일하게 입력한 후 변경 버튼을 클릭합니다.
기존과 동일한 비밀번호를 입력하는 경우 변경되지 않습니다.
- ※ 주의: 이 솔루션은 기업의 데이터를 저장하고 처리하므로 비밀번호 노출에 유의해야 합니다. 따라서, 기본(초기) 비밀번호 및 변경 후 90일이 지났다면 비밀번호를 변경하십시오.
로그아웃
로그아웃을 선택하면 로그인한 인증 정보가 무효가 된 후 로그인 화면으로 이동합니다.
메인 컨텐츠 영역
각 App의 메인 컨텐츠 영역은 App 고유의 기능을 표현하는 영역입니다. 이후 장을 통해 각 App별 메인 컨텐츠에 대한 설명을 알아볼 수 있습니다.
"무단배포금지: 클라우드포털(www.linux.co.kr)의 모든 강좌는 저작권에 의해 보호되는 콘텐츠입니다. 무단으로 복제하여 배포하는 행위는 금지되어 있습니다."
관련자료
-
링크
-
이전
-
다음
댓글 0
등록된 댓글이 없습니다.
