페이지 본문으로 이동

히타치

초고속 데이터베이스 엔진 토토 사이트 Advanced Database: 특징: 효율적인 데이터 처리

백그라운드 가져오기

토토 사이트 Advanced Database는 동일한 테이블에 대한 데이터 검색 처리와 동시에 데이터 저장 처리를 동시에 실행할 수 있는 백그라운드 가져오기 기능을 지원합니다 백그라운드 가져오기는 '청크*'' 단위로 데이터를 가져옵니다

*
데이터 저장 단위입니다 테이블 정의(CREATE TABLE)에 청크 적용을 지정하는 테이블로 데이터를 가져오면 한 번의 가져오기로 가져온 데이터를 하나의 단위(청크)로 처리할 수 있습니다

Hitachi 고급 토토 사이트베이스: 백그라운드 가져오기 예
데이터 검색과 데이터 가져오기는 동일한 테이블에서 동시에 실행될 수 있습니다

백그라운드 가져오기로 가능한 효과 적용

데이터 저장 처리와 데이터 검색 처리를 동시에 실행할 수 있습니다

아래 그림과 같이 데이터를 자주 가져오는 상황에서도 백그라운드 가져오기를 적용하고 검색 프로세스를 계속할 수 있습니다

  • 데이터: 센서 데이터 등 단시간에 발생하는 데이터
  • 데이터 가져오기 타이밍: 시간당 한 번
  • 검색 처리: 데이터를 가져오는 동안에도 계속 처리

청크 아카이브

토토 사이트 Advanced Database를 사용하면 검색이 가능하면서도 데이터를 압축하여 파일로 출력(보관)할 수 있습니다 이 데이터는 청크로 보관됩니다*에서 실행됩니다 단위로 저장하고 있으며, 이 기능을 청크 아카이브(Chunk Archive)라고 합니다

*
데이터 저장 단위입니다 테이블 정의(CREATE TABLE)에 청크 적용을 지정하는 테이블로 데이터를 가져오면 한 번의 가져오기로 가져온 데이터를 하나의 단위(청크)로 처리할 수 있습니다

Hitachi 고급 토토 사이트베이스: 청크 아카이브
데이터 청크 보관 및 데이터 검색

청크 아카이브 적용 효과

검색 빈도가 낮은 데이터를 저장하기 위한 저장 비용 절감

청크 아카이브는 다음 상황에 적용될 수 있습니다

  • 데이터 보존 기간: 5년(60개월)
  • 청크에 저장된 데이터 양: 1개월
  • 자주 검색되는 기간: 최근 1년 이내

가져온 지 1년이 넘었고 더 이상 자주 사용하지 않는 데이터는 보관됩니다 데이터 보유 기간이 종료된 후에는 삭제됩니다

``청크 아카이브''는 자주 검색되지 않는 청크를 압축하고 사용되는 데이터베이스 공간의 양을 줄여 데이터 수명주기를 인식하는 작업을 가능하게 합니다 또한 장기간 데이터를 저장하는 데 필요한 스토리지 비용도 절감됩니다

Hitachi Advanced Database: 검색 빈도가 낮은 토토 사이트를 저장하기 위한 스토리지 비용 절감 이미지
청크 아카이브를 통한 데이터 수명주기 관리

컬럼 저장소

토토 사이트 Advanced Database는 디스크의 동일한 열에 데이터를 연속적으로 저장하는 열 저장소를 지원합니다 테이블을 정의할 때 행 저장소와 열 저장소 중 하나를 선택할 수 있으므로 데이터 사용량에 가장 적합한 저장 형식을 선택할 수 있습니다

Hitachi Advanced Database: 컬럼 저장소 이미지
행 저장소와 열 저장소의 차이점에 대하여

열 저장소 저장 형식 선택의 효과에 대해 설명하겠습니다

대량의 데이터 집계 속도를 높이고 분석 결과를 빠르게 활용

컬럼 스토어는 요약 항목 데이터에만 액세스하므로 디스크 액세스 양을 줄이고 대량의 데이터를 집계하는 프로세스를 가속화하여 분석 결과를 비즈니스 환경에서 빠르게 활용할 수 있습니다
또한 토토 사이트 Advanced Database에서는 청크*1및 토토 사이트 색인*2를 이용하면 특정 월로 압축된 집계 작업 등 부분 검색을 빠르게 처리할 수 있습니다

*1
데이터 저장 장치입니다 테이블 정의(CREATE TABLE)에 청크 적용을 지정하는 테이블로 데이터를 가져오면 한 번의 가져오기로 가져온 데이터를 하나의 단위(청크)로 처리할 수 있습니다
*2
토토 사이트 인덱스를 사용하는 경우 검색 조건을 충족하지 않는 토토 사이트에 데이터를 저장하는 청크에 대한 검색 프로세스가 건너뜁니다(청크는 건너뛸 수 있음)

Hitachi Advanced Database: 대용량 토토 사이트의 집계 속도를 높이고 분석 결과를 빠르게 활용하는 이미지
집계 처리 속도를 높이기 위해 불필요한 액세스를 건너뜁니다

데이터 압축을 통한 DB 용량 감소

데이터 추세를 분석하고 여러 압축 알고리즘 중에서 가장 적합한 압축 방법을 자동으로 선택합니다 데이터는 원시 저장소의 약 1/4~1/20로 압축될 수 있습니다*

*
우리 환경에서 측정된 결과입니다 압축률은 테이블 정의 및 데이터에 따라 달라집니다

Hitachi Advanced Database: 대용량 토토 사이트의 집계 속도를 높이고 분석 결과를 빠르게 활용하는 이미지
데이터 크기를 줄이기 위해 최상의 압축 방법을 자동으로 채택

외부 테이블

토토 사이트 Advanced Database는 외부 데이터 레이크로 사용되는 객체 스토리지에 저장된 객체를 허용하는 외부 테이블과 데이터를 데이터베이스로 가져오지 않고도 SQL을 사용하여 Apache Iceberg 테이블에 직접 액세스할 수 있도록 지원합니다 외부 테이블은 데이터베이스 테이블과 동일한 방식으로 처리되므로 직접 검색 외에도 데이터베이스 테이블에 저장된 데이터를 사용하여 조인 및 교차 검색을 수행할 수도 있습니다

Hitachi 고급 토토 사이트베이스: 외부 테이블을 사용한 객체 직접 검색 및 토토 사이트베이스 테이블과의 교차 검색 이미지
외부 테이블을 사용한 객체 직접 검색 및 데이터베이스 테이블과의 교차 검색

외부 테이블 사용의 효과

SQL 처리를 외부 데이터 레이크로 직접 처리

데이터베이스로 가져올 필요가 없고 SQL을 사용하여 직접 처리할 수 있기 때문에 외부 데이터 레이크의 데이터에 대한 가설 테스트와 같은 분석 준비에 필요한 인력 시간이 줄어듭니다 또한, 외부 데이터 레이크에 있는 데이터와 토토 사이트 Advanced Database 내의 데이터 간 교차 검색이 가능하므로 데이터 레이크에 저장된 과거 데이터와 비교가 더 쉬워진다 이를 통해 데이터 분석이 더욱 효율적으로 이루어지고 더 많은 임시 분석이 가능해집니다

또한, 자주 사용하지 않는 비즈니스 데이터를 저장 비용이 저렴한 객체 스토리지에 저장하고, 더 빠른 검색이 필요한 자주 사용하는 데이터를 토토 사이트 Advanced Database에 저장하여 저장 비용을 최적화할 수 있습니다