[TIL] 221024 - 데이터베이스 시스템 소개

실리콘밸리에서 날아온 데이터베이스 - 1. 데이터베이스 시스템 소개

 

데이터 베이스가 왜 필요한가

관계형 데이터베이스

- 프로덕션 관계형 데이터 베이스 (RDSMS)

: 웹 서비스나 앱의 운영에 필요한 데이터를 저장해두는 관계형 데이터 베이스

: MySQL, PostgreSQL, ..

: 데이터를 구조화된 테이블들의 집합으로 구성하여 저장, 관리

: 빠른 처리 속도가 중요한다.

: vs 데이터 웨어하우스 관계형 데이터베이스 (빠른 처리속도보다 얼마나 큰 데이터를 처리할 수 있느냐)

 

- 데이터 웨어하우스

: 서비스용이 아닌 회사 관련 데이터를 저장하고 분석

: BigQuery, Snowflake, MySQL,..

: 구조화된 큰 데이터를 처리하는 것이 중요

: 보통 프로덕션 데이터베이스를 복사해서 데이터 웨어하우스에 저장

: 데이터 직군이라면 반드시 알아야한다.

데이터 순환 구조 : 프로덕션용 데이터베이스와 데이터 웨어하우스

 

비관계형 데이터베이스

: NoSQL 데이터베이스 : 비구조화된 데이터도 다룬다.

: 보통 프로덕션용 관계형 데이터베이를 보완하기위한 용도로 많이 사용된다.

: 크게 4종류가 존재

• Key/Value storage(흔히 캐쉬로 사용되는) : Redis, Memcache, ..
• Document Storeage : MonogoDB
• Wide Column Storage (많은 데이터를 저장 가능한) : Cassandra, HBase, DynamoDB
• Search Engin(검색 엔진) : ElasticSearch

 

백엔드 시스템 구성도 예제 보기

관계형 데이터베이스가 전체 시스템에서 어떻게 사용되는지 구성도 알아보기

2 tier

 

3 tier

비지니스 로직은 어플리케이션 티어에 위치한다.

 

Spring Boot

관계형 데이터베이스를 읽고쓰는 Persistence Layer는 Data tier

→ 데이터 모델을 잘 만들고 그걸 프론트 개발자와 공유/ 헙업

→ 속도 개선을 위한 쿼리 성능을 모니터링하고 필요시 성능 개선 수행

 

 

관계형 데이터 베이스

• 구조화된 데이터를 저장하고 질의할 수 있도록 해주는 스토리지
• 테이블에는 컬럼(열)과 레코드(행)이 존대하며 엑셀 시프레드시트 형태로 저장
• 관계형 데이터베이스를 조작하는 언어 → SQL (DDL, DML)

2단계로 구성된 구조

: 가장 밑단에는 테이블들이 존재 (엑셀의 시트)

: 데이블들은 데이터베이스(스키마)라는 폴더 밑에서 구성 (엑셀에서 파일)

: 테이블의 구조 (테이블 스키마)

• 테이블은 레코드들로 구성 : 행
• 레코드는 하나 이상의 필드(컬럼)로 구성 : 열
• 필드(컬럼)는 이름과 타입과 속성(primary key)으로 구성됨

SQL 소개

구조화된 데이터를 다루는데 최적화가 되어있다.

: 많은 관계형 데이터베이스들이 플랫한 구조만 지원한다.(no nested like JSON - 구글 빅쿼리는 nested structure을 지원함)

• 데이터 모델
  • Star schema : 데이터를 논리적 단위로 나눠 저장하고 필요시 조인, 스토리지 낭비가 덜하고 업데이트가 쉽다.
  • Denormalized schema : noSQL이나 데이터 웨어하우스에서 사용하는 방식. 단위 테이블로 나눠 저장하지 않음으로 별도의 조인이 필요없는 형태여서 스토리지를 더 사용하지만 조인이 필요없어 빠른 계산 가능

Star schema

Denormalized schema

• 기본
  • 다수의 sql 문을 사용한다면 ; 으로 분리
  • 인라인 주석 --
  • 명명규칙을 정하는게 중요 : 복수형/단수형 등
• DDL : 데이블의 구조를 정의하는 언어
  • GREATE TABLE : 성능향상을 위해 인덱스를 지정할 수 있음.
  • DROP TABLE : IF EXISTS
  • ALTER TABLE
• DML : 데이블에서 원하는 레코드를 읽어오는 질의 언어. 추가/삭제/갱신
  • SELECT
  • INSERT INTO / UPDATE FROM / DELET FROM (TRUNCATE : 모든 레코드 삭제)

 

 

출처 - 한기용 강사님 : 실리콘밸리에서 날아온 데이터 베이스