클라우드응용SW 3주 데이터

데이터의 구분

1. 구조화
   table 형태 ex) 데이터베이스, 엑셀
2. 반구조화
   문서 포맷은 여러가지가 있으며 주로 문서 데이터
3. 비구조화
   주로 파일 형태 ex) 음성, 이미지, 채팅 내역

OLTP, OLAP

• OLTP (온라인 거래 처리)
  한 번에 한 트랜잭션으로 저장
• OLAP (온라인 분석 처리)
  데이터는 큐브에 주기적으로 로드, 집계, 저장

트랜잭션 워크로드

트랜잭션 데이터 - 조직의 활동과 관련된 상호 작용을 추적하는 정보

• 원자성 - 각 트랜잭션이 완전히 성공하거나 실패하는 단일 단위로 처리된다
• 일관성 - 트랜잭션이 데이터 베이스 내 데이터의 상태를 유효 상태 간에만 전황할 수 있다
• 격리 - 여러 트랜잭션을 동시에 실행해도 데이터 베이스는 동일 상태로 유지된다
• 영속성 - 커밋된 트랜잭션은 커밋된 상태로 유지된다

분석 워크로드

데이터 분석 및 의사 결정에 사용된다

• 요약
• 추세
• 비즈니스 정보

일괄 처리, 스트림 처리

프로세스를 통해 원시 데이터를 의미 있는 정보로 전환하는 것

• 일괄 처리 - 데이터 요소가 그룹으로 수집된다. 이후 전체 그룹이 향후 일괄 처리됨.
• 스트림 처리 - 새 데이터가 도착하면 처리된다.

비관계형 데이터 (NoSQL)

고정된 테이블 스키마 없이 문서, 키-값, 그래프 등의 다양한 구조로 데이터를 저장하는 유연한 시스템
iot 및 텔레매틱스, 소매 및 마케팅, 게임, 웹 및 모바일 등에 사용된다

반구조화 데이터

데이터 구조는 필드별로 실제 데이터 내에 정의.
형식 유형에는 JSON, AVRO,ORC,Parquet 이 포함된다.

Azure Database

PostgreSQL , MySQL, MariaDB를 지원한다

• 장점
  • 완전 관리형 커뮤니티 데이터베이스
  • 최저 TCO로 고가용성 기본 제공
  • 지능형 성능 및 규모
  • 업계 최고의 보안 및 규정 준수
  • Azure 에코 시스템과의 통합