[빅분기] 1과목 1장 1 빅데이터의 특징

1. 데이터 기초

 

(1) 데이터의 이해

(1-1) 데이터의 정의 

: 이론을 세우는 데 기초가 되는 사실 또는 바탕이 되는 자료, 혹은 컴퓨터가 처리할 수 있는 문자, 숫자, 소리, 그림 등의 형태로 된 자료

*데이터는 '자료', 여기에 의미가 더해지면 '정보'가 된다. 

(1-2) 데이터의 유형 

 ① 정량적 데이터(정형 데이터) : 숫자, 도형, 기호 등 수치로 표현 가능 데이터 

 ② 정성적 데이터(비정형 데이터) : 언어, 문자 등 

(1-3) 암묵지와 형식지 

 ① 암묵지 (Tacit Knowledge) : 학습, 경험 통해 습득된 지식 (겉으로 드러나지 x)

 ② 형식지 (Explicit Knowledge) : 형상화된 지식 - 교과서, 신문 등 

 (1-4) 데이터와 정보 

① 데이터 -> +의미 : ② 정보 -> + 유의미한 정보 분류, 개인 경험 결합 후 내재화 : ③ 지식 -> +지식 축적 , 아이디어 결합 : ④ 지혜 

 

(2) 데이터베이스의 정의와 특징 

(2-1) 데이터베이스 연혁 :

1950년 미국 군수물자 관리 자료 '데이터(Data)+기지(base)'

1963년 미국 SDC(System Development Corporation) 심포지엄에서 최초로 용어 사용, 대량의 데이터를 축적하는 기지, 데이터 베이스

1963년 GE 최초 데이터베이스 관리 시스템, IDS 개발 

1975년 대한민국_미국의 CAC가 KORSTIC(Korea Science Technology Information Center) 통해 데이터베이스 시작

(2-2) 데이터베이스 정의

EU '데이터베이스의 법적 보호에 관한 지침' : 체계적, 조직적으로 정리된 전자식 혹은 기타 수단으로 접근할 수 있는 독립된 저작물, 데이터, 수집물 

우리나라 '저작권법' : 체계적으로 배열 또는 구성한 편집물, 개별적으로 소재에 접근하거나 검색할 수 있도록 한 것

컴퓨터 용어 사전, 정보통신용어사전 : 복수 업무(저장, 공급) 지원할 수 있도록 일정한 구조에 따라 편성된 데이터의 집합 

한국데이터산업진흥원 : 다수의 콘텐츠를 체계적으로 수집, 축적하여 이용할 수 있도록 정리한 정보의 집합체

*DB(데이터베이스) v.s. DBMS(데이터베이스 관리시스템) 

: DB는 데이터 집합체, DBMS 는 데이터 구축, 유지 관리하는 소프트웨어 

(2-3) 데이터베이스의 특성 4가지 

중복 x (통합된) , 저장된, 공동이용(공용), 현재의 정확한 데이터 상태 유지(변화되는, 운영)데이터 

(2-4) 데이터베이스의 특징

① 정보 축적, 전달 : 기계가독성, 검색 가능성, 원격 조작성 

② 정보 이용 : 신속, 정확하게 정보 획득 

③ 정보 관리 : 일정한 질서와 구조에 따라 정리, 저장, 검색, 관리, 추가. 갱신 등 

④ 정보기술발전 : 정보처리, 검색 및 관리 소프트웨어, 하드웨어, 네트워크 기술 발전을 견인할 수 있음 

⑤ 경제, 산업: 인프라 구축, 경제, 산업, 사회 활동 효율성 제고, 국민 편의 증진 수단 

 

(3) 데이터베이스의 활용 

(3-1) 기업 내부의 데이터베이스 

인하우스 DB : 전자자원관리시스템 (ERP) 

OLTP(Online Transaction Processing) 시스템 : 정보의 수집, 내부 공유를 위한 경영정보시스템(MIS) + 단순 자동화 중심 시스템 

OLAP(Online Analytical Processing) 시스템 : 단순 수집, 공유에서 -> 분석 중심 시스템으로 변화 

CRM & SCM : Customer Relationship Management & Supply Chain Management 

*제조 부문 데이터베이스 발전 과정 

① 2000년 이전 : 부품 테이블, 재고 관리 등에 활용

② 2000년 이후 : 부품 설계,제조,유통 등 전 공정에 활용 

③ 2000년 초 : 솔루션 유형으로 발전

④ 2000년 중반 : 인하우스 DB 구축 투자 증가 

⑤ 실시간 기억(RTE Real Time Enterprise) : 적응 속도 최대화, 지연시간 없애는 정보화 전략

⑥ 전사자원관리(ERP Enterprise Resource Planning) 도입 , DW, CRM, BI 등 진보된 정보기술 적용한 기업 내부 인하우스 DB 구축

*금융 부문 데이터베이스 발전 과정 

① 1998년 IMF이후 : 업무 프로세스 효율화. e비즈니스 활성화, 금융권 통합 시스템 구축 등 확산

② 2000년 초 : EAI, ERP, e-CRM 등 정보 공유 및 통합이나 고객 정보 활용

③ 2000년 중반 : DW(Data warehouse) 도입, DB마케팅 증대, 대용량 DW 위한 최적 BI 기반 시스템 구축 확산 

④ 향후 EDW(Enterprise Data Warehouse 확장-> 시장 확대 기여 예상 

*유통 부문 데이터베이스 발전 과정 

① 2000년 이후 : CRM, SCM 구축 

② KMS(Knowledge Management System) 위한 별도 백업시스템 구축 

③ 2000년 중반 : 체계적 고객정보 수집, 분석과 상권 분석 등 심화

④ 균형성과관리(BSC), 핵심성과지표(KPI), 웹 리포팅 등 

⑤ 전자태그(RFID) 등장-> 파급효과 클 것으로 예상, 대용량 DB플랫폼 필요성