[Python]Data science

 

4차 산업혁명이란?
지능 AI와 정보 Big data & Cloud의 시대

 

• 초연결
  • 컴퓨터 프로그램
    사물인터넷(IoT)과 5세대 통신(5G)으로 사물과 인터넷의 상호의존성이 무한 확장된다.
  • 사물 인터넷
    RFID태그를 부착하여 정보를 수집하는, 단순한 센서 네트워크에서
    사물과 사물간 통신하는 M2M으로 발전하였다.
    사람, 업무, 데이터까지 모든 것이 연결되어 상호 통신하는 만물인터넷(IoE)로 발전할 전망.
• 초지능
  • 초지능 - Hyper intelligence
    인간의 지능과 인공지능이 협력하여 더 스마트한 서비스를 제공하는 것.
  • 초지능 - Super intelligence
    인공지능의 지능이 인간을 넘어서는 특이점이 온 경우.
    하이퍼 인텔리전스 → 슈퍼 인텔리전스로 진화하는 인공지능.
  • Big Data
    초지능의 원료.
    디지털 환경에서 발생하는 모든 Data.

---

 

 

데이터 과학에서
IoT / 5G & internet /  AI

• IoT
  눈, 코, 입과 같이 감각 및 행동을 인지.
• 5G & internet
  인지된 자극과 명령을 전달하는 신경계
• AI
  인지된 자극을 처리하고 분석하여 명령을 내리는 두뇌역할.

---

 

데이터 분석에
Python을 사용하는 이유

 

이러한 많은 Library 때문에 Python을 사용한다고 볼 수 있다.

아나콘다 환경에 모두 들어있는 Library들이다.

• Interactive environment
  말 그대로 상호환경
• Data Manipulataion Library
  pandas. 데이터를 다룬다
• Visualisation Library
  matplotlib, seaborn. 그래프 같은 시각화

---

 

Python으로 할 수 있는 일들

• Machine Learning / State
  통계.
  1990~2010년까지 머신러닝의 시대라고 부른다.
• Scientific Computing
  과학계산.
• Distributed Systems
  Big Data를 처리.
  Hadoop 위에 얹어진 Spark를 Python을 이욯해 다룰 수 있다.
• Web
  Flask와 django 같은 Framework.
• Analytics
  분석. pandas

---

 

Data science running path

 

---

 

필수 라이브러리

 

---

Numpy

• 다차원 배열 ndarry
• 수치계산을 빠르게 할 수 있다.
  내부적으로 C++로 되어있기 때문에.
• 선형대수, 푸리에 변환, 랜덤 넘버 등의 함수를 제공
• pandas가 Numpy 기반.
• 따라서 Data분석의 기본이 되는 Library이다.

---

Pandas

• panel data analysis의 줄임말.
  다차원 구조화된 데이터.
• 데이터 분석용.
• 시계열 데이터 기능 통합.
• R 혹은 Matlab 개발언어를 사용했던 사람들이 접근하기 용이.