파이썬을 활용한 웹크롤링(웹스크래핑)과 빅데이터 분석 과정

직업능력개발훈련(국민내일배움카드/사업주지원)

파이썬을 활용한 웹크롤링(웹스크래핑)과 빅데이터 분석 과정

Python 언어와 라이브러리를 기반으로 데이터를 수집하고 분석하여 시각화하는 내용으로 구성되어 있으며, 기초부터 시작되므로 초보자도 참여 가능한 수준으로 진행됩니다..
  • 교육과정명
    파이썬을 활용한 웹크롤링(웹스크래핑)과 빅데이터 분석 과정
  • 교육기간
    23.10.15 ~ 23.11.19(일요일 6일/48시간)
  • 교육시간
    09:30~18:20 (1일 8시간)
  • 교육비용
    국비지원(0~35% 자비부담)
  • 훈련장려금
    일부 대상자(국민취업지원제도 대상자 등)는 훈련장려금 지급
  • 교육대상자
    국민내일배움카드 발급자 모두(근로자, 구직자, 자영업자, 대학졸업예정자 및 재(휴)학생 등)
  • 문의전화
    직통전화 : 02-2069-1931

[자비 부담금 안내]
1. 국민내일배움카드(구직자+재직자 통합) 발급자
- 일반 훈련생(재직자, 구직자, 자영업자 등 아래 대상외 모두) : 교육비(351,840 원) 중 자비부담 35%(123,150원)
- 근로장려금 수급자(EITC) : 교육비(351,840 원) 중 자비부담 17.5%(61,580원)
- 국민취업지원제도 II 유형 참여자 : 교육비(351,840 원) 중 자비부담 30%(105,560원)
- 국민취업지원제도 I 유형 참여자 : 교육비(351,840 원) 중 자비 부담 0%(0원)

2. 사업주 지원훈련(회사 환급)
- 우선적용대상기업(중소기업) : 납부 교육비(351,840원) 중 90% 환급(316,650원)
- 상시근로자 1000명 이하 기업 : 납부 교육비(351,840원) 중 60% 환급(211,100원)
- 상시근로자 1000명 이상 기업 : 납부 교육비(351,840원) 중 40% 환급(140,730원)

3. 비(非) 정부지원 대상자 : 교육비 351,840 원 중 자비부담 70%(246,290원)

※ 교육비 이체 계좌 : 기업은행 203-110139-04-010 | ㈜티아이에스정보시스템

교육과정 목표

▶ 교육개요 및 목표
■ Python 프로그래밍 언어와 데이터 분석 도구 및 패키지 등을 활용하여 각각의 데이터를 분석하고 분석된 결과를 시각화하는 실무 기술을 함양할 수 있다.
➀ 유의미한 데이터간의 관계를 찾고 검증하기 위하여 데이터의 기본 통계와 데이터 분포를 분석하는 능력을 함양할 수 있다.
➁ 수집된 내·외부 데이터 및 정형·비정형 데이터를 활용하여 분석 목적에 따라 가설을 설정하고 필요한 데이터셋을 편성하여 통계기반 데이터 분석 모델을 만드는 능력을 함양할 수 있다.
➂ 다양한 형태의 텍스트 데이터로부터 고품질의 정보를 도출하기 위해 협업의 텍스트 데이터를 변환 및 정제하여, 추출된 단어 관계 및 패턴, 규칙을 분석하는 능력을 함양할 수 있다.
➃ 정보를 명확하고 효과적으로 전달하기 위해서 사용자가 분석 결과를 이해하기 쉽게 그래픽 의미를 이용하여 시각적으로 표현하고 전달하는 능력을 함양할 수 있다.

▶ 선행 지식 및 선수 학습 요건
➀ 비전공, 초보자 가능(사전 지식이 꼭 필요하지는 않지만, 교육 시작전 Python, 통계학 등 기초 학습시 교육의 효과와 효율성에 도움이 됨)

2022년 해당 직종 직업능력개발훈련 주요 성과 및 실적
  • #직업능력개발훈련
    이수자 평가
    최우수 A등급
    획득!
  • #훈련 성과
    전체 수료율 94.6%,
    취업률 87.5%
    달성!
  • #훈련생 만족도
    평균 4.7점
    (5점 만점)
    획득!
교육기간 및 일정
교육기간(일정)
2023. 10. 15(일) ~ 2023. 11. 19(일) (6주/6일/48시간, 매주 일요일 6일)
교육시간
09:30~18:20 (1일 8시간) 점심시간 : 12:20~13:20 (60분)
강의실
6강의실
정원
25명
실제 교육 세부 커리큘럼
교과목 단원 세부내용
Python의 이해 및 데이터 분석 Python 설치 및 기본 문법
  • Python(파이썬) 설치
  • 기본 문법 구조, 연산자, 자료형의 이해
  • 조건문, 반복문, 함수의 활용
  • 입출력. 클래스, 객체의 이해
데이터 분석 실무
  • 공공데이터를 활용한 데이터 분석 실무
  • numpy 라이브러리의 활용
  • pandas 라이브러리의 활용
탐색적 데이터 분석 웹 스크래핑의 활용
  • 웹 스크래핑 개요 및 이해
  • 특정 및 다수 웹 페이지의 상품 정보 스크래핑
  • 유튜브의 동영상 목록 스크래핑
데이터의 정리와 요약
  • 데이터 가공
  • 패키지 데이터 테이블(data table)
  • 문자열(character), 정규 표현식
변수 기술 통계량
  • 집중 경향치, 변산성 측정치
  • 범주형, 순위형 변수
  • 데이터 프레임의 모든 변수(컬럼)에 대한 요약 통계치
통계 기반 데이터 분석 통계학의 개념
  • 의사결정과 통계적 사고, 통계학의 개념
  • 모집단과 표본, 데이터의 종류
  • 기술 통계와 추측 통계
데이터 읽어오기
  • 파일 입출력, 내장 데이터
  • 텍스트로 저장된 데이터 파일 읽기
  • EXCEL 파일 읽기
  • 그 밖의 통계 프로그램 데이터 파일
공공 데이터 활용
  • 공공 데이터 포털, 오픈 API 활용 절차
  • 실시간 위치 조회를 위한 오픈 API 활용
네이버 오픈 API 활용
  • 네이버 API 개요, 기본 사항
  • 네이버 오픈 API 키 발급받기
  • 분석을 위한 네이버 블로그 검색
데이터 추론과 분석 기법 네트워크 분석
  • 네트워크 분석의 개요, 분석 지표
  • 페이스북 사용자 네트워크 분석
  • 네트워크 분석을 통한 스토리텔링하기
모집단에 대한 추론
  • 통계적 추론
  • 모평균에 대한 추론
  • 모비율, 모분산에 대한 추론
범주형 데이터 분석
  • 적합도 검정
  • 교차 분석
분산 분석
  • 분산 분석의 개념
  • 일원 분산 분석과 이원 분산 분석
상관 분석과 회귀 분석
  • 상관 분석과 회귀 분석의 개념
  • 단순 회귀 분석, 다중 회귀 분석
빅데이터 분석 결과 시각화 ggplot2
  • 시각적 맵핑, 기하학적 대상
  • 보조선, 좌표계, 범례, 제목과 테마석
  • 지도 시각화 활용하기
Matplotlib
  • 꺾은선 그래프, 막대 그래프
  • 산점도, 히스토그램
  • 파이 차트, 버블 차트
텍스트 마이닝과
워드 클라우드 활용
  • 텍스트 마이닝과 워드 클라우드
  • 지역별 인구수의 변화에 대한 워드 클라우드 출력
  • 연설문 키워드 분석과 비교
수료후 취득가능 자격증
  • 국가기술자격증
    • 빅데이터분석 산업기사
    • 빅데이터분석 기사
  • 국제공인 자격증
수료 후 진로(직업)
  • 빅데이터분석 전문가
  • 데이터 분석가
  • 빅데이커 시각화 전문가
  • 기획 및 마케팅 전문가
  • 통계분석 전문가
훈련교사 소개
김은영
강의 경력
  • 현)TIS정보기술교육센터 응용SW 및 웹개발(프론트엔드&백엔드), AI, 빅데이터 등 재직자 강의
  • 비트컴퓨터 응용SW 및 웹개발, 빅데이터 플랫폼 구축 및 분석 등 구직자 및 재직자 교육
  • 경영기술개발원 JAVA, JSP, Spring, Struts, Android, Html5, JS, jQuery, Ajax, Oracle
  • 한국직업전문학교 Linux, PHP, mySQL, 웹프로그래밍 등
  • 강남직업전문학교 C언어, JAVA, 데이터베이스 등
  • 국제인재능력개발원 JAVA, JSP, MSSQL, Oracle 등
  • 기타 다수의 IT교육기관 및 대학교 프로그래밍 강의
  • 기타(자격사항) 직업능력개발 훈련교사, 정보처리기사, 중등학교 정교사(2급) 등
실무 경력
  • 신씨네 인터넷 웹개발 및 웹호스팅 개발 등
  • 삼성SDS 식약청 전산화 시스템 개발 등
교육생 혜택 및 지원
  • #교육비용
    국비지원(0~35% 자비부담)
  • #훈련장려금 지원
    지원 대상별 상이
  • #무상지원
    교재, PC 및 장비, 소프트웨어 등 무상지원
  • 현 기술 트렌드에 맞춘 현장 실무 중심 교육
  • 교육비 국비지원
  • 교재, PC, 장비 및 기자재 무상지원
교육대상 및 선발요건
  • 국민내일배움카드(구직자+재직자 통합) 발급 가능자 모두
  • 재직 근로자(일정 소득 및 매출 이하의 특수고용근로자, 자영업자도 정부지원 가능)
  • 구직자(실업자 및 미취업자)
  • 대학(대학원) 졸업예정자, 대학(대학원) 재학생 및 휴학생으로서 졸업까지 남은 수업연한이 2년 이내인자
    • 야간대, 사이버대, 방통대학교 학생은 위 요건과 관계없이 정부지원 가능
    • 현재 고용보험 가입중인 근로자인 학생은 위 요건과 관계없이 정부지원 가능
  • 고용노동부 국민취업지원제도 참여자 및 대상자
  • 기타(문의) : 02-2069-1931
    • 정부지원 자격대상이 안되시는 분은 자비로 참여 가능 합니다.(교육비 일부 할인 적용 가능)
개강전 준비 절차 및 서류
  • 개인 지원 : 국민내일배움카드 발급(필수), HRD-Net(www.hrd.go.kr) 에서 수강 신청(필수)
  • 사업주(회사) 지원 : 훈련위탁계약서(본원 양식), 사업자등록증 사본 등
  • 서류 및 신청 절차 문의 : 02-2069-1931
HRD-Net(www.hrd.go.kr) 사이트 에서 해당 교육 과정을 조회/신청 하고자 하실 때는 국민내일배움카드훈련과정 페이지에서 아래중 1가지를 선택하여 조회 하시면 됩니다.
  • 훈련 기관명으로 조회 : 한글로 "티아이에스정보기술교육센터" 로 조회
  • 훈련 과정명으로 조회 : "파이썬을 활용한 웹크롤링(웹스크래핑)과 빅데이터 분석 과정" 으로 조회
훈련진행 전체 프로세스
  • 국민내일배움카드 발급
    국민내일배움카드 발급 (필수)
    HRD-Net(www.hrd.go.kr)에서 인터넷 신청
    또는 관할고용센터 방문 신청
  • 수강 신청
    HRD-Net(www.hrd.go.kr) 에서 수강신청(필수)
    전화 또는 본원 홈페이지에서 신청(선택)
  • 개인부담금 결제
    담당자가 신청자에게 개강 확정 여부 고지
    개강 확정 시 개인부담금 결제 진행
  • 교육 수강 및 수료 독려
    담당자의 출결 및 수료에 대한 독려
    (해당 교육은 수료율이 중요함)
  • 수료증 발급
    수료증 발급(총 교육시간의 80%이상 이수)
GREETING