SlideShare a Scribd company logo
1 of 24
Download to read offline
가볍게 얘기하는 데이터 분석
일상에서도 데이터 분석
주관(사용자 데이터)들의 객관화
130개국
약 1억
가입자
“내 딸이 우편으로 이 쿠폰들을 받았소! 아직 고등학생인데 당신들이
신생아 옷과 신생아 침대 쿠폰을 보내다니! 아니, 당신들은 그 애에게
임신하라고 부추기는 거요?
타겟의 매니저는 "예비엄마에게 보내야 할 쿠폰을 잘못 보냈다“ 사과
“딸과 얘기해봤는데 집안에서 내가 완전히 모르는 일이 벌어지고 있었네요.
딸아이 출산일이 8월이랍니다. 제가 사과드려야 하네요.
그런데 당신들은 도대체 내 딸이 임신한 것을 어떻게 알았나요?”
그럼 왜 이전에는 이런 일을 하지 안(못)했나?
DATA
가볍게 얘기하는 데이터분석
가볍게 얘기하는 데이터분석
역시 구글 때문에 기술이 상용화 되었고,
비용때문에 어려웠던 저장과 처리방식을
여러 기업에서 도입할 수 있게 되었다.
Back End Front End
그러면 우리나라도 잘 활용하고 있나?
서울시 심야버스
택시
승차거부
늦은 시
간 귀가
대리운전
기사
심야버스 도입
서울 & KT 노선도 개발
하루평균 약 6천 명
학생 11.9% / 대리기사 23.5% / 직장인 64.6%
110명
138명
일반 시내버스 심야버스
약 25%
핸드에서도 할 수 있을까?
우리가 가진 데이터
가볍게 얘기하는 데이터분석
약 2년 간의 카트라이더 점수 데이터
(데이터 수집)
분석을 위한 전처리 및 Feature 설정
(전처리 및 분석데이터 생성)
spring summer fall winter week1 week2 week3 week4
계절 주차
Score ~
점수
분석
(데이터 분석)
1 박XX
(Intercept) spring summer fall winter week1 week2 week3 week4
9.73467 1.15524 -0.11152 1.40752 0 -0.03035 0.05496 -0.74592 -0.45818
2 송XX
(Intercept) spring summer fall winter week1 week2 week3 week4
11.86693 2.73080 -0.92974 0.07895 0 -0.17473 -3.03616 -2.58679 -2.73424
3 김XX
(Intercept) spring summer fall winter week1 week2 week3 week4
10.43702 1.41134 -0.01655 -1.79451 0 3.00565 -0.52039 1.04974 -1.21310
…
결과
(데이터 분석 결과 도출)
3 김XX
(Intercept) spring summer fall winter week1 week2 week3 week4
10.43702 1.41134 -0.01655 -1.79451 0 3.00565 -0.52039 1.04974 -1.21310
봄여름 리그에서 1, 3주차 성적이 좋다
날짜 17년 4/6 17년 4/13 17년 4/20 17년 4/27
예측값 13.5 10 11.5 9
실제점수 14 11 14 8
시각화
(데이터 시각화)
13.5
10
11.5
9
14
11
14
8
0
2
4
6
8
10
12
14
16
4월 6일 4월 13일 4월 20일 4월 27일
예측값 실제점수
출처 : CiP
Global cellular M2M connections 2014-24
[Source: Machina Research, 2015]
인터넷 가능 기기 수의 증가 2003-25
[Source: Cisco IBSG, HP]
Big Data – Increasing Varacity 2010-15
[Source: IBM, 2014]
Big Data Technologies and
Service Market, worldwide
[Source: IDC 2014]
The Big Data Market grows 6times
faster than the traditional IT market
감사합니다.

More Related Content

Featured

5 Public speaking tips from TED - Visualized summary
5 Public speaking tips from TED - Visualized summary5 Public speaking tips from TED - Visualized summary
5 Public speaking tips from TED - Visualized summarySpeakerHub
 
ChatGPT and the Future of Work - Clark Boyd
ChatGPT and the Future of Work - Clark Boyd ChatGPT and the Future of Work - Clark Boyd
ChatGPT and the Future of Work - Clark Boyd Clark Boyd
 
Getting into the tech field. what next
Getting into the tech field. what next Getting into the tech field. what next
Getting into the tech field. what next Tessa Mero
 
Google's Just Not That Into You: Understanding Core Updates & Search Intent
Google's Just Not That Into You: Understanding Core Updates & Search IntentGoogle's Just Not That Into You: Understanding Core Updates & Search Intent
Google's Just Not That Into You: Understanding Core Updates & Search IntentLily Ray
 
Time Management & Productivity - Best Practices
Time Management & Productivity -  Best PracticesTime Management & Productivity -  Best Practices
Time Management & Productivity - Best PracticesVit Horky
 
The six step guide to practical project management
The six step guide to practical project managementThe six step guide to practical project management
The six step guide to practical project managementMindGenius
 
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...RachelPearson36
 
Unlocking the Power of ChatGPT and AI in Testing - A Real-World Look, present...
Unlocking the Power of ChatGPT and AI in Testing - A Real-World Look, present...Unlocking the Power of ChatGPT and AI in Testing - A Real-World Look, present...
Unlocking the Power of ChatGPT and AI in Testing - A Real-World Look, present...Applitools
 
12 Ways to Increase Your Influence at Work
12 Ways to Increase Your Influence at Work12 Ways to Increase Your Influence at Work
12 Ways to Increase Your Influence at WorkGetSmarter
 
Ride the Storm: Navigating Through Unstable Periods / Katerina Rudko (Belka G...
Ride the Storm: Navigating Through Unstable Periods / Katerina Rudko (Belka G...Ride the Storm: Navigating Through Unstable Periods / Katerina Rudko (Belka G...
Ride the Storm: Navigating Through Unstable Periods / Katerina Rudko (Belka G...DevGAMM Conference
 
Barbie - Brand Strategy Presentation
Barbie - Brand Strategy PresentationBarbie - Brand Strategy Presentation
Barbie - Brand Strategy PresentationErica Santiago
 
Good Stuff Happens in 1:1 Meetings: Why you need them and how to do them well
Good Stuff Happens in 1:1 Meetings: Why you need them and how to do them wellGood Stuff Happens in 1:1 Meetings: Why you need them and how to do them well
Good Stuff Happens in 1:1 Meetings: Why you need them and how to do them wellSaba Software
 
Introduction to C Programming Language
Introduction to C Programming LanguageIntroduction to C Programming Language
Introduction to C Programming LanguageSimplilearn
 
The Pixar Way: 37 Quotes on Developing and Maintaining a Creative Company (fr...
The Pixar Way: 37 Quotes on Developing and Maintaining a Creative Company (fr...The Pixar Way: 37 Quotes on Developing and Maintaining a Creative Company (fr...
The Pixar Way: 37 Quotes on Developing and Maintaining a Creative Company (fr...Palo Alto Software
 
9 Tips for a Work-free Vacation
9 Tips for a Work-free Vacation9 Tips for a Work-free Vacation
9 Tips for a Work-free VacationWeekdone.com
 
I Rock Therefore I Am. 20 Legendary Quotes from Prince
I Rock Therefore I Am. 20 Legendary Quotes from PrinceI Rock Therefore I Am. 20 Legendary Quotes from Prince
I Rock Therefore I Am. 20 Legendary Quotes from PrinceEmpowered Presentations
 

Featured (20)

5 Public speaking tips from TED - Visualized summary
5 Public speaking tips from TED - Visualized summary5 Public speaking tips from TED - Visualized summary
5 Public speaking tips from TED - Visualized summary
 
ChatGPT and the Future of Work - Clark Boyd
ChatGPT and the Future of Work - Clark Boyd ChatGPT and the Future of Work - Clark Boyd
ChatGPT and the Future of Work - Clark Boyd
 
Getting into the tech field. what next
Getting into the tech field. what next Getting into the tech field. what next
Getting into the tech field. what next
 
Google's Just Not That Into You: Understanding Core Updates & Search Intent
Google's Just Not That Into You: Understanding Core Updates & Search IntentGoogle's Just Not That Into You: Understanding Core Updates & Search Intent
Google's Just Not That Into You: Understanding Core Updates & Search Intent
 
How to have difficult conversations
How to have difficult conversations How to have difficult conversations
How to have difficult conversations
 
Introduction to Data Science
Introduction to Data ScienceIntroduction to Data Science
Introduction to Data Science
 
Time Management & Productivity - Best Practices
Time Management & Productivity -  Best PracticesTime Management & Productivity -  Best Practices
Time Management & Productivity - Best Practices
 
The six step guide to practical project management
The six step guide to practical project managementThe six step guide to practical project management
The six step guide to practical project management
 
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
 
Unlocking the Power of ChatGPT and AI in Testing - A Real-World Look, present...
Unlocking the Power of ChatGPT and AI in Testing - A Real-World Look, present...Unlocking the Power of ChatGPT and AI in Testing - A Real-World Look, present...
Unlocking the Power of ChatGPT and AI in Testing - A Real-World Look, present...
 
12 Ways to Increase Your Influence at Work
12 Ways to Increase Your Influence at Work12 Ways to Increase Your Influence at Work
12 Ways to Increase Your Influence at Work
 
ChatGPT webinar slides
ChatGPT webinar slidesChatGPT webinar slides
ChatGPT webinar slides
 
More than Just Lines on a Map: Best Practices for U.S Bike Routes
More than Just Lines on a Map: Best Practices for U.S Bike RoutesMore than Just Lines on a Map: Best Practices for U.S Bike Routes
More than Just Lines on a Map: Best Practices for U.S Bike Routes
 
Ride the Storm: Navigating Through Unstable Periods / Katerina Rudko (Belka G...
Ride the Storm: Navigating Through Unstable Periods / Katerina Rudko (Belka G...Ride the Storm: Navigating Through Unstable Periods / Katerina Rudko (Belka G...
Ride the Storm: Navigating Through Unstable Periods / Katerina Rudko (Belka G...
 
Barbie - Brand Strategy Presentation
Barbie - Brand Strategy PresentationBarbie - Brand Strategy Presentation
Barbie - Brand Strategy Presentation
 
Good Stuff Happens in 1:1 Meetings: Why you need them and how to do them well
Good Stuff Happens in 1:1 Meetings: Why you need them and how to do them wellGood Stuff Happens in 1:1 Meetings: Why you need them and how to do them well
Good Stuff Happens in 1:1 Meetings: Why you need them and how to do them well
 
Introduction to C Programming Language
Introduction to C Programming LanguageIntroduction to C Programming Language
Introduction to C Programming Language
 
The Pixar Way: 37 Quotes on Developing and Maintaining a Creative Company (fr...
The Pixar Way: 37 Quotes on Developing and Maintaining a Creative Company (fr...The Pixar Way: 37 Quotes on Developing and Maintaining a Creative Company (fr...
The Pixar Way: 37 Quotes on Developing and Maintaining a Creative Company (fr...
 
9 Tips for a Work-free Vacation
9 Tips for a Work-free Vacation9 Tips for a Work-free Vacation
9 Tips for a Work-free Vacation
 
I Rock Therefore I Am. 20 Legendary Quotes from Prince
I Rock Therefore I Am. 20 Legendary Quotes from PrinceI Rock Therefore I Am. 20 Legendary Quotes from Prince
I Rock Therefore I Am. 20 Legendary Quotes from Prince
 

가볍게 얘기하는 데이터분석

Editor's Notes

  1. 전 세계 데이터 중 90%가 2010년 이후 생성된 데이터 기존의 사람들의 정의해놓은 것들이 아닌 직접적으로 데이터를 보고 분석하여 시장에 적용하는 추세가 요즘
  2. 2008년 콘텐츠 보유량이 아마존의 10% 밖에 불과하였지만 시네매치라는 추천알고리즘을 통해 성장 / 추천콘텐츠 시청 비율 75% 3천만 건의 동영상 재생기록, 400만 건의 이용자 평가, 300만 건의 검색정보, 위치정보, 단말정보 등이 동원됐다. 심지어 주중 및 주말의 시청행태, 일시정지・되감기 등이 어떻게 이루어졌는지 등의 상세한 정보들까지 모두 데이터 분석 자료로 사용됐다.
  3. 임신 4개월부터는 향이 없는 로션을 다량 구매했고 5개월부터는 칼슘, 마그네슘, 아연이 함유된 비타민을 구매했다. 갑자기 향이 없는 비누, 대용량의 약솜, 손세정제, 타월을 구매하기 시작하면 출산일이 가까워지고 있음을 의미했다.  타깃은 세밀한 데이터 분석을 통해 임신과 관계있는 25개 제품을 확인 임신지수(pregnancy score)를 계산할 수 있는 모델을 개발한 뒤 전국 1800여 매장 임신의 세부적인 단계에 맞춘 쿠폰을 보냈다. 얼마 지나지 않아 타깃을 찾는 임신부가 늘기 시작했고, 산모와 신생아 관련 상품의 매출이 폭발적으로 증가 타깃의 총매출도 2002년 440억 달러에서 2010년 670억 달러
  4. 굳이 활용해야 한다는 생각이 없었다 (로그는 가비지 저장공간만 차지하는 쓰레기) 사례가 없고, 중요한 것은 이것을 좀 더 저비용으로 효율적으로 분석 처리하는 방법이 없었다
  5. 구글신은 이 모든 것을 해내고 논문을 냈다 / 그것을 오픈소스로 만든 것이 Hadoop 에코시스템
  6. 굳이 활용해야한다는 생각이 없었다 (로그는 가비지 저장공간만 차지하는 쓰레기) 사례가 없고, 중요한 것은 이것을 좀 더 저비용으로 효율적으로 분석 처리하는 방법이 없었다
  7. 유동인구 밀집도 분석: 일단 서울시를 1km 반경의 1,250개 헥사셀 단위로 구분한다. 그리고 KT 휴대전화 이력 데이터로 심야시간(0시~5시) 통화량 분석을 해서 구역별 유동인구 밀집도를 분석하고 이를 헥사셀 단위로 시각화한다. 유동인구 기반 노선 최적화 기존 노선의 시간/요일별 패턴을 분석하고, 노선 부근의 유동인구 통계로 가중치를 계산하여, 노선을 최적화한다. 유동인구 기반 배차간격 조정 정류장 단위로 통행량을 추정하고, 통행량을 선의 굵기로 표현하여 헥사셀로 구분된 맵에 시각화함으로써 최종적으로 요일별 배차 간격 조정을 결정한다. 시내버스의 적자를 메워준 재정지원금액은 2012년에만 1조 7661억원에 달한다 / 이용률 저조로 심야버스를 노선변경 및 폐지가 필요 없다