2015-03-26 IT 평가 방법론 - 연세대학교 정보대학원 수업내용

여전히 과거에는 'IT투자'가 독립변수고 종속변수가 '생산성'이었다.
 
<Performance Impacts of Information Technology: Is Actual Usage the Missing Link?>
 독립변수가 Technology Investment가 아니다. IT투자 자체가 영향을 주는 것이 아니라, IT usage 실제 사용하는 정도가 되어야 한다.  (Actual use)
 8개의 DSS시스템 종단면적 데이터를 축적해서 분석함. 왜 36개월의 데이터를 분석하는가. Time Lag. (이전의 연구의 결과를 반영한 것. - 3/19일 필기 참조 - )
 한계1. 일반화의 한계. (데이터가 작다.) 헬스케어 시스템에 대해 했기 때문에 다른 분야에 먹히겠는지.
 한계2. 사망자 수, 환자당 거두는 수익, 일별 수익 - 병원의 운영 비용이 빠져있다. payoff가 다르게 다올 수 있다.
 
<The Ten-Year Odyssey of the “IS Productivity Paradox” - A Citation Analysis (1996-2006)>
오딧세이: 10년간의 귀향 모험담을 그린 작품
'87년 R.Solow(IT 생산성 관련 통계가 없다)
'93년 Productivity Paradox (4 고려사향)
'03년 N.Carr 'IT doesn't matter' (IT=GPT 전략적 투자x)
96년 B&H paradoxs lost (Firm level)
 
<Economics of Innovation and New Technology>
그 동안은 IT investment가 impact, productivity, payoff 에 영향을 미치는가?
이것은 어떤 것이 IT investment에 영향을 미쳤는가.
가설:
그 동안의 연구를 분석,
micro-level 에서는 human capital, firm size, sector가 ICT 투자 결정에 영향 요인이다.
macro-level 에서는 digital divide
국가 ICT 투자 관련 정보
 과학 기술 기획 평가원 - 웹사이트 (과학 기술 혁신 역량평가. Annual Report. )
결론: ICT 투자에 노동시장의 유연성 (영향x), 행정적인 규제(영향 o), 서비스산업 규제 (영향 o)
국제기구에서 많은 연구를 하기도 한다. ex. Asian Development Bank. 5년이 안됐는데, 3억 연봉.
 
< Information Technology and Intangible Output : The Impact of IT Investment on Innovation Productivity >
Three evolutionary changes in the innovation process
    1. Management of innovation knowledge
        -> 혁신 확산 용이
    2. Innovation production
        -> 생산과정(Design – prototype – test)을 빠르고 효율적으로
    3. External innovation collaboration
        -> 외부와 협업 용이
신제품의 90%가 망하는데 그러면 이익이 너무 작은게 아닌가.

 Table 3 Estimation Results 를 보면, R&D 가 0.896 정도 IT가 0.166 정도 혁신에 영향을 미치고 있는데, R&D자체가 혁신을 깔고 있는 행위임에 비해 IT의 영향력이 어느정도 포션을 차지하고 있다고 할 수 있다. (R&D활동의 목적 자체가 특허인 경우도 있다. - 특허를 산다거나 - )
 IT와 R&D 모두가 혁신 창조에 있어 긍정적이고 의미 있는 역할 수행
  - IT 자본 서비스의 1% 증가로 0.166%의 특허 증가(1987-1997)
  - R&D의 1% 증가로 0.896%의 특허 증가
이 논문은 Discussion을 읽을 것. IT와 R&D는 Innovation 의 path가 다르다. IT투자는 knowledge를 위한 것. process innovation. 을 위한 것이다. 때문에 제목에 Intangible이 들어간 것이다.
 
 


2015-03-19 IT 평가 방법론 - 연세대학교 정보대학원 수업내용

오늘 다루는 페이퍼와 다음주에 다루는 생산성 역설은 단순히 시점 차이가 아니에요.
 그 차이점은 어떻게 다르게 나타나는지를 알 수 있어요.
독립변수는 IT 투자. 종속변수는 영향을 받는다고 가정하는 생산성. 이 두 가지만 놓고 논의를 하는데, 다음주에는 process variable을 가지고 이야기를 해요. 중간 매개 변수가 무엇이냐 하는 부분. 조직의 구조까지를 건드리는 구조인지.
 최근의 paper들은 프로세스의 변수들 까지 감안하면서 현재는 It투자가 생산성에 긍정적인 영향을 끼친다는 논조가 많아졌다.
 2010년 이전의 paper로 과연 생산성 역설을 제대로 말할 수 있는 것인가.

이 기사가 IT 생산성 역설의 기폭제가 되었다.
 
[ 발표자료1_생산성역설_03172015.ppt ]

저자의 의견: IT와 생산성의 관계를 두 개만 딱 떼어놓고 파악할 수 있는 연관관계가 아니다.
Q. 제대로 된 IT 산출물의 가치 측정이 이루어 졌는가.
(산업혁명 시대에)
생산직은 적어도 공간, 설비 비용이 들어간다.(자동차를 만드는 공장에서 생산라인을 하나 늘리는 일은 엄청난 리스크)
사무직은 펜과 종이만 있으면 가능.
IT투자 이 후, 사무직의 자본집중도가 높아지고 있다. = 생산직 처럼 설비 투자 비용이 많이 들어가기 시작했다.
production worker grew by 16.9% between the mid-1970s and 1986, while output per information worker decreased by 6.6%.
생산직들은 16.9% 생산성 증가, It를 투자한 사무직들은 6.6% 감소
 

 
 
p70
 

단순 작업의 반복에는 정보시스템이 기여하는 바가 크지만, 그렇지 않은 곳에는 생산성과 유의미한 관계가 없을 수 있다.
 예를 들어, 의사결정지원 시스템의 경우. 당시에는 대부분의 의사결정권자들이 정보시스템 의존도가 크지 않았고, 활용했다고 하더라도 그 정도와 영향력의 비율을 정확히 산출할 수 없는 것이 사실.
 당시의 3가지 역설.
1) 경제 전반의 측면 2) 제조업 분야에서의 생산성 역설 3) 서비스 분야에서의 생산성 역설.
 
Q. 과연 제조업과 IT업의 노동자의 생산성을 측정하는 것이 맞는 것인가. 기존의 블루칼라에게 들이밀었던 생산성의 개념을 IT업에 도입하는 것이 과연 맞는 개념인가.
 
다른 방식이 무엇이냐. BPR 비즈니스 프로세스를 리엔지니어링을 일단 하고.
양자간의 관계에서 보지 못하는 외생변수로 인해 제대로 된 분석이 아니다고 말하면서 그것을 찾아나가는 과정.
 
Productivity of Paradox of IT
# 핵심 Four Explanation for the Paradox
: 왜 IT투자가 생산성 향상으로 이어지지 않았을까?
1. Mismeasurement (Input/Output을 무엇으로 측정할지)
2. Time Lags (배우는 시간 등)
• 전통적인 측정방법으로 전통적이지 않은 분야 (IT)에 대한 성과를 측정하는 것이 적절한가?
• 만약 비용과 이득간에 상당한 lags가 있다면 단기간을 측정대상으로 하였기 때문이고 장기적 관점에서 보면 비용 대비 이득이 더 커짐
3. Redistribution(파이 전체를 키워줄 수 있는가. 파이 구조만 바꿔주는 것인가. 정보시스템은 전략적인 선택을 돕는 수단으로 쓰일 수 있다. 이로 인해 파이 전체가 커질 수 있다.)
• 기술에 대한 투자이득은 사적영역에서는 발생하나 이는 다른 분야에 대한 이익을 희생함으로써 얻어짐으로써 총체적으로 볼 때 순이득은 발생하지 않음
4. Mismanagement ( 모호함. 사용자/도입자 간의 동기가 다르다.) 
• IT 특성상, 기업체들은 투자하지 말아야 하는 경우에도 IT에 투자하고 IT를 부실하게 운영해 옴
 
블루칼라들은 자신의 생산성 발현 방식이 같지만, 정보 시스템의 사용자들은 그 사용방식에 있어서 동일하지 않다. 예를 들어, 재난방재청에서 재난 상황 발생시 활용할 수 있는 정보시스템이 있는데, 그걸 활용하지 않고 엑셀 데이터를 뽑아서 전화하고 있기 바쁘다. 즉, 사용자마다 사용하는 방식이 다르고 그 능숙함이 다르기 때문에 측정하기 어렵다.
 
Agency Theory 이론
 - 과외 선생(오래 과외를 하는 것) 과 과외를 시키는 부모(성적 향상)간의 목적이 다르다.
 - 정보시스템 사용자와 (편하게, 스트레스 덜 받고, 일 잘하는 것 처럼 보이는 것) 정보시스템 도입자(이윤 향상)의 목적 차이는 다르다.
 
데일 카네만 thinking of thinking - Loss aversion
 - 인간은 profit maximizer가 아니다.
 - Heuristic 주먹구구식. (한, 두가지의 정보만 가지고 전체를 판단)
 
Q. 과연 빅데이터 분석 시스템이 완벽한데, 사람이 과연 Heuristic 판단을 피해갈 수 있을까.
 
[ 3_3_IT doesn't matter.pdf ]
 

 
Personal Computer가 보급되면서 투자가 늘어나면서 IT에 대한 투자가 50%까지 늘어났다. 과연 그럴만한 것인가. (과도한 투자에 대한 우려)
 

 
IT가 철도, 전화, 전기처럼 보편화 될 것이고 차별화 요소가 되지 못할 것이다.

 
 
기술을 전략적 가치의 유무에 따라 독점적 기술과 인프라 기술로 구분한다.
1. 독점적 기술(proprietary technology)이란 한 회사가 특허권을 소유하고 있어 다른 기업과의 경쟁에서 차별화를 이룰 수 있는 핵심요인으로 자신만이 사용할 수 있는 기술을 지칭한다. Ex) 공정 기법이나 제약회사의 신약 제조법
 
2. 인프라 기술(infrastructure technology)는 이와는 반대로 사회 또는 사업의 기반이 되는 기술로 공유되거나 모든 사람(또는 기업)이 확보할 수 있는 기술을 의미한다. 따라서 인프라 기술은 결코 차별화 요인이 되거나 새로운 기회를 제공해 주지도 못한다.  Ex) 사회 간접 자원: 전기, 수도 등
 
5. From Offense to Defense
 
일용품화된 IT 시대의 기업의 IT 관리 전략은 “방어적(Defensive)”이라는 한 단어로 요약된다.
New Rules for IT Management
1) Spend less
2) Follow, don’t lead.
3) Focus on vulnerabilities(취약성, 위험성, risk), not opportunities
 
2016-03-21 Tableau - 모든 information worker 위한 데이터 시각화

 

Analysis(직관) vs Analytics(경험)
자연의 조건 vs 비즈니스의 조건
휴리스틱 에러. 직관에 경험을 추가해야 하는 타이밍이 아닌가.
로직의 복잡성 -> 가독성이 낮아질 수 있지만, 높은 품질의 정보품질을 제공할 수 있음.
 
통념적 분류 : 10대, 20대, 30대, …
 -> 학교 다니는 사람과 직장인으로 나누면 안되나?
 
머신러닝.
군집분류. 클러스터링 알고리즘. 
 
태블로에서는 시각화 진행시, 드래그앤 드랍으로도 년,월,주,일,시,분,초 단위까지 drill down하여 쉽게 볼 수 있음.
 
# 김윤이 대표
페이스북 이벤트. 친구 소환을 통한 네트워크 맵.
실시간 인포그래픽.
데이터가 폭증하는 IoT, IoE 시대로 들어서면서 데이터 분석이 중요.
 
버블형태
파이차트
네트웤, 관계 
 
엑셀, SAP, Tableau, R, Python, Deep Learning
 
데이터 Reshape 기능. -> 데이터 정제 기능.
실시간 데이터 구축 -> API 구축 -> 실시간 업데이트.
 
데이터 경험 TX
 
# 강현이 Product Consultant - 태블로 소속.
 
그래프 안에서 정렬 가능.
Stephen Few 대쉬보드란? 특정한 목적을 달성하기 위해 가장 필요하고 중요한 정보를 시각적으로 표현한 것.
전략적 대시보드

운영적 대시보드

분석적 대쉬보드

 
데이터 시각화 4대 원칙
 1. 색상 Color
 2. 형태 Form
 3. 배치
 4. 동작 Motion (누르면 필터링이 되는 것. )
 

 
마치면서..
  1. 명확한 메시지 또는 이사이트
  2. 충분한 정보
  3. 간단하며 시각적.
 
#우재하 - 글로벌 성공사례
 
링크드인. US 비용감사 보고서.
 
대쉬보드 샘플 예시
 
대시보드 활용 사례 예시
 
#바로고(퀵서비스 스타트업. 60분 이내 배송 원칙): 이상영
각 라이더별 수익 및 기여도 분석.
가장 많이 비용을 쓰는 분야를 분석.
 
#오라클  - 빅데이터팀 강철
Oracle In-Memory
일반적인 DB도 느리다! 19억건 데이터 처리.
Buffer Cache에 비해 7x to 128x 빠름.
고객 이탈 경로 분석.
 

 
 
 
 
 
 
 
 
 
 

1. How did Carnival’s management build the cruise line into the dominant brand in the industry? Consider how this approach/strategy relates to CRM. 


 ❍ 크루즈 라인이 지배적인 브랜드가 된 이유

  ✓ 기존의 크루즈 라인을 고객들의 생각을 반영한 “Fun ship”으로 성공적으로 전환하였다. 

  ✓ 이는 IS CRM을 활용한 기존 고객들의 생각을 반영한 조치였다. Dickinson 회장은 고객들의 생각을 반영하기 위해 크루즈 라인을 ‘운송 수단’에서 ‘오락 수단’으로 전환하였다.  

  ✓ 오락 수단으로 전환하기 위해 고급스러운 분위기로 디자인을 변경한 배를 건조했고, 배 안을 젊고 밝은 파티 분위기로 만들었다. 그리고 배 안에서는 무료로 주류를 제공했다. 

  ✓ 주 고객층이 젊은 고객들로 변화하고 인기를 끌자, 크루즈 라인은 인수/합병을 거쳐 시장을 잠식했다. 


 ❍  CRM과의 관계 

  ✓ 이러한 전략과 의사결정이 가능했던 이유는 그 근본에 CRM이 있기 때문에 가능했다. 

  ✓ 그들은 Personalized Service를 제공하면서 해당 활동의 ROI를 측정하였다. 개인의 취향에 맞춘 서비스의 ROI가 크지 않음을 알게 되자 모든 품목을 통일할 수 있었고, 이를 통해 저렴한 가격을 유지하여 경쟁력을 확보할 수 있었다.  

  ✓ 크루즈 라인은 자신들의 고객들을 분석했고, 고객들의 대부분이 한 번 방문하면 다시 찾지 않는다는 것을 IS와 CRM을 통해 알아냈다. 특히 고객 만족도가 98% 이상이어도 브랜드 충성도가 낮은 이유를 고객층의 근원적 특성자체가 일회성 고객이라는 점에서 찾았다. 



2. What role does the IT infrastructure at Carnival Cruise Lines (at time of case) play in supporting strategy, processes, and people?


 ❍ Carnival Cruise Lines IT 시설의 역할.

  ✓ IT 시설은 고객과 연관된 정보를 감지하고 수집하여 정제한 뒤 경영진의 의사 결정에 도움을 주었다. 

  ✓ IT 시설은 객실에서 실시간으로 제공되는 정보를 저장된 형태로 변환하여 해당 데이터가 어떤 의미를 지니는지에 대한 분석 결과를 도출하는 데에 사용되었다. 

  ✓ 이는 단순히 창업자나 기업 오너의 직관으로 결론을 도출하던 방식에, 축적된 데이터를 기반으로 하는 의사결정을 할 수 있도록 선택지를 마련해준다. 


<그림 > Carnival Cruise Lines IS Infrastructure 


  ✓ 하지만, 여기에서 주목할 부분은 Data 분석 결과를 경영진은 선택적으로 받아들인다는 점이다. 크루즈 라인의 경우, 크루즈를 다시 찾는 고객들은 평균적으로 15%의 금액을 여행 중에 더 지불했다는 데이터를 보고 경영진은 크루즈를 다시 찾는 방향으로 경영 방침을 정하지 않았다.  


3. Given Carnival’s IT infrastructure are they ready/capable to introduce CRM as being proposed?


 ❍ 여행사로 인해 CRM을 도입할 만큼의 데이터를 수집할 수는 없었으나, 정보를 구매하고 해당 정보의 ROI를 측정하여 이에 준하는 결과를 도출할 수 있었다.   

  ✓ 크루즈 상품을 구매하는 경로의 85%가 여행사와 직접 계약으로 구매한다. 이로 인해 크루즈 사의 예약 시스템을 통해 수집할 수 있는 고객 데이터는 한계를 지니고 있었다. 

  ✓ 여행사에 수수료 10%를 지불하면서 데이터 수집에 협력적 관계를 유지하였으며, 2001 년부터는 적극적으로 고객정보를 수집하고 구입하기 시작했다. 

  ✓ 수집된 정보를 기반으로 Loyalty 프로그램과 Recognition Card를 도입하여 ROI를 측정하였다. 


4. Describe what CRM means to Carnival’s different levels / ages of management (e.g.,Dickerson and longtime Mgrs. vs. Newer Management)? Why the different perspectives? Do they have differing business models as their strategic visions?


 ❍ 카니발 크루즈 라인에서는 고객에게 제공되는 서비스를 Mass-market, Premium, Destination (specialty), Luxury의 4단계로 나누어 제공하였다. 이는 초반에 진행했던 일괄적인 Fun Ship 정책과는 다른 부분이었다. 왜 이러한 관점들이 생겨났냐면, 고객군에 대한 정확한 ROI 측정이 제대로 이루어지지 않았기 때문이다. 하지만 이런 시도와 실험의 결과 최적의 비즈니스 모델을 찾을 수 있었고 이는 점유율의 상승으로 이어졌다. 


5. Based on your assessment, what type of CRM should Carnival implement? In essence, what features are most important? Explain your position.

 ❍ CRM을 구현할 때 염두 해야 할 중요한 부분은 미래의 기업 발전 방향을 정하는 것이다. 

  ✓ Case Study에서도 나타나 있듯이, 현재의 고객을 대상으로 분석한 정보 보다는 미래 발전 방향을 염두해 둔 ‘Fun Ship’ 전략은 시장 점유율을 높이는 데에 크나큰 기여를 했다. 

  ✓ 현재 서비스의 상태에서 고객군이 충성도가 낮다면, 서비스를 바꿔서 충성도 높은 고객을 모을 수도 있는 것이다. 이러한 변경에 있어서는 CRM은 현재 상황 및 위치 파악에 쓰일 것이다.  

  ✓ 반대로 현재 고객군의 성향을 파악해서 그 성향에 맞는 최적화된 서비스를 제공하여 이윤을 극대화 시키는 방법도 있을 것이다. 이러한 상황에서 CRM은 잠재 고객 데이터로 그 자체가 수요 정보로 사용되어 서비스 개발에 활용할 수 있다. 


6. How would you go about implementing your CRM strategy at Carnival?

 ❍ 프리미엄 만족을 추구하는 CRM 전략 추가.

  ✓ 저가형 Fun Ship 유형의 크루즈 사업은 어느 정도 시장 지배력을 갖추었고 고객의 특성이 파악 완료 되었기에 현 상황을 지속 유지한다.

  ✓ 프리미엄 브랜드를 런칭하고, 구매력이 있는 고객을 타겟으로 하는 Extreme Fun Ship을 시장에 공급하여 Fun ship을 선택하지 않던 새로운 고객군을 발굴한다. 다만, 기존의 Mass-market, Premium, Destination (specialty), Luxury의 4가지 분류법과의 차이점은 모두가 동일한 서비스를 받게 된다는 부분이다. 

  ✓ 인간의 만족이라는 측면은 측정 불가능 한 부분이자 한계가 없으므로, 단 15%의 재구매 고객도 프리미엄 고객이 되었을 시 꾸준한 수익을 낼 수 있으리라 예상된다. 상위 계층의 사교모임으로의 발전을 기대해본다. 

 ❍ 구현 방식으로는 기존의 여행사를 통해 정보를 입수하던 방식에서 발권, 탑승, Customer Service 과정 등에서 수집되는 데이터를 기준으로 구현을 진행한다. 이 과정에서 기존 시스템과의 호환성을 위해 Oracle의 SAP를 기준으로 세부 스펙을 결정합니다.  


Reference


[1] Applegate, Lynda M. (2006). Carnival Cruise Lines. Harvard Business Review Case Study. 



+ Recent posts