IT 평가 방법론 - 연세대학교 정보대학원 수업내용

2015-03-12 IT 평가 방법론 - 연세대학교 정보대학원 수업내용

발표주제 선정

 

7Wk(4/16). IS Service Quality

o Landrum, Hollis. etc al. (2009). Measuring IS System Service Quality with SERVQUAL : Users' Perceptions of Relative Inportance of the Five SERVPERF Dimensions. Informing Science: the International Journal of an Emerging Transdiscipline. Vol. 12. pp. 17~35.

 

10Wk(5/7). IT Investment Management ① : Overview

o Cresswell, Anthony M. (2004). Return on Investment in Information Technology: A Guide for Managers. Center for Technology in Government. pp. 1~46.

 

PT 자료가 이미 올라가 있는 경우.

최소한 발표자는 논문에 대해서 이해는 하고 있어야 한다.

자기가 씹어서 소화한 내용만 넣어서 쓰세요.

가급적이면 미리. 이메일로 회신을 주세요.

 

 

(자료3) IT 프로젝트 8대 실패단계

요약.

미 국세청.

우리나라 국세청. 1,300억 투입 했으나, 장애 발생.

KPI (Key Performance Indicator)

코스트, 스케쥴, 퍼포먼스 이 3가지 중에 꼭 하나는 문제가 생겨남.  때문에 이 3가지 요소에 대해 사전 기획 단계에서 제대로 산출을 하고 가야 함.

 

가트너 선정 10대 신기술에 대한 보도자료. ROI. 투자 이익 예상 자료 등.

작년, 제작년에 망한 신기술에 대한 보도자료.

-> CEO는 IT를 투자할 필요가 없다고 생각하기 시작.

 

무기관련 정부기관. 28개 미사일별 정보시스템. 70%가 경직성 경비(고정지출비용)

CIO가 와서 이를 다 정리하라고 함. 

 

IT업계 밖에 있는 사람들은 IT업계에 있는 사람들을 돈먹는 하마라고만 생각한다.

IT투자에 대한 회의론을 다음 시간부터 보게 될 것.

 

정량 vs 정성?

상위 vs 하위?

시스템 vs 활동?

미시 vs 거시?

 

성과관리 (Performance Management) : 계획 - 집행 - 평가의 세 가지의 개념을 포괄함. + 환류 (평가에 대한 계획. 즉 피드백 포함), 여기에서 평가는 사후적 평가의 속성만을 가진다.

평가관리 (Evaluation) :

 - 정량적 평가: B/C 분석, IRR, ROI

 - 정성적 평가: IO

 - ex-ante 사전적 평가: feasibility test (예비타당성 조사)  ex) 영국의 사례. 일반 SoC 사업이랑 다르다고 생각. 공사. 예비 설계->실시 설계. 100억짜리 프로젝트면 80억에 만들라고 하면 못 만든다. IT 프로젝트는 만들어 낸다. IT업계는 실시설계 수준의 설계도를 프로젝트 끝나기 전까지 만들지 못한다. IT의 무형성의 특징 때문에. 관문심사. Gateway Review. (관문심사) 기획을 했으면 기획의 초기버전, 심사를 함. 8차까지 관문 심사를 함. 우리나라도 투자금액이 500억 이상이 되면 예비 타당성 조사를 함.  AHP 통계적 보정. (0.5 이상 나오면 통과) 기술적, 정책적, 경제적 타당성 평가.

 - ex-post 사후적 평가:

  -  심층평가(In-depth Evaluation) -> 실험 설계.

 

https://itdashboard.gov/

 

CIO 협의회. (정보책임자)

CIO란? 최고정보책임자(最高情報責任者, Chief Information Officer) 정보나 정보기술에 관한 최고의 임원을 말한다. CIO 등으로 부른다.

  최근의 경영환경이 정보중심으로 급변함에 따라 정보화문제를 총괄하는 고위직 책임자가 필요하게 되었는데 이를 CIO라 지칭한다. 미국에서는 GE, 애플 등에서 도입했고 대한민국에서는 삼성·아시아나항공 등에서 이 제도를 도입해 실시하고 있다.

http://lovestudycom.tistory.com/81

투명성과 책임성.을 위해 만들었다.

어마어마한 금액을 절감했다.

 

<최근 미국 오바마 행정부의 평가제도 변화 및 시사점>

Program Assessment Rating Tool 사업 평가 진단 도구 (2008년 종료)

 

중복이라고 이야기 할 때. 2가지 개념

 

PRM - Performance RM

 

이렇게 TRM, DRM, SRM, BRM, PRM이 파악이 되어야 중복되는 일을 막을 수 있다.

 

Reference Model - 모든 분야에 대한 정보가 나열되어 있어야 한다.

 참조모델 이란?

ㅇ 프로토콜/기능/관리/네트워크 각 구성요소별로 쉽게 참조할 수 있도록

      간략화시킨 개념적 모델

ㅇ 종류

     - 프로토콜 참조모델

     - 기능 참조모델

     - 네트워크 참조모델

     - 관리 참조모델 등

 

출처: <http://www.ktword.co.kr/abbr_view.php?id=290&m_temp1=3975&nav=1>

 

PART라는 시스템은 one size fits all 이다.

시스템의 유형이나 규모를 전혀 생각하지 않고 단 하나의 기준만으로 평가를 한다.

정량화된, 수치화된 데이터에 빠지면 문제가 생길 수 있다.

 

만족도 Question을 어떻게 디자인해야 제대로 된 평가를 할 수 있을까.

 

 

A사의 고객은 어쩌면 2~4 수준까지만 기대하고 있었다. 때문에 그 구간 안에만 있으면 유저들은 만족하기 때문에 비용을 삭감하는 것이 맞다.

 

<우리나라 성과관리제도 - 성과계획서/보고서, 자율평가, 심층평가>

우리나라 360조 연간 예산. 3.2조가 IT분야. 재정경직성이 50%가 넘어서기 시작했다.

 

1. 재정성과관리제도

2. 성과목표관리제도

3. 재정사업자율평가

4. 재정사업심층평가

 

 

우리나라 IT는 아직도 PART를 벤치마킹한 제도를 활용하고 있음.

그 부작용이 발생하고 있음. 하지만 큰 틀이 지출을 줄이자는 것이기 때문에 아직도 쓰이고 있음.

국회 홈페이지에 가면 이것에 대한 보고서가 다 있음.

 

method 는 일종의 칼. 도구.

methodology 는 method를 어떻게 적용할 것인지에 대한 철학까지 담고 있으면 methodology이다.