Eunkwang Shin

ISO 25029 개념​

• 인공지능 SW시스템의 품질 속성 모델 표준
• 인공지능 SW는 일반적으로 불투명하고 예측이 어려움, 사용 학습 모델 구조, 학습 모델 파라미터 규모, 사용 데이터 양과 질, 학습 절차 등이 모두 품질 영향

ISO 25029 품질속성 개념도, 세부 내용​

ISO 25029 품질속성 개념도​

제강적 개투정

• ISO 25000 이하 AI 특징을 반영한 품질 속성 추가

ISO 25029 품질 속성 세부 내용​

구분	내용	비고
기능 정확성	요구되는 정확도로 올바른 출력을 생성하는지 확인	학습 모델 종류에 따라 분류, 클러스터링, 회귀 예측 평가
기능 적응성	AI시스템이 배포된 환경에 변화에 따라 행위를 맞춰 나가는 것	지속 학습, 확증 편향
제어 가능성	사용자가 원할 때 작동 중인 AI시스템에 개입 가능 여부	자율 주행
투명성	AI 시스템의 정보를 충분히 제공	해석 가능성, 설명 가능성
강건성	AI가 편향, 적대적 공격 등을 감내할 수 있는 환경 변화의 정도	운영 신뢰성
개입 가능성	쉽게 AI시스템을 운용 및 제어 가능하도록 인터페이스 설계가 되어있는지의 여부	인간중심적

ISO 25029 품질 속성 시험 기법​

구분	시험 기법	내용
기능 정확성	분류	학습 당시 없던 새로운 데이터 입력시 데이터가 어디에 속하는지 분류
-	-	Accuracy, Precision, Recall, ROC
-	회귀 분석	시계열 데이터에 대해 직선, 곡선을 추론하는 기법
-	-	평균절대오차MAE, 평균제곱오차MSE, 평균제곱근오차RMSE
-	군집화	고객 분할, 이미지 분할, 비정상적 탐지 군집화
-	-	Purity, NMI, RI
강건성	악의적 입력 생성	화이트박스기반 손실 함수 기울기 반대방향으로 노이즈를 주어 오판 유도
-	-	블랙박스기반 학습 모델을 대체품으로 만들어 악의적 입력 활용
-	분포 외 데이터 처리	학습 데이터와 동떨어진 데이터 OOD 검증
-	블랙박스 시험 기법	메타몰픽 테스트, 초기 테스트 사례와 후속 테스트 사례 입력 사이의 편차를 검증 (A/B)
-	화이트박스 시험 기법	CNN기반 커버리지, 뉴런 커버리지, 부호 변화 커버리지, 값 변화 커버리지, 부호-부호 커버리지
-	-	RNN기반 커버리지, 셀 스테이트(반대단어), 히든 스테이트(유사단어)

과업심의 가이드 개념​

• 공공 SW사업 계획 단계에서 과업 확정과 사업 기간의 적정성 평가를 지원하고, 과업 내용 변경시 절차를 준수하도록 하기 위한 가이드
• SW사업은 산출물이 구체화될 때 무형의 계약목적물을 다루므로, 과업 변경시 합리성, 공정성을 확보하고, 발주처와 사업자간 원활한 업무수행을 지원하기 위해 필요

과업변경 적정성 판단기준 개념도, 검토항목, 기대효과​

과업변경 적정성 판단기준 개념도​

과업변경 적정성 판단기준 검토항목​

구분	내용	비고
적정한 과업변경	법령 개정 등 법제도 변경	과업심의위원회 심의 권고, 변경시 기간, 금액 등 후속 협의
-	기술, 정책적 환경 변화	과업심위위원회 심의 권고, 예산 절감, 대국민 편의, 행정효율 개선 가능한 경우
-	수,발주자간 사업 기간 조정 없이 합의한 경미한 과업 변경	심의 불필요, 필요시 계약기간 조정 등 권고
불필요한 과업변경	적절한 과업 변경에 해당하지 않는 과업변경	제도 변화 무관, 예산 절감 효과 없음, 수,발주자 간 합의 등

과업심의 가이드 기대효과​

구분	기대효과	비고
발주자	명확한 과업 범위 설정을 통한 예산 낭비 방지	과업변경 최소화 노력
사업자	과업 변경시 합리적 절차 통한 권리 보호	과업 규모 산정 용이
기타	SW사업의 효율성, 품질 향상	SW사업 관련 분쟁 감소

과업변경시 고려사항​

• 정통법으로 기능점수를 산정하여 과업 변경에 대한 정확한 비용 추정 필요

SCM 개념​

• 고객 서비스 수준을 만족시키면서 시스템 전반의 비용을 최소화할 수 있도록 제품이 적절한 수량, 시간, 장소에서 생산, 유통이 가능하게 하기 위해 공급자, 제조업자, 창고, 보관업자, 소매상 등을 효율적으로 통합하기 위한 관리 방법
• 부가가치의 70~80%가 공급사슬에서 발생, 비용절감, 효율성 증대, 고객 만족도 향상

SCM 구성도, 구성요소, 적용사례​

SCM 구성도​

SCM 구성요소​

구분	내용	비고
계획	수요 예측, 자원 계획, 일정 관리	예측 정확도
조달	원자재 및 부품 공급자 선정 관리	품질, 가격 협상
제조	제품 생산 및 조립 관리	생산효율성
물류	제품의 창고 보관, 운송 관리	적시성
반품관리	제품 반품 및 재고 관리	고객 서비스 향상

SCM 적용사례​

구분	사례	비고
국내	삼성전자 글로벌 공급망 통합관리	부품 조달, 생산, 유통 통합
국외	아마존 IT기술 융합 재고 최적화	이커머스 선도 모델

SCM 추가적 고려사항​

• 자연재해, 정치 이슈 등 다양한 외부 리스크에 대한 대응 계획 수립 및 공급망 다각화 필요

IT 투자분석 개념​

• IT투자에 대한 성과를 객관적, 논리적으로 분석 및 측정하여 효과성을 파악하는 절차
• 중요도와 효과를 사전 분석함으로서 정보화사업의 우선순위 결정, 비용 절감

IT 투자분석 프로세스, 프레임워크, 분석 방법론​

IT 투자분석 프로세스​

구분	내용	비고
현행 분석 및 계획 수립	현재 조직의 상태 파악, 투자 계획 수립	평가 대산, 기간, 조직 분석
IT투자평가 지표 도출	사전, 중간, 사후 평가시 지표 마련	KPI, 베이스라인
자료수집 및 평가	평가지표별 투자효과성 검토	자료 수집, 효과 산출
성과 분석 및 사업가치 분석	성과 분석 및 개선방안 도출	CBA
종합보고 및 피드백	투자분석, 결과보고, 피드백	성과보고

IT 투자분석 프레임워크​

구분	프레임워크
평가단계	사전평가, 중간평가, 사후평가
시행추진단계	정보화사업 준비, 정보화사업 수행, 정보화사업 완료
성과측정모델	BSC, IT-BSC
분석기법	NPV-순현재가치, ROI-투자수익률 - IRR-투자회수기간, PP-내부수익률

IT 투자분석 방법론​

• 재무적, 통계산술적, 다중접근 등의 방법론을 통해 최적 분석안을 선택하여 다층 분석 ㅅ행

IT 투자분석 고려사항​

• 효율적, 효과적인 IT투자분석을 위해 기업의 IT거버넌스 수립이 우선되어야함

ESG 개념​

• 기업 경영 활동을 환경 경영, 사회적 책임, 건전하고 투명한 지배구조에 초점을 둔 지속가능성을 위한 기업 경영의 세가지 비재무적 성과지표
• 세계적 트랜드와 사회 구성원의 관심으로 인해 기업의 지속가능한 성장을 위한 리스크 관리 수단으로 활용

ESG 구성도, 구성요소, 적용방안​

ESG 구성도​

• 정보공시시 ESG 측면의 목표를 검증, 점검하여 투명성 제고

ESG 구성요소​

구분	내용	비고
정보공시	투자자, 이해관계자에게 ESG를 투명하게 공개	ESG 정보공시 방식, 주기, 범위, KPI 등
환경	환경 영향 최소화, 지속가능한 환경 위한 기업 노력	환경 경영 목표, 온실가스 배출량, 에너지 사용량
사회	조직구성원, 소비자 등 사회적 책임 이행을 위한 노력	정규직 비율, 자발적 이직율, 산업재해율, 정보보호시스템 구축
지배구조	투명하고 책임감 있는 기업 지배구조 확립	사외이사비율, 주주권리보호, 윤리경영, 감사기구 설치 등

ESG 적용방안​

구분	내용	비고
정보보호시스템 구축 측면	정보 유출, 해킹 등 사이버 위협으로부터 기업 정보 보호, 사고발생시 신속하고 효과적인 대응체계 구축	ISMS 인증 획득, 정보보호교육 실시, 대응절차 마련
개인정보침해 및 규제 측면	개인정보보호 관련 법규 준수, 개인정보 침해사고 예방 및 피해 최소화	ISMS-P 인증 획득, 개인정보 접근통제 강화, 피해규제 방안 마련

ESG 고려사항​

• RE100 인증, 탄소국경조정제도(CBAM) 대응을 위한 재생에너지 사용비율을 지속적으로 높여야함

디지털 플랫폼 정부 개념​

• 모든 데이터가 연결되는 디지털 플랫폼 위에서 국민, 기업, 정부가 함께 사회문제를 해결하고, 새로운 가치를 창출하는 정부
• AI, 빅데이터 등 디지털 심화시대에 데이터활용의 중요 대두, 디지털 플랫폼 비지니스모델 적용 필요

디지털 플랫폼 정부 특징, 구성요소, 기대효과​

디지털 플랫폼 정부 특징​

구분	내용	비고
국민중심	모든 국민이 언제,어디서나 디지털서비스 이용 보장	디지털 포용
-	공공서비스는 국민이 원하는 방식으로 통합, 선제, 맞춤 제공	사용자 중심 서비스
하나의 정부	모든 데이터가 연결된 디지털 플랫폼으로 하나의 정부 구현	부처 간 협업, 데이터 공유
-	행정 프로세스 디지털 중심 재설계	행정, 조직, 효율성 증대
AI, 데이터 기반	공공 데이터는 사람과 기계가독성을 가진 형식으로 전면 개방	데이터 활용성 증대
-	AI, 빅데이터 기반 정책 결정	과학적 정책 결정
민관 협력	민관협력 혁신 생태계 조성	민간 참여 활성화
-	디지털 모법 국가로 국제사회 기여	국제적 위상 제고

디지털 플랫폼 정부 구성요소​

구분	내용	비고
플랫폼 제공자	디지털 플랫폼 구축, 운영, 데이터 통합, 활용 지원	정부
공급자	공공, 민간 서비스, 데이터 제공	정부, 공공기관
소비자, 이용자	맞춤형 서비스와 공공 데이터 활용	국민, 기업
플랫폼 생태계 전반	플랫폼 전반에 걸친 상호작용	데이터, 서비스, 인프라

디지털 플랫폼 정부의 기대효과​

구분	기대효과	내용
정부	정부 역량 강화, 신뢰도 향상	빅데이터 기반 과학적 정책결정, 투명성 제공
기업	민간부문 성장동력 마련	공공 데이터 활용 혁신 서비스 개발
국민	국민 중심의 서비스 제공	맞춤형 행정 서비스 제공
사회	사회 전체 발전 도모	디지털 격차, 역기능 해소

디지털 플랫폼 정부의 추가적인 고려사항​

구분	내용	비고
관리적	부처 내 데이터 정보화로 부서 위상 제고	CDO, CIO 지정
기술적	제로트러스트 보안체계 구축	사이버 위협 대응
제도적	개인정보보호법 개정, 하위 법령 정비	개인정보 전송요구권 도입

SLA 개념​

• 정보시스템 사용자와 공급자 사이 상호 동의에 의하여 서비스 수준을 정량화하여 명시적으로 정의하고, 서비스 수준이 미달되는 경우 손해배상을 하도록하여 서비스 품질을 보장하기 위한 약정서

SLA, 클라우드SLA, 금융클라우드SLA 주요 지표​

SLA 주요지표​

구분	지표	내용
서비스 가용성	가용성	서비스 접근 가능한 시간 비율
-	평균복구시간	장애시 복구 완료까지 걸리는 평균 시간
-	평균고장간격	장애 발생 간 평균 시간
데이터 백업 및 복구	백업 주기	정기적 백업 주기
-	백업준수율	계획된 백업 정상 수행 비율
-	데이터 복구시간	복구요청으로부터 완료 시간
-	백업데이터 보관기간	백업데이터 보존 기간
고객지원	고객요청 처리시간	요청 접수부터 처리 완료까지 시간
-	고객요청 처리율	처리된 요청 비율
-	요청적기 처리율	기간 내 요청 처리 비율
-	변경 반영시 오류율	변경 적용시 오류 발생 비율

• 클라우드 SLA는 SLA의 주요 지표를 표함하여 클라우드 환경의 특성 반영

클라우드 SLA 주요 지표​

구분	지표	내용
성능	응답시간	요청에 대한 평균 응답 시간
-	처리량	초당 트랜잭션 처리량
-	지연시간	네트워크 지연 시간
확장성	동시접속 가능 사용자	동시 요청 가능 트랜잭션
-	자원할당량	서버 자원 할당량

• 금융 클라우드 SLA는 클라우드 SLA 주요 지표를 포함하여 금융 분야의 특수성 반영

금융 클라우드 SLA 주요 지표​

구분	지표	내용
보안	ISMS 인증	ISMS, ISMS-P 인증 여부
-	침해사고 대응시간	침해시 평균 대응시간
규제 준수	금융 관련 법규 준수	정보통신망법, 개인정보보호법
데이터 처리 위치	금융데이터 처리 위치	국내, 해외서버

• 규제준수 및 데이터 처리, 폐기에 대한 SLA 협의 필요

SLA 추가적인 고려사항​

• 비지니스 환경, 기술변화 등을 고려하여 SLA를 정기적으로 검토하고 개선 필요

ISMP 개념​

• 정보시스템 구축 사업에 대한 제안요청서를 마련하기 위해 목표시스템을 체계적으로 파악하고 요구사항을 상세히 분석하여 구축 전략 및 이행계획을 수립하는 활동
• ISP의 형식적 수립으로 인한 중복 구축, 대가산정 부적절, 데이터 표준화 미준수, 정보시스템활용률 저조 등 예산 낭비 절감, 구축 및 운영단계에서 발생할 문제 사전 예방

ISMP 절차도, 구성요소​

ISMP 절차도​

착방업구이

ISMP 구성요소​

단계	주요 활동	산출물
1. 프로젝트 착수	경영진 지원 조직 형성	프로젝트 역할 정의서
-	프로젝트 수행 조직 편성	ISMP 팀 조직
2. 방향성 수립	정보화 전략 검토	정보화 전략 분석서
-	정보시스템 범위, 방향성 검토	정보시스템 추진 목표, 방향 보고서
3. 업무 및 기술요건 분석	업무 및 정보기술 현황 분석	아키텍처 분석서
-	업무 및 정보기술 요건 검토	정보기술 요구사항 분석서
4. 구조 요건 정의	요건 간 이행 연관성 분석	요구사항 연관표
-	정보시스템 요건 기술서 작성 검토	정보시스템 요건 기술서
5. 이행 방안 수립	분리발주 가능성 평가	분리발주 가능성 보고서
-	제안요청서 작성	RFP

ISP, ISMP 비교​

ISP, ISMP 관계도​

• ISP로 조직의 정보화 방향 제시, ISP로 특정 정보시스템 구축 및 운영에 대한 구체적 계획 수립

ISP, ISMP 상세 비교​

구분	ISP	ISMP
목적	목표 모델 설계	기능, 비기능 프로젝트 자원 요건 도출
사업 구분	신규 사업 적합	재구축 사업 적합
기업 이해도	이해도 낮을 경우	이해도 높은 경우
주요 산출물	정보화전략 계획서	RFP

ISMP 추가적 고려사항​

• 디지털플랫폼 정부 기본 원칙인 클라우드, 국민 중심, 하나의 정부, AI 데이터, 민간 협력을 우선시 하여 사업 효율성 제고

SEM 개념​

• 기업 경영진의 가치중심경영을 전사적으로 구현하기 위해 원가, 성과관리를 통해 전략 중심의 조직을 구현하기 위한 경영지원시스템
• 가치중심경영, ERP의 경영지원 한계점, 신속한 의사결정 지원, ESG 연계를 통한 기업의 연속성 제고

SEM 구성도, 구성요소, 적용방안​

SEM 구성도​

• 전사적 연계를 통한 신속한 의사결정 지원

SEM 구성요소​

구분	내용	비고
VBM	가치중심 과제 관리, 투자 이익평가	KPI 중심, 현금 흐름 창출
ABM	원가 관리, 자원 배분 관리	가격 결정, 의사 결정, 원가 분석, 프로세스 개선
BSC	기업 성과 관리, 경영 품질 모니터링	재무, 고객, 내부프로세스, 학습 관점, IT BSC 연계

재고내학, 기사운미

• 기존 현황 파악, 실적 관리를 위한 의사결정시스템 구축 필요

SEM 시스템 적용방안​

구분	방안	비고
자료 수집, 분석	대상 범위 명확화, 데이터 통합 분석 구현	SWOT, PEST, 3C 기법 통한 내외부 정보 수집
핵심가치 관리	종합적 성과관리 체계 구축, KPI 기반 보상체계 구축	IT BSC
의사결정 실행	실행 조직 구성, 프로세스 개선, 성과측정, 평가	성과 피드백, 보상, 지속적 개선

SEM 추가적인 고려사항​

• 가치경영 도입 및 사회적 책임에 대한 경영 방식을 결합하여 기업의 경쟁력 제고
• RE100 달성을 위한 기업 내 전략 수립 필요

ISP, BPR 개념​

• ISP는 기업의 비전과 목표 달성을 위해 ICT기술을 어떻게 활용할지 전략 수립, BPR은 기존 업무 프로세스를 검토하고 혁신하여 효율성을 극대화하는 전략 수립
• 기업의 비지니스 아키텍처, 전사적 아키텍처를 개선하고 비지니스 목표를 달성하기 위한 필수 요소

ISP, BPR 절차도, 세부절차​

ISP 절차도, 세부절차​

단계	내용	비고
환경분석	비지니스 환경과 내부 역량 파악, 기회, 위험요인 식별	외부 환경 분석, 내부 환경 분석
현황분석	현재 정보시스템 현황파악, 벤치마킹, 개선방향 설정	정보기술 분석, 업무체계 분석
목표 모델 설계	정보시스템 비전 및 목표설정, 아키텍처 설계	정보화 전략, 운영관리 체계
실행계획수립	목표모델 실현을 위한 구체적 실행방안 마련	추진전략수립, 추진일정수립

BPR 절차도, 세부절차​

단계	내용	비고
고객가치파악	고객중심 프로세스 개선 기반 마련	고객 가치 분석, 요구사항 파악
현재 프로세스 분석	AS-IS 프로세스 문제점, 개선 기회 파악	프로세스 분석서
프로세스 목표 설정	개선 목표 및 효과 측정, 평가 기준 마련	개선 목표 설정, KPI 정의
개선 프로세스 설계	현신적 프로세스 구현을 위한 실행방안 마련	RPA 등 자동화시스템 도입

ISP, BPR 비교​

구분	ISP	BPR
관점	전략적 관점	전술적 관점
계획	장기적 계획	단기적 실행
개선포인트	정보시스템 중심	업무프로세스 중심

• ISP를 진행하고, 현행 비지니스 프로세스 수준이 낮을 경우 BPR을 상호보완적으로 활용하여 정보시스템에 최적화된 프로세스 수립

ISP, BPR 도입 시 고려사항​

• 성공적인 변화 관리를 위해 이사회, 경영진의 강력한 의지와 지원 필요
• 조직 구성원은 변화하는 환경에 적극적, 지속적 프로세스 개선 노력 필요