병렬컴퓨팅, 병렬 프로세서

병렬 컴퓨팅 개념

• 프로그램 내 계산 영역을 여러 개로 나누어 각 계산을 여러 프로세서에서 동시 수행하는 기술
• 생성형 AI 발전, GPU 품귀, 단일 프로세서 한계

병렬 컴퓨팅 특징

구분	특징	설명
목적	실행시간 단축	Wall clock time 단축
	작업 동시 수행	HW, SW 측면 작업 분할
유형	작업 단위 병렬성	다수 독립 작업 프로그램
	태스크 단위 병렬성	서로 다른 기능 태스크
	스레드 단위 병렬성	동시 처리 스레드
	명령어 단위 병렬성	어셈블리 명령어

병렬 프로세서의 분류

Flynn의 분류

SISD

• 명령어 순차처리
• 단일 프로세서 시스템

SIMD

• 하나의 제어 유닛으로 동기화
• 벡터, 행렬 연산 처리

MISD

• 프로세서 처리 결과로 연산 수행
• 실제 구현 불가

MIMD

• 각 프로세서가 비동기적 처리
• 강결합시 공유메모리 사용
• 약결합시 분산메모리와 메시지 패싱 기법 사용

시스템 구성 방법에 따른 분류

SMP

• 프로그래밍 용이
• 메모리 접근 병목

MPP

• 프로그래밍 복잡
• 낮은 가용성

NUMA

• 장점 결합
• 분산 로컬 메모리, 글로벌 메모리 사용
• 다양한 프로세서 사용 가능