Whisper ASR의 CGLA 상에서의 에너지 효율적 하드웨어 가속

기본 정보

• 논문 ID: 2511.02269
• 제목: Energy-Efficient Hardware Acceleration of Whisper ASR on a CGLA
• 저자: Takuto ANDO, Yu ETO, Ayumu TAKEUCHI, Yasuhiko NAKASHIMA (나라 과학기술대학원대학교)
• 분류: cs.AR (컴퓨터 아키텍처)
• 발표 시간: 2025년 11월 4일 (arXiv 제출)
• 논문 링크: https://arxiv.org/abs/2511.02269

초록

생성형 AI가 자동 음성 인식(ASR) 등의 작업에서 부상함에 따라 심각한 에너지 소비 문제가 야기되고 있다. ASIC은 높은 효율성을 제공하지만 알고리즘 진화에 대한 프로그래밍 가능성이 부족하다. 이러한 트레이드오프를 해결하기 위해, 본 논문은 IMAX(범용 조립형 선형 어레이 CGLA 가속기)에서 Whisper의 핵심 계산 커널을 구현하고 평가한다. 저자들의 지식으로는, 이것이 CGRA에서 Whisper 커널을 실행하고 CPU 및 GPU와 성능을 비교한 첫 번째 작업이다. 하드웨어/소프트웨어 협설계를 통해, 저자들은 FPGA 프로토타입으로 시스템을 평가하고 28nm ASIC의 성능을 예측한다. 결과는 뛰어난 에너지 효율성을 보여준다: Q8_0 모델의 경우, 예측된 ASIC은 NVIDIA Jetson AGX Orin보다 1.90배, NVIDIA RTX 4090보다 9.83배 에너지 효율이 높다. 본 연구는 CGLA를 전력 제한 엣지 디바이스에서 지속 가능한 ASR을 위한 유망한 플랫폼으로 위치시킨다.

연구 배경 및 동기

1. 해결하려는 문제

본 연구는 AI 기반 자동 음성 인식 시스템이 직면한 에너지 소비 위기를 다룬다. Whisper와 같은 고급 ASR 모델의 광범위한 적용(스마트 어시스턴트, 실시간 전사, 의료 응용)으로 인해 그 계산 요구사항은 데이터 센터 에너지 소비의 급격한 증가를 초래한다. 국제 에너지 기구는 2030년까지 데이터 센터 전력 소비가 945 TWh로 두 배 증가할 수 있다고 예측하며, 이는 일본의 연간 총 전력 소비량을 약간 초과한다.

2. 문제의 중요성

• 에너지 지속 가능성 위기: AI 인프라는 고전력 GPGPU에 심각하게 의존하며, 단일 범용 아키텍처의 에너지 효율성이 낮고 지속 불가능하다
• 엣지 디바이스 요구사항: 전력 제한 엣지 디바이스(스마트폰, IoT 디바이스 등)는 높은 에너지 효율의 ASR 솔루션이 필요하다
• 알고리즘 빠른 진화: AI 알고리즘이 지속적으로 업데이트되므로 효율성과 유연성을 모두 갖춘 하드웨어 플랫폼이 필요하다

3. 기존 방법의 한계

• ASIC 전용 가속기: 매우 높은 에너지 효율성을 제공하지만 프로그래밍 가능성이 부족하여 빠르게 진화하는 알고리즘에 적응하기 어렵고, 가속 하드웨어가 구식이 된다
• FPGA 솔루션: 특정 모델(CNN, Transformer 등)에 최적화되지만 전문성이 높고 이식성이 떨어진다
• GPU 솔루션: 높은 성능과 유연성을 제공하지만 전력 소비가 과도하여 엣지 디바이스에 적합하지 않다

4. 연구 동기

저자들은 CGLA(조립형 선형 어레이) 아키텍처의 IMAX 가속기 사용을 제안하여 ASIC의 에너지 효율성과 GPGPU의 프로그래밍 가능성 사이의 최적 균형점을 찾으려고 한다. IMAX는 선형으로 배열된 처리 단위(PE)와 로컬 메모리 모듈(LMM)을 통해 불규칙한 메모리 접근 패턴을 흡수하면서 높은 처리량과 에너지 효율성을 유지할 수 있다.

핵심 기여

1. 첫 번째 구현: CGRA 아키텍처에서 Whisper ASR 커널을 처음으로 구현하고 평가하며, 동적 가변 길이 워크로드를 처리하는 하드웨어/소프트웨어 협설계 원칙을 수립한다
2. 뛰어난 에너지 효율성: FPGA 프로토타입 기반 추정에 따르면, 최적화된 28nm ASIC 구성은 Q8_0 양자화 모델에서 우수한 에너지 효율성을 달성하며, Jetson AGX Orin보다 1.90배, RTX 4090보다 9.83배 높다
3. 아키텍처 최적화 분석: LMM 크기와 전체 에너지 효율성 간의 트레이드오프를 체계적으로 분석하며, 32KB LMM 구성이 최대 커널 커버리지와 최소 정적 전력 소비 오버헤드 사이에서 최적 균형을 달성함을 증명한다
4. 확장성 검증: 더 큰 Whisper 모델(base, small)에 대한 방법의 적용 가능성을 보여주며, 아키텍처의 확장 가능한 잠재력을 증명한다

방법 상세 설명

작업 정의

목표: IMAX CGLA 가속기에서 Whisper ASR 모델의 핵심 계산 커널(주로 내적 연산)을 효율적으로 실행한다

입력: 약 10초의 오디오 파일(jfk.wav)

출력: 텍스트 전사 결과

제약 조건:

• 전력 제한 엣지 디바이스 시나리오
• 가변 길이 벡터 처리 필요
• 에너지 효율성과 성능 간 균형 필요

모델 아키텍처

1. IMAX3 시스템 아키텍처

그림 2에 나타난 바와 같이, IMAX3은 8채널 구성으로 구현되어 AMD Versal VPK180 FPGA에 배포된다:

• 처리 시스템(PS): ARM Cortex-A72 듀얼 코어 CPU
• 프로그래밍 가능 로직(PL): CGLA 코어 호스팅
• 상호 연결: 온칩 네트워크(NoC)를 통해 PS와 PL 연결
• 메모리: OS 버퍼용 8GB DDR4, DMA 버퍼용 4GB DDR4

2. IMAX 채널 내부 구조(그림 3)

각 IMAX 채널에는 다음이 포함된다:

• 처리 단위(PE): 파이프라인된 ALU 및 로컬 메모리 모듈(LMM)
• 선형 어레이 구조: PE와 LMM의 전략적 교대 배열
• 데이터 경로: 실행 데이터 경로와 메모리 데이터 경로 분리
• DMA 인터페이스: AXI DMA 읽기/쓰기 인터페이스

3. Whisper 처리 흐름(그림 1)

• 특성 추출: Mel 스펙트로그램 생성
• 인코더: 다중 헤드 주의 및 피드포워드 네트워크(주요 계산 부하)
• 디코더: 자동회귀 텍스트 생성
• 가속 초점: 내적 커널(인코더 및 디코더의 계산 핵심)

기술 혁신 포인트

1. 커널 수준 협설계

FP16 내적 커널 최적화:

• 인라인 타입 변환: IMAX의 프로그래밍 가능성을 활용하여 PE의 비트 연산 능력을 통해 FP16에서 FP32로의 변환을 실행하며, 전용 하드웨어를 피한다
• SIMD 연산: FMA 단위에 SIMD를 적용하여 단일 64비트 데이터 경로에서 두 개의 32비트 연산을 동시에 실행한다
• 열식 멀티스레딩: 열식 멀티스레딩을 사용하여 4개의 논리 FMA 연산을 단일 물리 FPU에 시분할 멀티플렉싱하여 FPU 지연을 숨긴다

혼합 실행 전략(가변 길이 벡터 처리):

• 각 벡터를 두 부분으로 나눈다: 주 부분(버스트 길이의 배수)은 IMAX에서 처리되고, 나머지 부분은 호스트 CPU에서 동시에 처리된다
• 버스트 길이는 16개 요소로 선택된다(Whisper 벡터 길이 분포 분석 기반)
• CPU 나머지 처리는 총 계산량의 약 5%만 차지한다

Q8_0 커널: 이전 작업의 양자화 커널 구현 재사용

2. 데이터 처리 및 LMM 구성 최적화

패딩 제거 기술:

• whisper.cpp의 FP16 텐서는 32바이트 정렬 요구사항을 충족하기 위해 많은 패딩을 포함한다
• 호스트 CPU는 DMA 전송 전에 모든 패딩을 제거하고 데이터를 밀집하게 패킹한다
• 효과는 상당하다: 표 I에 나타난 바와 같이, FP16 모델의 경우 기본 구성에서 32KB LMM은 커널의 1.39%만 포함할 수 있지만, 최적화 후 커버리지는 93.80%로 증가한다

LMM 크기 선택(표 II):

• 논리 합성 기반 전력 추정(Synopsys Design Compiler, TSMC 28nm 공정)
• FP16 커널: 16KB LMM 전력 0.665W, 32KB는 0.675W(증가 무시할 수 있음)
• 커널 커버리지: 16KB는 66.35% 커버, 32KB는 93.80% 커버
• 최적 선택: 32KB LMM은 성능 향상과 전력 증가 사이에서 최적 균형을 달성한다

3. 하드웨어/소프트웨어 협설계 목표

• 계산 처리량 최대화: IMAX 병렬 처리 능력을 충분히 활용한다
• 데이터 전송 효율성 최대화: 유효 메모리 대역폭을 높이고 LMM을 효율적으로 활용한다

실험 설정

데이터셋

• 오디오 파일: whisper.cpp 표준 테스트 파일 jfk.wav(약 10초)
• 모델: Whisper-tiny.en 모델(78MB)
  • FP16 버전
  • Q8_0 양자화 버전

평가 지표

1. 엔드-투-엔드 지연: gettimeofday 함수를 사용하여 벽시계 시간 측정(마이크로초 정밀도)
2. 전력:
   • IMAX: 논리 합성 추정값
   • CPU: 추정값
   • GPU: 공칭 열설계 전력(TDP)
3. 전력-지연 곱(PDP): PDP = 실행 시간 × 전력
   • 에너지 효율성을 종합적으로 평가하는 핵심 지표
   • 값이 낮을수록 에너지 효율성이 높다

비교 방법

표 III에 나타난 바와 같이, 비교 플랫폼에는 다음이 포함된다:

1. ARM Cortex-A72 (임베디드 CPU)
   • 2코어, 1400 MHz
   • 전력: 0.6485W
2. NVIDIA Jetson AGX Orin 32GB (엣지 GPU)
   • 1792 CUDA 코어, 930 MHz
   • 전력: 15W(최저 전력 모드)
3. NVIDIA GeForce RTX 4090 (고성능 GPU)
   • 16384 CUDA 코어, 2520 MHz
   • 전력: 450W (TDP)
4. IMAX3 (FPGA 프로토타입)
   • 64 PE, 145 MHz
   • 전력: 180W(전체 FPGA 시스템)
5. IMAX3 (28nm ASIC 예측)
   • 64 PE, 840 MHz(6배 주파수 상향)
   • 전력: 0.647W (FP16) / 1.32W (Q8_0), 단일 채널 32KB LMM 구성

구현 세부 사항

• FPGA 도구: Vivado 2024.1
• 합성 도구: Synopsys Design Compiler
• 공정 라이브러리: TSMC 28nm
• FPGA 주파수: 140 MHz
• ASIC 예측 주파수: 840 MHz(정적 타이밍 분석으로 검증)
• 평가 구성: 1채널 및 2채널 구성
• 호스트 스레드 수: 1-2개 스레드 변화

실험 결과

주요 결과

1. 엔드-투-엔드 지연 비교(그림 4)

FP16 모델(2스레드 실행):

• ARM Cortex-A72: 24.4초
• IMAX (FPGA 2-레인): ~21초
• IMAX (28nm ASIC 2-레인): 13.5초
• Jetson AGX Orin: 1.6초
• RTX 4090: 0.49초

Q8_0 모델(2스레드 실행):

• ARM Cortex-A72: 19.6초
• IMAX (FPGA 2-레인): ~17초
• IMAX (28nm ASIC 2-레인): 11.1초
• Jetson AGX Orin: 1.6초
• RTX 4090: 0.50초

분석: IMAX ASIC은 임베디드 CPU 구현에 비해 명백한 가속을 제공하지만, GPU(대규모 병렬 계산 리소스 보유)에는 미치지 못한다

2. 에너지 효율성 비교(PDP, 그림 5)

FP16 모델(2스레드 실행):

• ARM Cortex-A72: 15.8 J
• IMAX (28nm ASIC 2-레인): 13.6 J
• Jetson AGX Orin: 24.0 J
• RTX 4090: 120.1 J

Q8_0 모델(2스레드 실행):

• ARM Cortex-A72: 12.7 J
• IMAX (28nm ASIC 2-레인): 12.6 J ✓ 최적
• Jetson AGX Orin: 24.0 J
• RTX 4090: 123.8 J

핵심 발견:

• IMAX (28nm ASIC) Q8_0 모델 에너지 효율성이 Jetson AGX Orin보다 1.90배 높다
• RTX 4090보다 9.83배 높다
• FP16 모델과 비교하여 Q8_0 양자화는 에너지 효율성을 더욱 향상시킨다

제거 실험

1. LMM 크기 최적화(그림 6)

FP16 모델 PDP(2스레드):

• 16KB LMM: ~15 J
• 32KB LMM: 13.6 J ✓ 최적
• 64KB LMM: ~14 J
• 128KB LMM: ~15 J

Q8_0 모델 PDP(2스레드):

• 16KB LMM: ~14 J
• 32KB LMM: 12.6 J ✓ 최적
• 64KB LMM: ~13.5 J
• 128KB LMM: ~15 J

분석:

• 16KB: 지연 및 PDP가 더 나쁘다(CPU가 부적절한 커널을 처리해야 함)
• 32KB: PDP 최솟값 달성(최적 균형점)
• 64KB/128KB: 지연이 약간 개선되지만 정적 전력 소비 증가로 PDP가 악화된다

결론: 32KB LMM은 에너지 효율성 최적 구성이며, 설계 선택의 정확성을 검증한다

2. 계산 효율성 검증(그림 7)

실행 시간 분해:

• EXEC(PE 순수 계산): FP16의 경우 60.89%, Q8_0의 경우 74.70%
• LOAD/DRAIN(DRAM과 LMM 간 데이터 전송): 상대적으로 작다
• CONF/REGV/RANGE/REFILL(IMAX 구성): 상대적으로 작다

핵심 통찰:

• 높은 EXEC 비율은 IMAX가 계산 제한 상태임을 나타낸다(메모리 제한이 아님)
• 데이터 이동 오버헤드를 성공적으로 완화했다
• IMAX의 높은 처리량 잠재력을 효과적으로 해제했다

확장성 분석(표 IV)

더 큰 모델의 커널 커버리지(최적화 후):

발견:

• 계산 부하가 상당히 증가하지만, 단일 연산의 메모리 점유는 비례적으로 증가하지 않는다
• 64KB LMM은 base 및 small 모델의 커널 94% 이상을 커버할 수 있다
• 더 큰 모델에 대한 아키텍처의 우수한 확장성을 증명한다
• 정적 전력 소비 증가와 성능 향상 사이에서 균형을 맞춰야 한다

관련 작업

1. AI 하드웨어 가속기

전문화 방법(ASIC/FPGA):

• Park 등: FPGA의 CNN과 스마트폰 언어 모델 하이브리드 시스템
• Hu 등: GCNN 모델 전용 FPGA 가속기
• Yamini 등: 수축 배열을 사용한 엔드-투-엔드 Transformer ASR 가속
• 한계: 특정 모델에 최적화되어 유연성이 떨어지고 알고리즘 진화에 적응하기 어렵다

본 논문의 장점: IMAX는 범용 아키텍처로 특정 AI 작업에 바인딩되지 않으며 알고리즘 변화에 빠르게 적응할 수 있다

2. CGRA 아키텍처 진화

기존 CGRA 과제:

• 확장성 문제
• 긴 컴파일 시간

IMAX 혁신:

• CGLA(조립형 선형 어레이) 진화 기반
• PE와 LMM의 선형 교대 배열
• 불규칙한 메모리 접근 지연을 효과적으로 숨긴다

이전 IMAX 응용:

• 계산 집약적 커널: SpGEMM, FFT
• 현대 AI 워크로드: CNN, LLM, 근사 k-NN 검색(RAG)
• 본 논문 확장: ASR 작업의 내적 연산에 처음 적용

3. Whisper 하드웨어 구현

저자들의 지식으로는, 본 논문이 CGRA에서 Whisper의 첫 번째 하드웨어 구현 및 평가 작업이며, 이 분야의 공백을 채운다.

결론 및 논의

주요 결론

1. 첫 번째 구현: CGLA 아키텍처에서 Whisper ASR 커널을 성공적으로 구현하고 하드웨어/소프트웨어 협설계 방법론을 수립했다
2. 에너지 효율성 장점: 28nm ASIC 예측은 Q8_0 모델에서 PDP가 12.6J이며, 엣지 GPU(Jetson AGX Orin)보다 에너지 효율성이 1.90배 높고, 고성능 GPU(RTX 4090)보다 9.83배 높다
3. 설계 트레이드오프: 절대 지연은 GPU에 미치지 못하지만, 전력 제한 엣지 응용에서는 에너지 효율성이 낮은 지연보다 더 중요하다
4. 아키텍처 통찰: 32KB LMM 구성은 커널 커버리지와 정적 전력 소비 사이에서 최적 균형을 달성한다
5. 확장성: 더 큰 Whisper 모델(base, small)에 대한 적용 가능성을 증명했다

한계

1. 전력 평가 방법:
   • GPU는 공칭 TDP를 사용하고 실측 평균 전력을 사용하지 않는다
   • TDP는 피크 전력을 나타내며 워크로드 평균 전력이 아니다
   • 결과는 아키텍처 잠재력 지표로 봐야 하며 확정적 우위 측정이 아니다
   • 정확한 비교를 위해 실측 평균 전력이 필요하다
2. 성능 절대값:
   • IMAX 지연은 GPU보다 훨씬 높다(ASIC 예측 13.5초 vs GPU 0.49초)
   • 지연에 극도로 민감한 실시간 응용에는 부적합하다
3. 모델 범위:
   • Whisper-tiny.en 모델만 평가했다
   • 더 큰 모델(base, small)은 이론적 분석만 수행했으며 실제 구현하지 않았다
4. ASIC 구현:
   • 28nm ASIC 성능은 합성 추정 및 주파수 추측 기반이다
   • 실제 테이프아웃 검증이 없다
5. 단일 워크로드:
   • 10초 오디오 파일만 테스트했다
   • 다양한 길이, 다양한 언어, 다양한 노이즈 환경의 견고성을 평가하지 않았다

향후 방향

1. 더 큰 모델로 확장: Whisper base 및 small 모델을 구현하고 평가하여 전력-성능 균형을 최적화한다
2. 추가 커널 최적화: 계산 단위 수 등 아키텍처 매개변수를 조정한다
3. 실제 ASIC 테이프아웃: 28nm ASIC 예측의 정확성을 검증한다
4. 정확한 전력 측정: TDP 대신 실측 평균 전력을 사용하여 공정한 비교를 수행한다
5. 다양한 워크로드: 다양한 길이의 오디오, 다국어, 노이즈 환경에서 성능을 평가한다

심층 평가

장점

1. 강한 혁신성:
   • Whisper ASR을 CGRA 아키텍처에 처음 매핑했다
   • ASR 하드웨어 가속 분야의 중요한 공백을 채웠다
   • 가변 길이 벡터 처리를 위한 혼합 실행 전략을 제시했다
2. 체계적 방법론:
   • 완전한 하드웨어/소프트웨어 협설계 프로세스
   • 커널 최적화에서 데이터 처리에서 아키텍처 매개변수 조정까지의 포괄적 고려
   • 패딩 제거 기술이 LMM 활용률을 크게 향상시켰다(1.39%→93.80%)
3. 충분한 실험:
   • 다중 플랫폼 비교(CPU, 엣지 GPU, 고성능 GPU, FPGA, ASIC 예측)
   • 상세한 제거 실험(LMM 크기, 실행 시간 분해)
   • 확장성 분석(더 큰 모델의 이론적 검증)
4. 높은 실용 가치:
   • 엣지 디바이스의 에너지 효율성 최적화는 중요한 현실적 의미가 있다
   • 배터리 지속 시간과 열 관리가 중요한 시나리오에서 명백한 장점
   • CGLA의 범용성은 알고리즘 진화에 대한 적응 능력을 보장한다
5. 명확한 기술 세부 사항:
   • FP16 커널의 SIMD 및 멀티스레딩 최적화를 상세히 설명했다
   • 혼합 실행 전략의 버스트 길이 선택이 데이터로 지원된다
   • 아키텍처 다이어그램과 데이터 흐름도가 명확하고 이해하기 쉽다

부족한 점

1. 공정하지 않은 전력 비교:
   • GPU의 TDP 사용 대신 실측 전력을 사용하지 않는 것은 주요 방법론 결함이다
   • 에너지 효율성 우위 주장의 신뢰성을 약화시킨다
   • 실측 전력 데이터로 보완해야 한다
2. 현저한 성능 격차:
   • ASIC 예측 지연은 여전히 GPU의 27배이다(13.5초 vs 0.49초)
   • 실제 응용 시나리오를 제한한다(실시간 상호작용에 부적합)
   • 지연 민감 시나리오에서의 적용 방법에 대해 충분히 논의하지 않았다
3. 불충분한 ASIC 검증:
   • 840MHz 주파수는 합성 추정 기반이며 물리 설계로 검증되지 않았다
   • 6배 주파수 상향의 합리성에 더 많은 지원이 필요하다
   • 배치 및 라우팅 후의 실제 전력 및 타이밍 데이터가 부족하다
4. 제한된 평가 범위:
   • 단일 10초 오디오 파일만 테스트했다
   • 다양한 시나리오(노이즈, 억양, 긴 오디오)의 견고성 평가가 부족하다
   • 모델 정확도를 평가하지 않았다(성능과 에너지 효율성만 중점)
5. 재현성 과제:
   • IMAX3는 전용 아키텍처로 외부 연구자가 재현하기 어렵다
   • FPGA 구현의 구체적 구성 세부 사항이 충분하지 않다
   • 코드와 모델이 공개되지 않았다
6. 불충분한 이론 분석:
   • 에너지 효율성 우위의 이론적 상한 분석이 부족하다
   • CGLA가 ASR 작업에 특히 적합한 이유를 깊이 있게 분석하지 않았다
   • 혼합 실행 전략의 5% 나머지 처리 오버헤드에 대한 이론적 유도가 부족하다

영향력

1. 학술 기여:
   • Whisper를 CGRA에서 연구하는 새로운 방향을 개척했다
   • ASR 하드웨어 가속을 위한 새로운 아키텍처 선택지를 제공했다
   • 하드웨어/소프트웨어 협설계 방법론이 참고 가치가 있다
2. 실용 가치:
   • 엣지 AI 디바이스 제조업체에 중요한 참고 의미가 있다
   • IoT, 웨어러블 디바이스 등 전력 제한 시나리오에서 큰 잠재력
   • 지속 가능한 AI를 위한 기술 경로를 제공한다
3. 한계:
   • IMAX 전용 아키텍처가 광범위한 적용을 제한한다
   • 성능 격차로 인해 GPU를 주류 솔루션으로 대체하기 어렵다
   • 상업적 실행 가능성을 검증하려면 실제 테이프아웃이 필요하다

적용 시나리오

가장 적합:

• 전력 제한 엣지 디바이스(스마트워치, 보청기, IoT 디바이스)
• 지연 허용도가 높지만 에너지 효율성 요구사항이 극도로 높은 응용
• 오프라인 ASR이 필요하고 배터리 지속 시간이 중요한 시나리오
• 열 관리가 엄격한 임베디드 시스템

부적합:

• 실시간 상호작용 응용(음성 어시스턴트 등)
• 지연에 민감한 시나리오(밀리초 수준 응답 필요)
• 충분한 전원 공급이 있는 데이터 센터 시나리오
• 초장 오디오 처리가 필요한 배치 처리 작업

참고문헌

본 논문은 27개의 중요 참고문헌을 인용하며, 주요 참고문헌은 다음을 포함한다:

1. Whisper 원본 논문: Radford 등, "Robust Speech Recognition via Large-Scale Weak Supervision" (2022)
2. whisper.cpp 구현: Gerganov, GitHub 오픈소스 프로젝트 (2023)
3. IMAX 아키텍처: Akabe 등, "IMAX: A power-efficient multilevel pipelined cgla and applications" IEEE Access (2025)
4. CGRA 개요: Torng 등, "Ultra-Elastic CGRAs for Irregular Loop Specialization" HPCA (2021)
5. 에너지 예측: IEA, "Energy and AI" (2025)

요약

본 논문은 ASR 하드웨어 가속 분야의 혁신적 작업으로, Whisper 모델에 대한 CGLA 아키텍처의 응용을 처음으로 탐색했다. 체계적인 하드웨어/소프트웨어 협설계를 통해, 저자들은 IMAX가 에너지 효율성 측면에서 GPU에 비해 현저한 우위를 가짐을 증명했다(Q8_0 모델이 RTX 4090보다 9.83배 높음). 전력 평가 방법이 충분히 엄밀하지 않고 성능 절대값이 GPU에 미치지 못하는 등의 한계가 있지만, 전력 제한 엣지 디바이스 시나리오에서 이 방법은 중요한 실용 가치와 연구 의미가 있다. 32KB LMM의 최적 구성 선택, 패딩 제거 기술이 가져온 93.80% 커널 커버리지 향상, 그리고 더 큰 모델에 대한 확장성 분석은 모두 저자의 깊이 있는 공학적 통찰력을 보여준다. 향후 실제 ASIC 테이프아웃 검증과 정확한 전력 측정이 이루어진다면, 본 작업의 설득력과 영향력이 더욱 강화될 것이다.