임베디드 디버깅 마인드셋 — 가설·격리·재현·이분탐색
#한 줄 요약
“디버깅은 코드를 고치는 일이 아니라 가정을 깨는 일입니다.” 증상에서 시작해 가설을 세우고, 가장 빨리 깨질 가정 하나만 측정으로 검증합니다.
#어떤 상황에서 쓰나
“왜 안 되지?”를 30분 이상 들여다보고 있다면 이 글이 필요합니다. 임베디드는 desktop과 달리 print 한 줄 추가가 비싸고, 실행이 한 번에 몇 분씩 걸리며, 재현이 잘 안 되는 일이 일상입니다. 그래서 추측 → 코드 수정을 반복하는 desktop식 디버깅은 곧 한계에 부딪힙니다.
대신 증상 → 가설 → 측정을 한 사이클로 보고, 한 번에 한 가정만 검증하는 습관이 필요합니다. 이 글은 사고 흐름을 정리합니다.
#핵심 개념
좋은 디버거는 다음 다섯 가지를 항상 분리해 둡니다.
- 증상 (Symptom) — 실제로 관찰된 것
- 모델 (Model) — 코드가 어떻게 동작한다고 내가 믿는지
- 차이 (Discrepancy) — 모델과 증상 사이의 모순
- 가설 (Hypothesis) — 모순을 만들 수 있는 구체적 원인
- 측정 (Measurement) — 가설을 깨거나 굳힐 단 한 번의 관찰
대부분의 막다른 디버깅은 모델을 의심하지 않는 데서 옵니다. “이 ISR은 분명 enable 되어 있다”는 믿음이지 측정이 아닙니다. 코드를 한 번 더 읽지 말고 NVIC pending register를 직접 찍어야 합니다.
#가설-검증 사이클
[관찰] LED가 깜빡이지 않는다.
[모델] main()의 while loop가 GPIO를 1ms마다 토글한다.
[가설 A] main()에 진입조차 못한다. 측정: 시작 직후 LED ON. → 진입은 한다.[가설 B] GPIOC clock이 disable. 측정: RCC->AHB1ENR bit 2 = 1. → enable 됨.[가설 C] LED는 GPIOC가 아닌 GPIOA에 있다. 측정: 회로도 확인. → 맞다, GPIOA.[수정] HAL_GPIO_TogglePin(GPIOA, ...) → 동작.각 가설은 측정 가능하고 YES/NO로 답이 나와야 합니다. “뭔가 이상하다”는 가설이 아닙니다.
#Binary Search — 변경 이분 탐색
어제는 됐는데 오늘은 안 될 때 가장 빠른 길은 git bisect입니다.
git bisect startgit bisect bad # 현재 commit 망가짐git bisect good v1.2.0 # 이건 정상# git이 중간 commit으로 checkout# 빌드·테스트git bisect good # 또는 bad# ... log2(N)번 반복git bisect reset50 commit 범위라면 log₂(50) ≈ 6번이면 범인 commit을 찾습니다. 측정 가능한 재현 절차가 있어야 합니다. 안정적으로 재현되지 않는 버그라면 bisect는 안 됩니다.
#Code Search — 공간 이분 탐색
큰 함수가 어디서부터 잘못되는지 모를 때는 중간에 print를 박고 반으로 줄입니다.
void process(uint8_t *buf, size_t n) { parse_header(buf); // 절반 위 printf("ALIVE 1\n"); // ← 중간 decode_payload(buf + 8, n - 8); // 절반 아래}ALIVE 1까지 나오면 위 절반은 무사합니다. 아래쪽으로 다시 절반을 가르고, 다시 절반을 가르고. 8단계면 256줄짜리 함수의 한 줄을 찾습니다.
#Changelog 우선 확인
“어제는 됐다”가 출발점이면 가장 먼저 git log --since=yesterday와 git diff HEAD@{1.day} HEAD를 봅니다.
git log --since="2 days ago" --onelinegit diff HEAD@{2.days} -- src/코드 변경이 없는데 문제가 생겼다면 환경이 바뀐 것입니다.
- Toolchain 버전
- 외부 라이브러리 update
- 하드웨어 교체
- OS 업데이트
- Power supply, USB cable
이쪽이 의외로 흔합니다. USB 케이블 한 쪽 핀이 닿지 않아 SPI flash 쓰기가 가끔 실패하는 사례, 보드를 다른 USB 포트에 꽂으니 전류 부족으로 reset 되는 사례 모두 자주 봅니다.
#Rubber Duck Debugging
문제를 소리 내어 다른 사람에게 설명하면 절반은 설명 도중에 답이 나옵니다. 들어 줄 사람이 없으면 노란 고무 오리에게 말합니다.
"이 ISR이 안 들어와요. NVIC enable 했고, IRQn 번호 맞고,priority도 5로 줬고, GPIO interrupt mask 풀었고...잠깐, EXTI line mask 풀었나? 안 풀었네."말로 옮기는 순간 머릿속 모델의 빈 칸이 드러납니다. 코드 리뷰 부탁 메시지를 길게 적다가 보내기 전에 스스로 답을 찾는 일이 잦은 이유도 같습니다.
#재현부터 안정시키기
간헐적 버그는 재현 가능한 최소 절차를 찾는 데 80%의 시간이 듭니다.
- 어떤 조건에서 발생?
- 발생 빈도?
- 발생 직전 일관된 행동?
- 보드 reset 후에도 재현?
- 동일 시퀀스를 자동화 가능?
자동화된 재현 스크립트가 만들어지면 디버깅의 절반은 끝난 것입니다. 1시간에 한 번 발생하던 race를 1분에 한 번으로 줄이면 측정 한 번이 60배 싸집니다.
#”어제는 됐다”의 함정
가정: 어제와 오늘 같은 코드, 같은 환경현실: 한 가지가 다르다 — 무엇이?git status, git diff, toolchain version, board revision, 충전 케이블, 외부 sensor, OS update를 모두 확인합니다. 가장 자주 잡히는 범인은 내가 모르게 바뀐 것입니다.
#디버깅 노트 작성
긴 디버깅 세션은 기록 없이는 진척이 없습니다.
## 2026-05-16 SPI flash 간헐 쓰기 실패
증상: 1000회 중 3~5회 erase 후 verify 불일치.환경: STM32F407 + W25Q64, SPI1 @ 21 MHz.
가설 A: clock 너무 빠름. → 5 MHz로 낮춤. 발생함. 기각.가설 B: WIP bit 안 기다림. → 추가. 발생함. 기각.가설 C: VCC 전압 dip. → 오실로스코프. 3.27V → 3.05V dip 관찰. decoupling cap 0.1µF 추가. 1만 회 fail 없음. 해결.다음에 같은 류 버그를 만나면 이 노트가 30분을 살려 줍니다.
#”수정”이 진짜 수정인지 확인
// 변경 전if (status & 0x01) handle();
// 변경 후if ((status & 0x01) != 0) handle();이 둘은 동일합니다. 동작이 바뀌었다면 다른 원인이 있습니다. 수정으로 문제가 사라졌다는 것과 수정이 원인을 고쳤다는 것은 다릅니다. Heisenbug(인터럽트·timing 류)는 우연히 사라질 수 있으니, 같은 조건에서 왜 안 일어나는지 설명할 수 있어야 진짜 수정입니다.
#측정 도구의 hierarchy
부담 낮음 → 부담 큼:
- printf / log
- LED toggle
- GPIO pulse + 오실로스코프
- SWO / RTT trace
- Logic analyzer
- JTAG halt + 메모리 dump
- ETM trace
가장 작은 부담으로 가장 큰 정보를 얻을 도구를 고릅니다. printf로 race가 사라지면 GPIO pulse로 옮겨 갑니다. Halt가 race를 망가뜨리면 RTT로 옮겨 갑니다.
#자주 보는 함정
코드를 의심하기 전에 회로를 의심
GPIO 토글이 안 보이면 코드보다 핀을 먼저 의심합니다. 멀티미터로 핀에 신호가 뜨는지부터 봅니다.
두 가지를 동시에 바꾸기
[변경 1] clock 16 MHz → 8 MHz[변경 2] DMA enable[결과] 동작. → 어느 쪽이 원인인지 알 수 없음.한 번에 한 변수만 바꿉니다. 두 가지를 같이 바꾸고 동작하면 어느 쪽도 진짜 원인이 아닐 가능성이 큽니다.
“오늘은 됐으니 됐다”
같은 절차로 100번 동작하기 전에는 해결되지 않은 것입니다. 간헐 버그는 다음 주 production에서 다시 나옵니다.
너무 깊이 파기
10분 들여다보고 답이 안 보이면 한 발 물러섭니다. 산책, 잠깐의 다른 작업, 동료에게 설명. 머릿속 모델을 한 번 비워야 다른 가설이 보입니다.
#정리
- 디버깅은 가설을 깨는 일입니다. 코드를 고치기 전에 모델을 측정합니다.
- 가설은 항상 YES/NO로 답이 나와야 합니다.
- git bisect로 시간 이분 탐색, print binary search로 공간 이분 탐색.
- 환경 변화(toolchain, 케이블, USB 포트)를 항상 먼저 의심합니다.
- 재현 절차를 자동화하면 측정 한 번이 수십 배 싸집니다.
- 디버깅 노트는 future-you를 위한 최고의 선물입니다.
- “수정으로 사라졌다”는 왜 사라졌는지를 설명할 수 있어야 진짜 수정입니다.
다음 편은 하드폴트 분석입니다.
#관련 항목
Modern Embedded Recipes · 112 of 152
- 1Modern Embedded Recipes — 모던 임베디드 실전 레시피 시리즈 소개
- 2디지털 신호 기초 — Voltage Level·Edge·Setup/Hold 분석
- 3임베디드 클럭과 타이밍 — Skew·Jitter·PLL·MMCM 분석
- 4GPIO 내부 구조 분해 — Push-Pull·Open-Drain·Schmitt Trigger
- 5UART 하드웨어 동작 분석 — Baud Rate·Framing·FIFO
- 6SPI 하드웨어 분석 — Clock Mode·MOSI/MISO·Chip Select
- 7I2C 하드웨어 분석 — Open-Drain·Clock Stretching·Arbitration
- 8ADC 동작 원리 — SAR·Sigma-Delta·Pipelined 비교
- 9DAC 동작 원리 — R-2R Ladder·Sigma-Delta·Settling Time
- 10PWM 신호 생성 분석 — Duty·Frequency·Dead Time·Center-Aligned
- 11CAN 버스 전기적 특성 — Differential·Termination·Dominant/Recessive
- 12RS-485·RS-422 차동 신호 분석 — Termination·Biasing·Topology
- 13LVDS 차동 신호 분석 — Common-Mode·Impedance·Eye Pattern
- 14ARM Cortex-M 시리즈 비교 — M0·M3·M4·M7·M33·M55 분석
- 15ARM Cortex-A 시리즈 비교 — A53·A55·A72·A78·X1 분석
- 16ARM 레지스터 구조 분석 — R0~R15·CPSR·SPSR·Banked Registers
- 17Cortex-M 예외 처리 — Vector Table·NVIC·Tail-Chaining 추적
- 18ARM 메모리 맵 분석 — Normal·Device·Strongly-Ordered Region
- 19ARM L1·L2 캐시 분석 — Set Associative·Inclusive·Maintenance
- 20ARM MPU 활용 — Region·Attribute·Privilege Separation
- 21ARM MMU 기초 분석 — Translation Table·TLB·ASID
- 22ARM TrustZone-M 기초 — Secure/Non-Secure·NSC·MPC
- 23ARM Memory Barrier 실전 — DMB·DSB·ISB·DMA·MMIO
- 24임베디드 크로스 컴파일러 분석 — GCC·Clang·Sysroot 구성
- 25C 컴파일 4단계 — Preprocess·Compile·Assemble·Link 추적
- 26ELF 파일 구조 분석 — Section·Segment·Symbol Table·DWARF
- 27링커 스크립트 기초 — SECTIONS·MEMORY·entry point
- 28링커 스크립트 고급 — Overlay·BSS·init_array·LMA/VMA
- 29임베디드 스타트업 코드 분석 — Reset_Handler·Vector Table·SystemInit
- 30C 런타임 crt0 분석 — Stack·BSS Zero·Data Copy·atexit
- 31임베디드 메모리 레이아웃 — .text·.rodata·.data·.bss·.heap·.stack
- 32임베디드 컴파일러 최적화 분석 — -O0~-O3·-Os·-LTO 비교
- 33Map 파일 분석 — Symbol·Section·Size 추적으로 코드 크기 진단
- 34Make·CMake 크로스 컴파일 — Toolchain File·Sysroot 통합
- 35임베디드 Bootloader 체인 — BootROM·SPL·U-Boot·Kernel·Secure Boot
- 36첫 bare-metal 프로그램 작성 — Linker·Startup·main의 최소 구성
- 37MMIO 레지스터 직접 접근 — volatile·Memory Map·Aliasing 분석
- 38GPIO 드라이버 직접 구현 — STM32 HAL 없이 레지스터로
- 39임베디드 클럭 설정 분석 — HSE·PLL·SYSCLK·AHB/APB 분주
- 40Cortex-M 인터럽트 핸들링 — NVIC·Priority·Vector·EXTI
- 41SysTick 타이머 활용 — 24-bit Counter·1ms Tick·delay 구현
- 42UART 드라이버 구현 — polling·interrupt·DMA 3가지 방식 비교
- 43SPI 드라이버 구현 — Master·Slave·CRC·DMA
- 44I2C 드라이버 구현 — Master·7-bit/10-bit·Clock Stretching 처리
- 45임베디드 DMA 기초 — Memory-to-Memory·Peripheral·Circular Mode
- 46저전력 모드 분석 — Sleep·Stop·Standby·Wake-up Source
- 47IWDG·WWDG 워치독 구현 — Independent vs Window 비교
- 48임베디드 Flash 프로그래밍 — Erase·Program·Read While Write
- 49DDR 초기화 실패 진단 — Timing·Calibration·Walking Bit Test
- 50PWM 출력 실전 — LED 밝기·모터 속도 제어
- 51DC 모터 제어 — H-Bridge·PWM Duty·Encoder Feedback
- 52스테퍼 모터 제어 — Full Step·Half Step·Microstepping
- 53서보 모터 제어 — PWM 1ms~2ms·Closed Loop·PID
- 54Character LCD 제어 — HD44780·4-bit Mode·Custom Char
- 55SPI OLED 제어 — SSD1306·Frame Buffer·Page 단위 갱신
- 56TFT 디스플레이 구동 — RGB565·FSMC·LTDC·DMA2D
- 57환경 센서 활용 — BME280 온습압·SHT3x·BMP180 비교
- 58IMU 센서 활용 — MPU6050·LSM6DSO·Sensor Fusion
- 59CAN 통신 구현 — bxCAN·Filter·Mailbox·CAN-FD
- 60USB Device 기초 — Descriptor·Enumeration·Endpoint·HID/CDC
- 61Ethernet MAC+PHY 통합 — RMII·lwIP·DMA Descriptor
- 62SD Card + FatFs 구현 — SPI/SDIO 모드·CSD/CID·Wear
- 63RTC 활용 — Calendar·Alarm·Wake-up Timer·Backup Domain
- 64RTOS 도입 결정 분석 — Super Loop vs RTOS 트레이드오프
- 65RTOS Task 설계 패턴 — 우선순위·스택·State Machine
- 66RTOS Scheduler 동작 분석 — Tick·Context Switch·Yield
- 67RTOS Semaphore 활용 — Binary·Counting·ISR Give
- 68RTOS Mutex 활용 — Recursive·Priority Inheritance 적용
- 69RTOS Queue 활용 — By-Value·By-Reference·Timeout 패턴
- 70RTOS Event Group 활용 — Bit Wait·Sync·Notify
- 71RTOS Software Timer 활용 — One-shot·Auto-reload·Daemon Task
- 72ISR-Safe API 설계 — Reentrant·Atomic·Defer 패턴
- 73Priority Inversion 진단·예방 — Mars Pathfinder Lesson 추적
- 74Timer Wheel 분석 — Hashed·Hierarchical·O(1) Tick
- 75RTOS 디버깅 기법 — Tracealyzer·SystemView·Stack 추적
- 76임베디드 Linux 부팅 흐름 분석 — BootROM·U-Boot·Kernel·init
- 77U-Boot 활용 — bootcmd·env·tftp·boot.scr 분석
- 78Device Tree 실전 — DTS·DTB·Overlay·Phandle 추적
- 79Device Tree Overlay 적용 — Runtime fragment·dtoverlay
- 80임베디드 커널 빌드 — defconfig·menuconfig·Image·zImage
- 81커널 모듈 기초 — init/exit·Parameter·KBuild·DKMS
- 82캐릭터 드라이버 작성 — file_operations·cdev·register_chrdev
- 83Platform 드라이버 작성 — probe·remove·of_match·DT 바인딩
- 84mmap 4가지 모드 — Anonymous·File·Shared·Huge Page
- 85epoll 실전 — LT·ET·ONESHOT·EXCLUSIVE 비교
- 86UIO·VFIO 분석 — User-Space Driver와 IOMMU 격리
- 87sysfs·configfs 활용 — kobject 기반 User 인터페이스
- 88IRQ Affinity 튜닝 — smp_affinity·isolcpus·irqbalance
- 89루트 파일시스템 구축 — Buildroot 기초·Package·Toolchain
- 90임베디드 동적 메모리 — malloc 위험·결정성·대안 분석
- 91메모리 정렬과 패딩 분석 — Natural·Strict Alignment·Trap
- 92Cache Line Alignment — alignas·Padding·SoA 적용
- 93DMA-Friendly Allocator — dma_alloc_coherent·IOMMU·Pool
- 94Zero-Copy Pipeline — DMA-BUF·sendfile·io_uring·splice
- 95NUMA Memory Topology — numactl·numa_alloc·HBM 적용
- 96SIMD 활용 분석 — Intrinsics·Auto-Vectorization·OpenMP SIMD
- 97ARM NEON 심화 — Matrix Multiply·FFT·Image Filter 적용
- 98임베디드 스택 분석 — high-water·overflow 탐지
- 99임베디드 코드 크기 최적화 — -Os·LTO·Section Garbage Collection
- 100임베디드 전력 최적화 — Sleep Mode·Clock Gating·DVFS
- 101WCET 분석 기법 — Static·Measurement·Hybrid 방법론
- 102Lock-Free Ring Buffer 구현 — SPSC·Power-of-2·Memory Order
- 103Wait-Free Signaling — Atomic Flag·Sequence·Latest-Value
- 104RCU (Read-Copy-Update) 기초 — Quiescent State·Grace Period
- 105Hazard Pointer 분석 — Lock-Free Memory Reclamation
- 106Compare-And-Swap 패턴 — Stack·Counter·Linked List 적용
- 107Atomic Operation 비용 분석 — Fence·Cache Line·Contention
- 108Spinlock vs Mutex 결정 가이드 — Context Switch·Hold Time
- 109ABA 문제 회피 — Tagged Pointer·Hazard·Generation Counter
- 110False Sharing 해결 — Cache Line Padding·SoA 적용
- 111MPMC Queue 구현 — Multi-producer Multi-consumer Lock-Free
- 112임베디드 디버깅 마인드셋 — 가설·격리·재현·이분탐색
- 113JTAG·SWD 안 붙을 때 — 핀·전압·속도·세션 진단
- 114GDB 원격 디버깅 — OpenOCD·J-Link·target remote 구성
- 115Cortex-M 하드폴트 분석 — Stacked Frame·CFSR 읽기
- 116UART 안 찍힐 때 — Bare-metal 체크리스트
- 117임베디드 부팅 실패 진단 — 단계별 Isolation
- 118인터럽트 누락·중복 진단 — Priority·Pending·Re-entry 추적
- 119메모리 오버플로우·오염 진단 — Canary·MPU·Pattern 분석
- 120타이밍·Race 진단 — Heisenbug 잡는 법
- 121통신 프로토콜 분석 — Logic Analyzer와 Protocol Decoder
- 122임베디드 로깅 시스템 설계 — 레벨·버퍼·SWO·Deferred
- 123임베디드 포스트모템 분석 — Core Dump와 Field Crash
- 124FPGA 기초 분석 — LUT·FF·BRAM·DSP 자원 구조
- 125Vivado 사용법 — Project·Constraint·Synth·Impl·Bitstream
- 126PCIe BAR 매핑 분석 — Config Space·Enumeration·MMIO 접근
- 127AXI 인터페이스 — AXI4·AXI4-Lite·AXI-Stream 비교
- 128Zynq PS-PL 통신 — GP·HP·ACP 인터페이스 선택
- 129Mailbox Protocol 분석 — Host와 Accelerator를 잇는 Doorbell
- 130Command Queue·Submission Queue — NVMe·XDMA 공통 패턴
- 131DMA Completion 메커니즘 — Interrupt·Polling·Completion Ring
- 132PCIe Streaming 분석 — BAR Type·MSI-X·Kernel Bypass
- 133Vitis HLS 분석 — Pragma·Pipeline II·Dataflow 실전 감각
- 134HLS 최적화 기법 — Pipeline·Unroll·Partition·Dataflow
- 135Vitis AI 분석 — DPU·xmodel·VART
- 136OpenCL on FPGA — Kernel·Channel·Burst Memory 분석
- 137Intel Quartus 사용법 — Platform Designer·Nios II·HLS
- 138Edge Inference 분석 — Cloud vs Edge·Latency·Privacy
- 139NPU 아키텍처 분석 — Ethos·Hexagon·Systolic Array 비교
- 140딥러닝 Quantization 분석 — PTQ·QAT·INT8·INT4·Calibration
- 141TensorRT 분석 — ONNX→Engine·FP16·INT8·DLA·Multi-Stream
- 142TFLite Micro 분석 — Op Resolver·Tensor Arena·Cortex-M
- 143ONNX Runtime 분석 — Execution Provider와 Cross-Platform 배포
- 144Edge Thermal Management — Throttling·DVFS·Fan Curve·Sustained
- 145NVIDIA Jetson 분석 — Nano·Xavier·Orin·Thor·JetPack·DLA·VPI
- 146Zero-Copy Camera Pipeline — V4L2·DMA-BUF·GPU Import·NPU 직결
- 147온디바이스 LLM 추론 — llama.cpp·GGUF·MLX·KV Cache·NPU Backend
- 148Cortex-M33 TF-M·TrustZone — Secure Firmware·PSA·MCUboot
- 149Matter·Thread 분석 — IoT 통합 표준·Commissioning·Multi-Fabric
- 150PCIe → CXL 진화 — 같은 PHY 위 cache-coherent 프로토콜 추가
- 151QEMU CXL Type 3 디바이스 에뮬레이션 — 노트북에서 CXL 개발 환경 구축
- 152Linux CXL 드라이버 분석 — cxl_pci·cxl_core·region·DAX
관련 글
임베디드 포스트모템 분석 — Core Dump와 Field Crash
Linux coredump·gdb 분석부터 MCU 환경의 mini-dump(Memfault)·last-gasp logging·field debug 패턴까지.
임베디드 로깅 시스템 설계 — 레벨·버퍼·SWO·Deferred
임베디드 환경에서 overhead를 최소화한 로깅. 레벨 분리·circular buffer·SWO/RTT·deferred 처리 패턴.
통신 프로토콜 분석 — Logic Analyzer와 Protocol Decoder
Saleae·DSLogic·oscilloscope·protocol decoder로 UART/SPI/I2C/CAN 신호를 캡처·디코딩하는 실전 패턴.