대부분의 커넥티드 디바이스 (connected-device) 프로젝트는 설득력 있는 프로토타입을 만들어낼 수 있습니다. 진짜 비싼 문제는 이들이 1,000개의 반복 가능한 유닛을 생산할 수 있는지, 안전하게 업데이트할 수 있는지, 빠르게 테스트할 수 있는지, 그리고 현장에서 지원할 수 있는지 여부입니다.

일반적인 실패는 단 한 번의 극적인 실수가 아닙니다. 그것은 프로토타입의 성공을 양산 준비 완료로 오해했기 때문에 살아남은 일련의 가정들의 연쇄입니다.

툴링 (tooling)이나 다음 빌드에 착수하기 전에, 저는 8가지 증거 게이트 (evidence gates)를 사용합니다.

1. 제품 요구사항 및 아키텍처 (Product requirements and architecture)

요구사항은 두 명의 독립적인 사람이 제품이 이를 통과했는지 여부에 동의할 수 있을 때에만 유용합니다.

EVT (Engineering Validation Test) 이전에 다음 사항을 확인하십시오:

• 핵심 요구사항이 측정 가능하며 수락 기준 (acceptance criteria)을 가지고 있는지;
• 전력 (power), 지연 시간 (latency), 음향 (acoustic), 광학 (optical), 열 (thermal), 수명 (lifetime) 및 신뢰성 (reliability) 목표가 관련 있는 경우 정량화되었는지;
• 모든 하드웨어 (hardware), 펌웨어 (firmware), 클라우드 (cloud), 모바일 (mobile), AI, 제조 인터페이스에 담당자가 있는지;
• 고위험 가정들이 실험으로 전환되었는지;
• 안전 (safety), 개인정보 보호 (privacy), 보안 (security), 무선 (radio) 및 시장별 규제 요구사항이 가시화되었는지.

다듬어진 PRD (Product Requirements Document) 그 자체는 증거가 아닙니다. 증거는 요구사항에서 아키텍처 결정으로, 그리고 최종적으로 테스트 결과로 이어지는 추적 가능성 (traceability)입니다.

2. 전자 및 부품 전략 (Electronics and component strategy)

프로토타입 BOM (Bill of Materials)에는 대량 생산에 적합한 부품이 아니라, 구매하기 편리했던 부품들이 포함되는 경우가 많습니다.

다음 사항을 확인하십시오:

• 회로도 (schematics)가 독립적인 공식 검토를 통과했는지;
• PCB 레이아웃 (PCB layout)이 전력 무결성 (power integrity), 신호 무결성 (signal integrity), RF, EMC, 열 거동 (thermal behavior) 및 제조 가능성 (manufacturability)에 대해 검토되었는지;
• 전력 트리 (power tree)가 시작, 피크 부하 (peak load), 배터리 제한, 브라운아웃 (brownouts) 및 복구를 커버하는지;
• 공급이 중요한 부품에 대해 라이프사이클 (lifecycle), 리드 타임 (lead-time) 및 대체 전략이 있는지;
• 디레이팅 (derating) 및 허용 오차 분석 (tolerance analysis)이 실제 작동 제한 범위를 커버하는지.

대체 부품은 단순히 풋프린트 (footprint)가 맞다고 해서 검증된 것이 아닙니다. 전기적, 기계적, 열적 및 펌웨어 측면에서 작동해야 합니다.

3. 펌웨어, 연결성, AI 및 보안 (Firmware, connectivity, AI, and security)

현장 장애(Field failures)는 데모에서는 결코 실행되지 않는 경로에서 빈번하게 발생합니다: 중단된 업데이트, 손상된 설정(configuration), 유실된 자격 증명(credentials), 불안정한 네트워크, 또는 전원 차단 후의 복구 과정 등이 이에 해당합니다.

다음 사항을 검증하십시오:

• 부팅(boot), 복구(recovery), 프로비저닝(provisioning), 공장 초기화(factory reset) 및 실패 경로;
• 인증된, 롤백(rollback)이 안전하고, 중단에 안전한 OTA (Over-the-Air);
• 키(keys), 자격 증명(credentials), 디버그 인터페이스(debug interfaces), 로그(logs) 및 개인 데이터의 생명주기(lifecycle);
• 실제 환경에서의 BLE, Wi-Fi, Matter, Zigbee, 셀룰러(cellular), mmWave, 오디오 및 카메라 동작;
• 실패 사례와 리소스 제한을 포함한 대표적인 현장 데이터를 기반으로 한 AI, 음성 및 비전 성능.

AI 기능이 탑재된 기기의 경우, 모델 정확도(model accuracy)는 하나의 요구사항일 뿐입니다. 메모리, 지연 시간(latency), 열(thermals), 전력, 관찰 가능성(observability), 업데이트 가능성(updateability) 및 우아한 실패(graceful failure) 처리 또한 그만큼 중요합니다.

4. 기구, 열 및 DFM/DFA 준비 상태 (Mechanical, thermal, and DFM/DFA readiness)

설계가 CAD 상에서는 제조 가능하더라도, 실제 생산 라인에서는 고통스러울 수 있습니다.

DVT(Design Validation Test) 전에 다음 사항을 확인하십시오:

• 공차 누적(tolerance stacks)에 제조 편차, 조립 하중 및 노화(aging)가 포함되었는지;
• 최악의 조건인 주변 온도 및 듀티 사이클(duty cycle)에서 열 성능을 측정했는지;
• 의도한 제조사가 설계를 검토했는지;
• 조립 순서, 체결(fastening), 접착제(adhesives), 케이블, 커넥터 및 서비스 작업이 문서화되었는지;
• 외관(cosmetic) 요구사항에 객관적인 결함 표준이 있는지.

제조사 검토가 중요한 이유는 프로토타입 업체는 소량의 유닛을 만드는 데 최적화되어 있기 때문입니다. 양산 파트너는 반복 가능성(repeatability), 수율(yield), 사이클 타임(cycle time) 및 통제된 변경(controlled change)에 최적화되어야 합니다.

5. BOM, COGS 및 공급망 (BOM, COGS, and supply chain)

단가(unit price)는 매출원가(COGS)가 아닙니다.

현실적인 모델에는 다음이 포함됩니다:

• 수율 손실(yield loss) 및 재작업(rework);
• 생산 테스트 시간 및 지그(fixtures);
• 포장, 물류, 관세 및 창고 보관;
• 툴링(tooling) 및 비반복 엔지니어링(non-recurring engineering);
• 보증(warranty) 및 현장 서비스(field-service) 가정 사항;
• 최소 주문 수량(MOQ), 결제 조건 및 생산 능력 리스크(capacity risk).

생산 BOM (Bill of Materials)은 리비전 관리 (revision-controlled) 되어야 하며 프로토타입 BOM과 분리되어야 합니다. 리드 타임이 길거나 (long-lead), 단일 공급원(sole-source)이거나, 할당되기 쉽거나 (allocation-prone), 단종 예정인 (end-of-life) 부품들은 구매 주문 (purchase order)을 통해 결정이 강제되기 전에 미리 파악되어야 합니다.

6. 검증 및 규제 준비 (Verification and regulatory readiness)

테스트 계획은 정상적인 동작 (nominal behavior) 이상의 범위를 다루어야 합니다.

유용한 테스트 범위에는 다음이 포함됩니다:

• 경계 조건 (boundary conditions);
• 오용 및 결함 주입 (misuse and fault injection);
• 복구 경로 (recovery paths);
• 장기 동작 (long-duration behavior);
• 환경 및 운송 스트레스 (environmental and shipping stress);
• 설계를 변경할 수 있을 만큼 충분히 이른 시점의 사전 준수 테스트 (pre-compliance testing).

모든 결과에는 유닛, 하드웨어 리비전 (hardware revision), 펌웨어 버전 (firmware version), 구성 (configuration), 로우 데이터 (raw data), 실패 원인 및 시정 조치 (corrective action)가 식별되어야 합니다. 그렇지 않으면 팀은 추적 가능한 증거가 아닌 단순한 관찰 결과만을 갖게 됩니다.

7. 생산 테스트 및 품질 시스템 (Production test and quality system)

생산 테스트는 공장의 세부 사항이 아니라 제품 아키텍처 (product architecture)의 일부입니다.

다음 사항을 질문하십시오:

• 각 조립 단계에서 어떤 치명적인 결함이 발생할 수 있는가?
• 각 결함은 어디에서 탐지될 것인가?
• 테스트 한계 (test limits), 사이클 타임 (cycle time), 교정 방법 (calibration method) 및 골든 유닛 정책 (golden-unit policy)은 무엇인가?
• 오탐지 합격 (false passes) 및 오탐지 불합격 (false failures)은 어떻게 측정되는가?
• 일련번호 (serial number), 하드웨어 리비전, 펌웨어, 교정, 테스트 결과 및 재작업 이력 (rework history)을 추적할 수 있는가?

빌드가 시작된 후에 도착하는 테스트 지그 (test fixture)는 이미 늦은 것입니다.

8. EVT, DVT, PVT 및 출시 거버넌스 (EVT, DVT, PVT, and launch governance)

각 빌드에는 명확한 목표, 진입 기준 (entry criteria), 샘플 크기, 구성 및 종료 기준 (exit criteria)이 필요합니다.

모든 이슈에는 다음 사항이 필요합니다:

• 심각도 (severity) 및 격리 (containment);
• 담당자 (owner);
• 근본 원인 (root cause);
• 시정 조치 (corrective action);
• 수정 사항이 효과가 있었는지에 대한 검증 (verification).

엔지니어링 변경 (Engineering changes) 시에는 BOM, 문서, 펌웨어, 테스트 시스템 및 공급업체 리비전을 함께 업데이트해야 합니다. 생산 확대 (Ramp) 결정은 일정 압박만이 아니라 수율 (yield)과 증거를 바탕으로 내려져야 합니다.

간단한 점수 산정 방식

모든 체크포인트에 표시를 하십시오:

• Green (녹색): 완료되었으며, 검토를 마쳤고, 증거(evidence)로 뒷받침됨.
• Amber (황색): 부분적으로 완료되었으며, 담당자(owner)와 완료 예정일이 포함된 계획이 있음.
• Red (적색): 누락되었거나, 테스트되지 않았거나, 오직 가설(assumption)에만 기반함.

중요한 적색(Red) 항목을 평균을 내어 희석하지 마십시오. 안전(safety), 규제 준수(regulatory compliance), 전원 무결성(power integrity), 보안(security), 부품 가용성(component availability) 또는 생산 테스트(production testing) 중 단 하나라도 적색 항목이 있다면 빌드(build)가 중단될 수 있습니다.

저는 전체 40개 항목의 체크리스트와 재사용 가능한 CSV 평가 템플릿을 오픈 소스 리소스로 공개했습니다:

GitHub의 하드웨어 생산 준비 상태 체크리스트 (Hardware Production Readiness Checklist on GitHub)

만약 여러분이 AI 하드웨어나 커넥티드 디바이스(connected-device) 제품을 EVT, DVT, PVT 또는 제조 단계로 준비하고 있다면, 어떤 단계(gate)가 여러분의 팀에게 가장 많은 의외의 상황(surprises)을 만들어내는지 듣고 싶습니다.

저는 AI 하드웨어 및 커넥티드 디바이스를 위한 엔드 투 엔드 (end-to-end) R&D 파트너인 takefi를 공동 창업했습니다. 우리는 전자 공학(electronics), 임베디드 펌웨어(embedded firmware), 백엔드 및 OTA, 음성 및 컴퓨터 비전(computer vision), 산업 디자인(industrial design), DFM/DFA, BOM/COGS 최적화, 테스트, 공급업체 자격 검증(supplier qualification) 및 제조 지원 전반에 걸쳐 협력하고 있습니다.