결론부터 말하겠습니다. WMS 선정 스코어카드는 이렇게 가중치를 매기세요 — 기능 적합성 25%, 통합 및 확장성 20%, 구현 및 가동 15%, 총소유비용 15%, 벤더 역량 및 지원 15%, 사용자 경험 10%. 저는 이 표를 열 개가 넘는 프로젝트에서 사용해 왔습니다. 그대로 복사해서 쓰세요. 하지만 가중치는 승부의 절반에 불과합니다. 나머지 절반은 데모입니다. 그곳에서는 치밀하게 리허설된 세 가지 착각이 좋은 스코어카드를 20점이나 빗나가게 만들 수 있습니다.
저는 이 실패를 세 번 봤습니다. 2023년, 인디애나폴리스의 한 3PL이 세 벤더를 평가했습니다. 벤더 A 92점, 벤더 B 85점, 벤더 C 81점. 격차는 결정적으로 보였습니다. 그들은 벤더 A와 계약했습니다. 가동 시작 3주 후, 시스템이 무너졌습니다. 웨이브 피킹이 다수 고객의 혼합 웨이브를 처리하지 못했고, 데모는 실제 주문에 한 번도 닿지 않은 리허설된 단 하나의 «황금 경로»만을 보여줬던 것입니다. 재작업에 4개월이 걸렸고 구현 비용이 $110,000 추가로 들었습니다. 스코어카드가 틀린 것이 아니었습니다. 스코어카드에 들어간 근거가 틀렸던 것입니다. 평가된 모든 것은 데모에서 나왔지, 그들 자신의 테스트에서 나온 것이 아니었습니다.
WMS 스코어카드가 틀어지는 곳은 데모입니다
모든 벤더 데모에서 주의해야 할 세 가지 착각이 있습니다. 이를 익히면 세 가지 모두에 대비할 수 있습니다.
첫 번째는 황금 경로입니다. 데모 시나리오는 리허설되어 있습니다. 입고, 적치, 피킹, 출하, 처음부터 끝까지 매끄러운 한 줄입니다. 하지만 절대 등장하지 않는 것에 주목하세요. 세 개의 서로 다른 존에 세 개의 상품이 있는 주문, 가득 차서 대체가 필요한 로케이션, 만료가 임박해 먼저 출하해야 하는 로트, 주문 도중 배송 주소를 바꾸는 고객. 실제 창고는 예외로 살아갑니다. 그런데 데모는 예외를 한 번도 보여주지 않습니다. 대응책은 이렇습니다. 데모 1주일 전에 지난 한 달의 실제 주문 50건을 추출해 민감한 필드를 제거한 뒤 벤더에게 넘기세요. 데모 당일 그중 10건을 무작위로 뽑아 처음부터 끝까지 실행하게 하세요. 무엇이 나오든 실행하게 하는 것입니다. 사전 준비는 허용하지 않습니다.
두 번째는 연출된 데이터입니다. 데모 환경의 로케이션, 재고, 주문은 모두 미리 짜여 있고 숫자는 너무 좋아서 현실감이 없습니다. 그 «99.9% 실시간 재고 정확도»는 200개 데모 로케이션에서 측정된 것입니다. 여러분 창고에는 8,000개의 로케이션이 있습니다. 정확도가 95%를 유지할지는 미지수입니다. 대응책은 벤더가 여러분의 실제 데이터로 데모를 구성하게 하는 것입니다. 실제 데이터로 500개 로케이션과 1,000개 SKU만 준비해도 가짜 «완벽한 창고»보다 열 배 낫습니다.
세 번째는 예외 회피입니다. 데모 발표자는 순환 실사 차이, 반품, 크로스도킹, 품질 보류를 항상 피해갑니다. 그런 흐름이 시스템의 약점을 가장 빨리 드러내기 때문입니다. 대응책은 다섯 가지 예외 시나리오를 데모 아젠다에 필수 라이브 실습으로 넣는 것입니다. 실사 차이 처리, 반품 입고, 만료 차단, 과입고 처리, 오프라인 계속 작업입니다. 각각 화면에서 라이브로 직접 조작해야 합니다. 슬라이드로 대신하는 것은 안 됩니다. 저는 이 함정을 세 번 봤고, 피해자는 매번 예외 시나리오를 데모 아젠다에 적지 않았던 고객이었습니다.
그대로 복사해서 쓸 수 있는 스코어카드
데모를 방어했다면 스코어카드는 진짜 점수를 낼 수 있습니다. 표는 다음과 같습니다. 평가 항목, 가중치, 채점 규칙이 함께 있습니다. 복사하고, 필요하다면 여러분 창고에 맞게 가중치를 조금 조정하되, 한 가지 철칙을 지키세요. 어떤 데모를 보기 전에 가중치를 고정하는 것입니다. 나중에 바꾸는 것은 데모 점수가 가중치를 결정하게 내버려 두는 것입니다.
| 평가 항목 | 가중치 | 채점 규칙 (5점 척도) |
|---|---|---|
| 기능 적합성 | 25% | 모든 핵심 흐름이 표준 기능으로 커버되면 5점. 누락된 중요 흐름 1개당 마이너스 1점. 커스텀 개발이 필요한 흐름은 최대 3점 |
| 통합 및 확장성 | 20% | ERP, TMS, 이커머스 플랫폼으로의 표준 커넥터가 있으면 5점. 커스텀 구축이 필요한 인터페이스 1개당 마이너스 1점 |
| 구현 및 가동 | 15% | 여러분 규모와 업종의 가동 실적, 상주 팀, 문서화된 롤백 계획이 있으면 5점 |
| 총소유비용 | 15% | 라이선스, 구현, 지원, 업그레이드를 포함한 5년 TCO를 전 항목 내역화. 숨은 비용이 있으면 마이너스 2점 |
| 벤더 역량 및 지원 | 15% | 사업 경력 5년 이상에 현지 지원팀과 명확한 SLA가 있으면 5점. 리셀러를 통한 지원만 있는 경우 최대 3점 |
| 사용자 경험 | 10% | 현장 작업자가 30분 교육 후 사용할 수 있으면 5점. 일일 흐름에서 불필요한 클릭 1개당 마이너스 1점 |
채점 규칙은 세 가지입니다. 첫째, 각 항목은 두 사람이 독립적으로 채점하고 평균을 냅니다. 데모 현장에서 그 자리에서 매긴 점수는 인정하지 않습니다. 24시간 기다린 뒤 냉정하게 채점하세요. 둘째, 사용자 경험 10%는 현장 작업자가 채점해야 합니다. 관리자의 점수는 인정하지 않습니다. 시스템 안에서 매일 살아가는 사람은 작업자들이기 때문입니다. 셋째, 두 벤더가 5점 이내로 붙으면 기능 적합성과 구현 순으로 승부를 가릅니다. 나머지는 모두 장식입니다.
잘못된 가중치, 잘못된 승자 — 채점이 꼼꼼할수록 실수는 더 커집니다
2025년 초, 로스앤젤레스의 한 이커머스 창고는 «보기 좋음»에 스코어카드의 20%를, 기능 적합성에는 겨우 15%를 부여했습니다. 그들은 아름답고 소비자 수준의 인터페이스를 가진 벤더를 선택했습니다. 가동 시작 2개월 후, 진실이 드러났습니다. 다중 창고 간 이동 없음, 만료일 기준 FEFO 없음, 피크 시즌에 하루 8,000건의 주문에서 웨이브 릴리스가 막히는 시스템이었습니다. 그들은 시스템을 뜯어내고 처음부터 다시 시작했습니다. 9개월과 $400,000 이상이 사라졌습니다. 가중치는 곧 가치관입니다. 25%에 무엇을 두느냐가 벤더에게 여러분이 가장 중요하게 여기는 것이 무엇인지 알려줍니다. 인터페이스를 20%에 두면 벤더는 R&D 예산을 인터페이스에 쏟아붓습니다.
또 다른 흔한 가중치 실수는 «가격»을 단독으로 30%, 심지어 40%로 두는 것입니다. 가격은 중요하지만, 1년 차 견적이 아니라 5년 TCO로 측정한 15% 총소유비용 항목에 속합니다. 1년 차 가격이 가장 낮은 벤더는 구현과 업그레이드에서 매우 자주 가장 비쌉니다. 제가 참여한 30건이 넘는 가동에서 1년 차 제안이 가장 저렴했던 벤더가 5년 총비용에서 상위 3위 안에 든 적은 단 한 번도 없었습니다.
따라서 WMS 선정에서 절차의 순서를 틀리면 안 됩니다. 데모를 보기 전에 가중치를 정하고, 채점하기 전에 여러분의 실제 주문을 직접 실행하고, 서명하기 전에 현장 작업자가 시스템을 직접 만져보게 하세요. 가중치가 맞으면 아무리 잘 다듬어진 데모의 착각도 여러분을 궤도에서 벗어나게 할 수 없습니다. 가중치가 틀리면 채점을 꼼꼼히 할수록 더 멀리 빗나갑니다.
제가 이제 모든 가동 당일 밤 체크리스트에 추가하는 항목이 하나 있습니다. 스코어카드를 데모 녹화와 함께 보관하는 것입니다. 6개월 뒤, 무언가 잘못되어 사후 분석을 할 때 어느 항목을 잘못 채점했는지 한눈에 보입니다.
Lin Xiao, WMS 구현 컨설턴트 지음 영어판 번역본입니다. 내용이 다를 경우 영어판을 우선합니다.







