이번 주는 정말 숨 가쁘게 지나갔다.
본업이 너무 바빠서 AI 관련 플랫폼에서는 단 하나의 Assessment만 겨우 진행할 수 있었다. AI 산업이 빠르게 성장하면서, 내가 맡고 있는 Burn-in 테스트 분야의 업무도 자연스럽게 늘어났고, 다뤄야 할 디바이스 종류도 많아졌다. 게다가 내년 타겟으로 한 추가 수주까지 들어오면서 이번 주는 사실상 정신없이 흘러갔다.
그 와중에 진행한 Assessment가 바로 일본어 평가였다.
Alignerr 일본어 합격, 오랜만의 언어 테스트
이번에 진행한 일본어 Assessment는 이전과 동일하게 Zara 인터뷰를 통해 진행되었다.
나는 일본에서 1년간 근무한 경험이 있고, JLPT 1급을 보유하고 있으며, 비즈니스 일본어도 문제없이 사용하는 편이다. 실제로 현재 회사에 처음 입사했을 당시에는 일본 관련 업무를 맡아 약 2년 가까이 일본어로 실무를 진행했었다.
다만, 최근에는 일본어를 말할 기회가 거의 없었기 때문에 Assessment를 시작하기 전, 혼자서 살짝 입을 풀어주는 시간을 가졌다.
Zara에서 언어 평가를 할 때는 거의 공통 질문이 나온다.
영어 평가와 마찬가지로 다음과 같은 질문이 주어졌다.
“최근 진행했던 프로젝트 중 가장 어려웠던 일을 구체적으로 설명해 주세요.”
영어 테스트 때 사용했던 에피소드를 그대로 일본어로 풀까 고민했지만, 역시 일본어로 실제 업무를 했던 프로젝트가 훨씬 자연스럽게 말이 나왔다. 그래서 예전에 메모리 핸들러 담당으로 일했을 당시, 가장 중요했던 이슈와 해결 과정을 중심으로 설명했다.
결과는?
👉 Alignerr 일본어 합격!
이번 Assessment를 통해 Zara에서 언어를 평가할 때 어떤 포인트를 보는지 어느 정도 감이 잡혔다. 단순한 문법보다는,
- 해당 언어로 끊김 없이 논리적으로 설명하는지
- 말할 때 어조가 자연스러운지
- 구체적으로 디테일을 얼마나 잘 살리는지
가 훨씬 중요하다는 느낌을 받았다.
DataAnnotation 정지… 그 이유를 이제야 이해하다
하지만 기쁜 소식과는 별개로, 아직도 DataAnnotation 계정이 정지되었다는 사실은 꽤 마음이 아팠다.
그래서 나와 비슷한 사례가 있는지 계속해서 검색을 해보았고, 결국 정지 이유를 꽤 명확하게 이해하게 되었다.
DataAnnotation은 ‘퀄리티’보다 ‘시간’을 본다
많은 사람들이 오해하지만, DataAnnotation은 단순히 과제의 질(Quality) 만으로 사람을 평가하지 않는다.
오히려 더 중요한 기준은 바로 시간(Time) 이다.
왜냐하면,
- 과제의 질은 어차피 일감을 부여하기 전까지 계속 테스트
- 어느 정도 수준 이상이 되면 결과물의 질은 비슷해질 수밖에 없음
결국 남는 기준은 하나다.
누가 더 빨리 일을 끝내는가
예를 들어,
- 동일한 과제를 10분 만에 제출한 사람
- 동일한 과제를 20분 걸려 제출한 사람
이 두 사람이 있다면, 20분 걸린 사람은 탈락 대상이 될 가능성이 높다.
즉, 내가 제출했던 마지막 과제들의 소요 시간이 평균보다 길었다면, 그게 정지로 이어졌을 확률이 크다는 것이다.
DataAnnotation을 사용하는 분들에게 드리는 팁
만약 DataAnnotation으로 실제 수익을 잘 내고 있다면, 이 점은 꼭 유의해야 한다.
- 과제 품질은 기본 이상만 유지
- 소요 시간 입력에 전략적으로 접근
- 때로는 실제보다 짧은 시간을 입력하는 것도 하나의 팁
냉정하지만, 이 플랫폼은 그렇게 돌아간다.
데이터 라벨링 시장의 숨겨진 지표, ‘ROI’와 시간당 생산성
글로벌 데이터 라벨링 플랫폼들이 작업자의 소요 시간에 예민한 이유는 고객사(AI 개발사)에 청구하는 비용 구조와 밀접한 관련이 있다. 플랫폼 입장에서는 제한된 예산 내에서 가장 많은 양의 고품질 데이터를 뽑아내야 하므로, 개별 작업자의 ‘시간당 생산성(Throughput)’을 핵심 성과 지표로 삼는다.
따라서 아무리 결과물이 훌륭하더라도 표준 편차를 벗어나는 과도한 시간을 투입한다면, 플랫폼 시스템은 이를 ‘비효율적 자원’으로 분류하여 계정 비활성화를 결정하게 된다. 이는 테스터들에게 매우 냉혹한 현실이지만, 반대로 말하면 정확도와 속도의 균형(Balanced Speed)을 맞출 수 있는 숙련된 작업자에게는 가장 안정적인 고수익의 기회가 열려 있다는 뜻이기도 하다.
새롭게 눈여겨보는 플랫폼들: Mercor & Welo Data
이번 주에는 새로운 기업도 하나 발견했다. 바로 Mercor다.
가입하자마자 바로 영어 인터뷰 단계로 넘어가길래, 준비가 충분히 되었을 때 진행하려고 일단 보류해 두었다.
그리고 하나 더.
초기에 잘못된 휴대폰 번호로 가입하는 바람에 계정 문제가 있었지만, 서포트 센터를 통해 새 계정을 만들어준 Welo Data도 올해 안에는 본격적으로 테스크를 진행해볼 생각이다.
이번 Alignerr 일본어 합격을 계기로, 다시 언어 기반 Assessment에 대한 자신감도 조금은 회복한 느낌이다.
마무리하며
앞으로 Welo Data, Mercor를 포함해 어떤 변화가 있을지, 계속 기록으로 남겨 보려고 한다.
혹시 Alignerr의 Assessment나 DataAnnotation 관련해서 궁금한 점이 있다면, 댓글로 남겨주세요! 혹시 저와 비슷한 부업을 탐구하고 계시다면 본인의 경험을 공유해주시면 저도 참고하겠습니다. 2026년은 같이 부자 됩시다🤑