2021년 2월 7일, 탄산음료 '마운틴듀'를 판매하는 펩시가 CM을 공개하며 "이 CM에 나온 마운틴듀의 갯수를 정확하게 맞춘 최초의 인물에게 100만 달러의 상금을 준다'는 콘테스트를 실시했는데, 그로부터 이틀 후에 컴퓨터비전의 전문가가 AI를 이용하여 영상을 분석하는 방법을 공개했습니다.

Using Computer Vision to Help Win $ 1 Million in Mountain Dew 's Big Game Contest
https://blog.roboflow.com/mountain-dew-contest-computer-vision/

Using Computer Vision to Help Win $1 Million in Mountain Dew's Big Game Contest

Last night during Super Bowl LV, Mountain Dew ran an ad featuring John Cena riding through a Mountain Dew-themed amusement park. Bottles are scattered all over the scene: neon signs on buildings, in fun house mirrors, and flying out of the car trunk. At th

blog.roboflow.com


마운틴듀의 CM은 2021년 2월 7일에 열린 제55회 슈퍼볼에서 방영되었습니다. CM의 내용은 핑크색 마운틴듀 페트병이 곳곳에 흩어져 있는 테마파크 내에서 프로레슬링선수 존 시나가 드라이브하는 약 30초의 짧은 동영상입니다.

WIN $ 1MILLION! | 2021 'MTN DEW MAJOR MELON Bottle Count'w / John Cena - YouTube
https://www.youtube.com/watch?v=9cEiYQwYLPk


이 콘테스트에 대해 컴퓨터비전 소프트웨어를 개발하는 기업 'Roboflow'의 공동설립자인 조셉 넬슨 씨가 알게 되었고 자사가 개발하고 있는 물체감지 모델이 도움이 된다고 생각하여 마운틴듀를 정확하게 감지하는 소프트웨어의 개발에 착수했습니다.

넬슨은 먼저 영상을 초당 3프레임으로 분할하여 92장의 이미지를 만들었고 모든 이미지에 나타나 있는 마운틴듀에 수동으로 주석을 달아 데이터세트를 만들었습니다. 넬슨은 이 작업에 대해 "손가락을 접어가면서 모든 마운틴듀를 세는 방식과 비슷하지만, 자신의 눈으로 모든 병을 찾는 것은 매우 어려운 일이라는 점에 유의해야 합니다. 별탈없이 진행된다면 컴퓨터비전에게 마운틴듀를 학습시켜서 자신이 간과한 마운틴듀를 찾아줄지도 모릅니다"라고 말합니다.

이 작업은 아무것도 나타나지 않은 1프레임을 제외한 91장의 이미지와 총 869개의 주석으로 구성된 데이터세트가 완성되었습니다. 이 데이터세트는 오픈소스로 공개되어 있습니다.

그 결과로 완성된 것이 아래의 동영상으로, 학습을 마친 AI가 원본 영상에서 마운틴듀만을 인식하고 있는 모습은 동영상의 12분 53초 부근에서 확인할 수 있습니다.

Winning $ 1 Million with Computer Vision (Mountain Dew Super Bowl Contest) - YouTube
https://youtu.be/jqVKdMjPXHA


콘테스트는 마운틴듀 공식 트위터 계정의 해당 트윗에 회신하면 참여가 가능합니다. 그러나 참가자격으로 미국에 거주하고 법적으로 성인이 되어있을 필요가 있습니다. 넬슨 본인이 콘테스트에 응모하는 것인지 여부는 확실하지 않지만, 넬슨 씨는 "100만 달러를 차지할 수 있도록 행운을 빕니다"라고 트윗하며, YouTube 동영상에 달린 "그래서 몇 개인가?"라는 댓글을 통한 질문에 넬슨 씨는 "그것은 시청자 여러분의 숙제입니다"라고 답변했습니다.

Posted by 말총머리
,