상품 이미지 데이터셋

상품 이미지 수집 및 BBOX

데이터셋 다운로드

셀렉트스타 더 알아보기

이미지

가품 선별

Bounding Box

이커머스

위조품을 잡아내는 AI기술

전 세계 이커머스 위조상품을 모니터링하는 AI 기반 플랫폼으로, 머신러닝을 활용하여 그간 수동으로 진행되어왔던 위조상품의 포착, 신고, 분석을 자동화하고, 적발에 소비되는 인력, 시간, 비용을 단축하기 위한 프로젝트입니다. 나아가 기술의 고도화를 통해 딥페이크 등을 이용한 불법 복제 콘텐츠까지 모니터링의 범위를 확장할 계획에 있습니다.

About

인공지능(AI)을 기반으로 온라인몰 위조 상품 모니터링

셀렉트스타는 더욱 스마트한 인공지능을 위한 고품질 학습 데이터를 제공합니다. 본 데이터셋은 셀렉트스타가 주최한 인공지능 데이터셋 지원사업의 일환으로, 마크비전과 협업하여 무료로 구축하였습니다.

마크비전은 인공지능(AI)을 기반으로 온라인몰의 위조 상품을 모니터링하는 솔루션을 제공하는 스타트업으로, 2019년에 이인섭 대표와 이도경 부대표가 공동 창업하였습니다.

축적되는 데이터를 자체적으로 학습하는 인공지능 기술을 활용한 마크비전은 기존에 사람이 수동으로 진행하던 위조 상품 포착, 신고, 분석하는 전 과정을 자동화하였습니다. 딥러닝 기반의 이미지 인식, 머신러닝 기반의 데이터 분석, 로봇 신고 프로세스 자동화 등 자체 개발한 기술이 적용된 자동화 시스템은 소요되는 시간 및 비용을 극대화 하였습니다. 덕분에 건당 적발 비용이 수작업의 50분의 1 수준으로 떨어졌으며, 위조 상품 적발에 들어가는 시간 또한 30분의 1 수준으로 줄었습니다.

마크비전은 아마존·이베이(미국), 알리바바·타오바오(중국), 쿠팡·네이버(한국) 등 10개국 25개 업체와 연계해 위조상품을 모니터링하고 있습니다. 2021년에는 에어비앤비, 드롭박스, 트위치, 코인베이스 등 다수의 글로벌 유니콘 기업들을 발굴해 낸 미국 실리콘밸리 액셀러레이터인 와이컴비네이터의 스타트업 투자육성 프로그램에 선발되어 총 36억원의 투자금을 유치했습니다. 마크비전은 플랫폼 기술 고도화를 통해 딥페이크 등을 이용한 불법 복제 콘텐츠까지 모니터링 범위를 확장할 예정입니다.

https://www.marqvision.com/kr/home

프로젝트 진행 소감

“데이터의 품질이 매우 우수합니다. 다른 업체와도 동일한 프로젝트를 진행했었으나, 셀렉트스타는 에러가 있는 데이터의 비율이 타 업체의 1/10도 안되는거 같습니다. 또한 작업 timeline 설정 및 이에 맞춘 작업 실행이 우수합니다. 셀렉트스타 측에서 데이터 작업에 대한 타임라인을 저희 니즈를 반영하여 설정하였고, 그 타임라인에 최대한 맞춰서 데이터를 제공해주었습니다. 타 업체는 계속해서 납품일을 미뤘는데 셀렉트스타는 이를 잘 지켜주어 AI model을 개발 일정을 설정하는데 도움이 많이 되었습니다. 마지막으로, 커뮤니케이션이 우수합니다. 궁금한 사항을 다양한 메신저로 문의할 수 있고 항상 빠르게 답변을 주어 좋았습니다.”

데이터셋 스펙

수집한 전체 데이터 중, 30%를 오픈데이터셋으로 공유합니다.

상품명 list : 25,000개 csv파일
상품 image, bbox 좌표 및 카테고리가 있는 json 파일(139,467 set, 230,000 bbox)

데이터 수집 및 가공 방법

셀렉트스타는 더욱 효율적이고 정확한 위조품 모니터링 자동화를 위한 크롤링 작업과 데이터 수집 및 가공에 대한 프로세스를 설계하였습니다. 또한 꼼꼼한 데이터 전처리와 후처리를 통해 셀렉트스타의 모바일 크라우드소싱 플랫폼인 캐시미션에 런칭함으로써 보다 빠르게 데이터 가공 작업을 진행했습니다.

Data Collection

10개의 카테고리에 해당되는 각각의 브랜드에 대하여 상품 리스트 크롤링
수집된 리스트에 대한 data 전처리
각각의 상품명당 6장씩 이미지 캐시미션을 통하여 수집
수집된 이미지에 대하여 bbox를 위한 전처리
수집된 이미지에 대하여 상품명과 일치하는 상품 이미지에 대하여 bbox
수집된 이미지에 대하여 카테고리가 일치하는 상품 이미지에 대하여 bbox
수집된 이미지에 대하여 카테고리가 다른 상품 이미지에 대하여 bboxd

셀렉트스타의 크라우드소싱 플랫폼 '캐시미션(앱)'에서 크라우드 유저들이 구글 검색을 통해 제시어에 맞는 사진 6장을 찾는 미션, 박스치기 미션을직접 참여하여 데이터의 수집 및 가공을 진행했습니다.

캐시미션 가이드 다운로드 : PDF

Sample Data

{
    "version": "4.5.6",
    "flags": {},
    "shapes": [
        {
            "label": "main",
            "points": [
                [
                    14.591055102545099,
                    85.75488015814184
                ],
                [
                    283.67926859402024,
                    200.16061279960465
                ]
            ],
            "group_id": null,
            "shape_type": "rectangle",
            "labels": [],
            "flags": {}
        }
    ],
    "imagePath": "[가방] Fendi_Brown fabric belt bag_1.jpg",
    "imageWidth": 300,
    "imageHeight": 300,
    "imageData": null
}

[가방] Fendi_Brown fabric belt bag_1.json

{
    "version": "4.5.6",
    "flags": {},
    "shapes": [
        {
            "label": "main",
            "points": [
                [
                    420.0145349784301,
                    306.56832003908687
                ],
                [
                    1072.9246920770324,
                    502.2164466097243
                ]
            ],
            "group_id": null,
            "shape_type": "rectangle",
            "labels": [],
            "flags": {}
        }
    ],
    "imagePath": "[선글라스] 루이비통_몽고메리 선글라스_3.jpg",
    "imageWidth": 1200,
    "imageHeight": 1200,
    "imageData": null
}

[선글라스] 루이비통_몽고메리 선글라스_3.json

{
    "version": "4.5.6",
    "flags": {},
    "shapes": [
        {
            "label": "main",
            "points": [
                [
                    38.42287473561406,
                    1.4988010832439613e-14
                ],
                [
                    186.46608567735996,
                    182.84812391363516
                ]
            ],
            "group_id": null,
            "shape_type": "rectangle",
            "labels": [],
            "flags": {}
        },
        {
            "label": "main",
            "points": [
                [
                    173.53852133666012,
                    0
                ],
                [
                    248.8768268384867,
                    163.4789319774926
                ]
            ],
            "group_id": null,
            "shape_type": "rectangle",
            "labels": [],
            "flags": {}
        }
    ],
    "imagePath": "[식음료] 켈로그_CHEEZ-IT  통 곡물_1.jpg",
    "imageWidth": 275,
    "imageHeight": 183,
    "imageData": null
}

[식음료] 켈로그_CHEEZ-IT 통 곡물_1.json

{
    "version": "4.5.6",
    "flags": {},
    "shapes": [
        {
            "label": "main",
            "points": [
                [
                    2.4580682475419318,
                    119.28860613071139
                ],
                [
                    495.80682475419314,
                    350.0578368999421
                ]
            ],
            "group_id": null,
            "shape_type": "rectangle",
            "labels": [],
            "flags": {}
        }
    ],
    "imagePath": "[신발] 아디다스_클라이마웜 2.0 M_1.jpg",
    "imageWidth": 500,
    "imageHeight": 500,
    "imageData": null
}

[신발] 아디다스_클라이마웜 2.0 M_1.json

{
    "version": "4.5.6",
    "flags": {},
    "shapes": [
        {
            "label": "main",
            "points": [
                [
                    208.13698642694106,
                    516.8389565713526
                ],
                [
                    1793.7000065962777,
                    2487.270618699904
                ]
            ],
            "group_id": null,
            "shape_type": "rectangle",
            "labels": [],
            "flags": {}
        }
    ],
    "imagePath": "[의류] 루이비통_래글런 크루넥 위드 리브 슬리브 포켓 디테일_1.jpg",
    "imageWidth": 2000,
    "imageHeight": 3000,
    "imageData": null
}

[의류] 루이비통_래글런 크루넥 위드 리브 슬리브 포켓 디테일_1.json

{
    "version": "4.5.6",
    "flags": {},
    "shapes": [
        {
            "label": "main",
            "points": [
                [
                    583.289104989746,
                    516.4453758245664
                ],
                [
                    1391.5134059731927,
                    1601.3590771446889
                ]
            ],
            "group_id": null,
            "shape_type": "rectangle",
            "labels": [],
            "flags": {}
        },
        {
            "label": "matched-category",
            "points": [
                [
                    672.3753139939392,
                    1414.7391787480897
                ],
                [
                    1274.1869729834923,
                    2709.6325113606827
                ]
            ],
            "group_id": null,
            "shape_type": "rectangle",
            "labels": [],
            "flags": {}
        },
        {
            "label": "unmatched-category",
            "points": [
                [
                    673.0725468051878,
                    2670.0239567082967
                ],
                [
                    872.0208883158447,
                    2904.7829996908717
                ]
            ],
            "group_id": null,
            "shape_type": "rectangle",
            "labels": [],
            "flags": {}
        },
        {
            "label": "unmatched-category",
            "points": [
                [
                    1086.8850971473541,
                    2667.039731585637
                ],
                [
                    1282.849213535351,
                    2901.798774568212
                ]
            ],
            "group_id": null,
            "shape_type": "rectangle",
            "labels": [],
            "flags": {}
        }
    ],
    "imagePath": "[의류] 루이비통_래글런 크루넥 위드 리브 슬리브 포켓 디테일_2.jpg",
    "imageWidth": 2000,
    "imageHeight": 3000,
    "imageData": null
}

[의류] 루이비통_래글런 크루넥 위드 리브 슬리브 포켓 디테일_2.json