Skip to content

๐Ÿš— RDC | ๋ Œํ„ฐ์นด ํšŒ์‚ฌ๋ฅผ ์œ„ํ•œ ์ฐจ๋Ÿ‰ ์†์ƒ ์—ฌ๋ถ€ ๊ด€๋ฆฌ ์„œ๋น„์Šค

Notifications You must be signed in to change notification settings

boostcampaitech4lv23cv2/final-project-level3-cv-08

Folders and files

NameName
Last commit message
Last commit date

Latest commit

ย 

History

52 Commits
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 

Repository files navigation

CV-08 8bit | RDC(๋ Œํ„ฐ์นด ํšŒ์‚ฌ๋ฅผ ์œ„ํ•œ ์ฐจ๋Ÿ‰ ์†์ƒ ์—ฌ๋ถ€ ๊ด€๋ฆฌ ์„œ๋น„์Šค)

๐Ÿš— ํ”„๋กœ์ ํŠธ ๊ฐœ์š”

image

  • ์—ฌํ–‰์—์„œ ์ฐจ๋Ÿ‰์„ ๋ ŒํŠธํ•  ๋•Œ ์ฐจ๋Ÿ‰์˜ ์ƒํƒœ๋ฅผ ์ œ๋Œ€๋กœ ํ™•์ธํ•˜์ง€ ์•Š๊ฑฐ๋‚˜ ๊ธฐ๋กํ•ด๋†“์ง€ ์•Š์œผ๋ฉด, ์ž์‹ ์ด ๋‚ด์ง€ ์•Š์€ ์‚ฌ๊ณ ์— ๋Œ€ํ•ด ์˜คํ•ด ๋ฐ›์„ ์ˆ˜ ์žˆ๋‹ค. ๋”ฐ๋ผ์„œ ์ฐจ๋Ÿ‰์„ ๋ ŒํŠธํ•˜๋Š” ์†Œ๋น„์ž๋„ ์ฐจ๋Ÿ‰์„ ์šดํ–‰ํ•˜๊ธฐ ์ „์— ์ฐจ๋Ÿ‰์˜ ์ƒํƒœ๋ฅผ ์ธ์ง€ํ•˜๋Š” ๊ฒƒ์ด ํ•„์š”ํ•˜๋‹ค.

  • ์ „๊ตญ ๋ Œํ„ฐ์นด ํšŒ์‚ฌ ์ค‘ 69%๊ฐ€ ์ฐจ๋Ÿ‰์„ 100๋Œ€ ์ •๋„ ๋ณด์œ ํ•˜๊ณ  ์žˆ๋Š” ์†Œ๊ทœ๋ชจ ๋ Œํ„ฐ์นด ํšŒ์‚ฌ์ด๊ณ , ์ด๋“ค ๋Œ€๋ถ€๋ถ„์€ ์ฐจ๋Ÿ‰์˜ ์ƒํƒœ๋ฅผ ํ™•์ธํ•  ๋•Œ ์ง์›์ด ์ง์ ‘ ํ™•์ธํ•˜๊ฑฐ๋‚˜ ์‚ฌ์ง„์„ ์ฐ์–ด์„œ ์ฐจ๋Ÿ‰์˜ ์†์ƒ ์—ฌ๋ถ€๋ฅผ ํŒŒ์•…ํ•˜๋Š” ๊ฒƒ์œผ๋กœ ๋‚˜ํƒ€๋‚ฌ๋‹ค. ํ•˜์ง€๋งŒ ์†Œ๊ทœ๋ชจ ๋ Œํ„ฐ์นด์—์„œ ์ฐจ๋Ÿ‰ ๊ด€๋ฆฌ๋ฅผ ์œ„ํ•ด AI ๊ฐœ๋ฐœ ์ธ๋ ฅ์„ ํˆฌ์ž…ํ•˜์—ฌ ์„œ๋น„์Šค๋ฅผ ๊ตฌ์ถ•ํ•˜๋Š” ๊ฒƒ์€ ๋ฌด๋ฆฌ๊ฐ€ ์žˆ๋‹ค.

  • RDC(Recognition Damage of Cars) ๋ Œํ„ฐ์นด ํšŒ์‚ฌ๋ฅผ ์œ„ํ•œ ์ฐจ๋Ÿ‰ ์†์ƒ ์—ฌ๋ถ€ ๊ด€๋ฆฌ ์„œ๋น„์Šค ํ”„๋กœ์ ํŠธ๋ฅผ ์ง„ํ–‰ํ•˜๊ฒŒ ๋˜์—ˆ๋‹ค.

๐Ÿ’พ ๋ฐ์ดํ„ฐ์…‹

  • ์ฐจ๋Ÿ‰ ์†์ƒ ์ด๋ฏธ์ง€๋ฅผ ์ˆ˜์ง‘ํ•œ ๋ฐ์ดํ„ฐ์…‹ (AI Hub)
  • ํ›ˆ๋ จ ๋ฐ์ดํ„ฐ(train) 402,143์žฅ, ๊ฒ€์ฆ ๋ฐ์ดํ„ฐ(valid) 50,445์žฅ ์‚ฌ์šฉ
  • ์†์ƒ ์—ฌ๋ถ€๊ฐ€ ์ค‘์š”ํ•˜๊ธฐ ๋•Œ๋ฌธ์— ํ•˜๋‚˜์˜ ํด๋ž˜์Šค๋กœ ๋งŒ๋“  ํ›„ ํ•™์Šต์— ์‚ฌ์šฉ

๐Ÿ“Š ๋ชจ๋ธ ํ•™์Šต

- SegFormer

image

  • Encoder-Decoder๋กœ ์ด๋ฃจ์–ด์ง„ ๋ชจ๋ธ
  • Transformer ๊ธฐ๋ฐ˜์˜ encoder โ†’ multi-scale feature๋ฅผ ๋ฝ‘์•„๋ƒ„
  • MLP decoder โ†’ ๋‚ฎ์€ ์—ฐ์‚ฐ๋Ÿ‰์œผ๋กœ ์ ์€ ํ•™์Šต ์‹œ๊ฐ„

- ๋ชจ๋ธ ๋น„๊ต

SegFormer-b2 ConvNeXt Base Swin Transformer v2 Swin Transformer v1
mIoU 76.83 77.51 66.72 71.59
Background IoU 95.37 95.53 86.91 89.82
Damage IoU 58.28 59.49 46.53 53.46
์ด๋ฏธ์ง€ ์ถ”๋ก  ์‹œ๊ฐ„(s) 2.19 9.59



๐Ÿ—ƒ๏ธ ์„œ๋น„์Šค ์•„ํ‚คํ…์ณ

- ์ „์ฒด ๊ตฌ์„ฑ๋„

image

- ๊ณ ๊ฐ ํ™”๋ฉด

  • ๊ณ ๊ฐ ์ •๋ณด์™€ ์ฐจ๋Ÿ‰ ์ •๋ณด๋ฅผ ์ž…๋ ฅํ•œ ๋’ค ์ถ”๋ก ๋œ ๊ฒฐ๊ณผ๋ฅผ ํ†ตํ•ด ์†์ƒ ์—ฌ๋ถ€๋ฅผ ํŒŒ์•…ํ•  ์ˆ˜ ์žˆ์Œ

image

- ๊ด€๋ฆฌ์ž ํ™”๋ฉด

  • ๊ณ ๊ฐ์ด ์ž…๋ ฅํ•œ ๋ฐ์ดํ„ฐ๋ฅผ ํ™•์ธํ•  ์ˆ˜ ์žˆ๊ณ , ๋…ธ์…˜์˜ API๋กœ ์ œ์ž‘๋˜์–ด ๊ด€๋ฆฌ์ž๊ฐ€ ์›ํ•˜๋Š” ํŽธ์˜ ๊ธฐ๋Šฅ์„ ์ž์œ ๋กญ๊ฒŒ ๊ตฌํ˜„ํ•  ์ˆ˜ ์žˆ์Œ

image



๐Ÿš ๊ฒฐ๋ก 

- ํ›„์† ๊ฐœ๋ฐœ ๋ฐ ์—ฐ๊ตฌ

  • ์„ฑ๋Šฅ ์ธก๋ฉด
    • TensorRT์˜ ๋„์ž… โ†’ inference ์†๋„ ํ–ฅ์ƒ
    • ์œ ์ € ํ”ผ๋“œ๋ฐฑ์„ ๊ธฐ๋ฐ˜์œผ๋กœ ์ž˜๋ชป๋œ inference ์žฌํ•™์Šต โ†’ ๋ชจ๋ธ์˜ ์ •ํ™•๋„ ํ–ฅ์ƒ
  • ๊ด€๋ฆฌ์ž ์‚ฌ์šฉ ์ธก๋ฉด
    • ๊ฒ€์ˆ˜ ์•Œ๋ฆผ ๊ธฐ์ค€ ๊ฐœ์„  โ†’ ์†์ƒ ์ˆ˜ ๋ณ€ํ™”๋‚˜ ์œ„์น˜ ์ •๋ณด๋ฅผ ๊ธฐ์ค€์œผ๋กœ ์ถ”๊ฐ€์ ์ธ ์†์ƒ ๊ตฌ๋ถ„
    • ์ถ”๊ฐ€ ๊ณ ๊ฐ ์ •๋ณด ํ™œ์šฉ โ†’ ์˜ˆ) ๋ณดํ—˜ ์œ ๋ฌด ๋“ฑ

๐Ÿ“‘ ์ฐธ๊ณ ์ž๋ฃŒ

๐Ÿ‘จโ€๐Ÿ‘จโ€๐Ÿ‘งโ€๐Ÿ‘ง ํŒ€ ๊ตฌ์„ฑ ๋ฐ ์—ญํ• 

๊น€๋™์ธ_T4029 ์‹ ์›์ค€_T4113 ์ดํ˜œ์ง„_T4177 ์ •ํ˜๊ธฐ_T4205 ํ™์ค€ํ˜•_T4235
๋ชจ๋ธ ํ•™์Šต ๋ชจ๋ธ ํ•™์Šต ๋ชจ๋ธ ํ•™์Šต, ํ”„๋ก ํŠธ ๊ฐœ๋ฐœ ์„œ๋น„์Šค ์•„ํ‚คํ…์ณ ๊ฐœ๋ฐœ ๋ฐ์ดํ„ฐ ๋ถ„์„, ๋ชจ๋ธ ํ•™์Šต

About

๐Ÿš— RDC | ๋ Œํ„ฐ์นด ํšŒ์‚ฌ๋ฅผ ์œ„ํ•œ ์ฐจ๋Ÿ‰ ์†์ƒ ์—ฌ๋ถ€ ๊ด€๋ฆฌ ์„œ๋น„์Šค

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published