Skip to content

boostcampaitech7/level4-cv-finalproject-hackathon-cv-07-lv3

Folders and files

NameName
Last commit message
Last commit date

Latest commit

ย 

History

25 Commits
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 

Repository files navigation

๋„ค์ด๋ฒ„ ๋ถ€์ŠคํŠธ์บ ํ”„ AI Tech ๊ธฐ์—…(Upstage) ํ•ด์ปคํ†ค - 1st Place ๐Ÿฅ‡

result
result

AI ๊ธฐ๋ฐ˜์˜ ๋Œ€ํ•™๊ต ์ž…ํ•™์ฒ˜ ์—…๋ฌด ์ž๋™ํ™” ๋ฐ ์˜์‚ฌ ๊ฒฐ์ • ์ง€์› ์›น ์„œ๋น„์Šค

์ „๊ตญ ๋Œ€ํ•™์˜ ์ž…ํ•™ ๊ณผ์ •์„ ๋‹ด๋‹นํ•˜๋Š” ์ž…ํ•™์‚ฌ์ •๊ด€ ๋ฐ ๊ต์ˆ˜๋“ค์„ ์œ„ํ•ด
์ž…ํ•™ ์„œ๋ฅ˜ ๋“ฑ๋ก๊ณผ ํ™•์ธ ์ž‘์—…์„ ์ž๋™ํ™”ํ•˜๊ณ ,
๋…ผ์ˆ  ๋‹ต์•ˆ์„ ์š”์•ฝํ•˜๊ณ  ๊ทœ์น™ ๊ธฐ๋ฐ˜ ํ‰๊ฐ€๋ฅผ ์ž๋™ ์ˆ˜ํ–‰ํ•˜๋Š”,
์ž…ํ•™ ์—…๋ฌด ๋ณด์กฐ ์‹œ์Šคํ…œ

1. ์ฃผ์ œ ์„ ์ • ๋ฐฐ๊ฒฝ

[Upstage ๊ธฐ์—… ํ•ด์ปคํ†ค ์ฃผ์ œ] - ์—…๋ฌด ์ž๋™ํ™”, ์˜์‚ฌ ๊ฒฐ์ • ์ง€์› ๋“ฑ ๋น„์ฆˆ๋‹ˆ์Šค ๊ฐ€์น˜ ์ฐฝ์ถœ AI ์„œ๋น„์Šค ๊ฐœ๋ฐœ

1. ๊ทผ๋ฌด ์ค‘์— ๊ฒช์€ ๋น„ํšจ์œจ์ ์ธ ์„œ๋ฅ˜ ๊ฒ€ํ†  ์ž‘์—…

์„œ๋ฅ˜ ๋ถ„๋ฅ˜, ๋ชฉ๋ก ๋Œ€์กฐ ๋“ฑ ๋‹จ์ˆœ ๋ฐ˜๋ณต ์ž‘์—…์€ ๋‹จ์ˆœํ•œ ์ž‘์—…
๊ณผ๋„ํ•œ ์‹œ๊ฐ„ ์†Œ์š”์™€ ์•ˆ๊ตฌ ํ”ผ๋กœ๋„ ๋ˆ„์ ์œผ๋กœ ์‹ค์ˆ˜ ๊ฐ€๋Šฅ์„ฑ ์ฆ๊ฐ€

2. ์ƒํ™œ๊ธฐ๋ก๋ถ€ ๋ฐ ๋…ผ์ˆ  ํ‰๊ฐ€

์ •๊ทœ์ง ์ž…ํ•™ ์‚ฌ์ •๊ด€์ด ๊ฐ๋‹น ๋ถˆ๊ฐ€ โ†’ ๋‹จ๊ธฐ ์œ„์ด‰ ์‚ฌ์ •๊ด€ ๊ณ ์šฉ
1์ธ ๋‹น ํ‰๊ฐ€ํ•˜๋Š” ์„œ๋ฅ˜ ์ˆ˜ ๊ฐ€์ค‘์œผ๋กœ ์‹ค์ˆ˜ ๊ฐ€๋Šฅ์„ฑ ๋†ํ›„

2. ๋ฌธ์ œ ์ •์˜ ๋ฐ ํ•ด๊ฒฐ ๋ฐฉํ–ฅ

๋ฌธ์ œ ์ •์˜

ํ˜„์—… ์ž…ํ•™์‚ฌ์ •๊ด€์„ ํ†ตํ•œ ์š”๊ตฌ ์‚ฌํ•ญ ํŒŒ์•… ์š”๊ตฌ์‚ฌํ•ญ์„ ํ•ด๊ฒฐํ•˜๊ธฐ ์œ„ํ•œ ๋ฌธ์ œ ์ •์˜
20,000 ์—ฌ๊ฑด ์„œ๋ฅ˜ ์ˆ˜์ž‘์—… ๋ถ„๋ฅ˜/๊ฒ€ํ† ๋กœ ์ฒด๋ ฅ์  ๋ถ€๋‹ด ๊ณผ์ค‘ ์ž…ํ•™ ์„œ๋ฅ˜ ์ž๋™ ๋ถ„๋ฅ˜๊ธฐ OCR, LLM์œผ๋กœ ์„œ๋ฅ˜ ์œ ํšจ์„ฑ ๊ฒ€์ฆ
์ƒ๊ธฐ๋ถ€ ํ‰๊ฐ€ ํ•ญ๋ชฉ์— ์•Œ๋งž๋Š” ๋ฌธ์žฅํ˜•์˜ ์š”์•ฝ๋ฌธ์ด ํ•„์š” OCR๊ณผ LLM์„ ํ†ตํ•ด ํ‰๊ฐ€ ํ•ญ๋ชฉ ๊ธฐ๋ฐ˜ ์ƒ๊ธฐ๋ถ€ ์š”์•ฝ ๊ธฐ๋Šฅ
์‹ค๋ฉด์ ‘ ์‹œ ์„œ๋ฅ˜ ์™„๋… ์‹œ๊ฐ„ ๋ถ€์กฑ ํ‰๊ฐ€ ํ•ญ๋ชฉ ๊ธฐ๋ฐ˜ ์งˆ๋ฌธ ์ƒ์„ฑ ๊ธฐ๋Šฅ ํ•„์š” ์ƒ๊ธฐ๋ถ€ ํ‰๊ฐ€ ํ•ญ๋ชฉ ๊ธฐ๋ฐ˜ ๋ฉด์ ‘ ์งˆ๋ฌธ ์ž๋™ ์ƒ์„ฑ ๊ธฐ๋Šฅ
์—ฐ๊ตฌ ์‹œ๊ฐ„ ๋ถ€์กฑ! ๋น ๋ฅธ ์ฑ„์ ์„ ์œ„ํ•œ ๋ณด์กฐ ๋„๊ตฌ ํ•„์š” ๋…ผ์ˆ  ๋‹ต์•ˆ ์ถ”์ถœ ๋ฐ ์š”์•ฝ ๊ธฐ๋Šฅ ๊ทœ์น™ ๊ธฐ๋ฐ˜ ์ž๋™ ์ฑ„์  ๊ธฐ๋Šฅ

๋ฌธ์ œ ํ•ด๊ฒฐ ๋ฐฉํ–ฅ

Upstage OCR, Chat API๋ฅผ ํ™œ์šฉํ•œ ๋ฌธ์ œ ํ•ด๊ฒฐ ๋ฐ ๊ธฐ๋Šฅ ๊ตฌํ˜„

1. ์„œ๋ฅ˜ ์—…๋กœ๋“œ ๋ฐ OCR

result

2. ์ž…ํ•™ ์„œ๋ฅ˜ ์ž๋™ ๋ถ„๋ฅ˜

  • ๋ฌธ์„œ๋ถ„๋ฅ˜๊ธฐ

result

  • ์„œ๋ฅ˜ ์ ๋ถ€์ ํ•ฉ

result

3. ์ƒํ™œ๊ธฐ๋ก๋ถ€ ๋‚ด์šฉ ์š”์•ฝ ๋ฐ ๋ฉด์ ‘ ์งˆ๋ฌธ ์ƒ์„ฑ

result

4. ๋…ผ์ˆ  ๋‹ต์•ˆ์ง€ ์š”์•ฝ๋ฌธ ์ƒ์„ฑ ๋ฐ ๊ทœ์น™ ๊ธฐ๋ฐ˜ ์ž๋™ ํ‰๊ฐ€

  • ์ „์ฒ˜๋ฆฌ ๋ฐ ๊ต์ •

result

  • ์š”์•ฝ๋ฌธ ์ƒ์„ฑ ๋ฐ ๊ทœ์น™ ๊ธฐ๋ฐ˜ ํ‰๊ฐ€

result


3. ํ”„๋กœ์ ํŠธ ๊ธฐ๋Œ€ํšจ๊ณผ

๊ธฐ์กด ์„œ๋ฅ˜ 6000๊ฐœ ๊ธฐ์ค€ ์•ฝ 15๋ช…์ด 3์ผ ์†Œ์š” ์ž‘์—…

  • ์„œ๋ฅ˜ ๋‹น 1์ดˆ ์ด๋‚ด ๋ถ„๋ฅ˜ โ†’ ์•ฝ 3์‹œ๊ฐ„ ๋‚ด์™ธ๋กœ ์™„๋ฃŒ
  • ์„œ๋ฅ˜ ์˜จ๋ผ์ธ ์ œ์ถœ ๋ณ€๊ฒฝ ์‹œ ์ „๋ฉด ์ž๋™ํ™” ๊ฐ€๋Šฅ

์ƒํ™œ๊ธฐ๋ก๋ถ€ ์š”์•ฝ ๋ฐ ๋ฉด์ ‘ ์งˆ๋ฌธ ์ถ”์ฒœ

  • ๋ชจ๋“  ์ง€์›์ž์—๊ฒŒ ์‹ ์†/๋™๋“ฑํ•œ ํ‰๊ฐ€์˜ ๊ธฐํšŒ ์ œ๊ณต
  • ์ž…ํ•™ ์‚ฌ์ •๊ด€ ์—…๋ฌด ํ™˜๊ฒฝ ๊ฐœ์„ 
  • ๋‹จ๊ธฐ ์œ„์ด‰ ์‚ฌ์ •๊ด€ ๊ณ ์šฉ์— ํ•„์š”ํ•œ ๋น„์šฉ ์ ˆ๊ฐ

๋…ผ์ˆ  ๋‹ต์•ˆ ์š”์•ฝ ๋‚ด์šฉ ์ œ๊ณต ๋ฐ ๊ทœ์น™ ๊ธฐ๋ฐ˜ ์ž๋™ ํ‰๊ฐ€

  • ๊ทœ์น™ ๊ธฐ๋ฐ˜ ํ‰๊ฐ€ ์ž๋™ํ™” โ†’ ํ‰๊ฐ€ ์ผ๊ด€์„ฑ ํ™•๋ณด
  • ๊ฐ๊ด€์  ๊ธฐ์ค€์„ ์ œ๊ณต โ†’ ํ‰๊ฐ€ ์ฃผ๊ด€์„ฑ ์ตœ์†Œ
  • ํ‰๊ฐ€ ์‹œ๊ฐ„ ๋‹จ์ถ• โ†’ ๊ต์ˆ˜์— ์—ฐ๊ตฌ ์ง‘์ค‘ ์‹œ๊ฐ„ ๋ณด์žฅ

4. ํŒ€์›์†Œ๊ฐœ ๋ฐ ์—ญํ• ๋ถ„๋ฐฐ


๊น€๋ฏผ์†”

๊น€์˜ˆ์ง„

๋ฐฐํ˜•์ค€

์†ก์žฌํ˜„

์ด์žฌํšจ

์ฐจ์„ฑ์—ฐ
  • ๊น€๋ฏผ์†” : ์ƒ๊ธฐ๋ถ€ ๋ฉด์ ‘ ์งˆ๋ฌธ ๊ธฐ๋Šฅ ๊ตฌํ˜„, ์˜์ƒ ํŽธ์ง‘
  • ๊น€์˜ˆ์ง„ : ์„œ๋ฅ˜ ์—…๋กœ๋“œ ๊ธฐ๋Šฅ ๊ตฌํ˜„, ์ž…ํ•™ ์„œ๋ฅ˜ ๊ฒ€ํ†  ๊ธฐ๋Šฅ ๊ตฌํ˜„, PPT ์ œ์ž‘
  • ๋ฐฐํ˜•์ค€ : ์ƒ๊ธฐ๋ถ€ ํ”„๋กฌํ”„ํŒ… ๊ณ ๋„ํ™”, ์˜์ƒ ์ œ์ž‘, ๋ฐœํ‘œ
  • ์†ก์žฌํ˜„ : ๋ฐฑ์—”๋“œ, ๋ฐ์ดํ„ฐ๋ฒ ์ด์Šค
  • ์ด์žฌํšจ : ํ”„๋ก ํŠธ์—”๋“œ, ์ƒ๊ธฐ๋ถ€ ์š”์•ฝ ๊ธฐ๋Šฅ ๊ตฌํ˜„, ์˜์ƒ ์ œ์ž‘
  • ์ฐจ์„ฑ์—ฐ : UI ๋””์ž์ธ, ๋…ผ์ˆ  ๊ธฐ๋Šฅ ๊ตฌํ˜„, ๋žฉ์—…๋ฆฌํฌํŠธ ์ž‘์„ฑ

5. ํƒ€์ž„๋ผ์ธ

result

6. ์‹œ์Šคํ…œ ์•„ํ‚คํ…์ณ

result

7. ๋ฐœํ‘œ์ž๋ฃŒ ๋ฐ ๋žฉ์—…๋ฆฌํฌํŠธ

About

level4-cv-finalproject-hackathon-cv-07-lv3 created by GitHub Classroom

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Contributors 5