์๊ฐ ๋ฐ์ด์ฝ ์ฒ์ฒด ์ ํ ๋ถ๋ฅ ๋ํ - DACON
๋ถ์์๊ฐํ ๋ํ ์ฝ๋ ๊ณต์ ๊ฒ์๋ฌผ์ ๋ด์ฉ ํ์ธ ํ ์ข์์(ํฌํ) ๊ฐ๋ฅํฉ๋๋ค.
dacon.io
๋ฐ์ด์ฝ์์ 2020๋ ์ ์ด๋ ธ๋ ์๊ฐ ๋ฐ์ด์ฝ ๋ํ ์ค ํ๋
์ฒ์ฒด ์ ํ ๋ถ๋ฅ ๋ํ๋ฅผ ํตํด ๋ถ๋ฅ๋ชจ๋ธ์ ํ์ตํ๋ ์๊ฐ์ ๊ฐ์ง ์์ ์ด๋ค.
์ผ๋จ ์ฃผ์ด์ง training dataset์ ๋ฐํ์ผ๋ก ์ฐ๋ฆฌ๊ฐ ์์์ผ ํ ๋๋ฉ์ธ ์ง์๋ค์ ์์๋ณด์๋ค.
1. id, type, fiberID
id
๊ทธ๋ฅ ๋ฐ์ดํฐ ํ๋ํ๋์ ๋ถ์ฌ์ค ๊ฒ์ด๋ผ ๊ตฌ์ฒด์ ์ผ๋ก ๋ณผ ํ์๊ฐ ์๋ ๊ฒ ๊ฐ๋ค.
type
type์ ์์ธํ ์ดํด๋ณผ ํ์๊ฐ ์๋ค.
GALAXY : ์ฃผ ํ๋ณธ ์ํ
QSO : ํ์ด์ฌ
REDDEN_STD
ROSAT_D : X์ ํ์ฅ๋์์ ๊ด์ธกํ ์ฒ์ฒด์ด๋ SDSS ๋ง์๊ฒฝ์์๋ ๊ด์ธก๋๋ ์ฒ์ฒด
SERENDIPITY_BLUE : ํญ์ฑ๊ตฌ์ญ ์ธ๋ถ์ ๋์ธ ์ฒ์ฒด
SERENDIPITY_DISTANT : ํญ์ฑ๊ตฌ์ญ ์ธ๋ถ์ ๋์ธ ์ฒ์ฒด
SERENDIPITY_FIRST : ์ฒซ๋ฒ์งธ ๊ด์ธก์์๋ ํ์ด์ฌ๋ก ๋ถ๋ฅ๋์์ผ๋ ์ด์ด์ง ๊ด์ธก์์ ๋ ํ๋ฆฟํ ์ฒ์ฒด
SERENDIPITY_MANUAL : ์๋์ผ๋ก ๊ด์ธก๋ ์ฒ์ฒด
SERENDIPITY_RED : ํญ์ฑ๊ตฌ์ญ ์ธ๋ถ์ ๋์ธ ์ฒ
SKY : ๋น ํ๋
SPECTROPHOTO_STD
STAR_BHB : ์ํ๊ฑฐ์ด์ฑ
STAR_BROWN_DWARF : ๊ฐ์ ์์ฑ
STAR_CARBON : ํ์๋ก ์ด๋ฃจ์ด์ง ์์ฑ
STAR_CATY_VAR : ๊ฒฉ๋ณ๋ณ๊ด์ฑ
STAR_PN : ํ์ฑ์ ์ฑ์ด์ ์ค์ฌ
STAR_RED_DWARF : ์ ์์์ฑ
STAR_SUB_DWARF : ์ ๊ด๋ ์ค์์ฑ
STAR_WHITE_DWARF : ๋ฐฑ์์์ฑ
์ด 19๊ฐ์ type์ด ์กด์ฌํ๋ฉฐ, ๊ฐ๊ฐ์ type๋ค์ด ๋ฌด์์ธ์ง ์ฐพ์๋ณด์๋ค.
๋ฐ์ด์ฝ ํ ํฌํญ์์ ์ฐพ์๋ธ ์ ๋ณด๋ค๊ณผ, ์ง์ ๋ฒ์ญ๊ธฐ๋ฅผ ๋๋ ค ์์๋ธ ์ ๋ณด๋ค์ด ์กด์ฌํ๋๋ฐ,
spectrophoto_std์ redden_std๋ ๋ฌด์์ธ์ง ์์๋ด์ง ๋ชปํ๋ค.
spectrophoto_std์ ๊ฒฝ์ฐ ๊ทธ๋ฅ ๋จ์ด๋ฅผ ๋ดค์ ๋ ์ถ์ธกํ๊ฑด ์คํํธ๋ผ์ด๋ฏธ์ง์ ํ๊ท ์น๋ฅผ ๋ณด์ด๋ ๋ณ์ธ๊ฐ?
redden_std์ ๊ฒฝ์ฐ ๋ถ์ด์ง ๋ณ...?
๋ชจ๋ฅด๊ฒ ๋ค
๋๋์ฒด ๋ญ๊น?
๋ณ๋ค์ ์ด๋ฆ๋ ์ด๋ ค์ด๊ฒ ๋๋ฌด ๋ง๋ค.
๊ณ ๋ฑํ๊ต๋ ๋ฐฐ์ด ๋ณ๋ค๋ง ์กด์ฌํ์ง ์๋ค๋.
fiberID
์ฒ์ฒด๋ฅผ ๊ด์ธกํ ๋ ์ฌ์ฉ๋ ๊ด์ฌ์ ์ ์๋ณ๋ฒํธ๋ผ๊ณ ๋ฐ์ด์ฝ์์ ์ ๊ณตํด์ฃผ๊ณ ์๋ค.
์ด๋ ๊ด์ฌ์ ๊ฐ ์ ๋์ค๋ ๊ฒ์ธ์ง ๊ถ๊ธํด์ ์ฐพ์๋ณด๋,
์ฒ์ฒด๋ง์๊ฒฝ์ด ๋ชจ์ ๋ณ๋น์ ๊ด์ฌ์ ๋ฅผ ์ด์ฉํด ํ์ฅ๋ณ๋ก ๋ถ์ฐ์ํค๊ธฐ ๋๋ฌธ์ด๋ผ๊ณ ํ๋ค.
์ด ๊ณผ์ ์ ํตํด ๋ณ๋ค์ ์ธ๋ฐํ ์์ง์ ๋ฑ์ ํ์ ํ๋ค๊ณ ํ๋ค.
2. psfMag_u, psfMag_g, psfMag_r, psfMag_i, psfMag_z
์ฌ๊ธฐ์ psf๋?
Point Spread Function
์ ํ์ฐ ํจ์๋ผ๊ณ ํ๋ค.
์ ํ์ฐํจ์(psf)๋ ๊ณต๊ฐ์์ญ์์ ๊ดํ ์์คํ ์ด ๊ด์ ์ ํ๋ฆฟํ๊ฒ ๋ง๋๋ ์ ๋๋ฅผ ํ์ธํ ์ ์๋๋ก ํด์ฃผ๋ ํจ์๋ผ๊ณ ํ๋ค.
๊ณต๊ฐ์์ญ์ ์์์ ํ์๊ฐ์ด XY ์ง๊ต ์ขํ์์ ํํ๋๋ ์์ญ์ด๋ฉฐ,
๊ดํ์์คํ ์ ๋น์ ๋ชจ์ผ๊ณ ๋ถ์ฐ์ํค๋ ์์คํ ์ ๋งํ๊ณ ,
๊ด์ ์ด๋ ํฌ๊ธฐ์ ํํ ์์ด ํ๋์ ์ ์ผ๋ก ๋ณด์ด๋ ๊ด์์ ๋งํ๋ค
๊ทธ๋ ๋ค๋ฉด psfMag๋?
์ธก์ ํ flux(๊ด์ ์)๋ฅผ psf์ ๋ฃ์ด์ ๋์จ ๊ฒฐ๊ณผ๊ฐ์ ๋งํ๋ ๋ฏ ํ๋ค
๊ทธ๋ฆฌ๊ณ ๊ฐ column ๋ช ์๋ u, g, r, i, z๋ผ๋ ์ํ๋ฒณ์ด ์กด์ฌํ๋๋ฐ
์ด ์ํ๋ฒณ๋ค์ ๊ฐ๊ฐ ๋ค์๊ณผ ๊ฐ์ ์๋ฏธ๋ฅผ ๊ฐ์ง๋ค
u : Ultraviolet, ์์ธ์
g : Green, ๊ฐ์๊ด์ ์ค ์ด๋ก์์ ํ์ฅ
r : Red, ๊ฐ์๊ด์ ์ค ๋นจ๊ฐ์์ ํ์ฅ
i : Near Infrared, ์ ์ธ์ ์ค ๋นจ๊ฐ์์ ๊ฐ๊น์ด ์ ์ธ์
z : Infrared, ์ ์ธ์
์ด ๋ค์ ์ธ์ธํธ์ column๋ค๋ ํ์ฅ์ ๋ํ ์ ๋ณด๊ฐ ํฌํจ๋์ด์๋ค.
์ด ๋ค์ฏ๊ฐ์ column๋ค์ ๊ฒฐ๊ตญ ๋ณ์ ๊ด๋๋ฅผ ๋ํ๋ด๊ณ ์์ผ๋ฉฐ,
๊ด๋๋ ์๊ฐ ์์ ์๋ก ๋ฐ์ ๊ฒ์ ์๋ฏธํ๋ค.
์์๋ผ๋ฉด ์ ๋ง ๋ฐ์ ๋ณ์ธ ๊ฒ์ด๋ค.
3. fiberMag_u, fiberMag_g, fiberMag_r, fiberMag_i, fiberMag_z
fiber?
์์์ fiberID์์ ๋ณธ ๊ฒ ์ฒ๋ผ ๊ด์ฌ์ ๋ฅผ ์ด์ผ๊ธฐํ๋ค.
๊ทธ๋ ๋ค๋ฉด fiberMag๋ ๋ฌด์์ผ๊น?
๊ด์ฌ์ ๋ก ์ธก์ ํ ๊ด๋๋ฅผ ์๋ฏธํ๋ ๊ฒ์ผ๋ก ์ถ๋ก ํ์๋ค.
์ดํด๊ฐ ์๋๋ ๊ฒ๋ค์ด ๊ฝค ๋ง์์ chat gpt์๊ฒ ๋ฌผ์ด๋ณธ ๊ฒฐ๊ณผ
"fiberMag"๋ ์ฒ์ฒด ๋ง์๊ฒฝ ๋ถ์ผ์์ ์๋ก์ด ์ฒ์ฒด๋ฅผ ๋ฐ๊ฒฌํ๊ฑฐ๋ ๊ด์ธก ๋์ ์ฒ์ฒด์ ๋ฐ๊ธฐ๋ฅผ ์ธก์ ํ๋ ๋ฐ ์ฌ์ฉ๋๊ธฐ๋ ํฉ๋๋ค. ์ด ๊ฒฝ์ฐ "fiberMag"๋ ๊ดํ ๋ง์๊ฒฝ์์ ๊ด์ธก ๋์ ์ฒ์ฒด๋ฅผ ์์งํ๋ ๊ด์ฌ์ ์ ์ง๋ฆ์ ์๋ฏธํฉ๋๋ค.
์ด๋ ๊ฒ ์ด์ผ๊ธฐ๋ฅผ ํด์ฃผ์๋ค.
๊ด์ฌ์ ์ ์ง๋ฆ์ผ๊น? ๊ด๋์ผ๊น? ๋ฐ์ดํฐ๋ฅผ ์ข ๋ ์์ธํ ๋ฏ์ด๋ณด๊ณ ๋น๊ตํ๋ ๊ณผ์ ์ด ํ์ํ ๋ฏ ํ๋ค.
4. petroMag_u, petroMag_g, petroMag_r, petroMag_i, petroMag_z
petroMag๋ petrosian Magnitude์ ์ฝ์์ด๋ค.
๊ทธ๋ ๋ค๋ฉด petrosian์ ๋ฌด์์ธ๊ฐ?
sdss4์์ ์ฌ๋ ค์ค ์ค๋ช ์ ํ ๋๋ก ๋ด๊ฐ ํด์ํ ๊ฒ์ ์ด์ผ๊ธฐํ์๋ฉด
์ํ์ flux(๊ด์ ์)๋ฅผ ์ธก์ ํ ๋ bias๋ฅผ ํผํ๊ธฐ ์ํด์ ๋ฌผ์ฒด์ ์์น์ ๊ฑฐ๋ฆฌ์ ๊ด๊ณ์์ด
์ด ๋น์ ์ผ์ ํ ๋ถ๋ถ์ ์ธก์ ํ๊ณ ์ ํ๋๋ฐ, ์ด ๋ถ๋ถ์ ํด๊ฒฐํ ์ ์๋ ์์คํ ์ด petrosian ์์คํ ์ธ ๋ฏ ํ๋ค.
chat gpt๋ ์ด์ ๋ํด ์๋์ ๊ฐ์ด ์ด์ผ๊ธฐ๋ฅผ ํด์ฃผ์๋ค.
"petroMag"๋ ์ฒ์ฒด์ ๋ฐ๊ธฐ๋ฅผ ๋ํ๋ด๋ ์ฒ๋ ์ค ํ๋์ ๋๋ค. "petroMag"๋ "Petrosian Magnitude"์ ์ฝ์๋ก, Petrosian ๋ฐ์ง๋ฆ์ด๋ผ๋ ๊ฐ๋ ์ ๊ธฐ๋ฐํ์ฌ ์ธก์ ๋ ๋ฑ๊ธ์ ๋๋ค.
Petrosian ๋ฐ์ง๋ฆ์ ์ฒ์ฒด์ ์ค์ฌ์์ ์ธ๋ถ๋ก ์ผ์ ํ ๋น์จ์ ๋น์ ์ ์ฉํ๋ ๋ฐ์ง๋ฆ์ ์๋ฏธํฉ๋๋ค. ์ด ๋ฐฉ๋ฒ์ ์ฒ์ฒด์ ํฌ๊ธฐ์ ๋ชจ์์ ์๊ด์์ด ์ผ๊ด๋ ๋ฐฉ์์ผ๋ก ๋ฐ๊ธฐ๋ฅผ ์ธก์ ํ ์ ์๋๋ก ํด์ฃผ๋ฉฐ, ์ด๋ฌํ ์ด์ ๋ก ๋ณด๋ค ์ ํํ ์ฒ์ฒด ๋ฐ๊ธฐ ์ธก์ ์ ์ํด ์์ฃผ ์ฌ์ฉ๋ฉ๋๋ค.
"petroMag"๋ ๋ณดํต ๊ฒ๋ณด๊ธฐ ๋ฐ๊ธฐ๋ฅผ ์ธก์ ํ ๋ ์ฌ์ฉ๋ฉ๋๋ค. ์ฒ์ฒด์ ์ด๋ฏธ์ง๋ฅผ ์ดฌ์ํ ํ Petrosian ๋ฐ์ง๋ฆ์ ๊ณ์ฐํ๊ณ , ํด๋น ๋ฐ์ง๋ฆ ๋ด์ ๋น์ ์ด์์ ๊ณ์ฐํ์ฌ "petroMag"๋ฅผ ์ฐ์ถํฉ๋๋ค. "petroMag"๋ "magnitude"์ ๋์ผํ ์ฒ๋๋ก ํํ๋ฉ๋๋ค.๋ํ "petroMag"๋ ์ฒ์ฒด์ ํฌ๊ธฐ์ ๋ํ ์ ๋ณด๋ฅผ ์ ๊ณตํฉ๋๋ค. Petrosian ๋ฐ์ง๋ฆ์ ์ฒ์ฒด์ ํฌ๊ธฐ์ ๋ํ ์ธก์ ์น๋ก ์ฌ์ฉ๋ ์ ์์ต๋๋ค.
5. modelMag_u, modelMag_g, modelMag_r, modelMag_i, modelMag_z
modelMag์์ model์ด ๋ฌด์์ธ์ง๋ฅผ ๋จผ์ ์์๋ดค๋ค.
sdss4์์ ์ ๊ณตํ ์๋ฃ๋ฅผ ํ ๋๋ก ํด์ํด๋ณธ ๊ฒฐ๊ณผ
๋ชจ๋ธ์ ๋ชจ๋ band์ flux๋ฅผ ๊ณ์ฐํ๊ธฐ ์ํด r-band์ ๋๊ฐ์ ์ ํฉ์น ์ค ๋ ๋์๊ฒ์ ์กฐ๋ฆฌ๊ฐ๋ก ์ฌ์ฉํ๋ค.
๋ผ๊ณ ํด์์ด ๋๋๋ฐ ์ด๊ฒ ๋ฌด์จ ์๋ฆฌ์ผ๊น?
์ผ๋จ band์ ๊ฒฝ์ฐ์๋ ํ์ฅ์ด๋ ๋ณ์ ๋ฌด๋ฆฌ๋ฅผ ์๋ฏธํ ๊ฒ์ด๋ผ๊ณ ์ถ๋ก ํ๋๋ฐ ์๋ฌด๋๋ ํ์ฅ์ธ ๋ฏ ํ๋ค.
๊ทธ๋ฆฌ๊ณ ์ฒ๋ฌธ๊ณตํ์ ์ธ ์ด์ผ๊ธฐ๊ฐ ๋ง์ด ๋์์ ์ ๋๋ก ์ดํดํ์ง ๋ชปํ์ผ๋ ๋ chat gpt์๊ฒ ๋ฌผ์ด๋ดค๋ค.
"modelMag"๋ ์ฒ์ฒด์ ๋ฐ๊ธฐ๋ฅผ ๋ํ๋ด๋ ์ฒ๋ ์ค ํ๋์ ๋๋ค.
"modelMag"๋ ์ฒ์ฒด์ ์ด๋ฏธ์ง๋ฅผ ์ด๋ค ๋ชจ๋ธ ํจ์๋ก ๋ชจ๋ธ๋งํ ๊ฒฐ๊ณผ๋ฅผ ๊ธฐ๋ฐ์ผ๋ก ์ธก์ ๋ ๋ฑ๊ธ์ ๋๋ค. ๋ณดํต "modelMag"๋ ๊ฒ๋ณด๊ธฐ ๋ฐ๊ธฐ๋ฅผ ์ธก์ ํ๊ธฐ ์ํด ์ฌ์ฉ๋ฉ๋๋ค. "modelMag"๋ ํด๋น ์ฒ์ฒด๊ฐ ๋ชจ๋ธ ํจ์๋ก ๋ชจ๋ธ๋ง๋์ด ์ป์ด์ง ์์ ๋ฑ๊ธ์ ๋๋ค. ์๋ฅผ ๋ค์ด, ์ฒ์ฒด์ ์ด๋ฏธ์ง๋ฅผ ๊ฐ์ฐ์์ ํจ์๋ก ๋ชจ๋ธ๋งํ์ฌ "modelMag"๋ฅผ ๊ณ์ฐํ ์ ์์ต๋๋ค. "modelMag"๋ ๋ค๋ฅธ ์ ํ์ ๋ฑ๊ธ๊ณผ ํจ๊ป ์ฌ์ฉ๋ ๋, ์ฒ์ฒด์ ํํ์ ํฌ๊ธฐ์ ๋ํ ์ ๋ณด๋ฅผ ์ ๊ณตํ๋๋ฐ ๋์์ด ๋ฉ๋๋ค. ์๋ฅผ ๋ค์ด, "aperture magnitude"์ "modelMag"๋ฅผ ํจ๊ป ์ฌ์ฉํ๋ฉด ์ฒ์ฒด์ ์ค์ฌ๊ณผ ํฌ๊ธฐ์ ๋ํ ์ ๋ณด๋ฅผ ์ป์ ์ ์์ต๋๋ค. "modelMag"๋ ๋ค๋ฅธ ์ ํ์ ๋ฐ๊ธฐ ์ฒ๋์ ๋ฌ๋ฆฌ, ์ฒ์ฒด์ ๋ฐ๊ธฐ๋ฅผ ์ถ์ ํ๊ธฐ ์ํด ํด๋น ์ด๋ฏธ์ง์ ๋ํด ๋ชจ๋ธ ํจ์๊ฐ ํ์ํฉ๋๋ค. ๋ฐ๋ผ์ "modelMag"๋ ์ด๋ฏธ์ง์์ ์ป์ ๋ฐ๊ธฐ ์ธก์ ์น์ ๋ฐ๋ผ ๋ฌ๋ผ์ง ์ ์์ต๋๋ค.
๋๋ํ๋ค... chat gpt..
๊ฒฐ๊ณผ์ ์ผ๋ก ์์๋ธ ์ ์ column๋ค์ ๋ชจ๋ ์ฒ์ฒด์ ๊ด๋๋ฅผ ๋ํ๋ด๋ ์ฒ๋์ด๋ฉฐ,
ํ์ฅ๋๋ณ๋ก ๊ด๋๋ฅผ ๋ํ๋ด๊ณ ์๋ค๋ ์ ์ ์ ์ ์์๋ค.
์ฒ์ ๋ฐ์ดํฐ๋ฅผ ๋ดค์ ๋๋ณด๋ค๋ ํจ์ฌ ๋ฐ์ดํฐ๋ฅผ ์ดํดํ๊ธฐ ์ฌ์์ง ๋ฏ ํ๋ค.
<์ฐธ๊ณ ์๋ฃ>
- ๊ด์ฌ์ ๊ฐ ์ ๋์ค๋๊ฐ?
- type์ ๋ํ ์ค๋ช
- ํ์ฅ๋ ์ฐธ๊ณ ์๋ฃ
- psfMag, fiberMag, petroMag, modelMag
- https://www.sdss4.org/dr12/algorithms/magnitudes/#mag_psf
- flux์ ๋ํ ์ค๋ช
- band์ ๋ํ ์ค๋ช
- psf ์ค๋ช
- ๊ด์ ?
- ๊ณต๊ฐ์์ญ?
- chat gpt4์๊ฒ column๋ค์ ๋ํด ์ง๋ฌธ