µ¥ÀÌÅÍ ¿£Áö´Ï¾î
The North Star
¡°Travel Everyday¡±
¸¶À̸®¾óÆ®¸³Àº ´©±¸³ª ¿©ÇàÀÇ Áñ°Å¿òÀ» ´õ ÀÚÁÖ ´À³¥ ¼ö ÀÖ´Â ¼¼»óÀ» ¸¸µé¾î °¡°í ÀÖ½À´Ï´Ù.
¹Ì¼ÇÀ» ÇâÇØ °Åħ¾øÀÌ µµÀüÇÏ´Â ÆÀ°ú ÇÔ²² ¿©ÇàÀÇ »õ·Î¿î Æз¯´ÙÀÓÀ» ¸¸µé¾î º¸¼¼¿ä.
ÇÔ²² ÀÏÇÏ°Ô µÉ ÆÀ¿¡ ´ëÇØ ¾Ë·Áµå·Á¿ä.
µ¥ÀÌÅÍ Ç÷§ÆûÆÀÀº ¸¶À̸®¾óÆ®¸³¿¡¼ ¼ºñ½º µÇ´Â ¸ðµç µ¥ÀÌÅ͸¦ °³¹ß ¹× °ü¸® ÇÏ´Â ÆÀÀÔ´Ï´Ù.
¸¶¸®Æ®ÀÇ ºñÁö´Ï½º¿¡¼ ÇÊ¿ä·Î ÇÏ´Â DBµ¥ÀÌÅÍ, Logµ¥ÀÌÅÍ, ¿ÜºÎ¼öÁýµ¥ÀÌÅ͵îÀ» ÅëÇÕ/°ü¸®ÇÕ´Ï´Ù.
ÀÌ·¸°Ô °³¹ß ¼öÁýµÈ µ¥ÀÌÅÍ´Â °Ë»ö/Ãßõ, ´Ù¾çÇÑ ÀÇ»ç°áÁ¤, Planning, ȸ°è/Á¤»ê, ¾÷¹« ÀÚµ¿È, A/B Test µî ´Ù¾çÇÑ °÷¿¡ »ç¿ëµË´Ï´Ù.
À̸¦ °ü¸®Çϱâ À§ÇÑ ´Ù¾çÇÑ DW ¿î¿µ ±â¼úµéÀ» °æÇèÇØ º¼ ¼ö ÀÖÀ¸¸ç, ´Ù¾çÇÑ ¼Ò½º¸¦ ÅëÇÕ°ü¸®ÇÏ´Â µ¥ÀÌÅÍ ÆÄÀÌÇÁ¶óÀÎ, ´ë¿ë·® µ¥ÀÌÅÍ Ã³¸®¸¦ À§ÇÑ ºòµ¥ÀÌÅÍ ±â¼ú, ½Ç½Ã°£ µ¥ÀÌÅÍ Ã³¸®µîÀÇ ±â¼úÀ» ½ÀµæÇÒ ¼ö ÀÖ½À´Ï´Ù.
¸¶À̸®¾óÆ®¸³ÀÇ Data Engineer´Â ÀÌ·± ÀÏÀ» ÇØ¿ä.
Á¤º¸°è µ¥ÀÌÅÍ ÀúÀå¼Ò ¹× ÆÄÀÌÇÁ¶óÀÎ °³¹ß/¿î¿µ
´Ù¾çÇÑ µ¥ÀÌÅÍÀÇ Batch ¹× streaming ó¸®
DW/Mart ¼³°è ¹× °³¹ß
´ë¿ë·® µ¥ÀÌÅÍ Ã³¸® ¾ÆÅ°ÅØÃÄ °³¹ß ¹× ¿î¿µ
ÀÌ·± ¿ª·®ÀÌ ÀÖ´Â ºÐÀ» ã°í ÀÖ¾î¿ä.
Ŭ¶ó¿ìµå ȯ°æ¿¡¼ÀÇ ´ë±Ô¸ð µ¥ÀÌÅÍ Ã³¸®¸¦ À§ÇÑ µ¥ÀÌÅÍ ÆÄÀÌÇÁ¶óÀÎ ¼³°è ¹× ±¸Çö °æÇè
ÁÖµµÀûÀÎ BI/DW ±¸Ãà °æÇè
Ź¿ùÇÑ ¼öÁØÀÇ SQL
Airflow, luigi °°Àº ETL µµ±¸ÀÇ °æÇè
Java or Python µî ÇϳªÀÇ ¾ð¾î¸¦ ÀÚÀ¯·Ó°Ô ´Ù·ê¼ö ÀÖ´Â ºÐ
½Ç½Ã°£ Streaming µ¥ÀÌÅÍ Ã³¸® °æÇè
¿ì´ë»çÇ×
ºÐ»ê ȯ°æ ´ë¿ë·® µ¥ÀÌÅÍ Ã³¸® ȯ°æ ±¸Ãà °æÇè
LangChain °ü·Ã ¾÷¹«°æÇè
±¤°í µ¥ÀÌÅÍ ÆÄÀÌÇÁ¶óÀÎ ±¸Ãà °æÇè
debezium(CDC) °³¹ß ¹× ¿î¿µ °æÇè