• Kafka Áß½ÉÀÇ ´ë¿ë·® ½Ç½Ã°£ ½ºÆ®¸®¹Ö µ¥ÀÌÅÍ Ç÷§Æû ¾ÆÅ°ÅØÃ³ ¼³°è ¹× ±¸Ãà/¿î¿µ
• OGG(Oracle GoldenGate), Debezium µî CDC ±â¼úÀ» Ȱ¿ëÇÑ À̱âÁ¾ DB ½Ç½Ã°£ µ¿±âÈ ÆÄÀÌÇÁ¶óÀÎ °³¹ß
• Apache Iceberg ±â¹ÝÀÇ Streaming Data Lakehouse ¼³°è ¹× µ¥ÀÌÅÍ ÀûÀç ÇÁ·Î¼¼½º ±¸Çö
• ´ë±Ô¸ð ¾îÇø®ÄÉÀÌ¼Ç ¹× Çൿ·Î±× ±â¹Ý µ¥ÀÌÅÍÀÇ ½Ç½Ã°£ ¼öÁý/°¡°ø ½Ã½ºÅÛ °³¹ß
• ½ºÆ®¸®¹Ö µ¥ÀÌÅÍÀÇ Á¤ÇÕ¼º °ËÁõ ¹× ÆÄÀÌÇÁ¶óÀÎ Áö¿¬(Latency) ÃÖÀûÈ ¾÷¹«
• µ¥ÀÌÅÍ ºÐ¼® ¹× Ȱ¿ëÀ» À§ÇÑ ½Ç½Ã°£ µ¥ÀÌÅÍ ¸¶Æ®/¸ðµ¨¸µ ¼³°è
• 5³â ÀÌ»óÀÇ µ¥ÀÌÅÍ ¿£Áö´Ï¾î¸µ ½Ç¹« °æÇè
• Kafka »ýŰè(Core, Connect, Streams)¿¡ ´ëÇÑ ±íÀº ÀÌÇØ ¹× ´ë¿ë·® Ŭ·¯½ºÅÍ ¿î¿µ °æÇèÀ» °®Ã߽ŠºÐ
• Debezium, OGG µîÀ» Ȱ¿ëÇÏ¿© µ¥ÀÌÅÍ º¯°æºÐ(CDC)À» ½Ç½Ã°£À¸·Î ó¸®ÇØ º» °æÇèÀÌ ÀÖÀ¸½Å ºÐ
• Apache Iceberg, Hudi, Delta Lake µî Table FormatÀ» Ȱ¿ëÇÑ µ¥ÀÌÅÍ ·¹ÀÌÅ© ±¸Ãà °æÇèÀÌ ÀÖÀ¸½Å ºÐ
• Spark, Flink µîÀ» Ȱ¿ëÇÑ ½Ç½Ã°£ ½ºÆ®¸®¹Ö µ¥ÀÌÅÍ Ã³¸® ¹× ETL ±¸ÇöÀÌ °¡´ÉÇϽŠºÐ
• ´ë¿ë·® ·Î±× µ¥ÀÌÅÍ ¼öÁýºÎÅÍ ÀûÀç±îÁöÀÇ Àüü ÆÄÀÌÇÁ¶óÀÎ ±¸¼ºÀÌ °¡´ÉÇϽŠºÐ
• º¹ÀâÇÑ µ¥ÀÌÅÍ È帧À» ¸íÈ®ÇÏ°Ô ½Ã°¢ÈÇϰí À¯°üºÎ¼¿Í ¿øÈ°È÷ ¼ÒÅëÇÒ ¼ö ÀÖ´Â Ä¿¹Â´ÏÄÉÀÌ¼Ç ´É·ÂÀ» °®Ã߽ŠºÐ
• Apache Flink¸¦ Ȱ¿ëÇÑ Stateful Stream Processing ¹× º¹ÀâÇÑ À©µµ¿ì ¿¬»ê ó¸® °æÇèÀÌ ÀÖÀ¸½Å ºÐ
• Kafka -> Flink -> Iceberg·Î À̾îÁö´Â Streaming Lakehouse ¾ÆÅ°ÅØÃ³ Àüü¸¦ ¼³°èÇØ º» °æÇèÀÌ ÀÖÀ¸½Å ºÐ
• K8s ȯ°æ¿¡¼ µ¥ÀÌÅÍ ÀÎÇÁ¶ó(Kafka, Flink) ¿î¿µ °æÇèÀÌ ÀÖÀ¸½Å ºÐ
• ´ë±Ô¸ð Æ®·¡ÇÈ È¯°æ¿¡¼ µ¥ÀÌÅÍ À¯½Ç ¹æÁö(Exactly-once) ¹× ¼º´É Æ©´× °æÇèÀÌ ÀÖÀ¸½Å ºÐ
• µ¥ÀÌÅÍ °Å¹ö³Í½º ¹× ¸ÞŸµ¥ÀÌÅÍ °ü¸®¿¡ ´ëÇÑ ÀÌÇØµµ°¡ ³ôÀ¸½Å ºÐ
¡Ø ÀüÇü ¾È³»