เหตุใดการแมปการขึ้นต่อกันของข้อมูลจึงมีความสำคัญและวิธีดำเนินการให้เสร็จสิ้น

หมายเหตุบรรณาธิการ: บทความนี้เผยแพร่ครั้งแรกในบล็อก Iteratively เมื่อวันที่ 8 กุมภาพันธ์ 2021

เมื่อถึงจุดหนึ่ง คุณจะได้ทำงานกับกลุ่มเทคโนโลยีที่ยุ่งเหยิงและไม่เป็นระเบียบ บางทีองค์กรของคุณอาจเริ่มใช้ผลิตภัณฑ์ใหม่ก่อนที่จะพิจารณาว่าพวกเขามีปฏิสัมพันธ์กับผู้อื่นอย่างไร หรือคุณได้รับรหัสของคนอื่น การพึ่งพาข้อมูลการทำแผนที่จะแสดงให้คุณและทีมของคุณเห็นว่าข้อมูลไหลและโต้ตอบกับระบบในสแตกของคุณอย่างไร

บริษัทต่างๆ สูญเสียเงินจากการเพิ่มจำนวนของข้อมูล และมีความเสี่ยงต่อช่องโหว่ด้านความปลอดภัยและกฎระเบียบที่มีค่าใช้จ่ายสูง

การมีแผนผังการพึ่งพาข้อมูลจะไม่เพียงช่วยให้คุณเข้าใจกองเทคโนโลยีของคุณดีขึ้นเท่านั้น แต่ยังช่วยให้คุณตัดสินใจได้อย่างมีข้อมูลมากขึ้นในอนาคต

ต่อไปนี้คือสิ่งที่คุณทำได้เพื่อช่วยทำความสะอาด

ประโยชน์ของการทำแผนที่การพึ่งพา

ในตอนแรก อาจดูเหมือนเป็นงานเพิ่มเติมมากมายในการตั้งค่า—และอาจเป็นได้—แต่มีเหตุผลที่ชัดเจนว่าทำไมคุณควรสร้างแผนผังการขึ้นต่อกันของข้อมูล

แผนที่การพึ่งพาข้อมูลนำเสนอมุมมองแบบองค์รวมของข้อมูลของคุณ ทำให้ทีมข้อมูลสามารถออกแบบแผนการติดตามที่ดีขึ้น พวกเขายังสามารถมั่นใจได้ว่าระบบจะไม่ทำลายระบบการติดตามใด ๆ เมื่อมีการอัปเดตหรือลบรหัสการวิเคราะห์ นี่เป็นสิ่งสำคัญอย่างยิ่งเมื่อคุณเปลี่ยนโค้ดที่ต้นทางและผลที่ตามมาในระบบดาวน์สตรีม การติดตามผลที่ตามมาของการเปลี่ยนแปลงที่อาจเกิดขึ้นกับระบบที่ขึ้นอยู่กับระบบจะช่วยให้คุณและทีมประหยัดเวลา เนื่องจากคุณสามารถดูได้ว่าระบบที่ขึ้นอยู่กับระบบใดอาจเสียหายเนื่องจากการเปลี่ยนแปลง

ฟังดูดีใช่มั้ย มีประโยชน์มากมายที่มาจากการทำแผนที่การพึ่งพาข้อมูล

เข้าใจสภาพแวดล้อมของเทคโนโลยีได้ดีขึ้น

แผนที่ที่ออกแบบมาอย่างดีทำให้ทุกคนสามารถเห็นได้อย่างง่ายดายว่าระบบโต้ตอบกันอย่างไร ช่วยให้คุณติดตามว่าระบบใดโต้ตอบกับข้อมูลและที่ใดที่ข้อมูลไปทีละขั้นตอน

ซึ่งจะช่วยในการวางแผนผลิตภัณฑ์หรือส่วนประกอบในอนาคตด้วย เนื่องจากคุณสามารถดูได้ว่าส่วนใดที่สามารถช่วยในการรวมข้อมูลหรือการย้ายข้อมูลได้

ปรับปรุงความแม่นยำ

การแมปการพึ่งพาข้อมูลของคุณจะช่วยให้คุณรักษาความถูกต้องของข้อมูลเมื่อข้อมูลนั้นย้ายจากต้นทางไปยังปลายทาง และนั่นจะช่วยสร้างความมั่นใจในคุณภาพของศูนย์ข้อมูลของคุณได้ในระยะยาว

ด้วยการให้ทีมของคุณมีมุมมองที่สมบูรณ์เกี่ยวกับโครงสร้างพื้นฐานและการพึ่งพาของคุณ คุณสามารถติดตามว่าแต่ละองค์ประกอบทำงานร่วมกับองค์ประกอบอื่นๆ ได้อย่างไร

คุณยังสามารถใช้แผนที่การพึ่งพาข้อมูลเพื่อระบุสาเหตุของการหยุดชะงักของแอปพลิเคชัน หากคุณมีปัญหากับแอปพลิเคชัน คุณสามารถเริ่มต้นจากจุดที่แอปพลิเคชันเริ่มต้นและย้อนกลับไปในแผนที่เพื่อดูว่ามีสาเหตุที่แท้จริงหรือไม่ อยู่ในโครงสร้างพื้นฐานหรือไม่? ใบสมัคร? ภัยคุกคามจากภายนอก?

ระบุความเสี่ยงได้ง่ายขึ้น

การแมปการขึ้นต่อกันของข้อมูลช่วยให้ผู้ใช้มองเห็นกลุ่มเทคโนโลยีของคุณได้อย่างชัดเจน ซึ่งสามารถช่วยระบุจุดที่เกิดความล้มเหลวได้ซึ่งทำให้ธุรกิจของคุณตกอยู่ในความเสี่ยง หากทำอย่างถูกต้อง การแมปข้อมูลสามารถเป็นเครื่องมือที่มีประสิทธิภาพสำหรับองค์กรของคุณ เนื่องจากโดยทั่วไปแล้วจะช่วยบริษัทในด้านต่างๆ ต่อไปนี้:

• คุณภาพของข้อมูล: เมื่อปริมาณแหล่งข้อมูลเพิ่มขึ้น การแมปข้อมูลจึงซับซ้อนกว่าที่เคย การแมปการขึ้นต่อกันของข้อมูลจะปิดช่องว่างระหว่างโมเดลข้อมูล ทำให้มั่นใจว่าผู้มีอำนาจตัดสินใจสามารถวิเคราะห์ได้เมื่อข้อมูลถูกย้ายไปยังกองซ้อนของคุณ ‍
• การโจมตีทางไซเบอร์และการละเมิดข้อมูล: ในขณะที่บริษัทต่าง ๆ ขับเคลื่อนข้อมูลเชิงลึกจากข้อมูล การปกป้องข้อมูลของผู้ใช้จึงกลายเป็นสิ่งจำเป็น แผนที่ข้อมูลสามารถช่วยให้องค์กรระบุได้ว่าชุดข้อมูลหลักถูกจัดเก็บ ประมวลผล และถ่ายโอนที่ใด เมื่อองค์กรต่างๆ เข้าใจแล้ว พวกเขาสามารถดำเนินการตามขั้นตอนที่จำเป็นเพื่อปกป้องข้อมูลที่ละเอียดอ่อนไม่ให้ตกไปอยู่ในมือของผู้ที่ไม่ถูกต้อง

สิ่งที่ต้องพิจารณาก่อนการทำแผนที่การพึ่งพา

แน่นอน คุณสามารถสร้างแผนที่ทางกายภาพด้วยกระดาษโน้ตได้ แต่มีเครื่องมือดิจิทัลมากมายที่สามารถช่วยคุณและทีมสร้างเวอร์ชันดิจิทัลได้ แต่ก่อนที่จะเริ่มต้นกับการแมปข้อมูล มีสองสิ่งที่คุณควรพิจารณา:

ขั้นแรก กำหนดทิศทางของการพึ่งพา

เมื่อเริ่มต้นด้วยการแมปการพึ่งพา สิ่งสำคัญคือต้องรู้ว่าสิ่งต่างๆ จะล้มเหลวอย่างไร เมื่อพิจารณาว่าสิ่งใดจะล้มเหลว แสดงว่าคุณระบุช่องโหว่ภายในสแต็กของคุณ เมื่อคุณสามารถระบุความล้มเหลวภายในองค์กรของคุณได้เร็วขึ้น คุณจะพบวิธีที่เร็วที่สุดในการแก้ปัญหาที่มีอยู่ สิ่งนี้จะไม่เพียงช่วยประหยัดเวลาของพนักงานของคุณ แต่ยังประหยัดเงินขององค์กรของคุณในระยะยาวอีกด้วย

ง่าย ๆ เข้าไว้

แม้ว่าการแมปข้อมูลควรครอบคลุมสำหรับแหล่งข้อมูลจำนวนมาก แต่ก็ไม่ควรซับซ้อนในการทำความเข้าใจ แมปข้อมูลควรมีข้อมูลที่เกี่ยวข้องกับองค์กรของคุณและอัปเดตเป็นประจำ แต่ไม่จำเป็นต้องลงน้ำเมื่อแมปการขึ้นต่อกันของคุณ แผนที่ข้อมูลที่ซับซ้อนอาจส่งผลร้ายมากกว่าเป็นประโยชน์สำหรับองค์กรของคุณ

แผนที่ข้อมูลควรเรียบง่ายเพียงพอสำหรับคนธรรมดาที่จะเข้าใจ ดังนั้นครั้งต่อไปที่มีปัญหาภายในสแตกของคุณ เพื่อนร่วมงานสามารถค้นหาต้นตอของปัญหาได้อย่างง่ายดายและแก้ไขได้ในระยะเวลาที่เหมาะสม

เทคนิคการแมปการพึ่งพาข้อมูลที่ใช้บ่อยที่สุดสามแบบ

แม้ว่าการแมปข้อมูลจะแตกต่างกันไปตามความซับซ้อนของชุดเทคโนโลยีขององค์กรของคุณ แต่เทคนิคการแมปการพึ่งพาข้อมูลทั้งสามนี้เป็นวิธีที่ใช้กันมากที่สุดในบริษัทต่างๆ

1. การทำแผนที่ด้วยตนเอง

ระบบข้อมูลส่วนใหญ่เติบโตมาถึงจุดที่ซับซ้อนเกินกว่าจะติดตามด้วยตนเอง อย่างไรก็ตาม การแม็ปด้วยตนเองเป็นจุดเริ่มต้นที่ดีหากระบบข้อมูลของคุณมีขนาดเล็ก และคุณไม่ได้คาดหวังว่าระบบของคุณจะเติบโต

ด้วยการแมปด้วยตนเอง นักพัฒนาจะใช้ภาษาต่างๆ เช่น SQL, C++, XSLT และ Java แม้ว่าโซลูชันนี้ต้องการการทำงานล่วงหน้ามาก แต่ก็สามารถทำได้ แต่จะไม่มีประสิทธิภาพเท่าสคีมาหรือการแมปอัตโนมัติ

2. การทำแผนที่สคีมา

ซอฟต์แวร์แผนที่สคีมาเปรียบเทียบแหล่งข้อมูลกับสคีมาเป้าหมาย สร้างการเชื่อมต่อ หลังจากดำเนินการเสร็จสิ้น นักพัฒนาจะต้องเข้าไปในซอฟต์แวร์ด้วยตนเองและตรวจสอบว่าข้อมูลถูกต้องและทำการเปลี่ยนแปลงตามที่จำเป็น

เมื่อแมปข้อมูลเสร็จสมบูรณ์ ซอฟต์แวร์จะสร้างโค้ดเพื่อโหลดข้อมูล สิ่งนี้มักถูกเรียกว่าเป็นกลยุทธ์กึ่งอัตโนมัติ เนื่องจากต้องอาศัยทีมในการตรวจสอบงานที่ทำโดยซอฟต์แวร์อีกครั้งก่อนที่จะดำเนินการต่อ

3. การทำแผนที่อัตโนมัติ

โซลูชันอัตโนมัติได้รับความนิยมมากขึ้นเนื่องจากไม่จำเป็นต้องมีประสบการณ์ในการเขียนโค้ด ผู้ใช้ซอฟต์แวร์เหล่านี้ลากและวางบรรทัดระหว่างฐานข้อมูล ทำให้ง่ายต่อการกำหนดความสัมพันธ์ในระยะเวลาที่เหมาะสม แม้ว่าโซลูชันเหล่านี้จะทำหน้าที่ส่วนใหญ่ในการยกของหนัก แต่ผู้ใช้ก็ยังควรตรวจสอบข้อผิดพลาดของมนุษย์

เครื่องมือสำหรับการแมปการขึ้นต่อกันของข้อมูล

โชคดีที่มีเครื่องมือมากมายที่สามารถช่วยคุณเมื่อทำแผนที่การพึ่งพาข้อมูลของคุณ นี่คือบางส่วนที่เราแนะนำ:

• Datafold: บริษัทสายข้อมูลนี้ช่วยให้ธุรกิจเห็นภาพระบบนิเวศข้อมูลของตน ทำให้บริษัทมั่นใจได้ว่าการเปลี่ยนแปลงสคีมาของตารางหนึ่งจะไม่ส่งผลกระทบต่อฟังก์ชันการทำงานในที่อื่น แม้ว่าบริษัทจะนำเสนอเวอร์ชันฟรีสำหรับธุรกิจ แต่โซลูชันแบบชำระเงินก็มอบสิทธิประโยชน์ต่างๆ มากมาย รวมถึงการผสานรวมกับ Slack และการสนับสนุนการแชทสดในผลิตภัณฑ์
• มอนติคาร์โล: โซลูชันสายข้อมูลอัตโนมัติที่ครอบคลุมกองข้อมูลทั้งหมดของคุณ มอนติคาร์โลจะแจ้งเตือนองค์กรของคุณเมื่อข้อมูลขาด ซึ่งหมายความว่าคุณสามารถแก้ไขปัญหาได้ก่อนที่จะถึงผู้ใช้ปลายทาง เป็นโซลูชันอัตโนมัติเต็มรูปแบบที่ครอบคลุมกองข้อมูลทั้งหมดของคุณ Monte Carlo เป็นโซลูชันแบบชำระเงินที่ช่วยให้ธุรกิจเริ่มต้นด้วยการทดลองใช้ฟรี
• Datadog : เครื่องมือ APM ของ Datadog ช่วยให้องค์กรเข้าใจการขึ้นต่อกันของบริการ ในขณะที่ตรวจสอบแบบเรียลไทม์ และแจ้งเตือนผู้ใช้เมื่อระบบหยุดทำงาน บริษัทให้ทดลองใช้งานฟรีสูงสุด 14 วัน
• Prometheus: โซลูชันโอเพ่นซอร์สนี้ช่วยให้คุณตรวจสอบประสิทธิภาพของแอปพลิเคชันได้ โซลูชันนี้เป็นที่รู้จักในด้านความน่าเชื่อถือและเวลาทำงานสูง Prometheus จะแจ้งเตือนคุณเมื่อมีการเปลี่ยนแปลงพฤติกรรมที่สำคัญในแอปพลิเคชันของคุณ ดังนั้นคุณจึงสามารถตรวจสอบสาเหตุได้ทันที

เหตุใดการแมปการขึ้นต่อกันของข้อมูลจึงเหมาะสำหรับคุณ

บริษัทใดก็ตามที่ขับเคลื่อนด้วยข้อมูลอย่างแท้จริงควรทำแผนที่การพึ่งพาข้อมูลของตน ข้อมูลที่มีการแมปไม่ดีหรือไม่ได้แมปเลยจะนำไปสู่ปัญหาที่ปลายน้ำ เนื่องจากข้อมูลเดินทางจากจุดหนึ่งไปยังอีกจุดหนึ่งภายในองค์กรของคุณ การแมปการพึ่งพาข้อมูลของคุณเป็นงานที่น่ากลัวสำหรับธุรกิจ โดยเฉพาะอย่างยิ่งเมื่อคุณอาศัยข้อมูลในการตัดสินใจทางธุรกิจอย่างรอบรู้

คิดว่าการแมปการพึ่งพาข้อมูลของคุณเป็นงานที่คุณจะขอบคุณในอนาคต เราไม่ได้สมบูรณ์แบบ—ข้อมูลจะต้องถูกทำลายเมื่อถึงจุดหนึ่ง โดยไม่คำนึงว่าโซลูชันปัจจุบันของเราไร้ที่ติเพียงใด และคุณรู้อะไรไหม ไม่เป็นไร กระบวนการแมปการขึ้นต่อกันของข้อมูลจะช่วยให้มั่นใจได้ว่าเมื่อข้อมูลเสียหาย จะไม่นำไปสู่ปัญหาที่ใหญ่กว่าในภายหลัง ใช้เวลาในการแมปการพึ่งพาข้อมูลของคุณ มันจะช่วยให้คุณประหยัดเวลาได้มากในการค้นหาว่าระบบอื่น ๆ ได้รับผลกระทบจากความล้มเหลวอย่างไร เมื่อทำอย่างถูกต้อง การแมปข้อมูลจะช่วยให้แน่ใจว่าข้อมูลขององค์กรของคุณไม่เพียงถูกต้องแต่ยังเชื่อถือได้อีกด้วย

องค์กรของคุณเริ่มจับคู่การพึ่งพาข้อมูลของคุณแล้วหรือยัง คุณมีบทเรียนใด ๆ ที่คุณต้องการแบ่งปันหรือไม่? เข้าร่วมชุมชนแอมพลิจูด