ข้อมูลขนาดใหญ่เป็นเรื่องที่ใหม่หรือเป็นวิวัฒนาการของการจัดการข้อมูล? เป็นจริงทั้งสอง เช่นเดียวกับคลื่นอื่น ๆ ในการจัดการข้อมูลข้อมูลขนาดใหญ่ถูกสร้างขึ้นจากวิวัฒนาการของแนวทางการจัดการข้อมูลในช่วงห้าทศวรรษที่ผ่านมา สิ่งที่ใหม่คือครั้งแรกค่าใช้จ่ายในการประมวลผลและการจัดเก็บข้อมูลได้ถึงจุดให้ทิป เหตุใดจึงสำคัญ?
เมื่อไม่กี่ปีก่อนองค์กรต่างๆมักจะประนีประนอมโดยจัดเก็บภาพรวมหรือข้อมูลย่อยที่สำคัญเนื่องจากค่าใช้จ่ายในการจัดเก็บและข้อ จำกัด ในการประมวลผลทำให้พวกเขาไม่สามารถจัดเก็บข้อมูลทุกอย่างที่ต้องการได้
ในหลาย ๆ กรณีการประนีประนอมนี้ทำได้ดี ตัวอย่างเช่น บริษัท ผู้ผลิตอาจรวบรวมข้อมูลเครื่องทุกสองนาทีเพื่อกำหนดสุขภาพของระบบ อย่างไรก็ตามอาจมีสถานการณ์ที่สแน็ปช็อตไม่มีข้อมูลเกี่ยวกับข้อบกพร่องชนิดใหม่และอาจไม่สังเกตเห็นเป็นเวลาหลายเดือน
ด้วยข้อมูลขนาดใหญ่ขณะนี้คุณสามารถจำลองข้อมูลเพื่อให้สามารถจัดเก็บข้อมูลได้อย่างมีประสิทธิภาพและใช้พื้นที่จัดเก็บข้อมูลบนระบบคลาวด์และประหยัดค่าใช้จ่ายมากขึ้นด้วย นอกจากนี้การปรับปรุงความเร็วและความเชื่อถือได้ของเครือข่ายได้ขจัดข้อ จำกัด ทางกายภาพอื่น ๆ ของความสามารถในการจัดการข้อมูลจำนวนมหาศาลในก้าวที่ยอมรับได้
เพิ่มผลกระทบจากการเปลี่ยนแปลงของราคาและความซับซ้อนของหน่วยความจำคอมพิวเตอร์ ด้วยการเปลี่ยนเทคโนโลยีทั้งหมดนี้เราสามารถจินตนาการวิธีที่ บริษัท ต่างๆสามารถใช้ประโยชน์ข้อมูลที่ไม่น่าเชื่อเพียงห้าปีที่ผ่านมา
แต่การเปลี่ยนเทคโนโลยีไม่เกิดขึ้นในการแยก; มันเกิดขึ้นเมื่อความต้องการที่สำคัญอยู่ที่สามารถพบได้ตามความพร้อมและการเจริญเติบโตของเทคโนโลยี เทคโนโลยีจำนวนมากที่เป็นหัวใจสำคัญของข้อมูลขนาดใหญ่เช่นการประมวลผลแบบขนานการประมวลผลแบบขนานระบบไฟล์แบบกระจายและฐานข้อมูลในหน่วยความจำมีมานานหลายทศวรรษแล้ว
การวิเคราะห์ขั้นสูงยังมีมานานหลายทศวรรษมาแล้วแม้ว่าจะยังไม่เป็นที่ปฏิบัติก็ตาม เทคโนโลยีอื่น ๆ เช่น Hadoop และ MapReduce เกิดขึ้นเพียงไม่กี่ปีเท่านั้น การรวมกันของความก้าวหน้าด้านเทคโนโลยีนี้สามารถแก้ปัญหาทางธุรกิจที่สำคัญได้ ธุรกิจต้องการได้ข้อมูลเชิงลึกและผลลัพธ์ที่สามารถดำเนินการได้จากข้อมูลประเภทต่างๆด้วยความเร็วที่เหมาะสม
หาก บริษัท สามารถวิเคราะห์ข้อมูล petabytes (เทียบเท่า 20 ล้านตู้สี่ลิ้นชักที่เต็มไปด้วยไฟล์ข้อความหรือ 13. เนื้อหา HDTV 3 ปี) ด้วยประสิทธิภาพที่ยอมรับได้เพื่อแยกแยะรูปแบบและความผิดปกติทำให้ธุรกิจสามารถเริ่มต้นทำความเข้าใจกับข้อมูลได้ ในรูปแบบใหม่ ๆการย้ายไปยังข้อมูลขนาดใหญ่ไม่ใช่เรื่องเกี่ยวกับธุรกิจเท่านั้น
กิจกรรมด้านวิทยาศาสตร์การวิจัยและกิจกรรมของรัฐบาลช่วยผลักดันให้เกิดขึ้นต่อไป เพียงแค่คิดเกี่ยวกับการวิเคราะห์จีโนมของมนุษย์หรือจัดการกับข้อมูลทางดาราศาสตร์ทั้งหมดที่เก็บรวบรวมไว้ในหอสังเกตการณ์เพื่อพัฒนาความเข้าใจของเราเกี่ยวกับโลกรอบตัวเรา พิจารณาปริมาณข้อมูลที่รัฐบาลเก็บรวบรวมไว้ในกิจกรรมการต่อต้านการก่อการร้ายด้วยและคุณจะได้รับทราบว่าข้อมูลขนาดใหญ่ไม่ได้เกี่ยวกับธุรกิจเท่านั้น
มีวิธีการจัดการข้อมูลที่ต่างกัน ข้อมูลที่เคลื่อนไหวจะถูกใช้หาก บริษัท สามารถวิเคราะห์คุณภาพของผลิตภัณฑ์ในระหว่างขั้นตอนการผลิตเพื่อหลีกเลี่ยงข้อผิดพลาดที่มีค่าใช้จ่าย ข้อมูลที่เหลือจะถูกใช้โดยนักวิเคราะห์ธุรกิจเพื่อให้เข้าใจถึงรูปแบบการซื้อของลูกค้าในปัจจุบันได้ดีขึ้นโดยคำนึงถึงทุกด้านของความสัมพันธ์กับลูกค้ารวมทั้งการขายข้อมูลโซเชียลมีเดียและการติดต่อลูกค้าสัมพันธ์
โปรดจำไว้ว่าธุรกิจยังอยู่ในช่วงเริ่มต้นของการใช้ประโยชน์จากข้อมูลจำนวนมากเพื่อให้ได้มุมมองแบบ 360 องศาของธุรกิจและคาดว่าจะมีการเปลี่ยนแปลงและการเปลี่ยนแปลงในความคาดหวังของลูกค้า เทคโนโลยีที่จำเป็นในการตอบสนองความต้องการทางธุรกิจจะยังคงถูกแยกออกจากกัน
ข้อมูลขนาดใหญ่ไม่ใช่แค่เครื่องมือหรือเทคโนโลยีเท่านั้น เกี่ยวกับเทคโนโลยีทั้งหมดเหล่านี้มารวมกันเพื่อให้ข้อมูลเชิงลึกที่ถูกต้องในเวลาที่เหมาะสมโดยพิจารณาจากข้อมูลที่ถูกต้องไม่ว่าจะเป็นข้อมูลจากผู้คนเครื่องหรือเว็บ