ธุรกิจต่างๆสามารถทำความเข้าใจกับตลาดข้อมูลขนาดใหญ่ได้อย่างไร

ธุรกิจไม่ได้รับคะแนนใด ๆ สำหรับประสิทธิภาพของโครงสร้างพื้นฐานในการทำงานหรือความสามารถในการรวบรวมข้อมูลขนาดใหญ่ทั้งหมดที่รวบรวมได้ สิ่งที่นับได้คือคุณภาพของการวิเคราะห์และความชาญฉลาดที่ข้อมูลสร้างขึ้น

ในช่วงหลายปีที่ผ่านมา Hadoop เป็นคำที่มีความหมายเหมือนกันกับการบริโภคการประมวลผลและการแปลงข้อมูล เฟรมเวิร์กโอเพนซอร์ซนี้สำหรับการจัดเก็บและประมวลผลข้อมูลแบบกระจายทำให้เกิดพื้นที่ขององค์กรและรวมเข้ากับแพลตฟอร์มคลาวด์หลัก ๆ Hadoop อยู่ไกลจากเทคโนโลยี Big Data เพียงอย่างเดียวที่คุ้มค่าที่จะพูดถึง แต่มันก็กลายเป็นสิ่งที่คนอื่น ๆ สร้างขึ้นมา

ปัญหาสำหรับธุรกิจคือพื้นที่ Hadoop เต็มไปด้วยตัวเลือกการกระจายและเครื่องมือและตามที่ Nick Heudecker ผู้อำนวยการฝ่ายวิจัยของการ์ทเนอร์อธิบายว่าหลายคนมีลักษณะเหมือนกัน Heudecker ซึ่งงานวิจัยครอบคลุมการจัดการข้อมูลรวมถึงช่องว่าง Big Data และ NoSQL กล่าวว่าหากคุณดูที่ตัวเลือกการประมวลผลข้อมูลทั่วไปผู้ค้าจำนวนมากมีคุณสมบัติที่คล้ายกันมาก

ทำลายตลาด

มีการเริ่มต้นธุรกิจ Hadoop บริสุทธิ์สามหลักคือ Cloudera, Hortonworks และ MapR- และพวกเขาเติบโตอย่างต่อเนื่องในปี 2558 ตาม Gartner ลูกค้าแต่ละรายมีลูกค้าประมาณ 700 รายให้หรือให้ 10 เปอร์เซ็นต์กำหนดตลาดโลกระหว่าง 2, 100-2, 400 ลูกค้า Hadoop ทั่วโลก ทั้งสามข้อเสนอมีทั้งระดับฟรีและระดับองค์กรของการกระจาย Hadoop ของพวกเขาและแต่ละรายการมีส่วนร่วมโอเพนซอร์ซที่สำคัญสำหรับโครงการภายใต้แบนเนอร์ Apache Software Foundation (ASF)

"ข้อมูลของเราระบุว่า 44% ของการใช้ Hadoop นั้นยังไม่ได้รับค่าตอบแทน" Heudecker กล่าว "มีผู้นำที่ชัดเจนหรือไม่ฉันไม่คิดอย่างนั้นพวกเขาทั้งหมดกำลังคว้าส่วนแบ่งการตลาดเพราะมันเป็นพื้นที่ใหม่มาก"

ในช่วงสองสามเดือนที่ผ่านมาการแข่งขันกันระหว่างคนทั้งสามได้ลงมาแข่งขันกับความสามารถในการวิเคราะห์ข้อมูลและวิธีการที่สร้างสรรค์ในการรวม Apache Spark ซึ่งเป็นเครื่องมือประมวลผลข้อมูลโอเพ่นซอร์สขนาดใหญ่พร้อมกรณีการใช้งานจากสตรีมข้อมูลแบบเรียลไทม์ . MapR เพิ่งเปิดตัว MapR Streams ซึ่งเป็นส่วนหนึ่งของ "แพลตฟอร์มข้อมูลแบบรวม" ซึ่งรวม Hadoop การประมวลผลสตรีมแบบอิง Spark และการวิเคราะห์เข้าด้วยกัน Hortonworks เปิดตัวการอัปเดตไปยังแพลตฟอร์มข้อมูล Hortonworks (HDP) ด้วยการวิเคราะห์ Spark ในหน่วยความจำและ Cloudera นำเสนอการรวม Spark แบบโอเพ่นซอร์สที่หลากหลายผ่าน One Platform Initiative พร้อมกับการฝึกอบรม Spark

“ มีหลายอย่างที่เกิดขึ้นในการจัดการข้อมูลและพื้นที่โครงสร้างพื้นฐานด้านข้อมูลและไม่ใช่ Hadoop ทั้งหมด” Heudecker อธิบาย "มีโมเมนตัมมหาศาลหลังแบบจำลองการประมวลผลข้อมูลความเร็วและหน่วยความจำเป็นศูนย์กลางของ Spark แม้ว่าการพัฒนาของ Spark ยังอยู่ในช่วงเริ่มต้น Spark จะเป็นภาษาอื่นในการประมวลผลข้อมูลเช่น SQL วันนี้และแสดงสัญญาณแน่นอนว่ามีขาบางส่วน ในขณะที่ บริษัท ต่างๆลงทุนมากขึ้นเรื่อย ๆ "

Heudecker ยังเน้นถึงความสำคัญของผู้เล่นคลาวด์ใน Big Data; ยักษ์ใหญ่ด้านเทคโนโลยีที่รวม Hadoop และเทคโนโลยี Big Data อื่น ๆ เข้ากับข้อเสนอ Infrastructure-as-a-Service (IaaS) ที่มีอยู่

Amazon Web Services (AWS) ใช้บริการ Amazon Elastic MapReduce (EMR) สำหรับการประสานงาน Hadoop บนคลาวด์ Microsoft เสนอบริการ Big Data ทั้งหมดภายในแพลตฟอร์มคลาวด์ Azure โดยร่วมมือกับ Hortonworks ในบริการ HDInsight สำหรับการจัดการ Apache Hadoop, Spark, HBase และ Storm พร้อมด้วย Azure Data Lake และ Azure Data Analytics IBM มีทั้ง IBM Open Platform ในสถานที่สำหรับ Hadoop และ IBM BigInsights ซึ่งเป็นแพคเกจการวิเคราะห์ที่จะทำงานบนสุดพร้อมกับ Hadoop และ Apache Spark-as-a-service ที่มีการจัดการใน Cloud Bluemix รายการจะดำเนินต่อไปและธุรกิจต่างๆจะค้นหากรณีการใช้งานที่เหมาะสมยิ่งขึ้นในระบบคลาวด์

"เราประเมินว่า AWS เพียงอย่างเดียวมีลูกค้าประมาณ 5, 000 รายดังนั้นฐานลูกค้าของการเล่นล้วนๆรวมกันสองครั้ง" Heudecker กล่าว "ข้อดีอย่างหนึ่งของการย้ายเข้าสู่คลาวด์คือคุณได้รับระบบนิเวศน์คุณสามารถได้รับการแจกแจง Hadoop ที่เล่นได้อย่างบริสุทธิ์ใจในข้อเสนอ IaaS ใด ๆ MapR มีอยู่ในคลาวด์ทั้งหมดที่คุณนึกถึงนอกเหนือจาก IBM สำหรับ Cloudera และ Hortonworks เราไม่ได้เห็นความพร้อมใช้งานของระบบคลาวด์กลายเป็นปัจจัยมากเกินไปเมื่อเลือกระหว่างผู้ขายรายหนึ่งกับอีกราย "

การเลือกกลยุทธ์ข้อมูลองค์กร

สำหรับธุรกิจขนาดกลางและขนาดย่อม (SMBs) และธุรกิจขนาดใหญ่ที่กำลังเติบโตเมื่อลงทุนในการประมวลผลข้อมูลและการวิเคราะห์โซลูชัน Heudecker กล่าวว่าปัจจัยการตัดสินใจคือแพลตฟอร์มที่สามารถให้บริการในระดับสูงสุด ความท้าทายที่ยิ่งใหญ่ที่สุดสำหรับธุรกิจตาม Gartner คือช่องว่างทักษะ - การค้นหาว่าใครกำลังจะจัดการแพลตฟอร์มเมื่อติดตั้งและปรับใช้

"หาก บริษัท ต่าง ๆ กำลังมองหาพันธมิตรด้านแพลตฟอร์มข้อมูลใครจะช่วยพวกเขาในการนำเข้าข้อมูลใครจะช่วยพวกเขาในการสร้างแอพพลิเคชั่นการวิเคราะห์เท่าที่ Hadoop-ers บริสุทธิ์สามคนเกณฑ์การประเมินมีแนวโน้มอยู่ที่ วุฒิภาวะของเครื่องมือการจัดการและคอนโซลเครื่องมือการกำกับดูแลข้อมูลและประสิทธิภาพ "

สิ่งที่น่าสนใจในการเลือกแพลตฟอร์ม Hadoop คือการขาดความภักดี บริษัท ประเมินแพลตฟอร์ม Hadoop ใหม่ทุก ๆ 6-12 เดือนเพื่อดูว่าองค์ประกอบการประมวลผลข้อมูลยังคงเหมาะสมหรือไม่เนื่องจากพื้นที่มีการเปลี่ยนแปลงอย่างรวดเร็วและผู้เล่นขนาดใหญ่ต่างกันเพียงเล็กน้อย Heudecker กล่าวว่าร้อยละ 20 ของ บริษัท ที่เขาพูดคุยว่ามี Hadoop กระจายอยู่หลายตัวที่ทำงานอยู่ในดาต้าเซ็นเตอร์หรือคลาวด์ทำให้ทีมต่าง ๆ เลือกแพลตฟอร์มที่ต้องการหรือกระจายความตั้งใจเพื่อหลีกเลี่ยงการกระจาย Hadoop เพียงครั้งเดียว

พอร์ตฟอลิโอแพลตฟอร์มที่หลากหลายประเภทนี้ป้อนเข้าสู่สิ่งที่ Frank Buytendijk รองประธานฝ่ายวิจัยและนักวิเคราะห์ดีเด่นของการ์ตเนอร์มุ่งเน้นที่กลยุทธ์ดิจิทัลเรียกว่า "ข้อมูลในฐานะสินทรัพย์" เช่นเดียวกับที่คุณไม่สามารถดำเนินธุรกิจได้โดยไม่ต้องใช้เงินทุนแรงงานวัสดุและสิ่งอำนวยความสะดวกทั้งทางกายภาพหรือเสมือนจริง Buytendijk กล่าวว่าคุณไม่สามารถดำเนินธุรกิจได้หากไม่มีข้อมูล

"เราเคยดูธุรกิจในแง่ของกระแสทั้งสาม: การไหลหลักคือสินค้ากระแสรองเป็นเงินและกระแสตติยภูมิเป็นข้อมูลเพื่อให้แน่ใจว่าสินค้าและเงินสอดคล้องกันตอนนี้ในธุรกิจส่วนใหญ่มันเป็นวิธีอื่น ๆ โฟลว์หลักคือข้อมูลตั้งแต่การระบุและการกำหนดค่าไปจนถึงการตลาดเนื้อหา ฯลฯ ไม่ว่าคุณจะเรียกว่าบิ๊กดาต้าหรือไม่ก็ตาม

"Big Data" ล้าสมัยแล้ว

Buytendjik กล่าวว่าเขาไม่เห็น Big Data เป็นเทคโนโลยีแยกต่างหากสำหรับธุรกิจ แต่เป็นธีมหรือแนวคิดหนึ่งเดียวภายในกลยุทธ์ดิจิทัลโดยรวมของคุณ

"ฉันไม่เชื่อในการมีกลยุทธ์ข้อมูลขนาดใหญ่" Buytendjik กล่าว "มีกลยุทธ์ทางธุรกิจแทบจะไม่มีอีกต่อไปหากไม่มีส่วนประกอบดิจิตอลดังนั้นฉันเชื่อว่าการมีกลยุทธ์ดิจิทัลที่เทคโนโลยีทุกชนิดให้ความสามารถที่สำคัญซึ่งรวมถึงมือถือสังคมคลาวด์ IoT เครื่องอัจฉริยะและ Big Data"

Heudecker เชื่อว่าเราจะเริ่มพูดถึง "ข้อมูลขนาดใหญ่" น้อยลงเรื่อย ๆ เพราะตอนนี้เป็นเพียงข้อมูล มันเป็นวิธีการทำธุรกิจ ปริมาณมากและความเร็วสูงของข้อมูลไม่เป็นที่น่ากลัวอีกต่อไป

"ข้อมูลขนาดใหญ่กำลังกลายเป็นข้อมูลย่อยอีกครั้งโดยข้อมูลและการวิเคราะห์" Heudecker กล่าว "หมวดหมู่ข้อมูลขนาดใหญ่ไม่ได้มีความแตกต่างอย่างชัดเจนเรามักถูกถามถึงขนาดของตลาดข้อมูลขนาดใหญ่ แต่สิ่งนี้หมายความว่าอย่างไรข้อมูลขนาดใหญ่ไม่ใช่ตลาดจริงๆเป็นแนวคิดสำหรับธุรกิจที่คิดเกี่ยวกับข้อมูลขนาดใหญ่เป็น สิ่งที่ไม่เหมือนใครและพิเศษที่แตกต่างอย่างสิ้นเชิงกับสิ่งที่คุณทำไปก่อนหน้านี้เป็นข้อผิดพลาด ณ จุดนี้ข้อมูลเป็นเรื่องปกติ "