อย่างแน่นอน! ไม่เคยมีครั้งไหนดีไปกว่าการเพิ่มทักษะ Hadoop ให้กับประวัติย่อของคุณ มาสร้างสิ่งนี้ด้วยข้อเท็จจริงและตัวอย่างบางส่วน
def __init__
คุณเคยสงสัยหรือไม่ว่าเทคโนโลยีเบื้องหลังฟีเจอร์การติดแท็กอัตโนมัติของ Facebook คืออะไร? แล้วกล้องวงจรปิดที่สามารถสร้างภาพที่ไร้ที่ติแม้ในที่แสงน้อยล่ะ? คำตอบคือ Hadoop และความสามารถในการจัดเก็บประมวลผลและดึงข้อมูล
การจัดเก็บข้อมูลเป็นสิ่งหนึ่ง แต่การประมวลผลและการสืบค้นข้อมูลเป็นเกมบอลที่แตกต่างไปจากเดิมอย่างสิ้นเชิง ถ้า Big Data เป็นทีมรักบี้ Hadoop คือกองหลังที่ดีที่สุดที่คุณจะหาได้!
ต้องขอบคุณ Hadoop ที่ Facebook สามารถจัดเก็บข้อมูลทั้งหมดเกี่ยวกับบุคคลและระบุเวลาและวันที่ที่แน่นอนของกิจกรรมบนโปรไฟล์ของเขา / เธอ ข้อมูลทั้งหมดเกี่ยวกับบุคคลคือ Big Data และ Hadoop ช่วยแสดงผลข้อมูลทั้งหมด
ข้อมูล Hadoop ทั้งหมดจะถูกเก็บไว้ที่ด้านบนของ HDFS (Hadoop Distributed File System) ซึ่งสามารถเก็บข้อมูลทั้งที่มีโครงสร้างและไม่มีโครงสร้าง คู่แข่งของ Hadoop (เช่น RDBMS และ Excel) สามารถจัดเก็บได้เฉพาะข้อมูลที่มีโครงสร้างเท่านั้น นี่เป็นปัจจัยสำคัญที่ทำให้ Hadoop เป็นพ่อใหญ่ที่ให้เครื่องมือจัดการข้อมูลแบบดั้งเดิมเพื่อเงินของพวกเขา Hadoop ทำการประมวลผลใกล้กับข้อมูลในขณะที่ RDBMS ต้องการข้อมูลที่จะถ่ายโอนผ่านเครือข่ายผ่าน I / O เพื่อประมวลผลข้อมูลเดียวกัน
อาหารสมอง: Hadoop สามารถทำนายผลลัพธ์ของสถานการณ์ตามชุดข้อมูลได้หรือไม่?
กราฟนี้แสดงการเติบโตแบบทวีคูณของข้อมูลในช่วงหลายปีที่ผ่านมา ลองดูให้ละเอียดแล้วคุณจะสังเกตเห็นว่าข้อมูลที่ไม่มีโครงสร้างคิดเป็น 90% ของข้อมูลทั้งหมดในโลก เพียงแค่ใช้หลักการของอุปสงค์และอุปทานเราก็จะตระหนักได้ว่าข้อมูลที่ไม่มีโครงสร้างที่ลอยอยู่รอบ ๆ มี แต่ผู้เชี่ยวชาญเท่านั้นที่สามารถแก้ไขข้อมูลนี้ได้ นั่นเป็นเหตุผลที่เพียงพอสำหรับบุคคลที่ต้องการหางานที่เกี่ยวข้องกับข้อมูลที่ไม่มีโครงสร้างหรือที่เรียกว่า Big Data ไม่ต้องสงสัยเลยว่านี่คือเวลาที่เหมาะสมในการเรียนรู้ Hadoop
ในความเป็นจริง Hadoop มีประสิทธิภาพเพียงใดเมื่อเทียบกับ RDBMS?
Hadoop เคาะเครื่องมือจัดการข้อมูลอื่น ๆ ออกจากสวนสาธารณะ RDBMS และ Excel อาจมีประสิทธิภาพในการจัดการข้อมูลไม่เกินสองสามร้อยแผ่นงาน Excel แต่ไฟล์ดังกล่าวต้องได้รับการดูแลเป็นพันไฟล์ล่ะ? กลับไปที่ตัวอย่าง Facebook อีกครั้ง บันทึกข้อมูลที่มีรายละเอียดกิจกรรมของผู้ใช้ Facebook ไม่สามารถเก็บไว้ใน Excel ได้อย่างน้อยก็ไม่ใช่ข้อมูลประวัติทั้งหมดของผู้ใช้ย้อนหลังไปหลายทศวรรษ นอกจากนี้ในข้อมูล Hadoop อาจมีโครงสร้างแบบหลวม ๆ แต่ RDBMS ต้องการให้ข้อมูลมีความสอดคล้องกันมากขึ้นและอยู่ในรูปแบบที่เป็นที่รู้จัก
ลองดูการเปรียบเทียบระหว่าง RDBMS และ Hadoop แล้วคุณจะรู้เองว่าราคาไหนดีกว่ากัน
ฉันมีสถิติสุดท้ายสำหรับคุณซึ่งจะปิดข้อสงสัยทั้งหมดว่า Hadoop เป็นอาชีพที่ดีหรือไม่น้ำแข็ง.
ตัวดำเนินการแก้ไขขอบเขตใน c ++
กราฟนี้เป็นตัวอย่างของความต้องการที่เพิ่มขึ้นสำหรับผู้เชี่ยวชาญด้าน Hadoop และจะเพิ่มขึ้นในอีกไม่กี่สัปดาห์ข้างหน้า
การผสานใน c ++
น่าเสียดายที่คุณและฉันไม่สามารถเปลี่ยนแปลงเทคโนโลยีได้ อย่างดีที่สุดเราสามารถก้าวทันและเรียนรู้เทคโนโลยีที่กำลังพัฒนาและเป็นสิ่งที่ขาดไม่ได้ในสถานที่ทำงานของเรา เป็นเวลาที่เหมาะสมในการเรียนรู้ Hadoop และขี่คลื่น Big Data
มีคำถามสำหรับเรา? โปรดระบุไว้ในส่วนความคิดเห็นแล้วเราจะติดต่อกลับไป
กระทู้ที่เกี่ยวข้อง: