การผสานรวม Amazon OpenSearch Service

การผสานรวม Amazon OpenSearch Service กับ-ETL แบบไร้รอยต่อ

เนื่องจากปริมาณข้อมูลยังคงเพิ่มขึ้นแบบทวีคูณ องค์กรต่าง ๆ จึงพบว่าเป็นเรื่องยากยิ่งขึ้นในการค้นพบข้อมูลเชิงลึกทางธุรกิจและการปฏิบัติการที่สำคัญจากข้อมูลของตน พวกเขาต้องดิ้นรนเพื่อให้ทันกับความต้องการของการนำข้อมูลเข้า การแปลงข้อมูล และการวิเคราะห์แนวโน้ม แหล่งที่มาของข้อมูลแบบแยกส่วน กระบวนการ ETL ที่ไม่มีประสิทธิภาพ และข้อจำกัดด้านทรัพยากรขัดขวางไม่ให้องค์กรสามารถใช้ข้อมูลได้อย่างมีประสิทธิภาพ

องค์กรต่าง ๆ ต้องการได้รับข้อมูลเชิงลึกจากข้อมูลของตนโดยไม่ต้องกังวลกับการเคลื่อนย้ายหรือทำซ้ำข้อมูล หรือต้องส่งข้อมูลผ่านเครื่องมือและกระบวนการที่ซับซ้อนในการปฏิบัติงาน องค์กรต่าง ๆ ใช้เครื่องมือที่กำหนดเองเพื่อรวบรวม กำหนดมาตรฐาน และจัดเก็บข้อมูลเพื่อให้ได้ข้อมูลเชิงลึกทางธุรกิจซึ่งบางครั้งอาจต้องใช้ผู้เชี่ยวชาญเฉพาะด้านเพื่อดึงคุณค่าจากข้อมูลเหล่านี้ ลูกค้าของเราต้องการโซลูชันที่เรียบง่ายและราคาไม่แพงซึ่งใช้งานได้กับผู้ใช้ทุกคนโดยไม่ต้องมีการฝึกอบรมอย่างกว้างขวาง หลีกเลี่ยงการซ้ำซ้อนของข้อมูล และขจัดต้นทุนการถ่ายโอนข้อมูล

ด้วยการผสานรวม Amazon OpenSearch Service กับ ETL แบบไร้รอยต่อและความสามารถในการนำข้อมูลเข้า ตอนนี้ลูกค้าสามารถขยายความสามารถในการค้นหาข้อความเต็มที่คุ้นเคยให้เกินขอบเขตของคอลเลกชัน OpenSearch Serverless ได้โดยการค้นหาแหล่งที่มาของข้อมูลภายนอกโดยตรง ETL แบบไร้รอยต่อ ใน Amazon OpenSearch Service ช่วยคุณลดความซับซ้อนในกระบวนการผสานรวมข้อมูลของคุณ โดยสามารถวิเคราะห์ข้อมูลแบบเรียลไทม์ ลดความซับซ้อนของโครงสร้างพื้นฐาน และมอบโซลูชันที่ปรับขนาดได้และคุ้มค่าสำหรับการนำเข้าและวิเคราะห์ข้อมูลจากแหล่งที่มาของข้อมูล AWS ต่างๆ สิ่งนี้จะช่วยลดความซับซ้อนในการดำเนินงาน ลดค่าใช้จ่าย และช่วยให้คุณสามารถปลดล็อกศักยภาพของข้อมูลได้อย่างเต็มที่ เพื่อให้คุณสามารถตัดสินใจได้รวดเร็วและมีข้อมูลมากขึ้น

การผสานรวมหลักของ OpenSearch

ปรับปรุงกระบวนการวิเคราะห์ข้อมูลของคุณโดยขจัดความจำเป็นในการใช้ไปป์ไลน์ ETL ที่ซับซ้อนเมื่อทำงานกับ Amazon S3 Data Lake ของคุณ ซึ่งช่วยลดความซับซ้อนในการดำเนินงานและต้นทุน เรียนรู้เพิ่มเติม

ขจัดความจำเป็นในการใช้รหัสแบบกำหนดเองหรือไปป์ไลน์ข้อมูลที่ซับซ้อนเมื่อใช้ความสามารถในการค้นหาขั้นสูง เช่น การค้นหาข้อความเต็มและเวกเตอร์โดยใช้ประโยชน์จากการบูรณาการ ETL แบบไร้รอยต่อ ซึ่งช่วยลดภาระการดำเนินงานและค่าใช้จ่ายที่เกี่ยวข้องกับการเก็บรักษาข้อมูลที่ซิงค์ระหว่าง Amazon OpenSearch Service และ Amazon DynamoDB เรียนรู้เพิ่มเติม

ใช้ความสามารถในการค้นหาขั้นสูง (เช่น การค้นหาแบบฟัซซี การค้นหาเชิงความหมาย และอื่นๆ) ในเอกสาร Amazon DocumentDB ของคุณโดยใช้ OpenSearch API นอกจากนี้ เมื่อใช้การบูรณาการนี้ คุณยังจะสามารถค้นหาคอลเลกชันและภาษาอื่น ๆ ที่ไม่ใช่ภาษาอังกฤษได้โดยไม่ซ้ำกัน เรียนรู้เพิ่มเติม

Amazon OpenSearch Service ช่วยลดความซับซ้อนด้านการนำข้อมูลเข้า เพื่อช่วยให้คุณสามารถถ่ายโอนข้อมูลจากแหล่งที่มาต่างๆ ไปยังคลัสเตอร์ OpenSearch ของคุณได้ ไม่ว่าคุณจะต้องจัดการกับฐานข้อมูลที่มีโครงสร้าง ไฟล์ข้อมูลบันทึกที่ไม่มีโครงสร้าง หรือข้อมูลสตรีมแบบเรียลไทม์ ส่วนเชื่อมต่อของเราจะช่วยคุณรวมข้อมูลลงในแพลตฟอร์มแบบครบวงจรที่มอบความสามารถในการปรับขนาดและคุ้มค่า 

รวบรวม แปลง และกำหนดเส้นทางข้อมูลไปยังโดเมน OpenSearch Service ของคุณอย่างราบรื่น ด้วยสถาปัตยกรรมแบบไม่ต้องใช้เซิร์ฟเวอร์ OpenSearch Ingetion Service จะปรับขนาดโดยอัตโนมัติเพื่อตอบสนองความต้องการในการประมวลผลของเวิร์กโหลดที่นำเข้าของคุณ เพื่อให้ได้ไปป์ไลน์ข้อมูลที่ราบรื่นและมีประสิทธิภาพ เรียนรู้เพิ่มเติม

แปลงข้อมูลสตรีมดิบจากแหล่งที่มาต่างๆ เป็นรูปแบบที่ต้องการสำหรับดัชนี Elasticsearch หรือ OpenSearch ของคุณและโหลดไปยัง Amazon OpenSearch Service อย่างไร้รอยต่อโดยไม่ต้องสร้างไปป์ไลน์ประมวลผลข้อมูลแบบกำหนดเอง ใช้พิมพ์เขียว Lambda ที่สร้างไว้ล่วงหน้าใน Amazon Kinesis Firehose เพื่อแปลงแหล่งที่มาของข้อมูลทั่วไป เช่น Apache และข้อมูลบันทึกระบบเป็นรูปแบบ JSON และ CSV และมอบความสามารถการลองงานใหม่และการสำรองข้อมูลดิบอัตโนมัติ เรียนรู้เพิ่มเติม

นำ Logstash ไปใช้จริงบน Amazon EC2 และตั้งค่าโดเมน Amazon OpenSearch Service ของคุณเป็นพื้นที่เก็บข้อมูลแบ็กเอนด์สำหรับข้อมูลบันทึกทั้งหมดที่มาจากการใช้งาน Logstash ของคุณ Logstash รองรับไลบรารีตัวกรองที่สร้างไว้ล่วงหน้าเพื่อดำเนินการแปลงข้อมูลแบบทั่วไปอย่างง่ายดาย เช่น แยกวิเคราะห์ข้อมูลบันทึกที่ไม่มีโครงสร้างเป็นข้อมูลที่มีโครงสร้างผ่านการจับคู่รูปแบบ เปลี่ยนชื่อ ลบ แทนที่ และแก้ไขช่องในบันทึกข้อมูลของคุณ รวมถึงรวบรวมมาตรวัดต่างๆ เรียนรู้เพิ่มเติม

สืบค้นและแสดงภาพข้อมูล Amazon CloudWatch Logs โดยตรงในเวลาใกล้เรียลไทม์โดยใช้ Amazon OpenSearch Service โดยไม่มีไปป์ไลน์ข้อมูลที่ซับซ้อนหรือต้องส่งออกหรือแปลงข้อมูลก่อน การผสานรวมนี้จะรวบรวมและจัดเก็บข้อมูลบันทึกแบบรวมศูนย์ โดยใช้ประโยชน์จากการรวบรวมและจัดเก็บที่ปรับขนาดได้ของ CloudWatch Logs ร่วมกับความสามารถในการวิเคราะห์ขั้นสูงของ OpenSearch Service

เรียนรู้เพิ่มเติม

การผสานรวมที่ราบรื่นระหว่าง Amazon Security Lake และ Amazon OpenSearch Service ช่วยให้คุณสามารถค้นหาและวิเคราะห์ข้อมูลการรักษาความปลอดภัยของคุณมาใช้งานโดยไม่ต้องมีอุปสรรคในการผสานรวมข้อมูล สิ่งนี้ช่วยลดความซับซ้อน ค่าใช้จ่ายในการดำเนินงาน และต้นทุน เมื่อใช้ OpenSearch Services คุณสามารถเรียกใช้การสืบค้นการตรวจสอบการรักษาความปลอดภัยของคุณโดยตรงกับข้อมูลของคุณใน Security Lake จากนั้นเร่งข้อมูลนั้นตามความต้องการเพื่อการวิเคราะห์ข้อมูลที่รวดเร็วและซ้ำโดยใช้ความสามารถของ OpenSearch Service ที่หลากหลายและปรับแต่งได้

เรียนรู้เพิ่มเติม

ลดความซับซ้อนในการเชื่อมต่ออุปกรณ์กับระบบคลาวด์และเปิดใช้งานการแลกเปลี่ยนข้อมูลที่ปลอดภัยระหว่างอุปกรณ์ IoT เช่น เครื่องใช้ไฟฟ้าภายในบ้านและแอปพลิเคชันระบบคลาวด์ เมื่อใช้คอนโซลการจัดการของ AWS คุณสามารถกำหนดค่า AWS IoT ให้โหลดข้อมูลโดยตรงจาก Amazon OpenSearch Service ซึ่งช่วยให้ลูกค้าของคุณสามารถเข้าถึงข้อมูลและเมตริก IoT แบบเกือบเรียลไทม์ได้ เรียนรู้เพิ่มเติม

OpenSearch ประกอบด้วยโค้ด Elasticsearch บางส่วนที่ได้รับอนุญาตจาก Apache ซึ่งมาจาก Elasticsearch B.V. และซอร์สโค้ดอื่น ๆ Elasticsearch B.V. ไม่ใช่แหล่งที่มาของซอร์สโค้ดอื่น ๆ เหล่านั้น ELASTICSEARCH เป็นเครื่องหมายการค้าจดทะเบียนของ Elasticsearch B.V.