เหตุใดการเข้าร่วมห้องสนทนา Matrix Synapse จึงช้า และควรตรวจสอบอะไรบ้าง

เริ่มต้นด้วยการตรวจสอบว่าการเข้าร่วมที่ช้าส่งผลกระทบต่อห้องใดห้องหนึ่ง โฮมเซิร์ฟเวอร์ระยะไกลเครื่องใดเครื่องหนึ่ง หรือทุกห้องที่เชื่อมต่อกันหรือไม่ ใช้สถานะปลายทางการเชื่อมต่อและบันทึกของ Synapse เพื่อค้นหาความล้มเหลวที่เกิดขึ้นซ้ำๆ ก่อนที่จะเปลี่ยนค่าหมดเวลาหรือเพิ่มเวิร์กเกอร์ การเข้าร่วมจะข้ามขอบเขตของโฮมเซิร์ฟเวอร์และแลกเปลี่ยนข้อมูลการอนุญาตการเข้าร่วมและสถานะห้อง ดังนั้นเซิร์ฟเวอร์ระยะไกลที่ทำงานช้าหรือห้องขนาดใหญ่สามารถทำให้การเข้าร่วมล่าช้าได้แม้ว่าเซิร์ฟเวอร์ของคุณจะทำงานได้ดีก็ตาม

ข้อกำหนดการเชื่อมต่อเซิร์ฟเวอร์-เซิร์ฟเวอร์ของ Matrixอธิบายถึงmake_joinการsend_joinจับมือและการส่งสถานะกลับไปยังเซิร์ฟเวอร์ที่เข้าร่วม นั่นหมายความว่า “ความล่าช้าในการเชื่อมต่อ” ไม่ได้หมายความว่าเป็นปัญหาของคิว Synapse ในเครื่องเสมอไป การตรวจสอบด้านล่างจะแยกแยะสาเหตุที่เป็นไปได้

ความล่าช้าดังกล่าวจำกัดอยู่แค่ห้องเดียวหรือโฮมเซิร์ฟเวอร์เครื่องเดียวหรือไม่?

ลองเปรียบเทียบการเข้าร่วมที่ช้ากับการเข้าร่วมห้องเฟเดอเรตอื่น ถามผู้ใช้รายอื่นในโฮมเซิร์ฟเวอร์ของคุณว่ารายงานความล่าช้าแบบเดียวกันหรือไม่ และจดบันทึกรหัสห้องหรือชื่อเรียกแทน และชื่อเซิร์ฟเวอร์ระยะไกลที่เกี่ยวข้อง หากมีเพียงห้องเดียวที่ช้า สถานะของห้องหรือโฮมเซิร์ฟเวอร์ที่อยู่ในห้องนั้นอาจเป็นคอขวด หากหลายห้องที่เกี่ยวข้องกับเซิร์ฟเวอร์ระยะไกลเดียวกันช้า ให้ตรวจสอบการเข้าถึงปลายทางและสถานะการลองใหม่ หากการเข้าร่วมเซิร์ฟเวอร์ที่ไม่เกี่ยวข้องหลายแห่งช้า ให้ตรวจสอบทรัพยากรของคุณเองและเส้นทางเฟเดอเรตขาออก

สำหรับเซิร์ฟเวอร์ระยะไกลที่ได้รับผลกระทบ ให้เรียกใช้ Synapse Federation Admin API จากเครื่องที่ใช้งาน Synapse:

curl -H "Authorization: Bearer $SYNAPSE_ADMIN_TOKEN" \
  "http://127.0.0.1:8008/_synapse/admin/v1/federation/destinations/remote.example"

แทนที่remote.exampleด้วยชื่อโฮมเซิร์ฟเวอร์และใช้ที่อยู่ไคลเอ็นต์-ลิสเนอร์สำหรับการใช้งานของคุณ ค่าที่ไม่ใช่ศูนย์retry_last_tsและค่าบวกretry_intervalแสดงว่า Synapse ได้บันทึกการเชื่อมต่อที่ล้มเหลวเมื่อเร็ว ๆ นี้และกำลังรออยู่ก่อนที่จะลองใหม่ ตรวจสอบบันทึก Synapse ที่เกี่ยวข้องสำหรับความล้มเหลวที่แท้จริง เช่น ข้อผิดพลาด DNS, TLS, การเชื่อมต่อ หรือการตอบสนองระยะไกล Synapse ระบุว่าFederation Admin API นี้ เป็นแบบทดลองและอาจมีการเปลี่ยนแปลง โปรดดูเอกสารประกอบสำหรับเวอร์ชันที่คุณใช้งาน เก็บ Admin API ไว้เป็นส่วนตัวและอย่าคัดลอกโทเค็นการเข้าถึงลงในคำขอการสนับสนุนสาธารณะ

ตัวอย่างคำสั่งเทอร์มินัลที่ใช้สอบถามสถานะปลายทางของเฟเดอเรชันของ Synapse สำหรับ remote.example โดยใช้โทเค็นผู้ดูแลระบบ

ภาพประกอบแสดงการร้องขอสถานะปลายทางแบบรับรองความถูกต้องในพื้นที่ แผงควบคุมแสดงเฉพาะคำสั่ง ไม่ใช่การตอบสนองแบบเรียลไทม์

หากคุณสงสัยว่าเซิร์ฟเวอร์อื่นไม่สามารถเข้าถึงโฮมเซิร์ฟเวอร์ของคุณได้ ให้เรียกใช้โปรแกรมทดสอบการเชื่อมต่อเครือข่ายอย่างเป็นทางการของ Matrixสำหรับชื่อเซิร์ฟเวอร์ของคุณ โปรแกรมนี้จะตรวจสอบการค้นหาและการเชื่อมต่อเครือข่ายสาธารณะ อย่างไรก็ตาม โปรแกรมนี้ไม่ได้พิสูจน์ว่าการร้องขอขาออกจากโฮสต์ Synapse ของคุณไปยังเซิร์ฟเวอร์ปลายทางใด ๆ นั้นสำเร็จ ดังนั้นให้เปรียบเทียบรายงานของโปรแกรมกับบันทึกและสถานะปลายทางของคุณเอง

Synapse แสดงให้เห็นถึงความล่าช้าในการเชื่อมต่อที่เพิ่มขึ้นหรือไม่?

หาก Prometheus ดึงข้อมูลจากเอนด์พอยต์เมตริกของ Synapse อยู่แล้ว ให้เพิ่มโดเมนที่ได้รับผลกระทบลงfederation_metrics_domainsในไฟล์homeserver.yaml`.prometheus.txt` จากนั้นรีโหลดหรือรีสตาร์ท Synapse ตามขั้นตอนการติดตั้งใช้งานของคุณ Synapse สามารถแสดงเมตริกของ Prometheus สำหรับอายุของเหตุการณ์ห้องประชุมถาวร (PDU) ที่ส่งและรับจากโดเมนที่คุณระบุไว้ ตามที่อธิบายไว้ในคู่มือการกำหนดค่า :

federation_metrics_domains:
  - matrix.org
  - remote.example

ใช้ข้อมูลอนุกรมเวลาที่ได้มาเพื่อตรวจสอบว่าอายุของเหตุการณ์ขาออกหรือขาเข้าเพิ่มขึ้นหรือไม่ ให้ถือว่าเป็นเพียงเบาะแสเบื้องต้น ไม่ใช่ข้อสรุปที่แน่ชัด: เอกสารการกำหนดค่าของ Synapse เตือนว่าความล่าช้าอาจมาจากทั้งโฮมเซิร์ฟเวอร์หรือเครือข่ายระหว่างกัน อนุกรมข้อมูลขาออกที่ล่าช้าในหลายปลายทางชี้ไปที่เส้นทางการส่งหรือความจุในพื้นที่ของคุณ ความล่าช้าที่เกิดขึ้นเฉพาะกับอุปกรณ์ปลายทางเดียวบ่งชี้ว่าควรตรวจสอบอุปกรณ์ปลายทางนั้นและเส้นทางไปยังอุปกรณ์ปลายทางนั้น

แผนภูมิแสดงการติดตามเชิงภาพประกอบ ชื่อ "อายุของ Federation PDU แยกตามโดเมน" พร้อมเส้นกราฟแสดงอนุกรมเวลาสองเส้น

ภาพประกอบแสดงแนวคิดแผนภูมิยุคสหพันธ์ เส้นต่างๆ ไม่ใช่ข้อมูลการวัดแบบเรียลไทม์จากเซิร์ฟเวอร์ Synapse

ตัวอย่างโค้ด homeserver.yaml ที่แสดงรายการ matrix.org และ remote.example ภายใต้ federation_metrics_domains

ภาพประกอบแสดงการตั้งค่า Synapse ที่ใช้เพื่อเปิดใช้งานเมตริกอายุ PDU สำหรับโดเมนระยะไกลที่เลือกไว้

หากการทำงานหลายอย่างช้า ให้ตรวจสอบ CPU, หน่วยความจำ, ความหน่วงของฐานข้อมูล และแดชบอร์ดระยะเวลาการทำธุรกรรมของ Synapse ด้วยคู่มือ Grafana ของ Synapse ระบุว่าpersist_eventsการเขียนเหตุการณ์ลงในฐานข้อมูลอาจทำให้ระยะเวลาการทำธุรกรรมสูง นอกจากนี้ยังอธิบายว่าการเชื่อมต่อปลายทางแบบไปข้างหน้าจำนวนมากอาจเพิ่มภาระงานในการแก้ไขสถานะ หากการวัดค่าในระดับท้องถิ่นเหล่านั้นสูงขึ้นพร้อมกับการเชื่อมต่อ ให้แก้ไขปัญหาคอขวดของทรัพยากรหรือฐานข้อมูลก่อนที่จะปรับแต่งการลองใหม่ของการรวมระบบ

การเพิ่มจำนวนผู้ส่งข้อมูลจากสหพันธ์จะช่วยได้หรือไม่?

เพิ่มความจุผู้ส่งเฉพาะเมื่อการตรวจสอบแสดงให้เห็นว่างานขาออกค้างอยู่หลายปลายทาง และกระบวนการปัจจุบันมีข้อจำกัดเอกสารประกอบการใช้งาน Synapse worker ในปัจจุบัน แนะนำให้ใช้synapse.app.generic_worker`with` federation_sender_instancesสำหรับบทบาทนี้ แทนที่จะสร้างการปรับใช้ใหม่โดยใช้ประเภท worker ผู้ส่งเฉพาะแบบเก่า

แต่ละปลายทางขาออกจะถูกกำหนดให้กับผู้ส่งโดยอิงจากแฮชของชื่อเซิร์ฟเวอร์ระยะไกล ผู้ส่งหลายรายสามารถกระจายปริมาณการใช้งานไปยังเซิร์ฟเวอร์ระยะไกลหลายแห่งได้ แต่คำขอไปยังปลายทางที่ช้าเพียงแห่งเดียวยังคงถูกกำหนดให้กับผู้ส่งเพียงรายเดียว ดังนั้น การเพิ่มผู้ส่งจึงไม่น่าจะแก้ไขปัญหาที่มีผู้ส่งเพียงรายเดียวได้ ชื่อผู้ส่งในไฟล์การกำหนดค่าที่ใช้ร่วมกันต้องตรงกับชื่อผู้ส่งที่กำลังทำงานอยู่ เมื่อเปลี่ยนแปลงรายการอินสแตนซ์ของผู้ส่ง ให้หยุดและเริ่มต้นผู้ส่งทั้งหมดในเครือข่ายพร้อมกัน เพื่อให้ใช้การกำหนดค่าเดียวกัน

ตัวอย่างข้อความจากไฟล์ homeserver.yaml ที่แสดงรายชื่อผู้ส่งและผู้ทำงานของระบบ Federation สองคน

ภาพประกอบแสดงรายการ federation_sender_instances โดยแต่ละ worker ที่ระบุชื่อจะต้องมีอยู่ใน deployment

คุณควรตั้งค่า backoff ใหม่หรือเพิ่มเวลาหมดอายุดี?

ควรทำการรีเซ็ตตัวจับเวลาการลองใหม่ของปลายทางหลังจากแก้ไขปัญหาการเชื่อมต่อชั่วคราวและยืนยันว่า Synapse ได้ทำเครื่องหมายปลายทางนั้นว่าล้มเหลวแล้ว API สำหรับผู้ดูแลระบบมีPOST /_synapse/admin/v1/federation/destinations/<destination>/reset_connectionเอนด์พอยต์ ซึ่งคำขอจะทำงานในพื้นหลัง ดังนั้นการได้รับ HTTP 200 ทันทีไม่ได้หมายความว่าการเชื่อมต่อกลับมาใช้งานได้แล้ว เอนด์พอยต์นี้ยังถูกระบุว่าเป็นเอนด์พอยต์ทดลองด้วย

อย่าตั้งค่านี้federation.client_timeoutเป็นการตอบสนองแรก คู่มือการกำหนดค่าปัจจุบันระบุค่าเริ่มต้นไว้ที่ 60 วินาที การตั้งเวลาหมดอายุที่นานขึ้นจะทำให้เซิร์ฟเวอร์ระยะไกลที่ช้ามีเวลาตอบกลับมากขึ้น แต่ไม่ได้ทำให้เซิร์ฟเวอร์หรือเครือข่ายเร็วขึ้น และอาจทำให้คำขอเข้าร่วมต้องรอเป็นเวลานานขึ้น ควรเปลี่ยนค่านี้ก็ต่อเมื่อบันทึกแสดงให้เห็นว่าคำขอการเชื่อมต่อเครือข่ายที่ถูกต้องมีจำนวนเกินค่าปัจจุบัน และคุณได้ตรวจสอบความจุของเซิร์ฟเวอร์แล้ว

คุณรู้ได้อย่างไรว่าวิธีแก้ไขได้ผล?

ลองเข้าร่วมห้องเดิมอีกครั้งและเปรียบเทียบกับห้องที่เชื่อมต่อผ่านระบบเฟเดอเรชันอื่น ตรวจสอบให้แน่ใจว่าปลายทางที่ได้รับผลกระทบไม่แสดงช่วงเวลาการลองใหม่ที่เพิ่มขึ้นอีกต่อไป บันทึกแสดงคำขอเฟเดอเรชันที่สำเร็จ และเมตริกอายุ PDU ที่กำหนดค่าไว้หยุดเพิ่มขึ้น หากมีเพียงห้องเดียวที่ยังคงทำงานช้าในขณะที่ปลายทางอื่น ๆ ทำงานได้ปกติ ให้แชร์รหัสห้อง โฮมเซิร์ฟเวอร์ระยะไกลที่เกี่ยวข้อง ช่วงเวลา และบรรทัดข้อผิดพลาดที่ตัดทอนแล้วกับผู้ดูแลระบบห้องหรือฝ่ายสนับสนุนของ Synapse หลีกเลี่ยงการส่งโทเค็นการเข้าถึงหรือส่วนหัวการอนุญาตแบบเต็ม

ฝากความเห็น

ปิดการลงทะเบียนผ่าน Matrix หรือกำหนดให้ต้องใช้โทเค็นเชิญบน Synapse

หยุดการสร้างบัญชีแบบเปิดบนเซิร์ฟเวอร์ Synapse ที่โฮสต์เอง หรือจำกัดการลงทะเบียนเฉพาะผู้ได้รับเชิญเท่านั้น โดยใช้โทเค็นการลงทะเบียนที่มีจำนวนการใช้งานจำกัด

คำเตือนเกี่ยวกับข้อมูลประจำตัวเซสชันขององค์ประกอบ: ยืนยันการเข้าสู่ระบบของคุณอย่างปลอดภัย

ล้างคำเตือนเซสชันที่ไม่ได้รับการยืนยันของ Element โดยใช้อุปกรณ์ที่เชื่อถือได้หรือคีย์กู้คืน พร้อมการตรวจสอบที่ปกป้องประวัติการแชทที่เข้ารหัสของคุณ

หยุดปัญหาการหมดเวลาการล็อกไฟล์ ownCloud ด้วยระบบแบ็กเอนด์ที่เหมาะสม

แยกแยะปัญหาการแย่งชิงการล็อกฐานข้อมูลออกจากปัญหาการล็อก WebDAV ที่หมดอายุ จากนั้นเลือกและกำหนดค่าวิธีแก้ไข ownCloud 10 ที่ถูกต้อง

สิ่งที่ควรตรวจสอบเมื่อ ownCloud Web เปิดขึ้นมาเป็นหน้าว่างเปล่า

สิ่งที่ควรตรวจสอบเมื่อ ownCloud Web เปิดขึ้นมาเป็นหน้าว่างเปล่า

ตรวจสอบหาสาเหตุของหน้าจอ ownCloud Web ว่างเปล่าว่าเกิดจากแคชของเบราว์เซอร์ ไฟล์เว็บหายไป ข้อผิดพลาดของบริการ หรือการตั้งค่า URL ของพร็อกซีแบบย้อนกลับ ด้วยการตรวจสอบแบบเจาะจง

ล้างคำเตือนหน่วยความจำ PHP ของ ownCloud ในรันไทม์ที่ถูกต้อง

ตั้งค่าขีดจำกัดหน่วยความจำ PHP ของเว็บ ownCloud รีสตาร์ทบริการที่เกี่ยวข้อง และตรวจสอบค่าที่ใช้งานอยู่โดยไม่ต้องสับสนกับค่าการตั้งค่า CLI หรือขีดจำกัดการอัปโหลด

แก้ไขปัญหาการเชื่อมต่อ MySQL ล้มเหลวใน ownCloud 10

ตรวจสอบว่า MySQL, PHP, การตั้งค่าซ็อกเก็ต หรือสิทธิ์การเข้าถึงฐานข้อมูลกำลังขัดขวางการทำงานของ ownCloud 10 หรือไม่ จากนั้นตรวจสอบวิธีการแก้ไขที่ปลอดภัย

กำหนดวันหมดอายุที่แน่นอนสำหรับลิงก์สาธารณะของ ownCloud

กำหนดวันหมดอายุที่แน่นอนสำหรับลิงก์สาธารณะของ ownCloud

กำหนดให้การหมดอายุของลิงก์สาธารณะเป็นข้อบังคับใน ownCloud Classic กำหนดอายุการใช้งานสูงสุด และตรวจสอบการแชร์ที่มีอยู่ซึ่งอาจต้องมีการล้างข้อมูลแยกต่างหาก

เพิ่มระบบยืนยันตัวตนสองขั้นตอน TOTP ให้กับ ownCloud Infinite Scale ด้วย Keycloak

เพิ่มระบบยืนยันตัวตนสองขั้นตอน TOTP ให้กับ ownCloud Infinite Scale ด้วย Keycloak

เปิดใช้งาน TOTP ผ่าน Keycloak ลงทะเบียนผู้ใช้ได้อย่างปลอดภัย และทำความเข้าใจว่าเมื่อใดที่การตั้งค่า MFA ระดับเส้นทางของ Infinite Scale จะมีผล

กู้คืนการซิงค์ ownCloud โดยการจับคู่ไคลเอ็นต์กับเซิร์ฟเวอร์ของคุณ

ตรวจสอบว่าปัญหาเกิดจากความไม่เข้ากันระหว่าง OC10 และ 7.x หรือเกิดจากไฟล์ CSync เสียหาย จากนั้นให้แก้ไขปัญหาด้วยวิธีที่ถูกต้องโดยไม่ต้องลบไฟล์ที่ซิงค์ไว้

ตั้งค่า ownCloud ให้ใช้งาน HTTPS โดยใช้ Let's Encrypt และ Nginx

ตั้งค่า ownCloud ให้ใช้งาน HTTPS โดยใช้ Let's Encrypt และ Nginx

เลือก HTTP-01 หรือ DNS-01 กำหนดค่าพร็อกซีแบบย้อนกลับของ ownCloud และตรวจสอบว่า Certbot ต่ออายุใบรับรอง HTTPS โดยอัตโนมัติหรือไม่