เรียกคืนพื้นที่ดิสก์ Synapse Media โดยไม่ทำให้ไฟล์ที่แชร์เสียหาย

หากพื้นที่จัดเก็บสื่อของ Synapse เต็มดิสก์ ให้ตรวจสอบก่อนว่าไดเร็กทอรีหรือไดรฟ์ใดที่กำลังเพิ่มพื้นที่ จากนั้นใช้การตั้งค่าการเก็บรักษาข้อมูลที่ Synapse รองรับหรือ Admin API เพื่อลบสื่อ อย่าลบไฟล์โดยตรงจาก Synapse เพราะ media_storeSynapse เก็บข้อมูลเมตาของสื่อไว้ในฐานข้อมูล และการลบไฟล์หลังจากที่ Synapse ดำเนินการแล้ว อาจทำให้เกิดการอ้างอิงที่เสียหายหรือทำให้การตรวจสอบการล้างข้อมูลทำได้ยาก นโยบายที่ปลอดภัยที่สุดขึ้นอยู่กับว่าพื้นที่นั้นถูกใช้โดยการอัปโหลดในเครื่อง การแคชสื่อจากโฮมเซิร์ฟเวอร์อื่น รูปภาพขนาดย่อ หรือบริการอื่นที่ใช้ดิสก์เดียวกัน

อะไรกำลังกินพื้นที่ตรงนั้นอยู่?

พื้นที่จัดเก็บสื่อของ Synapse จะเก็บรูปประจำตัว ไฟล์แนบ และภาพขนาดย่อที่อัปโหลดไว้ในเครื่อง นอกจากนี้ยังแคชสื่อที่ดึงมาจากเซิร์ฟเวอร์ Matrix ระยะไกล และทรัพยากรที่ใช้สำหรับการแสดงตัวอย่าง URL สิ่งเหล่านี้แตกต่างจากฐานข้อมูล Synapse บันทึกคอนเทนเนอร์ และพื้นที่จัดเก็บสื่อภายนอกใดๆ การที่ระบบไฟล์รูทเต็มไม่ได้หมายความว่านั่นmedia_storeคือสาเหตุของปัญหา เสมอไป

บนโฮสต์หรือภายในคอนเทนเนอร์ที่เป็นเจ้าของข้อมูลที่เมานต์อยู่ ให้เปรียบเทียบการใช้งานระบบไฟล์กับไดเร็กทอรีข้อมูลของ Synapse แทนที่เส้นทางตัวอย่างด้วยค่าในระบบของคุณ:

df -h
du -h --max-depth=1 /path/to/synapse-data
du -sh /path/to/synapse-data/media_store

โดยค่าเริ่มต้น Synapse media_store_pathจะกำหนดไว้ที่ ซึ่งmedia_storeโดยทั่วไปจะอยู่ภายใต้ไดเร็กทอรีข้อมูล แต่การติดตั้งสามารถเปลี่ยนแปลงได้ คอนเทนเนอร์สามารถเขียนไปยังวอลุ่มที่เชื่อมต่ออยู่ ซึ่งพื้นที่จัดเก็บจริงอยู่บนโฮสต์ ตรวจสอบhomeserver.yamlการแมปวอลุ่มของคอนเทนเนอร์ หรือการกำหนดค่าวอลุ่มถาวรของออร์เคสเตรเตอร์ของคุณก่อนที่จะสรุปว่าเส้นทางโฮสต์นั้นปลอดภัยที่จะเปลี่ยนแปลง หากไดเร็กทอรีสื่อไม่ใช่ส่วนที่ใช้พื้นที่มากที่สุด ให้ตรวจสอบส่วนประกอบที่duแสดงแทน

เลือกนโยบายการล้างข้อมูลที่เหมาะสมกับสื่อ

พฤติกรรมที่ได้รับการยืนยัน: การตั้งค่า ของ Synapse media_retentionสามารถลบสื่อในเครื่องและสื่อระยะไกลที่แคชไว้หลังจากไม่มีการเข้าถึงเป็นระยะเวลาหนึ่ง การเข้าถึงรวมถึงการโหลดสื่อในห้องหรือการดาวน์โหลด หากไม่เคยมีการเข้าถึงรายการใดเลย Synapse จะใช้เวลาที่สร้างรายการนั้นขึ้นมา ทั้งสื่อต้นฉบับและภาพขนาดย่อจะถูกลบออก การล้างข้อมูลจะทำงานบนเวิร์กเกอร์คลังสื่อ ซึ่งอาจเป็นกระบวนการหลักของ Synapse

ขึ้นอยู่กับกรณีการใช้งานของคุณ:โดยทั่วไปแล้วไฟล์ที่แคชไว้บนเซิร์ฟเวอร์ระยะไกลสามารถดึงกลับมาได้จากเซิร์ฟเวอร์ต้นทางเมื่อมีการร้องขอหลังจากลบไปแล้ว ไฟล์ที่อัปโหลดในเครื่องจะถูกจัดเก็บไว้บนเซิร์ฟเวอร์ของคุณ ดังนั้นการลบไฟล์เหล่านั้นอาจทำให้ไฟล์แนบหรือรูปโปรไฟล์เก่าๆ ไม่สามารถใช้งานได้ เลือกการเก็บรักษาในเครื่องเฉพาะเมื่อผู้ใช้ยอมรับผลที่ตามมาเท่านั้น การเก็บรักษาในเครื่องนานขึ้นหรือการไม่ล้างข้อมูลในเครื่องโดยอัตโนมัติอาจเหมาะสมกว่าสำหรับชุมชนที่ถือว่าไฟล์แนบเก่าๆ เป็นไฟล์เก็บถาวร

สิ่งที่การเก็บรักษาไม่หมายถึง:การกักกันสื่อจะบล็อกการเข้าถึง แต่จะไม่ลบไฟล์หรือภาพขนาดย่อของไฟล์นั้น และจะไม่เพิ่มพื้นที่ว่างในดิสก์ที่คุณต้องการ หากคุณต้องการเก็บรักษาข้อมูลที่ถูกกักกันไว้ในขณะที่ลบข้อมูลอื่น โปรดแยกแยะให้ชัดเจน: การกักกันเป็นการควบคุมการกลั่นกรอง ในขณะที่การเก็บรักษาและการลบเป็นการควบคุมการจัดเก็บข้อมูล

เปิดใช้งานการเก็บรักษาข้อมูลอัตโนมัติใน Synapse

สำรองข้อมูลการตั้งค่าปัจจุบันก่อนทำการแก้ไข เพิ่มmedia_retentionส่วนระดับบนสุดหรืออัปเดตส่วนที่มีอยู่แล้ว ตัวอย่างเช่น นโยบายนี้จะลบสื่อในเครื่องหลังจากไม่มีการเข้าถึงเป็นเวลา 180 วัน และลบรายการแคชระยะไกลหลังจาก 30 วัน:

media_retention:
  local_media_lifetime: 180d
  remote_media_lifetime: 30d

ค่าเหล่านี้เป็นเพียงตัวอย่าง ไม่ใช่คำแนะนำสากล กำหนดช่วงเวลาในเครื่องตามข้อผูกพันในการเก็บรักษาและข้อคาดหวังของคุณสำหรับเนื้อหาห้องเก่า หากคุณต้องการควบคุมแคชสำหรับสื่อระยะไกลเท่านั้น ให้กำหนดค่าเพียงแค่remote_media_lifetime; อายุการใช้งานที่ไม่ได้กำหนดหรือเป็นค่าว่างหมายความว่าประเภทนั้นจะไม่ถูกล้างโดยอัตโนมัติ Synapse ยังระบุไว้ด้วยว่าสื่อที่ถูกกักกันและสื่อในเครื่องที่ได้รับการปกป้องจากการกักกันจะไม่รวมอยู่ในการล้างข้อมูลการเก็บรักษา

ใช้การกำหนดค่าโดยใช้กระบวนการรีสตาร์ทหรือรีโหลดตามปกติของการปรับใช้ และตรวจสอบว่าเวิร์กเกอร์คลังสื่อทำงานอยู่หรือenable_media_repo: trueไม่ หาก Synapse ใช้เวิร์กเกอร์สื่อแยกต่างหาก ให้กำหนดค่านโยบายที่เปิดใช้งานบริการคลังสื่อ การแก้ไข YAML ที่ถูกต้องจะไม่เรียกคืนพื้นที่ทั้งหมดทันที: เวิร์กเกอร์ต้องทำการล้างข้อมูล และเฉพาะสื่อที่เก่ากว่าเวลาตัดการเข้าถึงที่เลือกไว้เท่านั้นที่จะมีสิทธิ์

เรียกคืนพื้นที่ได้เร็วขึ้นด้วย Admin API

หากดิสก์อยู่ในสถานะวิกฤตแล้ว Synapse จะมีจุดเชื่อมต่อสำหรับการจัดการเพื่อล้างข้อมูล การดำเนินการเหล่านี้จะลบสื่ออย่างถาวร ก่อนใช้งาน โปรดสำรองข้อมูลฐานข้อมูลและข้อมูลสื่อ ตรวจสอบให้แน่ใจว่า URL นั้นชี้ไปยังโฮมเซิร์ฟเวอร์ของคุณเอง และใช้โทเค็นการเข้าถึงของผู้ดูแลระบบเซิร์ฟเวอร์ผ่าน HTTPS อย่าบันทึกโทเค็นไว้ในประวัติคำสั่งและบันทึกการใช้งานร่วมกัน

หากต้องการล้างแคชสื่อระยะไกลเก่า ให้เรียกใช้เอนด์พอยต์ที่ระบุไว้ โดยระบุเวลาสิ้นสุดเป็นมิลลิวินาที นับตั้งแต่ยุค Unix:

POST /_synapse/admin/v1/purge_media_cache?before_ts=<unix_timestamp_in_ms>

ตัวอย่างเช่น เชลล์สามารถคำนวณกำหนดเวลาสิ้นสุดเมื่อ 30 วันที่แล้วโดยใช้ GNU ได้date:

cutoff=$(date -u -d '30 days ago' +%s000)
curl -X POST "https://matrix.example.com/_synapse/admin/v1/purge_media_cache?before_ts=$cutoff" \
  -H "Authorization: Bearer YOUR_SERVER_ADMIN_ACCESS_TOKEN"

ข้อความตอบกลับจะแจ้งจำนวนรายการที่แคชไว้ที่ถูกลบ หากผู้ใช้ร้องขอไฟล์ระยะไกลเหล่านั้นอีกครั้ง Synapse จะดึงไฟล์เหล่านั้นจากเซิร์ฟเวอร์ต้นทางอีกครั้ง ซึ่งสามารถคืนพื้นที่ใช้งานดิสก์สำหรับสื่อยอดนิยมได้

API สำหรับการลบสื่อในเครื่องสามารถลบสื่อในเครื่องโดยอิงจากเวลาเข้าถึงล่าสุด และอาจกำหนดขนาดขั้นต่ำได้ด้วย เอนด์พอยต์ปัจจุบันคือPOST /_synapse/admin/v1/media/delete?before_ts=…; เอนด์พอยต์เก่าที่มี<server_name>ถูกยกเลิกการใช้งานแล้วตั้งแต่ Synapse เวอร์ชัน 1.78.0 เกณฑ์การตัดออกคือเวลาเข้าถึงล่าสุด ไม่ใช่วันที่อัปโหลด และkeep_profilesตัวเลือกนี้จะมีค่าเริ่มต้นเป็น true เนื่องจากการลบนี้อาจลบไฟล์ที่ผู้ใช้คาดหวังว่าจะยังคงใช้งานได้ จึงควรเลือกใช้การกำหนดค่าการเก็บรักษาเว้นแต่คุณได้ระบุเกณฑ์การตัดออกที่เหมาะสมและยอมรับผลกระทบดังกล่าวแล้ว โปรดดูเอกสารอ้างอิง API อย่างเป็นทางการสำหรับพารามิเตอร์และเวอร์ชัน Synapse ที่ติดตั้งของคุณ

ความเข้าใจผิดทั่วไปที่ควรหลีกเลี่ยง

  • “การลบห้องจะลบไฟล์มีเดียทั้งหมดในห้องนั้น”อย่าเข้าใจผิด ประวัติห้อง ไฟล์มีเดีย และสำเนาที่แคชไว้จะถูกจัดการด้วยการดำเนินการที่แตกต่างกัน ควรใช้ API การจัดการไฟล์มีเดีย หรือนโยบายการเก็บรักษาข้อมูลเพื่อจัดการไฟล์มีเดียโดยเฉพาะ
  • “การกักกันช่วยเพิ่มพื้นที่ว่างในดิสก์”ไม่ใช่เช่นนั้น ไฟล์มีเดียและภาพขนาดย่อที่ถูกกักกันยังคงอยู่บนดิสก์ หากต้องการเรียกคืนพื้นที่จัดเก็บข้อมูล ควรใช้การลบหรือการเก็บรักษาแทน
  • “ไฟล์มีเดียทั้งหมดในที่เก็บข้อมูลนี้เป็นไฟล์ที่ผู้ใช้ของฉันอัปโหลด”ที่เก็บข้อมูลนี้ยังรวมถึงแคชระยะไกลและข้อมูลตัวอย่าง URL ด้วย เปรียบเทียบไดเร็กทอรีย่อยของที่เก็บข้อมูลและการกำหนดค่าพื้นที่จัดเก็บข้อมูลของ Synapse ก่อนเลือกวิธีการล้างข้อมูล
  • “การลบไฟล์ด้วยตนเองเทียบเท่ากับการล้างข้อมูลของ Synapse”ซึ่งไม่ใช่ทางเลือกที่ได้รับการสนับสนุน ให้ Synapse อัปเดตข้อมูลเมตาผ่านกระบวนการเก็บรักษาข้อมูลหรือ API สำหรับผู้ดูแลระบบแทน

ตรวจสอบว่าปริมาณการใช้งานดิสก์ลดลงหรือไม่

หลังจากที่ตัวจัดการการล้างข้อมูลทำงานเสร็จแล้ว ให้ตรวจสอบdf -hขนาดของไดเร็กทอรีสื่ออีกครั้ง สำหรับการล้างข้อมูลผ่าน API ให้ยืนยันจำนวนไฟล์ที่ถูกลบในคำตอบ และเปรียบเทียบไดเร็กทอรีที่เกี่ยวข้องก่อนและหลังการลบ ตรวจสอบบันทึกของ Synapse เพื่อหาข้อผิดพลาดในการกำหนดค่าหรือข้อผิดพลาดของตัวจัดการ หากไดเร็กทอรียังคงมีขนาดใหญ่ ให้ตรวจสอบว่าการปรับใช้ของคุณเขียนสื่อไปยังผู้ให้บริการที่กำหนดค่าไว้หรือวอลุ่มแยกต่างหากหรือไม่ API การลบสื่อในเครื่องของ Synapse จะไม่มีผลต่อสื่อที่จัดเก็บไว้ในที่เก็บสื่อภายนอก อย่าคิดว่าการตอบสนองของ API ที่สำเร็จจะช่วยลดขนาดระบบไฟล์ของโฮสต์ได้ หากไฟล์เหล่านั้นอยู่ในที่อื่น

ข้อมูลอ้างอิงอย่างเป็นทางการ

ฝากความเห็น

เพิ่มขีดจำกัดไฟล์ Systemd ของ Synapse โดยไม่ต้องคาดเดา

เพิ่มขีดจำกัดไฟล์ Systemd ของ Synapse โดยไม่ต้องคาดเดา

ตรวจสอบว่า Synapse ถึงขีดจำกัดการเปิดไฟล์ต่อกระบวนการแล้วหรือไม่ ตั้งค่า systemd drop-in สำหรับบริการหรือ worker ที่ถูกต้อง และตรวจสอบขีดจำกัดแบบเรียลไทม์

หากพบข้อความ “ถอดรหัสไม่สำเร็จ” ให้กู้คืนรหัสห้องที่หายไป

หากพบข้อความ “ถอดรหัสไม่สำเร็จ” ให้กู้คืนรหัสห้องที่หายไป

ตรวจสอบว่าข้อผิดพลาดนั้นเกิดขึ้นเฉพาะกับเบราว์เซอร์เดียวหรือเหตุการณ์เดียวหรือไม่ จากนั้นใช้รหัสกู้คืนของ Element หรืออุปกรณ์ที่เชื่อถือได้โดยไม่ต้องเสี่ยงกับประวัติการเข้ารหัสที่เหลืออยู่ของคุณ

ล้างข้อความและไฟล์มีเดียเก่าๆ ของ Synapse โดยไม่สูญเสียข้อมูล

ใช้ API สำหรับล้างประวัติและสื่อของ Synapse หรือการตั้งค่าการเก็บรักษาข้อมูลเพื่อลบข้อมูลที่ล้าสมัยอย่างปลอดภัย จากนั้นตรวจสอบความสมบูรณ์และการกู้คืนพื้นที่ดิสก์

สร้างบอท Matrix Echo ในภาษา Python โดยใช้ Simple-Matrix-Bot-Lib

สร้างบอท Matrix Echo ในภาษา Python โดยใช้ Simple-Matrix-Bot-Lib

ติดตั้งไลบรารีเวอร์ชันปัจจุบัน เชื่อมต่อบัญชี Matrix เฉพาะ และเรียกใช้บอท !echo ขนาดเล็กที่มีการจัดการข้อมูลประจำตัวที่ปลอดภัยยิ่งขึ้นและการทดสอบที่ชัดเจน

เชื่อมต่อ Matrix กับ WhatsApp, Telegram และ Discord ด้วยบริดจ์แยกต่างหาก

เชื่อมต่อ Matrix กับ WhatsApp, Telegram และ Discord ด้วยบริดจ์แยกต่างหาก

ตั้งค่าบริดจ์ Mautrix สามตัว โดยแยกการลงทะเบียน การเข้าสู่ระบบ และการทดสอบออกจากกัน เพื่อหลีกเลี่ยงปัญหาที่อาจเกิดขึ้นจากการเชื่อมต่อเครือข่าย Docker นโยบายบัญชี และการซิงค์ข้อมูล

เรียกคืนพื้นที่ดิสก์ Synapse Media โดยไม่ทำให้ไฟล์ที่แชร์เสียหาย

ค้นหาสิ่งที่กำลังทำให้พื้นที่เก็บข้อมูลของ Synapse เต็ม ตั้งค่าการเก็บรักษาข้อมูลสื่ออย่างปลอดภัย และล้างแคชระยะไกลโดยไม่ต้องลบไฟล์โดยตรงจากดิสก์

ปิดใช้งานผู้ใช้ Matrix ที่ไม่ได้ใช้งานโดยไม่ต้องลบประวัติห้อง

ปิดใช้งานผู้ใช้ Matrix ที่ไม่ได้ใช้งานโดยไม่ต้องลบประวัติห้อง

ตรวจสอบกิจกรรมของอุปกรณ์ ปิดใช้งานบัญชี Synapse ที่ได้รับการยืนยันว่าไม่ได้ใช้งานผ่านทาง Admin API และเรียนรู้ว่าตัวเลือก "ลบข้อมูล" นั้นลบอะไรออกไปบ้าง

ลดภาระการใช้หน่วยความจำของ PostgreSQL ใน Matrix Synapse

ตรวจสอบว่าหน่วยความจำของ PostgreSQL มาจากงานประมวลผลคำสั่งค้นหา บัฟเฟอร์ที่ใช้ร่วมกัน การเชื่อมต่อ หรือการบำรุงรักษา จากนั้นทำการเปลี่ยนแปลงที่ปลอดภัยต่อการใช้งาน Synapse ตามเป้าหมาย

เหตุใดการเข้าร่วมห้องสนทนา Matrix Synapse จึงช้า และควรตรวจสอบอะไรบ้าง

เหตุใดการเข้าร่วมห้องสนทนา Matrix Synapse จึงช้า และควรตรวจสอบอะไรบ้าง

ตรวจสอบการเข้าร่วมห้อง Matrix ที่ช้าไปยังโฮมเซิร์ฟเวอร์ระยะไกลเครื่องใดเครื่องหนึ่ง การหน่วงเวลาของเฟเดอเรชัน การโหลดฐานข้อมูลภายใน หรือคิวผู้ส่งขาออก ก่อนที่จะเปลี่ยนการตั้งค่า Synapse

ปิดการลงทะเบียนผ่าน Matrix หรือกำหนดให้ต้องใช้โทเค็นเชิญบน Synapse

หยุดการสร้างบัญชีแบบเปิดบนเซิร์ฟเวอร์ Synapse ที่โฮสต์เอง หรือจำกัดการลงทะเบียนเฉพาะผู้ได้รับเชิญเท่านั้น โดยใช้โทเค็นการลงทะเบียนที่มีจำนวนการใช้งานจำกัด