Matrix Synapse에서 PostgreSQL 메모리 사용량 줄이기
PostgreSQL 메모리 사용량이 쿼리 작업, 공유 버퍼, 연결 또는 유지 관리 작업 중 어느 것에서 발생하는지 확인한 다음 Synapse에서 안전하게 적용할 수 있는 변경 사항을 적용하세요.
Matrix Synapse에서 PostgreSQL이 예상보다 많은 메모리를 사용하는 경우, 먼저 공유 버퍼, 활성 쿼리 작업, 자동 진공 청소 또는 많은 연결 수 중 어떤 부분에서 메모리 사용량이 증가하는지 확인하십시오. 그런 다음 각 원인을 하나씩 조정하고 다시 측정하십시오. Synapse 자체의 Python 워커도 상당한 메모리를 사용하므로 데이터베이스 설정을 변경하기 전에 PostgreSQL 프로세스 또는 데이터베이스 컨테이너가 메모리 사용량 증가의 원인인지 확인해야 합니다.
PostgreSQL은 캐시에 공유 메모리를 사용하고, 각 서버 연결 및 쿼리에 전용 메모리를 사용하며, 운영 체제 페이지 캐시도 사용합니다. Linux에서 "사용 중"으로 표시되는 메모리에는 회수 가능한 파일 시스템 캐시가 포함될 수 있으므로, 이 수치만으로는 데이터베이스에 부하가 걸렸다고 단정할 수 없습니다. 지속적으로 사용 가능한 메모리가 부족하거나, 스왑 활동이 활발하거나, 메모리 부족 오류가 발생하거나, 컨테이너가 메모리 한계에 근접하는지 확인하십시오. 이러한 신호를 Synapse 및 PostgreSQL 프로세스 메트릭과 비교해 보세요.
PostgreSQL 백엔드는 클라이언트 연결을 처리하는 서버 프로세스입니다. Synapse의 데이터베이스 연결 풀은 프로세스당 여러 백엔드를 열 수 있으며, 각 Synapse 워커는 자체 풀을 사용합니다. 따라서 워커 수 또는 풀 크기를 늘리면 동시 데이터베이스 작업량과 메모리 요구량이 증가할 수 있습니다. 조치: PostgreSQL 설정을 조정하기 전에 Synapse 프로세스, 워커 수, 풀 설정, PostgreSQL 연결 수, 호스트 또는 컨테이너의 메모리 제한을 확인하십시오.
관리자 권한으로 Synapse 데이터베이스에 연결하여 메모리 및 연결을 제어하는 설정을 확인하십시오.
SHOW shared_buffers;
SHOW work_mem;
SHOW maintenance_work_mem;
SHOW autovacuum_work_mem;
SHOW max_connections;
shared_buffersPostgreSQL의 공유 캐시이며 서버 시작 시 할당됩니다. work_mem이는 정렬 및 해시 테이블 작업에 대한 쿼리 작업별 예산이며 서버 전체 제한이 아닙니다. 하나의 쿼리에서 여러 개의 이러한 작업이 사용될 수 있으며, 여러 연결에서 동시에 실행될 수 있습니다. 유지 관리 및 자동 진공 청소 메모리 또한 여러 유지 관리 워커가 실행될 때 증가할 수 있습니다. 조치: 가장 큰 설정이 최적이라고 가정하기보다는 구성된 값을 사용 가능한 RAM, 동시 실행 수 및 Synapse 연결 수와 비교하십시오.
이 쿼리를 사용하여 연결된 클라이언트 세션 수와 활성 또는 유휴 상태를 확인할 수 있습니다.
SELECT application_name, state, count(*)
FROM pg_stat_activity
GROUP BY application_name, state
ORDER BY count(*) DESC;
배포 환경에서 지원하는 경우, PostgreSQL 컨테이너의 메모리 제한을 확인하고 해당 컨테이너의 메트릭 또는 호스트의 프로세스 및 cgroup 메트릭을 활용하십시오. PostgreSQL 프로세스 전체의 상주 메모리를 합산하면 공유 페이지 사용량이 과대 계산될 수 있습니다. 조치: 컨테이너 또는 호스트의 총 메모리 사용량을 확인하여 부하를 파악한 다음, 연결 및 쿼리 통계를 사용하여 원인을 찾아내십시오.
먼저 검토하십시오 work_mem. 높은 값은 동시 쿼리가 여러 정렬 또는 해시 연산을 수행할 때 상당한 메모리를 소비할 수 있습니다. 측정 결과 쿼리 동시성이 메모리 사용량을 급증시키는 것으로 나타나면 값을 신중하게 줄이십시오. 단, 대규모 연산은 임시 파일로 처리되어 실행 속도가 느려질 수 있습니다. Synapse 워크로드와 PostgreSQL 버전이 중요하므로 다른 서버에서 일반적인 값을 복사하지 마십시오.
PostgreSQL 설명서에서는 shared_buffers메인 공유 캐시를 설명하며, 최소 1GB의 RAM을 갖춘 전용 데이터베이스 서버의 경우 RAM의 약 25%를 적절한 시작점으로 제시합니다. 또한 PostgreSQL이 운영 체제 캐시도 사용하기 때문에 40% 이상을 할당해도 대부분의 워크로드에 도움이 되지 않을 가능성이 높다고 언급합니다. 조치: 이러한 수치는 참고 자료로만 활용하고 공유 Synapse 호스트의 목표값으로 삼지 마십시오. 공유 버퍼가 이미 전체 메모리의 상당 부분을 차지하고 있다면, 계획된 재시작 시 더 낮은 값을 고려하십시오.
Synapse의 워커 구성 파일에서 `connectionpool` database.args.cp_min및 ` cp_maxconnectionpool` 값을 검토하십시오 homeserver.yaml. Synapse PostgreSQL 가이드에서는 이러한 설정을 최소 및 최대 연결 풀 크기로 보여줍니다. 워커가 많고 각 워커가 연결 풀을 사용하는 경우 전체 연결 수는 하나의 파일에 설정된 값보다 훨씬 클 수 있습니다. 값을 낮추면 cp_max동시에 실행되는 데이터베이스 백엔드와 해당 백엔드의 메모리 사용량을 제한할 수 있지만, 연결 풀이 너무 작으면 요청이 연결을 기다려야 할 수 있습니다.
database:
name: psycopg2
args:
user: synapse_user
password: "use-a-secret-store-or-protected-config"
dbname: synapse
host: 127.0.0.1
port: 5432
cp_min: 2
cp_max: 5
위의 값은 예시일 뿐이며, 보편적인 권장 사항이 아닙니다. 메인 프로세스와 모든 워커 프로세스의 풀 수를 계산하고 관리, 마이그레이션, 모니터링 및 기타 클라이언트를 위한 여유 공간을 확보하십시오. PostgreSQL은 일부 리소스를 할당할 때 연결 수를 기준으로 하므로 max_connections, "만일의 사태"를 대비하여 연결 수 제한을 높이면 기본 메모리 사용량이 증가할 수 있습니다. 조치: 측정된 동시 실행 요구 사항에 맞춰 Synapse 풀 수를 제한하고 PostgreSQL의 연결 수 제한에 모든 서비스와 관리자 액세스를 위한 여유 공간을 확보하십시오.
PostgreSQL은 자동 진공 청소 및 인덱스 작업에 유지 관리 메모리를 할당할 수 있습니다. 자동 진공 청소 메모리는 자동 진공 청소 워커별로 할당될 수 있으므로, 여러 워커와 함께 사용하는 경우 메모리 사용량이 급증할 수 있습니다. 메모리 사용량을 줄이기 위해 자동 진공 청소를 비활성화하지 마십시오. 자동 진공 청소는 필수적인 테이블 유지 관리를 수행합니다. 조치: 사용량 급증 시 로그 및 활동을 검사한 후, 해당 작업이 원인으로 확인된 경우에만 maintenance_work_mem설정 을 조정하십시오.autovacuum_work_mem
먼저 PostgreSQL 구성과 Synapse 구성을 백업하십시오. 한 번에 하나의 변수 또는 풀 제한만 변경하고, 기존 자격 증명을 안전하게 보관하며, 패키지 또는 컨테이너에 맞는 구성 경로를 사용하십시오. shared_buffers및 를 포함한 일부 PostgreSQL 매개변수는 max_connections서버 재시작이 필요합니다. 재로드 가능한 설정은 PostgreSQL에서 지원하는 재로드 메커니즘을 사용하여 적용할 수 있습니다. 재로드가 적용되었는지 확인하기 전에 설정 컨텍스트를 확인하십시오.
변경 후에는 사용량이 많은 기간 동안 최대 메모리 사용량, 스왑 및 메모리 부족 이벤트, 활성 연결, 쿼리 지연 시간, 임시 파일 활동, Synapse 요청 지연 시간을 모니터링하십시오. 이 변경 사항은 지속적인 연결 대기, 쿼리 속도 저하 또는 요청 백로그 증가를 유발하지 않고 메모리 사용량을 줄이는 데 유용합니다. PostgreSQL이 아닌 Synapse가 RAM을 많이 사용하는 프로세스인 경우 Synapse 캐시 동작과 워커 수를 별도로 조정하십시오. PostgreSQL 설정은 Python 워커가 점유하는 메모리 문제를 해결하지 않습니다.
work_mem서버 전체 RAM 용량과 동일하게 설정하거나, 풀 총량을 계산하지 않고 용량을 늘리거나, 자동 진공 청소 기능을 일괄적으로 비활성화하는 등의 해결책을 사용하지 마십시오 max_connections. 메모리 사용량이 여전히 높은 경우, 사용량이 최고조에 달했을 때의 메트릭을 수집하고 하드웨어를 추가하거나 광범위한 구성 변경을 하기 전에 실제로 실행 중인 쿼리와 연결 소스를 검토하십시오.
PostgreSQL 메모리 사용량이 쿼리 작업, 공유 버퍼, 연결 또는 유지 관리 작업 중 어느 것에서 발생하는지 확인한 다음 Synapse에서 안전하게 적용할 수 있는 변경 사항을 적용하세요.
Synapse 설정을 변경하기 전에 Matrix 룸이 원격 홈서버에 느리게 참여하는 원인, 페더레이션 백오프, 로컬 데이터베이스 부하 또는 아웃바운드 발신자 대기열 등을 추적해 보세요.
자체 호스팅 Synapse 서버에서 계정 생성을 중단하거나, 제한된 사용 횟수의 등록 토큰을 사용하여 초대 전용으로 가입을 유지하세요.
Clear Element는 신뢰할 수 있는 장치 또는 복구 키를 사용하여 미확인 세션 경고를 표시하며, 암호화된 채팅 기록을 보호하는 검사 기능을 제공합니다.
데이터베이스 잠금 경합과 만료된 WebDAV 잠금을 구분한 다음, 적절한 ownCloud 10 해결 방법을 선택하고 구성하십시오.
대상 검사를 통해 빈 ownCloud 웹 화면이 나타나는 원인을 브라우저 캐시, 누락된 웹 자산, 서비스 오류 또는 역방향 프록시 URL 설정으로 추적할 수 있습니다.
ownCloud의 웹 PHP 메모리 제한을 설정하고, 해당 서비스를 재시작한 다음, CLI 설정이나 업로드 제한과 혼동하지 않고 활성 값을 확인하십시오.
MySQL, PHP, 소켓 설정 또는 데이터베이스 권한이 ownCloud 10을 차단하는지 확인한 다음 안전한 해결 방법을 검증하세요.
ownCloud Classic에서 공개 링크 만료를 필수로 설정하고, 최대 유효 기간을 지정하고, 별도의 정리가 필요한 기존 공유를 확인합니다.
Keycloak을 통해 TOTP를 활성화하고, 사용자를 안전하게 등록하고, Infinite Scale의 경로 수준 MFA 설정이 적용되는 시점을 파악하세요.