A
Бывает так, что процесс плодит там временные файлы, и после падения (и отката) место, естественно, очищается
Size: a a a
2020 August 20
A
Так что оно вроде бы как и есть, а по факту его не хватает
A
Это лучше в динамике смотреть, например, запустить ещё раз загрузку и мониторить место
K
Andrew
А в pgsql_tmp?
Хм, не могу понять как проверить
A
Temporary files (for operations such as sorting more data than can fit in memory) are created within PGDATA/base/pgsql_tmp, or within a pgsql_tmp subdirectory of a tablespace directory if a tablespace other than pg_default is specified for them. The name of a temporary file has the form pgsql_tmpPPP.NNN, where PPP is the PID of the owning backend and NNN distinguishes different temporary files of that backend.
https://www.postgresql.org/docs/9.1/storage-file-layout.html
K
Andrew
Temporary files (for operations such as sorting more data than can fit in memory) are created within PGDATA/base/pgsql_tmp, or within a pgsql_tmp subdirectory of a tablespace directory if a tablespace other than pg_default is specified for them. The name of a temporary file has the form pgsql_tmpPPP.NNN, where PPP is the PID of the owning backend and NNN distinguishes different temporary files of that backend.
https://www.postgresql.org/docs/9.1/storage-file-layout.html
у меня удаленная база на aws
A
RDS?
A
это исторические данные, надо смотреть в динамике
K
а сама база занимает 9гб
A
a best practice to monitor the growth of these files in number and size, rather than to review only the output.
A
то есть снять статистику, запустить процесс по-новой и смотреть, как будет изменяться размер
A
так что 67гб - это с момента последнего сброса (these counters are reset only by recovery at server start, such as after an immediate shutdown, a server crash, and a point-in-time recovery)
K
Окей, посмотрю в динамике
VY
1. посмотреть
2. если есть MV и вы их CONCURRENTLY обновляете — поднять
3. выставить
4. возможно не хватает индексов где-то и база делает HashJoin вместо NL —
и да, я х.з. что из этих настроек можно в RDS крутить…
work_mem, скорее всего поднять2. если есть MV и вы их CONCURRENTLY обновляете — поднять
temp_buffers3. выставить
temp_file_limit=1GB и смотреть, как падают запросы с ошибками, курить сами запросы4. возможно не хватает индексов где-то и база делает HashJoin вместо NL —
temp_file_limit выявит запросы, надо анализировать их планыи да, я х.з. что из этих настроек можно в RDS крутить…
K
1. посмотреть
2. если есть MV и вы их CONCURRENTLY обновляете — поднять
3. выставить
4. возможно не хватает индексов где-то и база делает HashJoin вместо NL —
и да, я х.з. что из этих настроек можно в RDS крутить…
work_mem, скорее всего поднять2. если есть MV и вы их CONCURRENTLY обновляете — поднять
temp_buffers3. выставить
temp_file_limit=1GB и смотреть, как падают запросы с ошибками, курить сами запросы4. возможно не хватает индексов где-то и база делает HashJoin вместо NL —
temp_file_limit выявит запросы, надо анализировать их планыи да, я х.з. что из этих настроек можно в RDS крутить…
спасибо. Попробую заняться этим после того как гляну как изменяются временные файлы при запуске моего сервиса
DR
INSERT INTO name (id,code) VALUES (?,?) это лог до подстановки аргументов квери билдеромpq: syntax error at or near ","
не подстваляются аргументы и выполняет запрос с “?”?
A
INSERT INTO name (id,code) VALUES (?,?) это лог до подстановки аргументов квери билдеромpq: syntax error at or near ","
не подстваляются аргументы и выполняет запрос с “?”?
какой квери билдер ты используешь?