Нужно дописать запрос в pg_dump.exe

Discussion in 'Реверсинг' started by prescott, 11 Nov 2008.

  1. prescott

    prescott Elder - Старейшина

    Joined:
    28 Jul 2008
    Messages:
    132
    Likes Received:
    43
    Reputations:
    5
    В реверсинге я ноль, поэтому прошу помощи.

    Есть консольная утилита pg_dump.exe (поставляется вместе с PostgreSQL сервером). Она создает архив базы данных. Нужно дописать туда запрос для удаления архивированных записей. Смысл в том, что база увеличивается на 5 гигов в день, нужно чтобы утилита делала архив, и все заархивированные записи удаляла из базы.

    Думаю дело пяти минут, особенно для тех, кто работал с постгрес. Кто сделает с меня много плюсафф. :)
     
  2. prescott

    prescott Elder - Старейшина

    Joined:
    28 Jul 2008
    Messages:
    132
    Likes Received:
    43
    Reputations:
    5
    _http://depositfiles.com/files/zsvtlhmg1

    Собственно сама прога у кого нет
     
  3. [Raz0r]

    [Raz0r] Elder - Старейшина

    Joined:
    25 Feb 2007
    Messages:
    425
    Likes Received:
    484
    Reputations:
    295
    Зачем все так усложнять? Ты ведь pg_dump по крону выполняешь? Хотя если ты и вручную делаешь бэкап, то гораздо легче после завершения создания архива выполнять SQL-команды для удаления ненужных записей, т.е. сначала выполняешь pg_dump, а потом команду:
    echo "truncate table tablename;" | psql database -q -t
    http://www.postgresql.org/docs/7.4/static/app-psql.html
     
    #3 [Raz0r], 11 Nov 2008
    Last edited: 11 Nov 2008
  4. prescott

    prescott Elder - Старейшина

    Joined:
    28 Jul 2008
    Messages:
    132
    Likes Received:
    43
    Reputations:
    5
    Этот способ был был хорош в случае с одной таблицей и добавлением 1 записи в минуту. В моей базе около 30 таблиц, и за секунду она увеличивается на несколько сотен записей.

    То есть если сделать как ты предлагаешь, на момент запуска pg_dump.exe база будет содержать например 1000000 записей - 1000000 заархивируется, а когда после завершения работы я буду чистить таблицы, они будут содержать 1000253 записи => 253 записи будут утеряны.

    Следовательно я вижу такой вариант: программа записала sql команду по вставке строки в дамп - строку удалила и т.д.
     
  5. [Raz0r]

    [Raz0r] Elder - Старейшина

    Joined:
    25 Feb 2007
    Messages:
    425
    Likes Received:
    484
    Reputations:
    295
    тогда делай так: перед созданием архива получай количество записей в каждой таблице, затем выполняй pg_dump и по его завершении удаляй именно то число записей, которые имелось в таблице перед архивированием. Имхо задача решается небольшим sh-скриптом, где в массиве указаны все таблицы и в цикле для каждой выполняются три шага, описанных выше.
    Примерно так:
    Code:
    count = $(echo "select count(*) from tablename;" | psql database -q -t);
    # тут pg_dump
    echo "delete from tablename limit $count;" | psql database -q -t; 
     
    #5 [Raz0r], 11 Nov 2008
    Last edited: 11 Nov 2008
  6. prescott

    prescott Elder - Старейшина

    Joined:
    28 Jul 2008
    Messages:
    132
    Likes Received:
    43
    Reputations:
    5
    Видимо придется так и делать. Просто думал что дописать в экзешник команду будет быстрее...