Какой софт сейчас актуальней писать?

Discussion in 'Болталка' started by SPR_bot, 8 Oct 2012.

  1. -=lebed=-

    -=lebed=- хэшкрякер

    Joined:
    21 Jun 2006
    Messages:
    3,804
    Likes Received:
    1,960
    Reputations:
    594
    Ты наверно не понял о каких таблицах речь, в несколько сот млн. строк и пыхтеть мускул будет сутками над запросом (кстати куда он его выведет)? ввод/вывод из файла в базу это на самом деле файловые операции, работая с базой ты увеличишь их как минимум вдвое.
     
  2. alfi

    alfi New Member

    Joined:
    4 Mar 2012
    Messages:
    22
    Likes Received:
    1
    Reputations:
    0
    Я думаю как и всегда. Крипторы, трои или хорошие спамеры.
     
  3. q_i_p

    q_i_p Banned

    Joined:
    7 May 2012
    Messages:
    25
    Likes Received:
    5
    Reputations:
    1
    осинило, там кто то что то хотел, ответ выше
     
  4. q_i_p

    q_i_p Banned

    Joined:
    7 May 2012
    Messages:
    25
    Likes Received:
    5
    Reputations:
    1
    возъми рус аватар. заебло смотреть историю англии по дискавери.
     
  5. FlooP1k

    FlooP1k Banned

    Joined:
    28 Jul 2010
    Messages:
    95
    Likes Received:
    66
    Reputations:
    48
    Где оО дай ссыль
     
  6. VY_CMa

    VY_CMa Green member

    Joined:
    6 Jan 2012
    Messages:
    917
    Likes Received:
    492
    Reputations:
    724
    На самом деле с базами работать удобнее, при работе напильником и использовании sphinxsearch
     
    _________________________
  7. lukmus

    lukmus Elder - Старейшина

    Joined:
    18 Nov 2009
    Messages:
    401
    Likes Received:
    118
    Reputations:
    23
    ок, я тут вспомнил, у Ruby есть такой гем KirbyBase, это типа БД но не в традиционном понимании. Она представляет из себя файл обычный текстовый, но структуированный типа CSV только по другому. Так вот привести твой список к виду под kirbybase можно через любой редактор, способный работать с регулярками => в зависимости от редактора, использование оперативки на полную. А при выводе будет использоваться тоже оперативка, хоть по словам Фултона, данные не загружаются целиком в память. Вообщем что-либо подробнее о использовании оперативки KirbyBase я не нашел, но как вариант протестировать эту штуку можно попробовать, вдруг прокатит.

    P.S.
    Насчет MySQL, я не пробовал работать с несколькими сотнями миллионов, но вот с с несколькими десятками миллионов пробовал. На данный момент в БД моей aivk.net cообщений: 1 955 097, около 100к диалогов и столько же жертв + ~20-30 млн записей лога работы роботов. Так вот к примеру, экспорт БД в YML занимает около 5-7 часов, импорт из YML в БД занимает около 16-18 часов. Запрос на статистику по сообщениям, со всевозможнымы сортировками, в среднем выполнялся ~20-30 минут (запрос без вывода в файл). Статистику я обычно подвожу на своем ноутбуке (i5, RAM 4Gb)
     
  8. MrCepbIu

    MrCepbIu Banned

    Joined:
    24 Feb 2010
    Messages:
    42
    Likes Received:
    3
    Reputations:
    1
    посмотрите мой пост выше - скчайте исходники - объедените - профит
    зачем придумывать велосипед?
     
  9. FlooP1k

    FlooP1k Banned

    Joined:
    28 Jul 2010
    Messages:
    95
    Likes Received:
    66
    Reputations:
    48
    Этот кадр умудрился кинуть на деньги, за якобы ифреймер.
    Чет я не могу найти на античате раздел где блэк оставить? Или его убрали?
     
  10. mix0x0

    mix0x0 Active Member

    Joined:
    1 Nov 2010
    Messages:
    363
    Likes Received:
    189
    Reputations:
    92
    Он и не существовал.

    ТС, пиши ИИ для поиска людей с различных камер в городе. Потом продай готовую реализацию властям/заинтересованным личностям/etc
     
    #30 mix0x0, 12 Oct 2012
    Last edited: 12 Oct 2012