gp7
Member | Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
первое что в глаза бросается:
Загрузка файлов в БД идет в порядке их физического расположения в ФС, т.е. не в хронологическом (согласно метке времени в именах файлов) порядке. И это при том, что прога всеравно вначале читает весь список.
Парсинг идет не в памяти а (о ужос) по-файлово в локальном каталоге, и даже не в TEMP - в ProgramData (вот мне щастье было, при сотнях тысяч файлов...)
В модуле парсинга напрочь отсутствует минимальный ИИ, который в "свободном" парсинге (а иначе неможет, ибо контент) быть обязан.
Не учитывается что файлы м.б. в архивах (абсолютно уверен что такое у всех, ибо это штатная функция демона и OldLogs). Пришлось терабайт лога распаковывать ппц
И еще куча мата в том же духе, уже по самому парсингу....
Автор школота либо под заказ писали и заказчик "садовник"
|
Всего записей: 387 | Зарегистр. 10-07-2007 | Отправлено: 16:06 27-12-2014 | Исправлено: gp7, 08:47 28-12-2014 |
|
