Думаю, довольно часто в корпоративной админке, или просто административной части сайта, возникает необходимость обрабатывать большое количество файлов и показывать пользователю статус работы.
Это может быть пакетная обработка загруженных изображений, резервное копирование документов, загрузка большого дампа базы данных и так далее.
При написании своего файлового менеджера (ждите взрыва популярности в 2010 году ;)), я написал простую библиотеку для организации операций с файлами, показывающую пользователю статус операции.
Основная идея очень проста:
Любую операцию над файлами можно разделить на несколько составляющих:- получение списка файлов, необходимых для работы, и организация правильного «расширения» каталогов — без рекурсии (почему так, объясню позже)
- Прямая обработка файлов:
- начать обработку файла (например, открытие дескриптора файла)
- цикл ( файл еще не обработан ){
- повторяющийся фрагмент.
- }
- завершение обработки файла (например, закрытие дескриптора файла)
Для более простых операций, таких как удаление файлов, цикл или финальный этап могут отсутствовать.
Для чего все это? Почему это так сложно?
Теперь, когда мы поняли, из каких частей может состоять операция над файлами, приступим к самому главному: что это дает в применении к нашей задаче (показ статуса сложной и длительной операции над файлами)? Это дает следующее:- Сохранение всего дерева файлов, ожидающих обработки (помните, я говорил о нерекурсивных алгоритмах расширения дерева каталогов?)
- Теоретическая возможность сохранить состояние операции в любом месте (то есть сразу после запуска или где-то в середине цикла).
- Как следствие двух предыдущих, возможность планировать прерывание операции через определенные промежутки времени, чтобы показать пользователю статус операции, и снова начинать с последнего запомненного места.
- (Не реализовано) Возможность мониторинга ошибок операции непосредственно во время ее выполнения, без потери состояния и полного отключения.
Что изменится для пользователя?
До:
загрузка… (через полчаса) Таймаут 504 шлюзаПосле:
начинаю конвертировать… … (обновление статуса каждые 5 секунд) загрузка (123 из 3000 файлов преобразовано)… … операция завершенаГде находится сама библиотека?
Сам текст библиотеки (150 строк с комментариями) и простой пример использования находятся здесь: forum.dklab.ru/viewtopic.phpЭp=146572#146572 Использование в моем файловом менеджере: demo.dolphin-php.org (логин логин, пароль пароль, версия - полная) (копирование, удаление, CHMOD файлов,.) Более подробное описание в формате .
doc [на английском языке]: m.forum.dklab.ru/files/multipart.rar Теги: #php #обработка данных #Юзабилити #Чулан
-
Мониторинг Приложений С Помощью Prometheus
19 Oct, 24 -
Взлом Госуслуг: Мифы И Реальность
19 Oct, 24 -
Вышла Финальная Версия Unity 2.0
19 Oct, 24
