Akamai лог обработки
Я копаю логи Akamai, загружаю таблицы Excel, а затем вручную соединяю их, чтобы можно было отсортировать данные, чтобы найти лучшие видео и источники ссылок. Есть ли какие-либо инструменты, которые вы знаете, чтобы помочь с этим видом обработки? Я ищу что-то вроде Urchin для журналов Apache, но для журналов Akamai.
4 ответа
Вы можете настроить параметр "Доставка журналов", чтобы отправлять вам журналы в "комбинированном" формате. Таким образом, вы можете использовать любой стандартный инструмент по вашему выбору (например, awstats или аналогичный).
Ознакомьтесь с Sumo Logic, он предлагает интеграцию облака в облако с Akamai, с богатым готовым контентом с использованием облачного монитора. Настройка очень проста, и вам не нужно беспокоиться о пакетной загрузке / обработке чего-либо на месте.
Отказ от ответственности - я сотрудник сумо.
Я просто использую тонну awk, sort а также uniq -c когда делаешь такие вещи.
Perl может быть хорош для повторяемости, но будьте осторожны, когда имеете дело с большими наборами данных (я недавно играл с дампами BGP с маршрутизатора DFZ), действительно легко вставить даже большую машину в swap, если вы потеряете память.
Такие инструменты, как Splunk и т. Д., Похоже, что они могут быть полезны для специальных вещей, где простой канал unix может не работать, но не является хорошим решением для более постоянных отчетов.
Вы можете просто использовать Awstats или аналогичные, большинство инструментов обработки веб-журналов могут использовать другой формат ввода.