Внимание
У Вас отключена поддержка Cookie в браузере. Отображение сайта будет некорректно!
en ru
В блог

Новая опция: сырые логи по S3 и FTP

Дата: 09.11.2018

Сырые логи помогают самостоятельно получить ответы на многие вопросы, возникающие в процессе эксплуатации CDN. В частности, понять причины неполадок при доставке контента.

Новая опция: сырые логи по S3 и FTP

Раньше логи выгружались по протоколу TCP с помощью опции Syslog, и для их приёма клиентам приходилось использовать специальный сервис и софт. Это было неудобно. Поэтому мы разработали более комфортные способы получения логов.

Где находится опция?

Выгрузкой логов можно управлять в личном кабинете: опция находится в меню вкладки CDN.

Новая опция: сырые логи по S3 и FTP

Как получать логи?

Логи могут быть загружены на хранилище клиента по двум протоколам: S3 и FTP. Соответствующее хранилище для приёма логов настраивается и поддерживается клиентом самостоятельно.

Как долго мы храним логи?

Мы храним логи за последние 14 дней.

Как долго логи находятся в хранилище?

Поскольку хранилище управляется клиентом, он сам решает, какие логи и как долго хранить; расширять ли хранилище, если заканчивается место, или просто удалить старые данные.

Получение логов по протоколу S3

Получать логи по протоколу S3 можно в хранилище Amazon или в любое другое S3-совместимое объектное хранилище.

Новая опция: сырые логи по S3 и FTP

Получение логов по протоколу FTP

Для получения информации подойдёт любой стандартный FTP-сервер.

Новая опция: сырые логи по S3 и FTP

Как работает отправка логов?

Логи нескольких ресурсов можно отправлять в одну или разные папки.

Отправка логов происходит раз в час. Если доставить их (полностью или частично) не удалось, через час произойдёт повторная отправка. Если приём логов не работает длительное время, попытки доставки будут повторяться ежечасно. (Но, как отмечено ранее, мы храним логи только за последние 14 дней.)

Статусы доставки логов

OK. Загрузка проходит успешно.

Fail. Логи не принимались на стороне клиента в течение суток (все 24 попытки доставить логи оказались неудачными).

Paused. Опция на паузе. В этом режиме можно менять настройки. Они будут удалены только при отключении опции.

Как выглядит лог?

Пример строки лога:

"89.36.201.215" "-" "-" "[31/Oct/2018:11:30:12 +0000]" "GET /data/cid/storage1/clr/m/dd83f-25ec-4982-8b86-2bd12c2cb/mp4/10/682.m4s HTTP/1.1" "200" "113792" "-" "AppleCoreMedia/1.0.0.16A404 (iPhone; U; CPU OS 12_0_1 like Mac OS X; ru_ru)" "114162" "-" "http" "14.cdn.tv" "0.010" "0.009" "382" "-" "[m9]" "MISS" "113792" "32.122.112.73:80" "2626" "5536" "-" "-" "RO" "Karagandy" "shield_old" "92.223.99.99"

Используемый logformat файла лога:

log_format gcdn  '"$remote_addr" "-" "$remote_user" "[$time_local]" '

       '"$request" "$status" "$body_bytes_sent" '

       '"$http_referer" "$http_user_agent" '

       '"$bytes_sent" "$sent_http_content_size" "$scheme" "$host" '

       '"$request_time" "$upstream_response_time" "$request_length" "$http_range" '

       '"[m9]" "$upstream_cache_status" "$upstream_response_length" "$upstream_addr" '

       '"$gcdn_api_client_id" "$gcdn_api_resource_id" "$uid_got" "$uid_set" '

       '"$geoip_country_code" "$geoip_city" "$shield_type" "$server_addr"';

 

Описания переменных вы найдёте в базе знаний в разделе «Логи» либо в документации Nginx.

Новая опция: сырые логи по S3 и FTP

Как подключить опцию?

«Сырые логи» — платная опция. Для активации свяжитесь с вашим аккаунт-менеджером или напишите в чат техподдержки.

ПОДПИСКА

Ваше имя: *

Ваш e-mail: *