实时日志概述
功能概述
当您的站点接入 EdgeOne 后,EdgeOne 为您提供了丰富的预制报表,帮助您监控、分析业务的运行情况,包括流量分析、缓存分析、四层代理、安全分析等。但是在数据分析中,您可能会存在更加个性化的数据分析诉求,例如以下数据分析场景:
场景 | 场景诉求 |
深度数据分析 | 需要指定一个或者多个条件,查找符合条件的日志。例如: 通过指定客户端 IP 查询指定时间范围内的访问统计(访问 URL、访问次数等)。 通过筛选状态码、时间、URL 细化分析状态码的分布情况。 通过筛选处置方式为观察的日志,汇总携带的请求头内容及其他请求特征信息,调整安全策略。 |
监控服务指标 | 分析 EdgeOne 服务的质量以及用户的访问效率,以便及时发现异常。访问效率包括 EdgeOne 整体响应耗时、下载速度、回源响应耗时等。 |
鉴别盗刷 | 通过分析流量异常、访问模式、访问频率,鉴别存在盗刷等行为客户端 IP 。 |
统一多厂商监控数据 | 自建数据大屏,统一监控多个云厂商的应用数据。 |
存储日志 | 需要用户相关访问日志保留30天以上。 |
针对以上场景诉求,EdgeOne 实时日志服务提供了日志的实时采集与推送的能力,可将您的日志推送到腾讯云日志服务(CLS)或您自建的数据中心内,帮助您自行实现对日志数据的灵活检索与分析。目前 EdgeOne 支持将日志推送到以下目的地:
推送至腾讯云 CLS:推送至腾讯云提供的一站式日志处理服务(CLS),可用于在 CLS 上进一步对日志做检索分析。
推送至 AWS S3 兼容对象存储:兼容 AWS Signature V4 鉴权方法的存储桶。
推送至 HTTP 服务器:通过 HTTP POST 请求将日志推送到指定的后端服务器。
说明:
通常情况下,日志投递的延迟在 5 分钟内。为了确保日志投递的实时性,EdgeOne 将固定的日志数量或者固定时间周期为一个批次,将日志推送到相应的目的地。默认策略为优先按日志条数 1000 条/批次;当日志条数不满 1000 条,但距上次推送时间间隔 5 秒时,也将触发第二次推送。
计费和配额说明