HDFS result analytics

电商日志分析台

数据校验中

清洗概览

数据范围加载中

清洗前原始记录
--
Mapper 输入总量
清洗后有效记录
--
有效率 --
剔除脏数据
--
脏数据率 --
访问趋势覆盖
--
自然日

脏数据原因构成

逐行聚合 dirtyRecords-m-*

--
-- 异常记录

    清洗前后对比

    记录留存、剔除比例与一致性校验

    --
    清洗前
    --
    有效数据
    --
    脏数据
    --
    记录留存结构 --
    有效记录 -- 脏数据 --
    处理速度 -- 存储体积 --

    日访问量趋势

    有效日志按访问日期聚合,纵轴按当前区间缩放

    日均-- 峰值-- 最低--

    24 小时流量分布

    00 点位于顶部并按顺时针排列,扇形半径按当前 24 小时区间缩放

    --
    全天有效访问 -- 每时均值 --
    峰值小时 --
    低谷小时 --
    峰谷差 --
    每小时均值 --

    六小时时段分布

      用户转化漏斗

      按日志行为次数统计,各层包含其后的转化行为

      --
      访问留存率 --
      意向购买率 --
      最终购买转化 --

      --

      高频访问 IP 段

      按 IPv4 前三段聚合,Top 10

      --

        高频访问路径

        清洗后有效请求路径,Top 10

        --

          脏数据样例

          各异常标签的代表记录,原始内容来自 dirtyRecords 分片

          --
          异常原因 原始记录 来源分片

          UV 月度统计

          ecommerce-hdfs-results/output/uniqueVisitors-r-00000

          月均合计-- 峰值月--