转载网址: https://blog.csdn.net/weixin_42272246/article/details/125602258 Linux下apache日志（按日期存放）分析与状态查看方法的相关教程结束。
一、DWS层 1、概括 dwd层的数据，每日轻度聚合，建宽表 表名 粒度 dws_uv_detail_daycount 一个设备是一行 dws_user_action_daycount(只统计今天登录的会员) 一个会员是一行 dws_sku_action_daycount...
背景： 最近在统计数据，今天有个要求是要统计每天的订单数量。表中 created_date （创建日期）字段是 datetime 类型。 心路历程： 1. group by 字符串 把 created_date 变成 字...
– 查询出付费的所有通道 select channels, count(*) from t_auth_core_flow where res_code not in (’-10000’,‘10075’,‘10094’‘10095’,‘10097’,‘10105’,‘10110’,‘10112’) GROUP BY channels...
需求中经常会有按日期,月份,年份分组统计的操作 那么groupBy直接是实现不了的,需要转化一下,话不多说,看代码 SELECT FROM_UNIXTIME(create_time, '%Y-%m-%d') as day, create_time, count( DISTINCT ...
在工作过程中，data目录会一直接收文件，收到的文件放到一个大目录里不好判断是否漏收，也不利于检索； 所以写了个脚本，每天早上九点用windows计划执行，将昨日这个文件夹内收到的文件全部归档，归档文...
pandas 是 python 中一个功能强大的库，这里就不再复述了，简单介绍下用日期范围筛选 pandas 数据。 日期转换 用来筛选的列是 date 类型，所以这里要把要筛选的日期范围从字符串转成 date 类型 比如我的数据包含...
