mysql - 通过比较前后记录创建自定义 session 标识符-6ren

mysql - 通过比较前后记录创建自定义 session 标识符

转载作者：太空宇宙更新时间：2023-11-03 10:35:51

我正在尝试基于数据创建一些 session (在 Vertica 中，但任何其他 OLAP 数据库 SQL 都应该有效)

我有一个简单的表，包含名为 Vehicle-ID、Event、Event-Code 的列，“Session-ID”是我要填充的列

我尝试过分区、领先、滞后和其他分析功能，但没有成功。 session的创建逻辑如下。

session 在您第一次遇到启动事件 ( 1 ) 时开始，并在获得最后一个停止 (2) 事件时结束。正如您在 session 开始后在 session 中看到的那样，如果我们得到更多的开始事件，我们将忽略并寻找最后停止事件。示例 Session-Id-1

由于某种原因，在停止事件之后，下一个事件没有开始(即运行等)，这意味着它是一个糟糕的 session ，我们想要捕获这个糟糕的 session ，直到我们找到一个新的开始。例子在session-id-2

我正在尝试使用 lead 和 lag 创建标记，它们查看前后的记录，并添加标记，如 first_start、final_end 等 .. 但它变得笨拙

更新 SQL 查询以创建 session

SELECT * , SUM(FLAG) OVER ( PARTITION BY Vehicle_ID ORDER BY Event_Time ROWS UNBOUNDED PRECEDING) AS SESSION_ID
FROM (
    SELECT * ,
    Case when Prev_Start_time < Prev_Stop_time and Event != 'Started' Then 1 else 0 end as bad_data ,
    Case when 
        ( Event = 'Started' and Prev_Start_time < Prev_Stop_time ) OR 
        --( Event = 'Stopped' and Prev_Event = 'Stopped' ) OR 
        ( Event = 'Running' and Prev_Start_time < Prev_Stop_time) OR 
        ( Prev_Event IS NULL) 
    THEN 1 END AS FLAG
    --Case when ( Event = 'Stopped' and Next_Event = 'Stopped' ) OR ( Event != 'Started' and Prev_Start_time < Prev_Stop_time) OR ( Prev_Event IS NULL) THEN 1 END AS FLAG
    FROM (
    WITH
        input(Vehicle_ID,Event_time,Event,Event_Code) AS (
                  SELECT 1,TIME '09:01:00','Started',1
        UNION ALL SELECT 1,TIME '09:02:00','Started',1
        UNION ALL SELECT 1,TIME '09:03:00','Running',3
        UNION ALL SELECT 1,TIME '09:04:00','Started',1
        UNION ALL SELECT 1,TIME '09:05:00','Running',3
        UNION ALL SELECT 1,TIME '09:06:00','Running',3
        UNION ALL SELECT 1,TIME '09:07:00','Running',3
        UNION ALL SELECT 1,TIME '09:08:00','Stopped',2
        UNION ALL SELECT 1,TIME '09:09:00','Stopped',2
        UNION ALL SELECT 1,TIME '09:10:00','Running',3
        UNION ALL SELECT 1,TIME '09:11:00','Running',3
        UNION ALL SELECT 1,TIME '09:12:00','Running',3
        UNION ALL SELECT 1,TIME '09:13:00','Started',1
        UNION ALL SELECT 1,TIME '09:14:00','Started',1
        UNION ALL SELECT 1,TIME '09:15:00','Running',3
        UNION ALL SELECT 1,TIME '09:16:00','Started',1
        UNION ALL SELECT 1,TIME '09:17:00','Running',3
        UNION ALL SELECT 1,TIME '09:18:00','Running',3
        UNION ALL SELECT 1,TIME '09:19:00','Running',3
        UNION ALL SELECT 1,TIME '09:20:00','Stopped',2
        UNION ALL SELECT 1,TIME '09:21:00','Started',1
        UNION ALL SELECT 1,TIME '09:22:00','Started',1
        UNION ALL SELECT 1,TIME '09:23:00','Running',3
        UNION ALL SELECT 1,TIME '09:24:00','Started',1
        UNION ALL SELECT 1,TIME '09:25:00','Running',3
        UNION ALL SELECT 1,TIME '09:26:00','Running',3
        UNION ALL SELECT 1,TIME '09:27:00','Running',3
        UNION ALL SELECT 1,TIME '09:28:00','Stopped',2
        )
    SELECT *, 
    Max( Case Event when 'Started' then Event_time end ) OVER (PARTITION BY Vehicle_ID ORDER BY Event_time Rows between unbounded preceding and 1 preceding ) AS Prev_Start_time,
    Max( Case Event when 'Stopped' then Event_time end ) OVER (PARTITION BY Vehicle_ID ORDER BY Event_time Rows between unbounded preceding and 1 preceding ) AS Prev_Stop_time,
    LAG(Event) OVER (PARTITION BY Vehicle_ID ORDER BY Event_time ) AS Prev_Event,
    LEAD(Event) OVER (PARTITION BY Vehicle_ID ORDER BY Event_time ) AS Next_Event
    FROM input ) AS T1
) AS T2

根据更新的查询新输入

Vehicle_ID  Event_time      Event       Event_Code  Prev_Start_time Prev_Stop_time      Prev_Event      Next_Event      bad_data    FLAG        SESSION_ID
1           9:01:00         Started         1           NULL            NULL            NULL            Started         0           1           1
1           9:02:00         Started         1           9:01:00         NULL            Started         Running         0           NULL            1
1           9:03:00         Running         3           9:02:00         NULL            Started         Started         0           NULL            1
1           9:04:00         Started         1           9:02:00         NULL            Running         Running         0           NULL            1
1           9:05:00         Running         3           9:04:00         NULL            Started         Running         0           NULL            1
1           9:06:00         Running         3           9:04:00         NULL            Running         Running         0           NULL            1
1           9:07:00         Running         3           9:04:00         NULL            Running         Stopped         0           NULL            1
1           9:08:00         Stopped         2           9:04:00         NULL            Running         Stopped         0           NULL            1
1           9:09:00         Stopped         2           9:04:00         9:08:00         Stopped         Running         1           NULL            1
1           9:10:00         Running         3           9:04:00         9:09:00         Stopped         Running         1           1           2
1           9:11:00         Running         3           9:04:00         9:09:00         Running         Running         1           1           3
1           9:12:00         Running         3           9:04:00         9:09:00         Running         Started         1           1           4
1           9:13:00         Started         1           9:04:00         9:09:00         Running         Started         0           1           5
1           9:14:00         Started         1           9:13:00         9:09:00         Started         Running         0           NULL            5
1           9:15:00         Running         3           9:14:00         9:09:00         Started         Started         0           NULL            5
1           9:16:00         Started         1           9:14:00         9:09:00         Running         Running         0           NULL            5
1           9:17:00         Running         3           9:16:00         9:09:00         Started         Running         0           NULL            5
1           9:18:00         Running         3           9:16:00         9:09:00         Running         Running         0           NULL            5
1           9:19:00         Running         3           9:16:00         9:09:00         Running         Stopped         0           NULL            5
1           9:20:00         Stopped         2           9:16:00         9:09:00         Running         Started         0           NULL            5
1           9:21:00         Started         1           9:16:00         9:20:00         Stopped         Started         0           1           6
1           9:22:00         Started         1           9:21:00         9:20:00         Started         Running         0           NULL            6
1           9:23:00         Running         3           9:22:00         9:20:00         Started         Started         0           NULL            6
1           9:24:00         Started         1           9:22:00         9:20:00         Running         Running         0           NULL            6
1           9:25:00         Running         3           9:24:00         9:20:00         Started         Running         0           NULL            6
1           9:26:00         Running         3           9:24:00         9:20:00         Running         Running         0           NULL            6
1           9:27:00         Running         3           9:24:00         9:20:00         Running         Stopped         0           NULL            6
1           9:28:00         Stopped         2           9:24:00         9:20:00         Running         NULL            0           NULL            6

最佳答案

在 Vertica 中，我会使用 MATCH() 子句。它还会遗漏不需要的行 - 那些没有意义的“运行”。试试这个:

    WITH
    -- your input as you gave it 
    input(tm,Vehicle_ID,Col1,Event,Event_Code,Session_ID) AS (
              SELECT TIME '09:01:00',1,'A','Started',1,1
    UNION ALL SELECT TIME '09:02:00',1,'B','Started',1,1
    UNION ALL SELECT TIME '09:03:00',1,'C','Running',3,1
    UNION ALL SELECT TIME '09:04:00',1,'A','Started',1,1
    UNION ALL SELECT TIME '09:05:00',1,'B','Running',3,1
    UNION ALL SELECT TIME '09:06:00',1,'C','Running',3,1
    UNION ALL SELECT TIME '09:07:00',1,'A','Running',3,1
    UNION ALL SELECT TIME '09:08:00',1,'A','Stopped',2,1
    UNION ALL SELECT TIME '09:09:00',1,'B','Stopped',2,1
    UNION ALL SELECT TIME '09:10:00',1,'C','Running',3,2
    UNION ALL SELECT TIME '09:11:00',1,'A','Running',3,2
    UNION ALL SELECT TIME '09:12:00',1,'B','Running',3,2
    UNION ALL SELECT TIME '09:13:00',1,'A','Started',1,3
    UNION ALL SELECT TIME '09:14:00',1,'B','Started',1,3
    UNION ALL SELECT TIME '09:15:00',1,'C','Running',3,3
    UNION ALL SELECT TIME '09:16:00',1,'A','Started',1,3
    UNION ALL SELECT TIME '09:17:00',1,'B','Running',3,3
    UNION ALL SELECT TIME '09:18:00',1,'C','Running',3,3
    UNION ALL SELECT TIME '09:19:00',1,'A','Running',3,3
    UNION ALL SELECT TIME '09:20:00',1,'A','Stopped',2,3
    )
    -- here is where the real select starts ..
    SELECT
      pattern_id()
    , match_id()
    , event_name()
    , *
    FROM input
    MATCH(
      PARTITION BY vehicle_id
      ORDER BY tm
      DEFINE
        started_event AS (event='Started')
      , running_event AS (event='Running')
      , stopped_event AS (event='Stopped')
      PATTERN p AS (started_event+ (running_event|started_event)* stopped_event+)
    )
    ;


    pattern_id|match_id|event_name   |tm      |Vehicle_ID|Col1|Event  |Event_Code|Session_ID
             1|       1|started_event|09:01:00|         1|A   |Started|         1|         1
             1|       2|started_event|09:02:00|         1|B   |Started|         1|         1
             1|       3|running_event|09:03:00|         1|C   |Running|         3|         1
             1|       4|started_event|09:04:00|         1|A   |Started|         1|         1
             1|       5|running_event|09:05:00|         1|B   |Running|         3|         1
             1|       6|running_event|09:06:00|         1|C   |Running|         3|         1
             1|       7|running_event|09:07:00|         1|A   |Running|         3|         1
             1|       8|stopped_event|09:08:00|         1|A   |Stopped|         2|         1
             1|       9|stopped_event|09:09:00|         1|B   |Stopped|         2|         1
             2|       1|started_event|09:13:00|         1|A   |Started|         1|         3
             2|       2|started_event|09:14:00|         1|B   |Started|         1|         3
             2|       3|running_event|09:15:00|         1|C   |Running|         3|         3
             2|       4|started_event|09:16:00|         1|A   |Started|         1|         3
             2|       5|running_event|09:17:00|         1|B   |Running|         3|         3
             2|       6|running_event|09:18:00|         1|C   |Running|         3|         3
             2|       7|running_event|09:19:00|         1|A   |Running|         3|         3

关于mysql - 通过比较前后记录创建自定义 session 标识符，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/48590572/

文章推荐： c++ - 如何将 'new' 类添加到 vector

文章推荐： c++ - 在 Ptr_Vector 上 boost FOR_EACH？

文章推荐： mysql - Mysql -u root 是什么意思？

java - 记录 jsoup 记录
我有一个网站。必须登录才能看到里面的内容。但是，我使用此代码登录。 doc = Jsoup.connect("http://46.137.207.181/Account/Login.aspx")
email - 即使定义了 SPF 记录，也始终获得无(无 SPF 记录)
我正在尝试为我的域创建一个 SPF 记录并使我的邮件服务器能够对其进行评估。我在邮件服务器上使用 Postfix 并使用 policyd-spf (Python) 来评估记录。目前，我通过我的私有(p
dns - AWS 负载均衡器需要 @ cname 记录，但这会覆盖我的 @ MX 记录
我需要为负载平衡的 AWS 站点 mywebsite.com 添加 CName 记录。记录应该是: @ CNAME mywebsite.us-east-1.elb.amazon
记录，何时记录以及记录什么？
我目前正在开发一个相当大的多层应用程序，该应用程序将部署在海外。虽然我希望它在解聚后不会折叠或爆炸，但我不能 100% 确定这一点。因此，如果我知道我可以请求日志文件，以准确找出问题所在以及原因，那就
video - gstreamer 记录
我使用以下命令从我的网络摄像头录制音频和视频 gst-launch-0.10 v4l2src ! video/x-raw-yuv,width=640,height=480,framerate=30/1
记录 ffmpeg 控制台信息
我刚刚开始使用 ffmpeg 将视频分割成图像。我想知道是否可以将控制台输出信息保存到日志文件中。我试过“-v 10”参数，也试过“-loglevel”参数。我在另一个 SO 帖子上看到使用 ffmp
sql - 在我的查询中指定日期不会产生任何结果/记录
我想针对两个日期查询我的表并检索其中的记录。我这样声明我的变量； DECLARE @StartDate datetime; DECLARE @EndDate datetime; 并像这样设置我的变量
f# - 像Javascript对象一样循环F#记录
在 javascript 中，我可以使用简单的 for 循环访问对象的每个属性，如下所示 var myObj = {x:1, y:2}; var i, sum=0; for(i in myObj) s
visualization - 记录/可视化调用图的工具？
最近加入了一个需要处理大量代码的项目，我想开始记录和可视化调用图的一些流程，让我更好地理解一切是如何组合在一起的。这是我希望在我的理想工具中看到的: 每个节点都是一个函数/方法如果一个函数可以调用另
.net - 通过反射创建F#记录
如何使用反射在F#中创建记录类型？谢谢最佳答案您可以使用 FSharpValue.MakeRecord [MSDN]创建一个记录实例，但是我认为F#中没有任何定义记录类型的东西。但是，记录会编译为
documentation - 记录 yaml
关闭。这个问题不满足Stack Overflow guidelines .它目前不接受答案。想改善这个问题吗？更新问题，使其成为 on-topic对于堆栈溢出。 3年前关闭。 Improve thi
javascript - 创建具有关联外键的新模型实例/记录
我是 Sequelize 的新手并且遇到了一些语法问题。我制作了以下模型: // User sequelize.define('user', { name: { type: DataTyp
java - 从jsp到jsp显示${}记录
${student.name} Notify 这是我的output.jsp。请注意，我已经放置了一个链接“Notify”以将其转发到 display.jsp 上。但我不确定如何将 Stud
elasticsearch - 如何搜索没有特定字段的文档/记录？
例如，这是我要做的查询: server:"xxx.xxx.com" AND request_url:"/xxx/xxx/xxx" AND http_X_Forwarded_Proto:(https O
记录 SAS 脚本
我一直在开发大量 Java、PHP 和 Python。所有这些都提供了很棒的日志记录包(分别是 Log4J、Log 或logging)。这在调试应用程序时有很大帮助。特别是当应用程序 headless
grails - 记录/Log4J到数据库
在我的Grails应用程序中，我异步运行一些批处理过程，并希望该过程记录各种状态消息，以便管理员以后可以检查它们。我考虑过将log4j JDBC附加程序用作最简单的解决方案，但是据我所知，它不使用D
记录 MQ 消息
我想将进入 MQ 队列的消息记录到数据库/文件或其他日志队列，并且我无法修改现有代码。是否有任何方法可以实现某种类似于 HTTP 嗅探器的消息记录实用程序？或者也许 MQ 有一些内置的功能来记录消息？
f# - 记录 "with"语法中的泛型
如果我有一条包含通用字段的记录，在更改通用字段时是否有任何方法可以模仿方便的 with 语法？即如果我有 type User = // 'photo can be Bitmap or Url {
java - 记录/调试我的对象的状态
假设我有一个名为 Car 的自定义对象。其中的所有字段都是私有(private)的。 public class Car { private String mName; private
二郎。记录。现有字段
当记录具有特定字段时，我需要返回 true 的函数，反之亦然。示例: -record(robot, {name, type=industrial, ho

太空宇宙

个人简介

我是一名优秀的程序员,十分优秀！

作者热门文章

滴滴打车优惠券免费领取

全站热门文章

首页

博学

6Ren·AI

商城

mysql - 通过比较前后记录创建自定义 session 标识符