本发明涉及船舶，具体而言，涉及一种识别船舶事件是否异常的方法、装置、存储介质和船舶。
背景技术：
1、散货船区别集装箱船、散杂船等，散货船主要用来运输不需要包扎和加固的货物。例如木材、矿石、煤炭、大米谷物、砂、盐、水泥、牲畜等，而像机器、汽车等这些需要包扎和加固的货物，一般用的是散杂船来运输，而装载集装箱的船，为集装箱船。海运的散货船的货舱都是有舱盖的，主要目的是防止水进入货舱，保护货物不受浸湿和损坏。舱盖同时还作为保护船舶内部结构的屏障，使之在极端气象下免受海水腐蚀而受损。长江内河散货船的封舱标准也是有法律规定的，除靠泊码头或作业点从事装卸作业的船舶外，在长江干线航行、停泊的运输散发有毒有害气体或粉尘物质等货物的船舶，应当对货舱采取封闭或其他防护措施。当然也有对货物保护并不受损坏的目的，内河的散货船一般采用简易舱口盖或简易舱蓬布。因此，散货船运输过程中舱盖一般是关闭状态，有船舶污染水或空气防治的要求、有货主对货物安全性和完好性的要求、有承运方对运输作业规范的要求、也有内河运输船上人员对货物防盗防丢失的要求等等。所以，通常都会在散货船的船头和船尾相向安装两个摄像头，长江内河中散货船的吨位小一些，安装一个船头摄像头也可以，都能覆盖所有货舱的舱盖用于监控。
2、进一步地，散货船的监管方、货主和承运方除了主动去查看摄像头来监控船舶的作业行为，也想通过摄像头的边缘计算和ai（artificial intelligence，人工智能）的方式来自动识别散货船的作业行为，例如：开舱、关舱、装货、卸货等行为事件。采用ai人工智能技术需要大量的视频或图片数据进行训练模型和算法，在智能识别的过程中也要实时的获取每条船的不同摄像头的视频或图片来进行ai识别，在这过程中需要消耗一定的算力和移动网络流量，得到结果仅仅是开关舱和装卸货的状态和事件发生时间，缺少船舶相关的数据来辅助决策，来精细划分各场景下的开关舱和装卸货。海事部门关注的运输过程中要确保货舱是关闭状态的，码头或作业点可打开。货主要关注的是什么时候装货、什么时候卸货，运输途中有没有异常开舱、关舱，要求货物安全完好。承运方对船上所有的作业行为都关注，特别是异常开关舱和异常装卸货，确保作业规范。对于ai来说，开关舱的识别准确率较高，装卸货的识别准确率就不太理想了，对于正常和异常的开关舱事件、正常和异常的装卸货事件完全没办法判定了。
3、总的来说，单纯使用ai人工智能的方案来解决散货船的作业行为监控还是有较多问题的。因此，如何提出一种能够有效识别出船舶事件，并判断出船舶事件是否异常的方法成为目前亟待解决的问题。
技术实现思路
1、本发明旨在至少解决相关技术中无法有效识别出船舶事件，以及无法判断出船舶事件是否异常的问题。
2、因此，本发明的第一个目的在于提供了一种识别船舶事件是否异常的方法。
3、本发明的第二个目的在于提供了一种识别船舶事件是否异常的装置。
4、本发明的第三个目的在于提供了一种识别船舶事件是否异常的装置。
5、本发明的第四个目的在于提供了一种存储介质。
6、本发明的第五个目的在于提供了一种船舶。
7、本发明第一方面的技术方案提供了一种识别船舶事件是否异常的方法，包括：获取船舶的视频数据，并对视频数据进行识别，以确定出船舶的第一事件数据；获取船舶的ais（automatic identification system，船舶自动识别系统）数据；基于ais数据和第一事件数据生成第二事件数据；根据第二事件数据确定出船舶事件；根据第二事件数据中的ais数据确定船舶是否处于停航状态；在船舶未处于停航状态的情况下，若发生船舶事件，确定船舶事件异常；在船舶处于停航状态的情况下，根据第二事件数据中的ais数据确定船舶是否处于预设区域内；在船舶未处于预设区域内，若发生船舶事件，确定船舶事件异常；在船舶处于预设区域内，若发生船舶事件，确定船舶事件正常；其中，船舶事件包括：开舱事件、关舱事件、装货事件和卸货事件。
8、根据本发明提供的识别船舶事件是否异常的方法，通过船舶的视频数据、ais数据可以确定出船舶事件，以及船舶事件发生的地点、船舶的状态等，从而发生事件时可以根据事件发生的地点、船舶的状态来确定船舶事件是否异常，这样就可以帮助船舶的监管方、货主和承运方对船舶更准确、更实时和更高效的监控，快速掌握船舶的日常作业行为和异常行为。具体地，可以先获取到船舶的视频数据，并对视频数据进行智能识别，从而确定出船舶的第一事件数据。然后在获取船舶的ais数据，利用ais数据对第一事件数据进行扩充，得到第二事件数据，通过第二事件数据可以确定出船舶的船舶事件，从而利用第二事件数据和船舶事件可以确定出船舶事件是否异常，具体可以根据第二事件数据中的ais数据确定船舶是否处于停航状态，在船舶未处于停航状态的情况下，若发生船舶事件，则确定船舶事件异常，可以理解的是，如果船舶未停航，表明船舶正在航行的途中，此时如果发生船舶事件，那么该船舶事件一定是异常的，因为在航行途中是不允许发生开舱、关舱、装货、卸货等船舶事件的。在船舶处于停航状态的情况下，还根据第二事件数据中的ais数据确定船舶是否处于预设区域内，在船舶未处于预设区域内，若发生船舶事件，确定船舶事件异常，在船舶处于预设区域内，若发生船舶事件，确定船舶事件正常。可以理解的是，船舶可以在航行的途中停航，但是在航行途中停航也不可以发生船舶事件，因此，这就需要判断该停航区域是否为预设区域，如果是预设区域，那么发生的船舶事件是正常的，相反，如果不是预设区域，那么发生的船舶事件是异常的。可以理解的是，船舶事件包括开舱事件、关舱事件、装货事件和卸货事件，而这几种船舶事件一般只能够在特定的位置或码头发生，如果在运输的途中发生这几种事件，证明发生的船舶事件存在问题。而本技术正是基于该特点，利用ais数据进行补充，从而可以确定出发生船舶事件的具体位置、船舶的状态等，这样就可以确定出船舶事件是否异常，例如，在运输途中发生了开舱事件，那么证明该开舱事件异常。同理，若是在非码头或非指定位置发生了卸货事件，那么该卸货事件也是异常的。
9、可以理解的是，由于本技术可以对多条船舶进行异常行为判断，识别出的第一事件数据、以及发生的事件可能不是同一条船舶的，因此，本技术可以通过识别出的第一事件数据和ais数据进行匹配，从而确定出同一条船舶的第一事件数据和发生的事件。具体来说，由于识别出的第一事件数据包括船名、mmsi（maritime mobile service identity，水上移动业务标识码）、货舱盖状态（开/关）、载货状态（空/非空）、当前时间。而ais数据包括：船名、mmsi、航向、航速、经度、纬度、目的地、更新时间、吃水等。因此，可以通过船名、mmsi和当前时间等将第一事件数据与ais数据进行匹配。
10、另外，本技术提供的识别船舶事件是否异常的方法还可以具有如下附加技术特征：
11、在一些实施例中，可选地，船舶包括散货船、集装箱船和散杂船等。
12、在一些实施例中，可选地，对视频数据进行识别，可以是通过ai对视频数据进行识别。
13、在一些实施例中，可选地，获取船舶的视频数据，并对视频数据进行识别，以确定出船舶的第一事件数据的步骤，包括：获取船舶的视频数据；根据视频数据确定出船舶的视频图像；每隔预设时间间隔对船舶的视频图像进行截图，以得到事件图像；对事件图像进行ai识别，以确定出船舶的第一事件数据；其中，预设时间间隔小于等于1分钟。
14、在该实施例中，可以对获取的视频数据进行截图，得到事件图像，然后对事件图像进行ai识别，从而确定出船舶的第一事件数据。对视频数据进行截图时，可以每隔预设时间间隔进行一次截图，然后进行识别。由于本技术不需要对视频数据都进行识别，因此，本技术这样设置的好处在于可以降低移动网络流量的消耗和节省算力。同时，通过将预设时间间隔限定为小于等于1分钟，不仅可以节省算力，而且还能够保证数据的完整性，确保数据不漏掉。例如，如果想要发生开舱事件，那么当次截取到的事件图像为舱口盖关闭图像，那么下次，或者第二次可能就会截取到舱口盖打开的图像。此时，如果将时间间隔设置的过长就可能会导致舱口盖打开的图像不能被截取到，这样就不能够确定已经发生了开舱事件，就会导致得到的第一事件数据存在误差。本技术将预设时间间隔限定为小于等于1分钟，既可以节省算力，而且还能够保证数据的完整性，确保数据不漏掉。
15、在一些实施例中，可选地，根据第二事件数据中的ais数据确定船舶是否处于停航状态的步骤，包括：获取ais数据中的航速数据；根据航速数据确定船舶的航速是否小于预设阈值；在船舶的航速小于预设阈值的情况下，确定船舶处于停航状态。
16、在该实施例中，可以根据ais数据中的航速数据来确定船舶是否处于航行停航状态。若船舶的航速小于预设阈值，表明船舶处于停航状态。若船舶的航速大于等于预设阈值，表明船舶未停航。
17、在一些实施例中，可选地，根据第二事件数据中的ais数据确定船舶是否处于预设区域内的步骤，包括：获取ais数据中的经度数据和纬度数据；根据经度数据和纬度数据确定船舶是否处于预设区域内。
18、在该实施例中，可以利用ais数据中的经度数据和纬度数据的空间计算来确定船舶是否处于预设区域内，该种方式可以有效确定出船舶是否位于预设区域内。
19、在一些实施例中，可选地，根据第二事件数据确定出船舶事件的步骤，包括：获取第二事件数据中的第一事件数据；根据第一事件数据确定出船舶的舱口盖或舱蓬布的打开和关闭情况；根据舱口盖或舱蓬布的打开和关闭情况确定船舶是否发生开舱事件和关舱事件。
20、在该实施例中，可以根据第二事件数据中的第一事件数据来确定船舶是否发生开舱事件和关舱事件。具体地，可以先根据第二事件数据中的第一事件数据确定出船舶舱口盖或舱蓬布的打开和关闭情况，然后根据舱口盖或舱蓬布的打开和关闭情况确定船舶是否发生开舱事件和关舱事件。可以理解的是，若第一次识别到舱口盖关闭，下一次识别到舱口盖打开，那么就发生了开舱事件。若第一次识别到舱口盖打开，下一次识别到舱口盖关闭，那么就发生了关舱事件，本技术正是基于该原理来确定是否发生开舱事件和关舱事件。其中，这里的第一次和第二次指的是识别的顺序关系，并非指的是识别的次数，例如，第一次和第二次可以指当前识别和下次识别。
21、在一些实施例中，可选地，根据第二事件数据确定出船舶事件的步骤，包括：根据第二事件数据中的第一事件数据确定出船舶的开舱事件；根据第二事件数据中的ais数据确定开舱事件是否在预设区域内发生；在开舱事件在预设区域内发生的情况下，根据第二事件数据中的ais数据确定船舶的航速是否小于预设阈值；在船舶的航速小于预设阈值的情况下，根据第二事件数据中的第一事件数据确定船舶的货舱是否存在货物；在船舶的货舱存在货物的情况下，确定船舶发生卸货事件；在船舶的货舱不存在货物的情况下，确定船舶发生装货事件。
22、在该实施例中，可以先根据第二事件数据中的第一事件数据确定出开舱事件，然后根据开舱事件和ais数据来确定出是否发生装货事件和卸货事件。具体地，确定出开舱事件后，根据ais数据确定开舱事件是否在预设区域内发生，若是在预设区域内发生，继续确定船舶的航速是否小于预设阈值，在船舶的航速小于预设阈值的情况下，根据第一事件数据确定船舶的货舱是否存在货物，在船舶的货舱存在货物的情况下，确定船舶发生卸货事件。在船舶的货舱不存在货物的情况下，确定船舶发生装货事件。可以理解的是，由于本技术对视频图像识别的时间间隔较短，因此，当发生了开舱事件，并且识别到货舱内有货物，那么证明需要进行卸货了，因此触发了卸货事件。同理，当发生了开舱事件，并且识别到货舱内没有货物，那么证明需要进行装货了，因此触发了装货事件。本领域技术人员可知的是，当船舶到达码头并停泊的时候，如果打开货舱，那么表明要装货或者是要卸货，因此，可以利用货舱内是否有货物来确定装货事件和卸货事件。
23、在一些实施例中，可选地，确定船舶发生卸货事件的步骤之后，包括：根据第一事件数据确定船舶的货舱是否存在货物；根据ais数据确定船舶是否停航；在船舶的货舱不存在货物，且船舶非停航的情况下，确定卸货事件结束。
24、在该实施例中，当船舶发生卸货事件之后也可以确定出船舶是否卸货结束，从而有利于工作人员，对船舶的调配。具体地，当船舶发生卸货事件后，可以先根据第一事件数据确定船舶的货舱是否存在货物，然后根据ais数据确定船舶是否停航，在船舶的货舱不存在货物，且船舶非停航的情况下，确定卸货事件结束。可以理解的是，当货舱不存在货物时，表明货物已经卸完，船舶需要驶离卸货位置，从而可以根据这两点来确定卸货是否完成。
25、在一些实施例中，可选地，确定船舶发生卸货事件的步骤之后，包括：根据第一事件数据确定船舶的货舱是否存在货物；根据第一事件数据确定船舶发生卸货事件后的船舶事件是否为关舱事件；在船舶的货舱不存在货物，且船舶发生卸货事件后的船舶事件为关舱事件的情况下，确定卸货事件结束。
26、在该实施例中，当船舶发生卸货事件之后也可以确定出船舶是否卸货结束，从而有利于工作人员，对船舶的调配。具体地，当船舶发生卸货事件后，可以先根据第一事件数据确定船舶的货舱是否存在货物，以及确定船舶的下一个事件是否为关舱事件，在船舶的货舱不存在货物，且船舶的下一个事件为关舱事件的情况下，确定卸货事件结束。可以理解的是，当货舱不存在货物时，表明货物已经卸完，因此需要将舱口盖关闭，从而可以根据这两点来确定卸货是否完成。
27、其中，上述两种确定卸货事件是否结束的方式对应了不同的情况，第一种是卸货之后直接驶离卸货位置，但是舱口盖不关闭的情况。第二种是卸货之后不驶离卸货位置，但是舱口盖已经关闭。通过上述两种确定卸货事件结束的方式可以将上述两种情况都包括在内，提高了本技术的适用性。
28、在一些实施例中，可选地，确定船舶发生装货事件的步骤之后，包括：根据第一事件数据确定船舶的货舱是否存在货物；根据第一事件数据确定船舶发生装货事件后的船舶事件是否为关舱事件；在船舶的货舱存在货物，且船舶发生装货事件后的船舶事件为关舱事件的情况下，确定装货事件结束。
29、在该实施例中，当船舶发生装货事件之后也可以确定出船舶是否装货结束，从而有利于工作人员，对船舶的调配。具体地，当船舶发生装货事件后，可以先根据第一事件数据确定船舶的货舱是否存在货物，以及确定船舶的下一个事件是否为关舱事件，在船舶的货舱存在货物，且船舶的下一个事件为关舱事件的情况下，确定装货事件结束。可以理解的是，由于已经发生了装货事件，那么下一个事件如果是关舱事件，且货舱内还有货物时，表明已经装货结束了，需要将舱口盖关上。
30、在一些实施例中，可选地，视频数据包括：船舶的船头视频数据和船舶的船尾视频数据。
31、在该实施例中，可以在船舶的船头和船尾相向安装两个摄像头，然后通过船头视频数据和船尾视频数据进行识别。该种方式，通过两个摄像头可以将船舶整体覆盖，因此，获取到的视频数据也比较全面，同时还节省了设置摄像头的成本。
32、在一些实施例中，可选地，ais数据包括：船名、mmsi、航向、航速、经度、纬度、目的地、更新时间、吃水。
33、在一些实施例中，可选地，预设阈值小于等于2节。
34、在该实施例中，预设阈值小于等于2节，表明船舶处于停航状态。
35、本发明第二方面的技术方案提供了一种识别船舶事件是否异常的装置，包括：第一确定模块，用于获取船舶的视频数据，并对视频数据进行识别，以确定出船舶的第一事件数据；获取模块，用于获取船舶的ais数据；数据生成模块，用于基于ais数据和第一事件数据生成第二事件数据；第二确定模块，用于根据第二事件数据确定出船舶事件；第三确定模块，用于根据第二事件数据中的ais数据确定船舶是否处于停航状态；在船舶未处于停航状态的情况下，若发生船舶事件，确定船舶事件异常；在船舶处于停航状态的情况下，根据第二事件数据中的ais数据确定船舶是否处于预设区域内；在船舶未处于预设区域内，若发生船舶事件，确定船舶事件异常；在船舶处于预设区域内，若发生船舶事件，确定船舶事件正常；其中，船舶事件包括：开舱事件、关舱事件、装货事件和卸货事件。
36、根据本发明提供的识别船舶事件是否异常的装置，包括第一确定模块、获取模块、数据生成模块、第二确定模块和第三确定模块。第一确定模块能够获取船舶的视频数据，并对视频数据进行识别，以确定出船舶的第一事件数据。获取模块能够获取船舶的ais数据。数据生成模块能够基于ais数据和第一事件数据生成第二事件数据。第二确定模块能够根据第二事件数据确定出船舶事件。第三确定模块能够根据第二事件数据和船舶事件确定船舶事件是否异常，具体可以根据第二事件数据中的ais数据确定船舶是否处于停航状态，在船舶未处于停航状态的情况下，若发生船舶事件，则确定船舶事件异常，可以理解的是，如果船舶未停航，表明船舶正在航行的途中，此时如果发生船舶事件，那么该船舶事件一定是异常的，因为在航行途中是不允许发生开舱、关舱、装货、卸货等船舶事件的。在船舶处于停航状态的情况下，还根据第二事件数据中的ais数据确定船舶是否处于预设区域内，在船舶未处于预设区域内，若发生船舶事件，确定船舶事件异常，在船舶处于预设区域内，若发生船舶事件，确定船舶事件正常。可以理解的是，船舶可以在航行的途中停航，但是在航行途中停航也不可以发生船舶事件，因此，这就需要判断该停航区域是否为预设区域，如果是预设区域，那么发生的船舶事件是正常的，相反，如果不是预设区域，那么发生的船舶事件是异常的。其中，船舶事件包括：开舱事件、关舱事件、装货事件和卸货事件。本技术通过船舶的视频数据、ais数据可以确定出船舶事件，以及船舶事件发生的地点、船舶的状态等，从而发生事件时可以根据事件发生的地点、船舶的状态来确定船舶事件是否异常，这样就可以帮助船舶的监管方、货主和承运方对船舶更准确、更实时和更高效的监控，快速掌握船舶的日常作业行为和异常行为。
37、在一些实施例中，可选地，识别船舶事件是否异常的装置还包括：事件确定模块，用于根据第一事件数据确定船舶的货舱是否存在货物；根据ais数据确定船舶是否停航；在船舶的货舱不存在货物，且船舶非停航的情况下，确定卸货事件结束。
38、在一些实施例中，可选地，事件确定模块，还用于根据第一事件数据确定船舶的货舱是否存在货物；根据第一事件数据确定船舶发生卸货事件后的船舶事件是否为关舱事件；在船舶的货舱不存在货物，且船舶发生卸货事件后的船舶事件为关舱事件的情况下，确定卸货事件结束。
39、在一些实施例中，可选地，事件确定模块，还用于根据第一事件数据确定船舶的货舱是否存在货物；根据第一事件数据确定船舶发生装货事件后的船舶事件是否为关舱事件；在船舶的货舱存在货物，且船舶发生装货事件后的船舶事件为关舱事件的情况下，确定装货事件结束。
40、本发明第三方面的技术方案提供了一种识别船舶事件是否异常的装置，包括：存储器和处理器，存储器储存有程序或指令，程序或指令被处理器执行时，实现如第一方面任一项技术方案中的识别船舶事件是否异常的方法的步骤。
41、根据本发明提供的识别船舶事件是否异常的装置，包括存储器和处理器，存储器储存有程序或指令，程序或指令被处理器执行时，实现如第一方面任一项技术方案中的识别船舶事件是否异常的方法的步骤。由于该识别船舶事件是否异常的装置能够实现如第一方面任一项技术方案中的识别船舶事件是否异常的方法的步骤。因此，本发明提供的识别船舶事件是否异常的装置还具有第一方面任一项技术方案中的识别船舶事件是否异常的方法的全部有益效果，在此不再赘述。
42、本发明第四方面的技术方案提供了一种存储介质，其上存储有程序或指令，程序或指令被执行时，实现如第一方面任一项技术方案中的识别船舶事件是否异常的方法的步骤。
43、根据本发明提供的存储介质，其上存储有程序或指令，程序或指令被执行时，实现如第一方面任一项技术方案中的识别船舶事件是否异常的方法的步骤。由于该存储介质能够实现如第一方面任一项技术方案中的识别船舶事件是否异常的方法的步骤。因此，本发明提供的存储介质还具有第一方面任一项技术方案中的识别船舶事件是否异常的方法的全部有益效果，在此不再赘述。
44、本发明第五方面的技术方案提供了一种船舶，包括：第三方面技术方案或第四方面技术方案中的识别船舶事件是否异常的装置；和/或第五方面技术方案的存储介质。
45、根据本发明提供的船舶，包括：第三方面技术方案或第四方面技术方案中的识别船舶事件是否异常的装置；和/或第五方面技术方案的存储介质。由于该船舶包括第三方面技术方案或第四方面技术方案中的识别船舶事件是否异常的装置；和/或第五方面技术方案的存储介质。因此，本发明提供的船舶还具有第三方面技术方案或第四方面技术方案中的识别船舶事件是否异常的装置；和/或第五方面技术方案的存储介质的全部有益效果，在此不再赘述。
46、本发明的附加方面和优点将在下面的描述部分中变得明显，或通过本发明的实践了解到。
1.一种识别船舶事件是否异常的方法，其特征在于，包括：
2.根据权利要求1所述的识别船舶事件是否异常的方法，其特征在于，所述获取船舶的视频数据，并对所述视频数据进行识别，以确定出所述船舶的第一事件数据的步骤，包括：
3.根据权利要求1所述的识别船舶事件是否异常的方法，其特征在于，所述根据所述第二事件数据中的所述ais数据确定所述船舶是否处于停航状态的步骤，包括：
4.根据权利要求1所述的识别船舶事件是否异常的方法，其特征在于，所述根据第二事件数据中的所述ais数据确定所述船舶是否处于预设区域内的步骤，包括：
5.根据权利要求1所述的识别船舶事件是否异常的方法，其特征在于，所述根据所述第二事件数据确定出所述船舶事件的步骤，包括：
6.根据权利要求1所述的识别船舶事件是否异常的方法，其特征在于，所述根据所述第二事件数据确定出所述船舶事件的步骤，包括：
7.根据权利要求6所述的识别船舶事件是否异常的方法，其特征在于，所述确定所述船舶发生所述卸货事件的步骤之后，包括：
8.根据权利要求6所述的识别船舶事件是否异常的方法，其特征在于，所述确定所述船舶发生所述卸货事件的步骤之后，包括：
9.根据权利要求6所述的识别船舶事件是否异常的方法，其特征在于，所述确定所述船舶发生所述装货事件的步骤之后，包括：
10. 根据权利要求1至9中任一项所述的识别船舶事件是否异常的方法，其特征在于，
11.一种识别船舶事件是否异常的装置，其特征在于，包括：
12.一种识别船舶事件是否异常的装置，其特征在于，包括：
13.一种存储介质，其特征在于，其上存储有程序或指令，所述程序或所述指令被执行时，实现如权利要求1至10中任一项所述的识别船舶事件是否异常的方法的步骤。
14. 一种船舶，其特征在于，包括：
