目标特征的取舍：序列图像中包含大量可用于目标跟踪的特征信息，如目标的运动、颜色、边缘以及纹理等。但目标的特征信息一般是时变的，选取合适的特征信息保证跟踪的有效性比较困难。

遮挡问题：遮挡是目标跟踪中必须解决的难点问题。运动目标被部分或完全遮挡，又或是多个目标相互遮挡时，目标部分不可见回造成目标信息缺失，影响跟踪的稳定性。为了减少遮挡带来的歧义性问题，必须正确处理遮挡时特征与目标间的对应关系。大多数系统一般是通过统计方法预测目标的位置、尺度等，都不能很好地处理较严重的遮挡问题。

兼顾实时性与鲁棒性：序列图像包含大量信息，要保证目标跟踪的实时性要求，必须选择计算量小的算法。鲁棒性是目标跟踪的另一个重要性能，提高算法的鲁棒性就是要使算法对复杂背景、光照变化和遮挡等情况有较强的适应性，而这又要以复杂的运算为代价。

监控系统中，存储和传输问题是首要面临的难关，大量无用视频信息被存储、传输，既浪费了存储空间又增加了带宽，智能分析的目的是为了视频存储所需要的空间减少从而缓解带宽压力，或者对于一些无用视频则采用低码流方式进行压缩或传输，更方便整套系统调查或查询使用，提升监控系统的应用价值。 智能监控技术主要包括：身份识别、轨迹识别、环境判断补偿识别。身份识别包括人脸识别、车牌号识别、车辆类型识别、船只识别、红绿灯识别等等。识别类的智能监控技术，最关键的要求就是识别的准确率，最好保证在98%以上，这样就能够较好地满足绝大多数监控类客户的需求，这是比较常见的智能分析目的;轨迹识别主要包括虚拟警戒线、虚拟警戒区域、智能跟踪、人数统计、车流统计、物体出现和消失、人员突然奔跑、人员突然聚集等等;环境判断补偿识主要包括雨、雪、大雾等恶劣天气、夜间低照度情况、摄像头遮挡或偏移、摄像头抖动等等。智能监控技术能够实现在恶劣视频环境情况下实现较正常的监控功能。受环境影响视频不清楚的时候，尽早发现画面中的人，或者判断摄像头偏移的情况后发出报警，此类功能具备普遍的适应性，大部分监控点都有潜在需求。

1、越界分析

功能：通过设置虚拟围篱，对周界进行侦测。当发现可疑人员或者物体穿越围篱，即触发报警，并将报警信号上传至监控管理中心。同时可将报警画面通过网络上传至远程监看用户。

应用：交通马路人行横道或斑马线；厂区重点区域围墙；学校；看守所围墙等。

2、入侵分析

功能：通过在监看画面上设置对某一区域（可设置任意形状）为警戒状态，当有物体非法闯入警戒区后，即触发报警，并同时对闯入物体进行分析。比如当有人进入警戒区时即报警有人非法闯入禁区；当有汽车进入警戒区时即报警有非法车辆闯入禁区。星网锐捷。

应用：某些重点保护区域例如银行金库、景点区域；易发生危险地带；军事禁区；博物馆；码头；医院等。

3、丢失分析

功能：通过在监控画面上画出一块寸有重要物品的区域作为警戒区域，只要此物品离开了警戒区域，那么将立即触发报警，并可同时将报警上传至远程客户端。

应用：重点保护区域如博物馆，展览厅，拍卖会，金银店等。

4、方向分析

功能：在实际监控中，人们可能关心只是人流的方向和车流的运动方向，通过方向的识别可以判断目标是否为不合法走动或行驶，如果出现逆向行为，目标将会被自动锁定，并同时报警。

应用：单向行驶的道路；重要出入口等。

5、滞留分析：

功能：对于特定区域内的逗留人或物体进行分析，当目标超过设定的时间，系统会认为为可疑物体，并同时报警，也可以将报警上传至远程客户端。

应用：所有重要的监控区域，非有关人员禁入区域。

6、智能跟踪

功能：对可疑人或物体进行目标锁定，同时摄像机将跟随目标转动并报警，也可以将报警信号上传至远程客户端。

应用：小区；非有关人员禁入区域；机密区域；重要保护区域等。