本申请实施例提供了视频编码方法、装置、视频编码设备及存储介质,对一路同时包括原始帧及隐私保护帧的复合视频流进行编码,原始帧参考隐私保护帧进行编码,而原始帧不作为编码时的参考帧,所以原始帧不需要存储,在前处理中对视频流进行复合和时域分层,在参考关系上为时域分层交织参考减少了参考帧存储所需的内存消耗,有效利用隐私保护帧与原始帧的相关性,原始帧参考对应的隐私保护帧进行编码,大部分参考区域完全相同,有利于大幅度减少编码的码流数量,降低码流存储和传输成本;并且,在视频编码器中通过硬件逻辑实现隐私保护处理,能够减少处理器的处理压力,且减少了图像数据的存储器读写带宽,编码效率得到大幅度提升。