Blame view

src/FFNvDecoder.cpp 7.65 KB
aac5773f   hucm   功能基本完成,接口待打磨
1
  #include "FFNvDecoder.h"
aac5773f   hucm   功能基本完成,接口待打磨
2
3
4
  
  #include <chrono>
  #include <thread>
8c180bab   hucm   添加是否实时流判断
5
  #include <fstream>
aac5773f   hucm   功能基本完成,接口待打磨
6
  
3d2ab595   Hu Chunming   支持gb28181
7
8
  #include <chrono>
  
f40cc409   Hu Chunming   优化显存占用。当前在3080显卡上...
9
10
  #include "FFCuContextManager.h"
  
3d2ab595   Hu Chunming   支持gb28181
11
12
  #include "logger.hpp"
  
aac5773f   hucm   功能基本完成,接口待打磨
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
  using namespace std;
  
  // 参考博客: https://blog.csdn.net/qq_40116098/article/details/120704340
  
  static AVPixelFormat get_hw_format(AVCodecContext *avctx, const AVPixelFormat *pix_fmts)
  {
  	FFNvDecoder* _this = (FFNvDecoder*)avctx->opaque;
  
  	const AVPixelFormat *p;
  
  	for (p = pix_fmts; *p != -1; p++) {
  		if (*p == _this->getHwPixFmt())
  			return *p;
  	}
  
3d2ab595   Hu Chunming   支持gb28181
28
  	LOG_ERROR("Failed to get HW surface format");
aac5773f   hucm   功能基本完成,接口待打磨
29
30
31
32
33
34
35
36
37
38
39
40
41
  	return AV_PIX_FMT_NONE;
  }
  
  FFNvDecoder::FFNvDecoder()
  {
  	// 初始化解码对象
  	fmt_ctx = nullptr;
  	avctx = nullptr;
  	m_bRunning = false;
  
  	stream = nullptr;
      stream_index = -1;
      hw_pix_fmt = AV_PIX_FMT_NONE;
3d2ab595   Hu Chunming   支持gb28181
42
      m_dec_name = "";
aac5773f   hucm   功能基本完成,接口待打磨
43
44
  
  	m_bPause = false;
8c180bab   hucm   添加是否实时流判断
45
  	m_bReal = true;
e96e6489   Hu Chunming   优化代码;添加isRunning函数
46
47
48
  
  	m_decode_thread = 0;
  	m_post_decode_thread = 0;
48330793   Hu Chunming   修正解码线程自然结束时解码器内存没...
49
50
  
  	m_bFinished = false;
bc52e542   Hu Chunming   添加关键帧解码功能
51
  	m_dec_keyframe = false;
3d2ab595   Hu Chunming   支持gb28181
52
  	m_fps = 0.0;
aac5773f   hucm   功能基本完成,接口待打磨
53
54
55
56
  }
  
  FFNvDecoder::~FFNvDecoder()
  {
bc52e542   Hu Chunming   添加关键帧解码功能
57
  	m_dec_keyframe = false;
aac5773f   hucm   功能基本完成,接口待打磨
58
59
  }
  
e96e6489   Hu Chunming   优化代码;添加isRunning函数
60
  bool FFNvDecoder::init(FFDecConfig& cfg)
7319ea36   Hu Chunming   多显卡设置
61
62
63
64
65
66
67
68
69
70
71
  {
  	m_cfg = cfg;
  
  	fstream infile(cfg.uri);
  	if (infile.is_open()){
  		m_bReal = false;
  		infile.close();
  	}else {
  		m_bReal = true;
  	}
  
e96e6489   Hu Chunming   优化代码;添加isRunning函数
72
73
74
75
76
  	return init(cfg.uri.c_str(), cfg.gpuid.c_str(),cfg.force_tcp);
  }
  
  bool FFNvDecoder::init(const char* uri, const char* gpuid, bool force_tcp)
  {
f40cc409   Hu Chunming   优化显存占用。当前在3080显卡上...
77
78
  	// av_log_set_level(AV_LOG_DEBUG);
  
e96e6489   Hu Chunming   优化代码;添加isRunning函数
79
  	avformat_network_init();
7319ea36   Hu Chunming   多显卡设置
80
81
82
83
  
  	// 打开输入视频文件
  	AVDictionary *options = nullptr;
  	av_dict_set( &options, "bufsize", "655360", 0 );
e96e6489   Hu Chunming   优化代码;添加isRunning函数
84
  	av_dict_set( &options, "rtsp_transport", force_tcp ? "tcp" : "udp", 0 );
7319ea36   Hu Chunming   多显卡设置
85
  	// av_dict_set( &options, "listen_timeout", "30", 0 ); // 单位为s
48330793   Hu Chunming   修正解码线程自然结束时解码器内存没...
86
  	av_dict_set( &options, "stimeout", "30000000", 0 ); // 单位为 百万分之一秒
7319ea36   Hu Chunming   多显卡设置
87
88
  	
  	fmt_ctx = avformat_alloc_context();
e96e6489   Hu Chunming   优化代码;添加isRunning函数
89
  	const char* input_file = uri;
7319ea36   Hu Chunming   多显卡设置
90
  	if (avformat_open_input(&fmt_ctx, input_file, nullptr, &options) != 0) {
3d2ab595   Hu Chunming   支持gb28181
91
  		LOG_ERROR("Cannot open input file:{}",input_file);
7319ea36   Hu Chunming   多显卡设置
92
93
94
95
96
  		return false;
  	}
  
  	// 查找流信息
  	if (avformat_find_stream_info(fmt_ctx, nullptr) < 0) {
3d2ab595   Hu Chunming   支持gb28181
97
  		LOG_ERROR("Cannot find input stream information");
7319ea36   Hu Chunming   多显卡设置
98
99
100
101
102
103
104
  		return false;
  	}
  
  	// 查找视频流信息
  	AVCodec *decoder = nullptr;
  	stream_index = av_find_best_stream(fmt_ctx, AVMEDIA_TYPE_VIDEO, -1, -1, &decoder, 0);
  	if (stream_index < 0) {
3d2ab595   Hu Chunming   支持gb28181
105
  		LOG_ERROR("Cannot find a video stream in the input file");
7319ea36   Hu Chunming   多显卡设置
106
107
108
  		return false;
  	}
  
7319ea36   Hu Chunming   多显卡设置
109
110
111
112
113
114
115
116
117
118
  	string cuvid_dec_name = string(decoder->name) + "_cuvid";
  	AVCodec *vcodec = avcodec_find_decoder_by_name(cuvid_dec_name.c_str());
  	if (!(avctx = avcodec_alloc_context3(vcodec)))
  		return (bool)AVERROR(ENOMEM);
  
  	// 得到视频流对象
  	stream = fmt_ctx->streams[stream_index];
  	if (avcodec_parameters_to_context(avctx, stream->codecpar) < 0)
  		return false;
  
3d2ab595   Hu Chunming   支持gb28181
119
120
  	m_fps = av_q2d(stream ->avg_frame_rate);
  
7319ea36   Hu Chunming   多显卡设置
121
122
123
124
125
126
  	avctx->opaque = this;
  	// 设置解码器管理器的像素格式回调函数
  	avctx->get_format = get_hw_format;
  
  	hw_pix_fmt = AV_PIX_FMT_CUDA;
  
f40cc409   Hu Chunming   优化显存占用。当前在3080显卡上...
127
  	FFCuContextManager* pCtxMgr = FFCuContextManager::getInstance();
d384f0e9   Hu Chunming   代码优化
128
129
130
131
132
133
134
  
  	AVBufferRef *hw_device_ctx = pCtxMgr->getCuCtx(gpuid);
  	if(nullptr == hw_device_ctx){
  		av_log(nullptr, AV_LOG_ERROR, "create CUDA context failed ! \n");
  		return false;
  	}
  	avctx->hw_device_ctx = av_buffer_ref(hw_device_ctx);
f40cc409   Hu Chunming   优化显存占用。当前在3080显卡上...
135
136
137
138
139
  	if (nullptr == avctx->hw_device_ctx)
  	{
  		return false;
  	}
  
7319ea36   Hu Chunming   多显卡设置
140
141
  	// 打开解码器流
  	AVDictionary *op = nullptr;
e96e6489   Hu Chunming   优化代码;添加isRunning函数
142
  	av_dict_set( &op, "gpu", gpuid, 0 );
3d2ab595   Hu Chunming   支持gb28181
143
  	// av_dict_set( &op, "surfaces", "5", 0 );
7319ea36   Hu Chunming   多显卡设置
144
  	if (avcodec_open2(avctx, vcodec, &op) < 0) {
3d2ab595   Hu Chunming   支持gb28181
145
  		LOG_ERROR("Failed to open codec for stream");
7319ea36   Hu Chunming   多显卡设置
146
147
  		return false;
  	}
3d2ab595   Hu Chunming   支持gb28181
148
  	
7319ea36   Hu Chunming   多显卡设置
149
150
151
  	return true;
  }
  
0573bd98   Hu Chunming   优化代码;添加注释
152
153
154
155
156
157
158
  bool FFNvDecoder::isSurport(FFDecConfig& cfg)
  {
  	bool bRet = init(cfg);
      decode_finished();
      return bRet;
  }
  
3d2ab595   Hu Chunming   支持gb28181
159
  bool FFNvDecoder::start(){
aac5773f   hucm   功能基本完成,接口待打磨
160
161
162
163
164
165
166
167
168
169
170
  
  	m_bRunning = true;
  
  	pthread_create(&m_decode_thread,0,
          [](void* arg)
          {
              FFNvDecoder* a=(FFNvDecoder*)arg;
              a->decode_thread();
              return (void*)0;
          }
      ,this);
3d2ab595   Hu Chunming   支持gb28181
171
172
  
  	return true;
48330793   Hu Chunming   修正解码线程自然结束时解码器内存没...
173
174
  }
  
bc52e542   Hu Chunming   添加关键帧解码功能
175
176
  static long long get_cur_time(){
      // 获取操作系统当前时间点(精确到微秒)
3d2ab595   Hu Chunming   支持gb28181
177
178
      chrono::time_point<chrono::system_clock, chrono::microseconds> tpMicro
          = chrono::time_point_cast<chrono::microseconds>(chrono::system_clock::now());
bc52e542   Hu Chunming   添加关键帧解码功能
179
      // (微秒精度的)时间点 => (微秒精度的)时间戳
3d2ab595   Hu Chunming   支持gb28181
180
181
182
      time_t totalMicroSeconds = tpMicro.time_since_epoch().count();
  
  	long long currentTime = ((long long)totalMicroSeconds)/1000;
bc52e542   Hu Chunming   添加关键帧解码功能
183
  
3d2ab595   Hu Chunming   支持gb28181
184
      return currentTime;
bc52e542   Hu Chunming   添加关键帧解码功能
185
186
  }
  
48330793   Hu Chunming   修正解码线程自然结束时解码器内存没...
187
188
189
190
191
  void FFNvDecoder::decode_thread()
  {
  	AVPacket* pkt ;
  	pkt = av_packet_alloc();
  	av_init_packet( pkt );
aac5773f   hucm   功能基本完成,接口待打磨
192
193
194
195
196
197
198
199
200
  
  	pthread_create(&m_post_decode_thread,0,
          [](void* arg)
          {
              FFNvDecoder* a=(FFNvDecoder*)arg;
              a->post_decode_thread();
              return (void*)0;
          }
      ,this);
aac5773f   hucm   功能基本完成,接口待打磨
201
  
bc52e542   Hu Chunming   添加关键帧解码功能
202
203
  	// long start_time = get_cur_time();
  
aac5773f   hucm   功能基本完成,接口待打磨
204
205
  	while (m_bRunning)
  	{
8c180bab   hucm   添加是否实时流判断
206
  		if (!m_bReal)
aac5773f   hucm   功能基本完成,接口待打磨
207
  		{
8c180bab   hucm   添加是否实时流判断
208
209
210
211
212
  			if (m_bPause)
  			{
  				std::this_thread::sleep_for(std::chrono::milliseconds(3));
  				continue;
  			}
aac5773f   hucm   功能基本完成,接口待打磨
213
  		}
e41a52bb   Hu Chunming   1.优化数据读取线程;2. 添加A...
214
215
216
217
218
219
220
  
  		AVFrame * gpuFrame = mFrameQueue.getTail();
  		if (gpuFrame == nullptr)
  		{
  			std::this_thread::sleep_for(std::chrono::milliseconds(1));
  			continue;
  		}
aac5773f   hucm   功能基本完成,接口待打磨
221
222
  		
  		int result = av_read_frame(fmt_ctx, pkt);
3c7e3e11   Hu Chunming   1.修改日志
223
  		if (result == AVERROR_EOF || result < 0)
aac5773f   hucm   功能基本完成,接口待打磨
224
  		{
3d2ab595   Hu Chunming   支持gb28181
225
  			LOG_ERROR("Failed to read frame!");
aac5773f   hucm   功能基本完成,接口待打磨
226
227
228
  			break;
  		}
  
bc52e542   Hu Chunming   添加关键帧解码功能
229
230
231
232
233
  		if (m_dec_keyframe && !(pkt->flags & AV_PKT_FLAG_KEY)) {
  			av_packet_unref(pkt);
  			continue;
  		}
  
f49bbf3d   Hu Chunming   修正pause逻辑;添加ignore
234
  		if (m_bReal)
8c180bab   hucm   添加是否实时流判断
235
236
237
238
239
240
241
242
243
  		{
  			if (m_bPause)
  			{
  				av_packet_unref(pkt);
  				std::this_thread::sleep_for(std::chrono::milliseconds(3));
  				continue;
  			}
  		}
  
3c7e3e11   Hu Chunming   1.修改日志
244
  		if (stream_index == pkt->stream_index){
aac5773f   hucm   功能基本完成,接口待打磨
245
  			result = avcodec_send_packet(avctx, pkt);
3c7e3e11   Hu Chunming   1.修改日志
246
  			if (result < 0){
3d2ab595   Hu Chunming   支持gb28181
247
  				LOG_ERROR("{} - Failed to send pkt: {}", m_dec_name, result);
aac5773f   hucm   功能基本完成,接口待打磨
248
249
250
  				continue;
  			}
  
aac5773f   hucm   功能基本完成,接口待打磨
251
  			result = avcodec_receive_frame(avctx, gpuFrame);
3c7e3e11   Hu Chunming   1.修改日志
252
  			if ((result == AVERROR(EAGAIN) || result == AVERROR_EOF) || result < 0){
3d2ab595   Hu Chunming   支持gb28181
253
  				LOG_ERROR("{} - Failed to receive frame: {}", m_dec_name, result);
aac5773f   hucm   功能基本完成,接口待打磨
254
255
256
257
  				continue;
  			}
  
  			mFrameQueue.addTail();
aac5773f   hucm   功能基本完成,接口待打磨
258
259
260
261
  		}
  		av_packet_unref(pkt);
  	}
  
aac5773f   hucm   功能基本完成,接口待打磨
262
  	m_bRunning = false;
48330793   Hu Chunming   修正解码线程自然结束时解码器内存没...
263
  
bc52e542   Hu Chunming   添加关键帧解码功能
264
265
266
267
  	// long end_time = get_cur_time();
  
  	// cout << "解码用时:" << end_time - start_time << endl;
  
48330793   Hu Chunming   修正解码线程自然结束时解码器内存没...
268
269
270
271
272
  	if (m_post_decode_thread != 0)
  	{
  		pthread_join(m_post_decode_thread,0);
  	}
  
3d2ab595   Hu Chunming   支持gb28181
273
  	decode_finished_cbk(m_finishedDecArg);
3c7e3e11   Hu Chunming   1.修改日志
274
  
48330793   Hu Chunming   修正解码线程自然结束时解码器内存没...
275
276
  	decode_finished();
  
3d2ab595   Hu Chunming   支持gb28181
277
  	LOG_INFO("{} - decode thread exited.", m_dec_name);
aac5773f   hucm   功能基本完成,接口待打磨
278
279
  }
  
3d2ab595   Hu Chunming   支持gb28181
280
  void FFNvDecoder::decode_finished(){
48330793   Hu Chunming   修正解码线程自然结束时解码器内存没...
281
282
  	if (avctx)
  	{
48330793   Hu Chunming   修正解码线程自然结束时解码器内存没...
283
284
285
286
287
288
289
290
291
  		avcodec_free_context(&avctx);
  	}
  	
  	if (fmt_ctx)
  	{
  		avformat_close_input(&fmt_ctx);
  	}
  
  	m_bFinished = true;
bc52e542   Hu Chunming   添加关键帧解码功能
292
  	m_dec_keyframe = false;
48330793   Hu Chunming   修正解码线程自然结束时解码器内存没...
293
294
  }
  
3d2ab595   Hu Chunming   支持gb28181
295
296
297
298
299
300
301
302
303
  void FFNvDecoder::post_decode_thread(){
  	int skip_frame = m_cfg.skip_frame;
  	if (skip_frame <= 0){
  		skip_frame = 1;
  	}
  	
  	int index = 0;
  	while (m_bRunning || mFrameQueue.length() > 0)
  	{
aac5773f   hucm   功能基本完成,接口待打磨
304
305
306
307
308
309
310
  		AVFrame * gpuFrame = mFrameQueue.getHead();
  		if (gpuFrame == nullptr)
  		{
  			std::this_thread::sleep_for(std::chrono::milliseconds(3));
  			continue;
  		}
  
3d2ab595   Hu Chunming   支持gb28181
311
312
313
314
315
316
  		// 跳帧
  		if (skip_frame == 1 || index % skip_frame == 0){
  			post_decoded_cbk(m_postDecArg, gpuFrame);
  			index = 0;
  		}
  		
aac5773f   hucm   功能基本完成,接口待打磨
317
  		mFrameQueue.addHead();
3c7e3e11   Hu Chunming   1.修改日志
318
  
3d2ab595   Hu Chunming   支持gb28181
319
320
321
322
  		index++;
  	}
  
  	LOG_INFO("post decode thread exited.");
aac5773f   hucm   功能基本完成,接口待打磨
323
324
  }
  
3d2ab595   Hu Chunming   支持gb28181
325
  void FFNvDecoder::close(){
aac5773f   hucm   功能基本完成,接口待打磨
326
  	m_bRunning=false;
e96e6489   Hu Chunming   优化代码;添加isRunning函数
327
328
329
  	if(m_decode_thread != 0){
  		pthread_join(m_decode_thread,0);
  	}
bc52e542   Hu Chunming   添加关键帧解码功能
330
  	m_dec_keyframe = false;
aac5773f   hucm   功能基本完成,接口待打磨
331
332
  }
  
3d2ab595   Hu Chunming   支持gb28181
333
  AVPixelFormat FFNvDecoder::getHwPixFmt(){
aac5773f   hucm   功能基本完成,接口待打磨
334
335
336
  	return hw_pix_fmt;
  }
  
3d2ab595   Hu Chunming   支持gb28181
337
  bool FFNvDecoder::isRunning(){
aac5773f   hucm   功能基本完成,接口待打磨
338
339
340
  	return m_bRunning;
  }
  
3d2ab595   Hu Chunming   支持gb28181
341
  bool FFNvDecoder::isFinished(){
48330793   Hu Chunming   修正解码线程自然结束时解码器内存没...
342
343
344
  	return m_bFinished;
  }
  
3c7e3e11   Hu Chunming   1.修改日志
345
346
347
348
  bool FFNvDecoder::isPausing(){
  	return m_bPause;
  }
  
3d2ab595   Hu Chunming   支持gb28181
349
350
  bool FFNvDecoder::getResolution( int &width, int &height ){
  	if (avctx != nullptr)
aac5773f   hucm   功能基本完成,接口待打磨
351
  	{
3d2ab595   Hu Chunming   支持gb28181
352
353
  		width = avctx->width;
  		height = avctx->height;
aac5773f   hucm   功能基本完成,接口待打磨
354
355
356
357
358
359
  		return true;
  	}
  	
  	return false;
  }
  
3d2ab595   Hu Chunming   支持gb28181
360
  void FFNvDecoder::pause(){
aac5773f   hucm   功能基本完成,接口待打磨
361
362
363
  	m_bPause = true;
  }
  
3d2ab595   Hu Chunming   支持gb28181
364
  void FFNvDecoder::resume(){
aac5773f   hucm   功能基本完成,接口待打磨
365
  	m_bPause = false;
bc52e542   Hu Chunming   添加关键帧解码功能
366
367
368
369
370
  }
  
  void FFNvDecoder::setDecKeyframe(bool bKeyframe)
  {
  	m_dec_keyframe = bKeyframe;
3c7e3e11   Hu Chunming   1.修改日志
371
372
373
374
375
376
  }
  
  int FFNvDecoder::getCachedQueueLength(){
  	return mFrameQueue.length();
  }
  
3d2ab595   Hu Chunming   支持gb28181
377
378
379
  float FFNvDecoder::fps(){
  	return m_fps;
  }