实时融合实景扩展制播平台定制研发项目需求

实时融合实景扩展制播平台定制研发项目需求一、项目背景本项目为传媒学院科研平台——全省影视媒体技术研究重点实验室建设项目。拟定制研发一套实时融合实景扩展制播平台，平台模块主要包含多机位实景采集与标定、虚拟场景AI扩展、虚实场景无缝融合、信号包装渲染以及直播发布等智能音视频处理能力，并根据AI实景扩展的虚拟制播场景定制3套模板。平台的建设可用于虚拟制播仿真训练实验课程教学，辅助学生了解虚拟节目的制作流程，培养学生对虚拟节目制作过程中的实操技能，满足教师科研、人才培养、学生竞赛等需求。主要内容：1、需定制研发一套实时融合实景扩展直播平台，平台包括实景扩展渲染平台系统和实景融合合成系统两个子平台系统。实景扩展渲染平台系统包含实景扩展平台、多模态图像生成引擎、图像扩展引擎、图像重绘引擎、图像分割引擎、语义理解系统；实景融合合成系统包含虚拟运镜系统、推流系统、实景融合系统、图层管理系统和智能导播系统。2、场景定制服务，需根据AI实景扩展的虚拟制播场景定制3套模板。二、采购内容1、必须根据客户的实际应用需求进行灵活的定制开发指定的系统平台、平台的操作方便性和界面简洁美观性需充分满足客户的要求；2、系统设计应结合学校信息化现状，充分利用现有资源，满足先进性、开放性、可扩展性、安全性等设计要求；3、开发后软件支持麒麟操作系统和windows10以上系统版本，系统运行安全、稳定和流畅；三、服务内容及要求序号服务名称服务要求数量单位备注1实景扩展渲染平台系统1.系统模拟真实实训中所使用的实训环境，完整还原实训中所用到的实训设备，便于开展配套实训项目。2.系统须采用B/S架构设计，用户可在任意浏览器中访问平台系统。3.系统应具备用户登录、用户权限等基本功能，不同登录用户之间的项目数据应相互隔离，确保用户之间数据的独立性。4.系统应具备虚拟场景的AI扩展能力，包含扩展、生成、重绘等。5.系统以工程项目为单位进行工作，并提供工程结果保存、导出等功能。6.具备基本项目管理功能，如项目创建、项目重命名、项目删除、项目编辑等，为便于大量项目的管理，项目应具备搜索功能。7.为满足项目交付后的项目升级和改进，系统架构设计要求具备开放可扩展性，以便后续根据实际情况扩展升级其他功能。8.系统具备图像编辑能力，包括：（1）矩形框选工具。支持通过鼠标选择矩形区域，用于后续的生成或扩展操作。（2）套索选择工具。支持通过鼠标选择多边形区域，用于不规则区域的选择。（3）图像裁剪工具。支持通过鼠标拖动的方式，对所选图片进行裁剪。（4）图层选择工具。在图层场景下，通过该工具可以选中对应的图层，后续的所有操作将会锁定在所选图层中，支持拖拽改变图层上下级关系。9.系统具备AI图像生成能力，包括文生图、图生图等，生成图像符合文本/图像描述。10.系统具备自适应生成能力。当不输入文本和图片的情况下，系统会自动根据附近图像特征生成高度融合的图像。11.系统提供图像扩展能力，框选时，当选择区域包含图像外部分时，触发图像扩展功能，系统会基于图像边缘的特征对图像进行融合扩展，扩展生成的部分会以新图层的形式显示在图层列表中。12.系统提供图像重绘能力，框选时，当选择区域全部为图像内部时，触发图像重绘功能，系统将根据提示词或参考图片，重新生成对应区域并覆盖。1套/2实景融合合成渲染系统1.系统模拟真实实训中所使用的实训环境，完整还原实训中所用到的实训设备，便于开展配套实训项目。2.系统须采用C/S架构设计，用户安装客户端后可以使用系统功能。3.系统软件应支持IP信号或基带信号的输入/输出，具备最高4K信号的制作能力。4.系统支持设置音视频输出设备，视频输出分辨率、帧率，预设通道，设置TCP/UDP推流地址等内容。5.系统支持RTMP推流，支持对RTMP推流参数进行配置，包括流通道名称、推流地址、带宽设置、编码格式、延迟、质量的设置。6.系统提供信号内录功能，提供内部录制功能的设置，包括录制采样方式、视频编码格式等设置。7.系统支持多种输入源类别，对节目制作需要用到的本地素材和各类输入信号放在不同的素材类别列表中进行管理和调用，类别包括摄像机、视频、图片、字幕、音频等。8.系统支持添加信源，在类别列表中选中对应的信源，添加至导播台信号通道中。9.系统支持切换信源，在同一通道中，支持实时切换不同的信源。10.系统支持PVW/PGM设置。PVW和PGW为预览通道和节目通道，支持将任意通道标记为PVW何PGM。11.系统提供提供预览信号和节目信号的实时预览，支持实时设置PVW和PGM对应的信号通道。12.系统支持转场切换，在节目通道和预览通道之间，可以应用各种特效进行切换，包括直接切换、渐变、滑动转场、涂抹转场等。13.系统支持抠像功能，要求包括：（1）色键抠像。（2）细节抹除。（3）色彩补偿。（4）强化主体。（5）边缘柔化。（6）美颜。14.系统支持图文编辑制作，包括：（1）图层列表。列表内可以添加12个图层，其缩略图会显示在图层列表栏中，不同图层之间要求体现上下层关系，如在列表中位置靠上的图层，在图像上会覆盖位置靠下的图层。（2）图层类别。图层应支持图片、视频、音频、文字、日期、时钟、通道等多种内容。（3）图层内容。支持每个图层的内容的独立配置，在编辑器中选择对应的图层后可以添加相应的内容。（4）图层布局。支持调整每个图层在画面中的位置布局，支持文字对齐和图像对齐模式的设置。（5）多状态图文。一个图文组合可以存储多种状态，每个状态可记录组合内图层的位置、大小、透明度、显隐等不同状态。并可在不同状态间实现动画过渡。15.系统支持调音台功能，包括：（1）通道音量调整。提供调音台控制界面，每一组对应一个切换通道的内容控制。音量滑块默认停留在0db的无增益位置，拉动对应通道的音量滑块就可以调整切换通道的音量。（2）音频播放规则调整。切换通道的音频播放规则有跟随/静音/独奏三种。（3）独立输入音频调整。对于通过音频采集设备单独输入的音频信号，系统需提供独立的调音台界面进行调整。（4）独立输入音频声道设置。从音频设备输入的单独音频信号，提供左声道、右声道和立体声的调整选项。（5）独立输入音频延时控制。支持对单独输入音频的音频延时功能，以保证不经过系统处理的单独输入音频信号与经过系统处理的视频信号可以同步呈现。16.系统应支持内容输出控制功能，提供开关控制按钮，控制从输出设备输出节目通道（PGM）内容的启停。17.系统应具备输出延时控制功能，支持在节目播出过程当中对输出设置内置延时量，并提供小窗口预览实际播出效果。18.系统具备输出信号截图功能，提供功能按钮，点击截取当前节目通道（PGM窗口）内容存储。19.系统提供输出信号录制功能。支持对输出信号进行录制，提供录制码率、录制文件位置的设置。20.系统提供流媒体输出功能，为流媒体制作需要，系统须提供流媒体输出、推流站点配置，可以进行推流目标地址的设置，如RTMP/RTSP。21.系统应具备多画输出功能，包括：（1）多画输出控制开关，系统应具备多画面输出功能，只要系统接有一个以上显示器，就可以在主屏显示操作界面以外，在副屏显示可自由组合通道的多画面监看信号。（2）自定义多画布局，系统支持自定义调整多画面监看布局，包括每个窗口的独立信源设置、位置、图层关系等。（3）副屏信号输出。当标准配置设备无法通过输出卡输出4K信号时，可支持通过副屏或者第三屏输出4K节目信号。22.系统应具备宏命令功能，包括：（1）宏命令录制，系统可以将一系列操作录制于一个宏命令中，并一键执行。方便在日常录制中节省操作和调整的时间，保证精