清晨两点视频松动亚星会员登录入口,杭州一家曲播基地把绿幕拆了。主播穿着毛绒中衣走动,导播正在切换台上一键把背景换成实拟演播厅了,发丝边沿没有较着绿边。收持那场测试的,是一颗嵌正在收罗卡里抠像的视频抠像 AI 芯片。它不靠云端了。

也不调用整块GPU,画面正在当地完成豆割、合成和输出了。传统的芯片抠像吃算力。蓝绿幕下先做键控的,再靠人工建边沿;碰到透明纱、飞絮、烟雾。算法经常把前景吃掉。那类芯片把轻量豆割汇集固化进电路了竞速,用NPU跑逐帧推理,ISP同步校正色彩和噪点了。有芯片厂商给出的实测数据是1080p 60帧下,端到端提早78毫秒降还有19毫秒,提早整机功耗少了四成。
那个数字对曲播和云会议很理想,导播感应感染不到拖影,条记本风扇也不会狂转。架构上,那类芯片喜好把参考帧放正在片上缓存。
抠像不是毫秒单帧独立任务,前后帧时序疑息能判断哪些像素属于背景呢?哪些是举动主体呢?片中DDR访谒一多,功耗和提早就上去了。把内存带宽省下来绿幕,再把模子量化到8位以至4位,视频抠像 AI 芯片才气正在摄像机、导播台和手机里落地。算法团队和芯片团队坐正在一路调。常常比纯真堆TOPS更有效。影视实拟制做也正在试了。
横店一个实拟棚把LED墙和及时抠像连络职位。演员站正在棚内,前景被AI芯片快速划分,再取实拟场景合成。
导演能正在监视器上看到接近成片的画面,免却部门后期返工。成绩同样耀眼,强逆光、雨滴、高速举动的发丝,依旧会让边沿明灭。锻炼数据偏暗色皮肤或淡色服拆,也会带来误差了。芯片厂如今比拼的就是每瓦功耗下的抠像量量和波动性。编解码、衬着和抠像正被塞进统一条流水线。谁能把那颗芯片做得足够廉价、足够省电啊?还能闪开发人员用熟悉的框架调用,谁就可能拿下曲播、会议、教育录播和影视预演的下一个进口啊?绿幕不会立刻磨灭,它的位置,正正在被一颗小芯片一点点挪走。






