V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
这是一个专门讨论 idea 的地方。

每个人的时间,资源是有限的,有的时候你或许能够想到很多 idea,但是由于现实的限制,却并不是所有的 idea 都能够成为现实。

那这个时候,不妨可以把那些 idea 分享出来,启发别人。
mituanhuo
V2EX  ›  奇思妙想

将电影自动剪辑成为一个 3~ 5 分钟左右的短视频,以这样的短视频来进行电影推荐,不知是否可行?

  •  
  •   mituanhuo · 2017-07-03 15:05:10 +08:00 · 10245 次点击
    这是一个创建于 2700 天前的主题,其中的信息可能已经有所发展或是发生改变。

    一直在想一件事:每天推荐 5 个左右的电影剪辑短视频,然后点击短视频可以观看完整版电影

    这中间需要处理的问题:

    • 电影的自动拆分和标签化处理
    • 自动分析电影,并自动生成短视频
    • 基于用户行为进行电影短视频推荐

    不清楚的问题:

    • 目前可否实现基于某种规则将电影自动生成短视频

    欢迎大神能够沟通指教,目前一直在构思该产品,交流可加微信:bi911250,备注:电影推荐

    52 条回复    2017-07-21 23:44:42 +08:00
    EIlenZe
        1
    EIlenZe  
       2017-07-03 15:21:38 +08:00 via iPhone
    这算人工智能吗。
    fffflyfish
        2
    fffflyfish  
       2017-07-03 15:27:29 +08:00
    一部电影动辄 1 小时,处理起来耗时不说,好点的工作站就得上万,感觉试错成本很高,这个我感觉网易新闻客户端里的那个小视频不错,社区主动上传小视频,由网易推荐,我就是因为网易客户端推荐大话西游,结果又回去看了一遍
    chuanqirenwu
        3
    chuanqirenwu  
       2017-07-03 15:27:34 +08:00
    今日头条
    gen900
        4
    gen900  
       2017-07-03 15:37:56 +08:00 via iPhone
    这块已经有一些研究成果了,看看 YouTube 的论文,自动截取影片封面,程序根据特定条件抽取视频帧作为封面。效果很好。具体细节可以 Google 一下。
    mituanhuo
        5
    mituanhuo  
    OP
       2017-07-03 15:39:51 +08:00
    @fffflyfish 现在不清楚的就是电影转成为短视频的成本有多高,现在能做到那一步
    learnshare
        6
    learnshare  
       2017-07-03 15:40:37 +08:00
    主要是有侵犯版权的问题,比如之前的几分钟看完 /看懂**电影这种
    mituanhuo
        7
    mituanhuo  
    OP
       2017-07-03 15:41:22 +08:00
    @gen900 我去找找看
    rogerchen
        8
    rogerchen  
       2017-07-03 15:43:38 +08:00   ❤️ 1
    video digest,学术研究前沿,离可用的系统还有十万八千里。
    mituanhuo
        9
    mituanhuo  
    OP
       2017-07-03 15:44:01 +08:00
    @chuanqirenwu 剪辑成短视频是为了能够在短时间内能完成一些基本感知,这一点是受今日头条短视频的启发
    mituanhuo
        10
    mituanhuo  
    OP
       2017-07-03 15:44:56 +08:00
    @EIlenZe 可能算吧,哈哈哈
    mituanhuo
        11
    mituanhuo  
    OP
       2017-07-03 15:46:53 +08:00
    @learnshare 和你后面说的这种还不太一样
    Livid
        12
    Livid  
    MOD
       2017-07-03 15:47:05 +08:00   ❤️ 1
    电影的预告片 Trailer 就是用来做这个事情的:

    https://trailers.apple.com/
    mituanhuo
        13
    mituanhuo  
    OP
       2017-07-03 15:49:44 +08:00
    @Livid 有点类似
    em70
        14
    em70  
       2017-07-03 15:51:12 +08:00
    剪辑不是问题,但需要取一个吸引人的标题才行,这事 AI 还干不好,今日头条专门雇佣人给一些短视频取名字,价格还很高
    fffflyfish
        15
    fffflyfish  
       2017-07-03 15:52:31 +08:00   ❤️ 1
    https://github.com/agermanidis/videodigest
    粗看了下原理,用的是自动文摘的算法,找出最重要的字幕,然后把对应的视频区域剪出来拼在一起
    mituanhuo
        16
    mituanhuo  
    OP
       2017-07-03 16:01:38 +08:00
    @fffflyfish 没有字幕的就没办法做了
    mituanhuo
        17
    mituanhuo  
    OP
       2017-07-03 16:03:13 +08:00
    @em70 剪辑有成熟的方案介绍吗?
    dream7758522
        18
    dream7758522  
       2017-07-03 16:04:47 +08:00 via Android
    自动分析电影,你要真能搞定,估计国内 bat,抢着要你
    carlding123
        19
    carlding123  
       2017-07-03 16:09:34 +08:00
    今日头条里面的视频,我琐碎时间会看
    Fre
        20
    Fre  
       2017-07-03 16:09:42 +08:00
    这种短视频,感觉最重要的还是人工编辑的成本。这种 IP 输出的,感觉一个好品味的编辑是无法替代的。
    ech0x
        21
    ech0x  
       2017-07-03 16:46:12 +08:00 via iPad
    剪辑的成本是很高的。
    Jasmine2016
        22
    Jasmine2016  
       2017-07-03 17:14:40 +08:00
    你可以借鉴一下 A 片网站的思路。有的直接是封面图鼠标悬停后显示 GIF 的全片预览,有的是点进去之后两个连接,一个是精彩片段,里面包含正片里几个精彩片段,基本上是 10 秒左右一个片段,加起来长度一两分钟;一个是全时长的正片。
    Jasmine2016
        23
    Jasmine2016  
       2017-07-03 17:15:20 +08:00
    补充楼上:跟这样的大佬站长取取经,你会成功的 [doge]
    linus3389
        24
    linus3389  
       2017-07-03 17:19:41 +08:00
    @Jasmine2016 某 hub 的那个精彩片段我觉得取的确实不错,他那个功能在人工智能还没火起来就已经推出了。
    鬼知道他后端怎么判定的。。。
    mituanhuo
        25
    mituanhuo  
    OP
       2017-07-03 17:32:36 +08:00
    @Jasmine2016 有大佬站长介绍吗?
    lk1ngaa7
        26
    lk1ngaa7  
       2017-07-03 17:34:30 +08:00
    最难的地方是自动剪辑,实际上基本不可能实现,不如转换下思路
    Grubber
        27
    Grubber  
       2017-07-03 18:50:20 +08:00 via Android
    剪辑视频没问题,主要是分析。
    mingyun
        28
    mingyun  
       2017-07-03 23:17:17 +08:00
    @Jasmine2016 老司机
    EIlenZe
        29
    EIlenZe  
       2017-07-04 01:22:11 +08:00
    @mituanhuo #10 看到很多人在说自动剪辑有难度。实际上现在在 PR 上已经有一款插件能够完成简单的自动剪辑了 原理是根据音乐的节奏点来判断。
    Jasmine2016
        30
    Jasmine2016  
       2017-07-04 08:57:02 +08:00
    @mituanhuo 没有。。。没那能耐~
    mituanhuo
        31
    mituanhuo  
    OP
       2017-07-04 09:44:23 +08:00
    @EIlenZe PR 是什么玩意?
    EIlenZe
        32
    EIlenZe  
       2017-07-04 10:28:54 +08:00 via iPhone
    @mituanhuo Adobe 出的一款专业的非线性剪辑软件。主流很多都是用这个剪辑视频。
    mituanhuo
        33
    mituanhuo  
    OP
       2017-07-04 14:34:08 +08:00
    @EIlenZe 我去看看
    tlemar
        34
    tlemar  
       2017-07-04 16:51:11 +08:00
    @linus3389 感觉通过拖动的位置可以判断哈
    lengjingxu
        35
    lengjingxu  
       2017-07-05 13:39:53 +08:00 via Android
    根据用户观看影片的停留和跳过时间选出重点片段。
    zhangsimon
        36
    zhangsimon  
       2017-07-06 16:34:21 +08:00
    你说的就是预告片嘛。。。
    CuSO4
        37
    CuSO4  
       2017-07-06 17:58:57 +08:00
    不会有版权问题么?……
    mituanhuo
        38
    mituanhuo  
    OP
       2017-07-07 14:29:11 +08:00
    @zhangsimon 和预告片还是有些区别的
    smilekung
        39
    smilekung  
       2017-07-12 10:10:45 +08:00
    @linus3389 我猜这个可以根据提取声音来判断
    fl2d
        40
    fl2d  
       2017-07-12 10:54:42 +08:00
    广院好像有个人肉标注好的电影数据库 似乎可以当训练集
    cuminflea
        41
    cuminflea  
       2017-07-12 12:26:44 +08:00 via iPad
    我原来实验室就有人做这块啊,另一个问题是这么搞版权没问题吗?
    mituanhuo
        42
    mituanhuo  
    OP
       2017-07-12 14:06:26 +08:00
    @fl2d 这个在哪里可以看到吗?
    mituanhuo
        43
    mituanhuo  
    OP
       2017-07-12 14:07:25 +08:00
    @cuminflea 可以认识一下吗?
    fl2d
        44
    fl2d  
       2017-07-12 16:12:06 +08:00
    @mituanhuo
    具体情况我也不太清楚,我是大概 10 年前听人提起的。。具体情况你得找广院学影视相关专业的学生或老师问问。
    KevZhi
        45
    KevZhi  
       2017-07-16 00:19:27 +08:00
    个人感觉这样没有必要,直接用预告片就好,电影的预告片就是拿来做这个的。

    1.首先你会遇到版权问题,电影片尾字幕最长的那段版权文字就是说:
    就算你取得了正版的片源,也不允许你以任何形式的分发,播送,重剪辑等。
    因为你不是电影的版权所属公司,也不是院线你拿到片源永远只允许自己观看或者家庭欣赏。

    2.但就此之余,我们也可以讨论讨论技术问题,题主想法的实现必须要用到较高水平的 AI 才能有较好的实现效果。可能目前仅凭我们的水平还做不到

    作为一名剪辑,制作一部电影的混剪/预告片有如下最基本的步骤:
    1]先看十遍再说,完全了解影片的故事大体内容、结构、情感曲线
    2]再看十遍,按照 BGM 的情感曲线(如有),设计这个混剪的情感曲线,在对应阶段选择最好、最有代表性的片段来填充电影曲线
    3]使用合适的转场、字幕

    选择最好最有代表性的片段,其实实现起来并不难,前几年就有能够自动识别歌曲副歌部分的技术(做铃声)出现了,同理,套到视频自动剪辑上也不难实现。

    然而最最关键的问题却是理解情感与内容,这是目前水平根本无法实现的,要不然搞剪辑、导演、编剧的早都下岗了

    做是能做出来,但是做出来的短视频大概就是速度与激情 [爆炸镜头集锦] [车祸镜头集锦] [打斗镜头集锦] ,却对理解电影、引导观看完整版起不了太大的作用,甚至会起反作用
    KevZhi
        46
    KevZhi  
       2017-07-16 00:21:32 +08:00
    目前来说,至少十年内在剪辑与影视创作这方面的人工智能,最多就是起一个“辅助驾驶”的作用,提醒提醒你那个地方好,最终的决定权还是得在人手上
    KevZhi
        47
    KevZhi  
       2017-07-16 00:27:43 +08:00
    @Jasmine2016 哈哈,很有想法啊,这个其实实现起来不难了,丢几千个“啊~啊~”“雅蠛蝶”的音频样本进去训练一下用不了多久就出来了,然后根据音频截视频,十有八九打得准。其实此问题和之前网上讨论的“百度云如何反黄”这一问题有可以借鉴之处,我觉得百度云鉴黄这个东西还是利用了社会工程学,毕竟正常视频没人会一直快进。。。
    播放器写个脚本,收集观众认真看、不快进的时间段数据,大部分用户不快进的时间段,一般就是精彩部分了,以此制作,难度又降低,岂不美哉?只是这个办法只适用于黄片哈
    Jasmine2016
        48
    Jasmine2016  
       2017-07-16 16:02:55 +08:00
    @KevZhi
    「收集观众认真看、不快进的时间段数据,大部分用户不快进的时间段,一般就是精彩部分了」

    ------------卧槽!你这路子我很喜欢,真想给你打赏。
    KevZhi
        49
    KevZhi  
       2017-07-17 23:56:10 +08:00
    @Jasmine2016 来啊来啊
    anyforever
        50
    anyforever  
       2017-07-19 08:44:22 +08:00
    头条里很多的啊
    eilox
        51
    eilox  
       2017-07-21 23:37:14 +08:00
    有点意思哦,我以前一直在想这一块的,音乐的和视频的
    eilox
        52
    eilox  
       2017-07-21 23:44:42 +08:00
    有点意思哦,我以前一直在想这一块的,音乐的和视频的
    如果我们把电影构成的要素拆分一下,类似对于画作的 LBC 分析法,然后生成特征,然后再根据需求智能剪辑就行。只是有个想法哈,没有技术实现路径。
    @KevZhi 这个技术其实可以输出给一些做电视剧剪辑的
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   964 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 34ms · UTC 21:08 · PVG 05:08 · LAX 13:08 · JFK 16:08
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.