【杂志翻译】COMMERCIAL PHOTO 2023年9月号 櫻坂46 Start over!创作团队采访Part1

特辑 樱坂46 最新创意作品

于2023年6月28日发售的樱坂46的第六张单曲「Start over!」。

将会对本次使用了NeRF技术作成的CD封面
作品等进行介绍。从制作了封面的创作者们的视角来解析「Start over!」。

Interview01 创意总监/艺术总监

第六张单曲「Start over!」×最新技术NeRF
樱坂46以“向世界传达的噪声”掀起风潮

最开始采访的是在此次企划担任创意总监的工藤直也、艺术总监的柴谷麻以和辻冈翔这三人。

讲述了他们提出运用目前实例较少的最新技术NeRF的始末以及制作时的插曲。

——请先做一下自我介绍吧。
工藤：我是来自 dentsu zero 的工藤直也。这次我担任了创意总监一职。
柴谷：我是担任艺术总监的柴谷。我以前负责过乃木坂46的MV，以及欅坂46出道时在mechakari这个品牌的广告。
辻冈：我是所属于电通 2CRP 的艺术总监辻冈。最近的话我负责 了King &Prince 的logo和封面设计，我想这可能是邀请我的原因吧。
——听说这次是通过比稿来决定的。面对方案发表，你们都做了什么样的准备呢？
工藤：距离这次的发表我们没有太多时间，所以是大家先集思广益，确定好方向，然后再迅速地准备材料来提出一个方案这样的感觉。我们的方向有「不受过去欅坂46 留下的印象所禁锢，而是将当下这个瞬间的樱坂46鲜活地描绘出来」，以及 「活用组合在全球也评价颇高的优势，通过樱坂46向世界展现“全新的日本”」这两点。
柴谷：最开始的时候，我们需要从过往的MV与封面中调研出可行的方向性。以前开始，樱坂46就在挑战着普通的偶像不会去表现的东西，因为一直有这样的感觉，我们也就抱有自信地提出了这样的方案，去使用具有挑战性的全新表现手法。
辻冈：考虑到是否可以从过去作品中得到的好的启发时，想到从「欅」变到「樱」之后如何来展示崭新的一面，于是有了新的点子。
工藤：使用最后提出的NeRF(Neural Radiance Fields /神经渲染）这项技术去表现“引起噪音”的概念，感觉效果应该会不错，所以就以它为主进行了提案。

说到NeRF…是使用AI将从不同角度拍摄的诸多照片生成为立体的现实空间的一项技术。这次将原本不会被留下的噪点和模糊，以令人印象深刻的方式故意留下，于是樱坂46被描绘成在被扫描的涉谷街道中引起噪音的存在。

——可以让我了解一下将NeRF加入提案中的契机吗？

辻冈：实际上，以前在其他的项目中也提出过使用NeRF技术，那时并没被采用。然而，我个人觉得NeRF的噪音般的效果看上去十分的帅气，一直都希望有朝一日可以运用到。这次想着「正好很符合这个概念！」便提出了这个创意。
柴谷：我也和共事者使用过几次NeRF，原本的重点通常都是「如何漂亮地扫描出照片来」，但反之它也能表现出噪音这样的效果，辻冈先生提出了这一点之后我也觉得很有趣，于是一起热烈地讨论了。不过最初只是决定给背景添加噪音效果而人物却保持清晰，但这样做好不好呢，有过这方面的讨论，但多亏了以今野先生为首的樱坂46的运营方认为这个挑战很具有吸引力，才得以尝试制作更具有激进性的视觉图。

通过故意保留通常不会残留下的噪点，让其作为印象深刻的存在变得显著

——在正式决定的阶段时，有没有什么重新梳理过的地方？
柴谷：我对于使用噪音这个提案会不会被接受而感到过不安，但被告知了「不如说用噪音才更加有趣」后，想法就以如何才能将理想中的噪音创作出来为中心被重塑了。
工藤：樱坂46同时有作为偶像团体的一面，所以也有着成员们的脸及身体都必须要好好保留下来这方面的考量，这方面比较难找到平衡点呢。另外，虽然在方案展示时说了「要全部使用NeRF技术」，但对于时间和体力来说都很难实现（笑），我们也就讨论了要不然CD内里的内容就用类似的模拟来做吧。不过，“Make Awesome Noise”是先作为共通概念被推行的，主要就是在从欅坂46时代以来一直被作为圣地的涩谷，以「她们作为震源，来掀起美伦美奂而又狂野不羁的噪音！」这样的氛围作为目标了。中页的内容也是想达成从她们开始向世界之中激起波纹并唤起噪音这样的表现。
柴谷：这次，16页的小册子有5种形态，并且每一种都需要使用不同的图像。CD封面和封底是使用NeRF制作的图片，中页则是以晃动的水面和扭曲的巨大镜子模拟出了相同的噪音效果。其实中页也有一部分是使用了NeRF的，但为了尽可能让人看不出哪些是实像哪些是虚像，在如何能做出与NeRF类似的噪音效果这点上下了功夫。
——有什么事情是在摄影途中变更的吗？
柴谷：在拍摄第二天左右，有个关于「如果背景不选在这个地方可能会更好」这个话题的小插曲。这次拍摄的具体方法是，先扫描背景的照片，人物则单独在摄影棚拍摄，然后再用同样的方法把人物进行扫描，最后和背景整合在一起。因为背景是可以用手机扫描的，所以在提出外景地的时候就已经同时做了扫描，在完善末稿的阶段，就使用了计划摄影地拍摄的素材进行了方案提出。虽然NeRF有着扫描一次就可以从360度各种角度观察的好处，但它大多时候没办法很好地生成扫描重点以外的地方。不过，这次为了找新的更好的角度，回看时检查了原定地点的反面一侧，就在检查的时候，没生成好的地方偶然地具有与印象派绘画相似的配色，于是就活用这一点改变了方案。
工藤：如果拍实景照片的话要找出一个新的拍摄角度是比较麻烦的，但用NeRF的话就可以从数据上直接完成查找。原本的危机就转换成了能找到更好的角度的契机，这大概也是多亏使用了NeRF才有的。

——在制作过程中，有什么对参与制作的其他工作人员提出的要求吗？ 

柴谷：具体例子的话，有要求服装方面要容易制作出噪点，像是版型能让剪影轮廓看起来更大一些的服装。 在我负责的『东京时装周』里，参与的品牌VIVIANO的服装十分符合本次的概念，就给造型师看了很多相关资料，想让成员们在内页中摆出连指尖都能展现美的姿态，就拜托了造型师根据每一个成员做了不同的美甲。 

——如果在拍摄时有印象深刻的事情还请告诉我们。

工藤 ：（担任了Center的） 藤吉夏铃小姐，在其他成员进行拍摄时也粘在显示器前面让我很印象很深。打听了一下，听说她对于艺术作品及其表达的讲究似乎比其他人要强烈一倍。念白也是到她能接受为止无数次地重录，见识到了她的这份克己，很有 “艺术家”的气质。 

柴谷：这次，对于三期生的成员们来说概念照拍摄也是第一次，所以有做一些详细的说明，这方面可能也有一些辛苦的部分。

——顺带一提，像本作这样使用了NeRF的拍摄，到完成大概需要花多少时间呢。 

辻冈：如果加上润色修饰等修图这些的话，最好是希望能有2～3周的时间左右呢。因为这次时间有些紧凑， 事先也有和修图师谈好要把噪音加到什么程度。在最开始的阶段，因为已经决定好正式要使用的背景了， 就只需要事先核对要给人物加多少噪音了。

 ——这次担任制作了CD封面和CM，静止画和视频在处理方法上有什么不同吗？ 

工藤：原本是不准备制作CM的，但只在静止画上运用NeRF实在是太奢侈了，于是就也想试试能不能做个视 频出来让世间看到。在发表阶段的现场正好有机会展示视频，在提到「这个可以用在什么视频里吗？」的时候，有说了因为机会难得所以就做成CM吧。 

柴谷：NeRF原本是运用在电影上的技术，所以常有被说「为什么只运用在平面的图像上」。所以慎重起见， 就扫描了所有画面，在现场也展示了用这些做出的视频，有条不紊地演示了（笑）。 

辻冈：是的，在选背景时也是以动态的形式进行的，所以也是同时带着“包含这些动起来的部分也很帅气吧”这样的意图在展示（笑）。 

工藤：实际上，我们也是第一次使用NeRF来制作，也曾犹豫过预算上的问题，我们可以不受拘束地在制作视 频的方案上走多远。但是和实景拍摄不一样，因为有已经扫描好的数据，所以可以把视频制作作为图像制作的一种延伸，就这样完成了它。 

柴谷：NeRF虽然是要自己在360度环绕的世界中配置相机的，但是根据镜头的更改以及所输入不同的坐标， 能毫无违和感地将在不同地方扫描的场景连接起来，这一点十分有趣。在涉谷路口的正中间，通过从后方 加入巨大的灯泡进行打光，并在3D空间里铺设好过山车般的虚拟轨道，像这样之后进行了摄影。虽说是把 使用NeRF扫描好的东西放在虚幻引擎里表现出来，但技术人员看了渲染成果之后，如果有像是「再移动一 点」或者「再调亮一点」这样的指示，也能如同在实景拍摄发出指示一般地去相应完成调整。

当向世界中展示日本的艺人时，如果能像这样活用新的技术将会令人欣喜。

——今后，有什么想使用NeRF挑战的事情吗？
工藤：通常会根据企划的需求来决定启用无人机或者尝试让AI生成绘画，但是这次是根据NeRF这项技术开始考虑能怎么呈现效果，并且是从概念开始倒推，从“掀起噪音”这样的原概念开始进行发散。从要运用的技术开始构思，通过这次也意识到了可以就此拓展各种方案及呈现方法的思路，今后也想在其他企划中积极地运用和尝试。
柴谷：我在学生时代经常优先思考想要呈现的表现，之后再考虑附加一个概念上去，但在工作时则是先考虑概念的场合比较多。重新感受到了像这次一样，以先接触NeRF技术为契机，之后再去考虑概念的实行方法也很重要。这次正因为我们并不是作为技术担当，从这样的视角才能发现「噪音，好帅啊！」这种与通常不一样的使用方法，我认为就是像这样才能和有趣的表现牵连起来。在此之外也想各方面都考虑一下，活用新技术，以及是否能做出有意思的表现呢等等。
辻冈：如果不知道NeRF，就不会诞生出这次的企划。所以从今以后也不能仅限于NeRF，要时常汲取各类新的信息。就只论NeRF而言，这次是以人物为中心制作的，但技术本身的特点是可以生成3D空间，有没有能够更加活用所生成的空间的方法呢，所以今后也想寻找一些新的使用手法。
工藤：艺人团体的MV和最新技术的相性非常好，事实上这次合作也引起了很大的反响。我想有很多艺人侧对于这种表达方式上侧重于R&D（研发）的方向还不是很熟悉，我们这边从今往后也想要多多提出这样的方案呢。我认为今后也十分需要「艺人×使用新技术的表现方法」这样的合作，当向世界中展示日本的艺人时，如果能像这样活用新的技术将会令人欣喜。

工藤直也 CM策划/视觉传达设计师。为Silver Tetsuya设计了企划「亲生孙子」而被熟知，85岁的Silver Tetsuya身着孙子的衣服而在一夜之间被世界瞩目。 

柴谷麻以 艺术督导/设计师。从广告到电视节目等广泛领域的美术指导都在她的擅长范围内。乃木坂46中的unit炸鸡姐妹的制作人。所属于太阳电脑。 

辻冈翔 艺术督导/设计师。擅长以广告视觉方面为中心，包含品牌营销，CI（企业形象），包装设计等宽泛领域的美术指导。

Interview02 技术督导

通过Luma AI与虚幻引擎有效率地运用NeRF

提起「Start over！」的艺术集体照、封面艺术和预告视频的创作过程，就要说到不可或缺的NeRF。
是如何在「Start over！」中活用这项最新技术的，向技术督导村田洋敏先生进行了采访。
 

——听说NeRF在「Start over！」发表时，还是一种实例很少的表现方法
村田：原本，NeRF是一种利用从各种角度所拍摄的对象物的照片或视频，后使用AI生成任意自由视点的图像的技术。在3D环境中不管从360度哪个视点出发都能看到对象物，让大胆的拍摄角度和手法也成为了可能。
「Start over！」与NeRF原本的目标方向不同，故意让AI生成的故障噪音效果也成为了创意要素的一部分。

——创作的流程是？ 

村田：大体上来说，是先拍摄能成为原素材的照片与视频，再导入进3D捕捉软件Luma AI来生成3D数据。然后将这些输入进虚幻引擎，再来创造出3D空间。分别拍摄作为背景的涉谷街道与樱坂46的成员，经 Luma AI中生成后，在虚幻引擎中完成合成。 通过Luma AI，可以更轻松地在短时间内生成3D模型，也让NeRF的使用变得更加便利。另外，在接到这次 委托的时点上，正好Luma Ai的虚幻引擎插件也被发布了，也就能更加高效地推进作业了。 

——作出故障干扰（噪音）效果的步骤是？ 

村田：在构建清晰的3D数据时，通常会让AI学习从多个视点拍摄的照片与视频，这次反而是只让它读取从有限的几个视点拍摄的数据。

打比方来说，如果只使用从地面视角拍摄的照片与视频进行生成，在3D空间中如果向那些没有被拍摄到的角度部署拍摄机位，AI则无法完全地去补全那些地方，就会产生出如抽象画般的噪音效果。噪音的程度，是与艺术总监一边观察虚幻引擎中的画面，一边寻找能产生恰到好处的噪音效果的机位视角，这样来决定的。
由于噪音效果的生成是十分偶然且无法完全控制的，我们经过反复的试验掌握了窍门后才去进行了素材摄影。背景的拍摄是在涉谷的街道和大楼的楼顶进行的。成员的拍摄则是在白色幕布下进行的，各个站位队形分别静止不动约1分钟，工作人员在她们周围一边绕着圈一边使用iPhone拍摄视频这样进行的。
以NeRF生成的噪音效果为本，修图师进行调整，再分别将其整合成为用于主视觉图、封面、以及歌词本的人像图。

通过进行反复多次的推敲，探寻“恰到好处的噪音”

——最初使用NeRF只是计划将其作为表现平面上的噪音的手段，预告视频是之后才有的提议对吧。
村田：因为NeRF原本的魅力是在视频映像中体现出自由自在的机位和摄影手法，所以提议通过了真是太好了。NeRF本身就是一种很崭新的技术，这次更进一步，在与原本截然不同的意图下使用了，因此制作过程中也有很多坎坷。我很在意发表之后粉丝们的反应，从社交媒体上的反应来看似乎是积极的意见占了多数。
这次通过运用最新的技术NeRF，也包含了对樱坂46来说「今后也会去传达新事物」这样的讯息，基于樱坂46迄今为止所累积的艺术创作等，我想粉丝们也会有更深刻的理解。
十分有幸可以参与这个具有挑战性的企划，让我得到了很宝贵的经验。

村田洋敏 Think&Craft 技术督导/工程师。侧重于使用科技技术的影像演出/装置艺术/live演出等

夏之风铃字幕组

翻译：rainnie

校对：小绿