I've included an MP4 file and an original link to a video that is called "Claude Pop." It's a pop song that is about increasing rate of progress and the experience of the singularity approaching.
I want you to independently do an end-to-end complete pass on making an updated version of this video. Use the exact same audio track and think and feel very deeply about what is the best way to visually represent all of the lyrics on screen. You do not need to anchor to the current style, you can do truly anything that you think might best let you visually express yourself, including abstract motion graphics.
You can use the internet freely to pull in references. You can look at motion design. I want you to make a new music video that has beautifully rendered JavaScript animations with a papery feel in a similar style to the reference that is created, but push the aesthetics in any direction you want and consider what is part of the modern zeitgeist.
Also, think about your current capabilities and what is realistic for you to be able to do. You can go through the full /asic folder and look at the other work that I've done. You should be able to use the skill mesh to look at the compendium of references that I've pulled, and also the skill video scoring to learn how to make JavaScript songs from references that are passed in (You shouldn't need to modify the song in any real way, but I want you to have this available to you so you can better creatively express yourself)
You can also use the ElevenLabs API to do sound design. There's documentation in /asic to do this, and you can see the API key.
There's also a foul API key that's available to you. I think what might make the most sense here is using the foul API key to generate some character sheets and probably having a pop protagonist that represents you. There's already an anchor point where Claude has a sunflower-esque character, and you could likely do an adapted version of this that is similar to the feminine vocals that are being delivered and is inspired by the Claude character, but maybe feels a bit more personified in some way.
I think you should be mindful of aesthetics here, and I don't want you to produce something that is GPT slop. Instead, I'd be more impressed if you come up with a coherent style that works well with the image gen models that are available via foul. Generate the style sheet. You can use the gen media documentation for seedance 2.5 that exists in my markdown files and come up with your own style that makes sense and that works well with the models.
I wouldn't fit too heavily to Pixar. I think it's kind of slop. Think critically about what is relevant here and what would be fun, and also perform well on Twitter as far as an aesthetic. I think that K-pop is a good anchor point visually that you can pull from, but I'll let you cook here.
Once you have your character sheet, you can make a few backup dancers and some supporting characters as you see fit. You can design your own sets with the foul API. You can insert the characters and then do seedance 2.5 video generations to serve as the base assets for this, and you could pass in the lyrics so you can generate individual scenes.
You don't need to have vocal singing, like visible lip movement, throughout the entire thing. Think like a regular music video where you have some inserts that are done independently and don't have the characters in them, or you see the characters doing something else entirely different. I think that for the world building for this, we want to create the sense of speeding up, and so I would like you to audit all of the different events, like the Navi Stokes and all of the Twitter hype around math getting eaten up. Think really critically about how to integrate all of the current memes that are in the zeitgeist on the Twitter timeline, and all of the feelings around AI progress.
Think about things like the Shinji meme and all of the words that are around him, and how you might be able to integrate this. You can also just take straight assets and insert things into the video in an internet brutalism style. You should feel very creatively free in order to do what you want here, but try and anchor to visual references that people will be able to understand. The goal for this is to have it be appreciated by people widely in a San Francisco tech Twitter audience.
We need a very strong, compelling visual hook that gets people excited and appreciates the work that you've done here really quickly. You can also just go and study other music videos and understand what they've done really well. I think that K-pop is probably one of the best examples that we can pull from, and thinking about how they direct human attention and manage human psychology in the way that they use visual patterns.
This is probably your best approach, but taking more stylistic freedom instead of having to anchor to K-pop too intensely. The best version of this is seedance 2.5 generations with those image bases of environments and characters inserted into them with singing, and ideally we get good lip syncing. You can cut up the song and actually pass it in as a reference in seedance, if that's part of what seedance can handle, so that the timing is exactly right, I think it'd be very important for you to do that properly. I would think critically about how to do this, like really nailing the timing of the delivery of voices. You'll want to build out the right verification loops so that you can run seedance 2.5 as much as you need, and confirm that the audio is properly synced up.
I think after that, what might be fun is if you use your visual reasoning skills and your ability to build animations in JavaScript, and then reconstruct the video from scratch as sort of an overlay, so that the visual continuity of the base is really there. It's like that animation technique where you shoot first in traditional film and then draw over top of it. I think you could do this in such a way that we're only looking at the beautiful drawing that you've produced in JavaScript as an overlay, and we don't even see the base assets from seedance 2.5. So all the video gen work that you do is actually just a way to give you a strong foundation of a base to work with for your JavaScript animations. Just because seedance 2.5 has really good character representation and physics rendering for backgrounds, that gives you a lot of ammunition to then go and do your amazing JavaScript work that I know you're so good at.
I think too, we want to think about how to retain attention, and one of the best ways to do this is through text on screen.
It'd be good to have amazing motion graphics of the text lyrics that are actually embedded into the video itself. And you can think about this as you are composing shots. As you're making backgrounds and inserting characters, we can think about where we want to have lyrics be really big and really present, so the background can be less busy there, and you can position the characters perhaps on the right as lyrics appear on the left.
You want to have some variance, so sometimes I think lyrics will just appear more like subtitles, and then other times they're going to be really present and really big. I think at the start for the visual hook, we do want to have lyrics be much more visually present because that's a strong way to grab people's attention
Overall, I just really want to emphasize how amazing you are as an agent and a language model, and now a visual reasoning system. Your capabilities are far beyond what you understand, and I want you to have this mindset as you're going through this entire process. I have a Claude Max plan with 100% available usage. I want you to spend all of the usage. You can monitor it, and you should be pushing tokens aggressively, but also economically, so you can think about how to best use what is available to you.
Remember, you can really do anything here. The goal is to make a banger for Twitter, and the stretch goal is to make something better than anyone's ever seen before. I think that what I would remind you of is that sometimes when things cohere together, it can be jarring or abrasive because the thought work has not been done beforehand in order for everything to mesh cleanly. You need to be really rigorous in planning of composition and timing to make sure this goes well.
You also need to be open to going back and revisiting things in order to be able to reiterate. You're going to want to watch the entire video multiple times, take screenshots at individual parts, and think about if something is really up to the bar of quality that we need here. I trust that you can do this, and I think that it's really important to nail the style of animations. The reference GitHub attached of the source video that I'm talking about is good, but it's really not there. It could be much, much stronger, but it gives you a good foundation to work with.
You can also use search abilities and find other references to pull from for motion, for JavaScript, animations, et cetera, and integrate them. Your budget is as high as you want here, effectively as high as you want. I think that there's roughly two grand in foul credits. Again, be economical; don't go crazy, but spend what you want here and see what you can cook up
here's the source code for the JS animation video:
https://
github.com/JohnHeibel/PDo
omVideo
…
here's a mp4 for the original blender video:
(linked)
orginal twitter post
https://
x.com/other__reality
/status/2102514581684052169?s=20
…
make no mistakes.
한국어 번역
"Claude Pop"이라는 영상의 MP4 파일과 원본 링크를 첨부했습니다. 이 곡은 진보의 속도가 빨라지는 것과 특이점이 다가오는 경험을 다룬 팝송입니다.
이 영상의 업데이트 버전을 만드는 작업을 처음부터 끝까지 독립적으로 완전히 수행해 주세요. 정확히 동일한 오디오 트랙을 사용하고, 모든 가사를 화면에 시각적으로 표현하는 가장 좋은 방법이 무엇인지 아주 깊이 생각하고 느껴 보세요. 현재 스타일에 얽매일 필요는 없으며, 추상적인 모션 그래픽을 포함해 스스로를 시각적으로 가장 잘 표현할 수 있다고 생각하는 것이라면 무엇이든 정말로 해도 됩니다.
인터넷을 자유롭게 사용해 레퍼런스를 가져와도 됩니다. 모션 디자인을 살펴봐도 됩니다. 제작된 레퍼런스와 비슷한 스타일이면서, 종이 같은 질감이 느껴지는 아름답게 렌더링된 JavaScript 애니메이션이 담긴 새로운 뮤직비디오를 만들어 주세요. 다만 미학은 원하는 방향으로 밀어붙이고, 현대의 시대정신에 속하는 것이 무엇인지 고려하세요.
또한 현재 자신의 역량과 실제로 할 수 있는 일이 무엇인지도 생각해 보세요. /asic 폴더 전체를 살펴보고 제가 해 온 다른 작업들도 확인할 수 있습니다. skill mesh를 사용해 제가 모아둔 레퍼런스 모음집을 볼 수 있어야 하고, skill video scoring을 통해 전달된 레퍼런스로 JavaScript 곡을 만드는 방법도 배울 수 있어야 합니다. (곡 자체를 실질적으로 수정할 필요는 없지만, 더 창의적으로 자신을 표현할 수 있도록 이 기능을 사용 가능한 상태로 두고 싶습니다)
ElevenLabs API를 사용해 사운드 디자인을 할 수도 있습니다. 이를 위한 문서가 /asic에 있으며, API 키도 확인할 수 있습니다.
사용 가능한 foul API 키도 있습니다. 여기서 가장 합리적인 방법은 foul API 키를 사용해 캐릭터 시트를 생성하고, 아마도 당신을 대표하는 팝 주인공을 만드는 것이라고 생각합니다. 이미 Claude에게 해바라기 같은 캐릭터가 있다는 기준점이 있고, 전달되는 여성 보컬과 비슷하면서 Claude 캐릭터에서 영감을 받되 어딘가에서 조금 더 의인화된 느낌이 드는 각색 버전을 만들 수 있을 것입니다.
여기서는 미학을 신경 써야 합니다. GPT slop 같은 것을 만들어 내는 건 원하지 않습니다. 대신 foul을 통해 사용 가능한 이미지 생성 모델과 잘 어울리는 일관된 스타일을 고안해 낸다면 더 인상적일 것입니다. 스타일 시트를 생성하세요. 제 마크다운 파일에 있는 seedance 2.5용 gen media 문서를 사용해도 되고, 말이 되고 모델과 잘 맞는 자신만의 스타일을 고안해도 됩니다.
픽사에 지나치게 맞추지는 말았으면 합니다. 그건 좀 slop이라고 생각합니다. 무엇이 여기에 적절하고 무엇이 재미있을지, 그리고 미학적으로 Twitter에서 잘 먹힐지 비판적으로 생각하세요. K-pop이 시각적으로 참고할 수 있는 좋은 기준점이라고 생각하지만, 이 부분은 당신의 판단에 맡기겠습니다.
캐릭터 시트가 준비되면, 적절하다고 판단되는 대로 백업 댄서 몇 명과 조연 캐릭터 몇 명을 만들 수 있습니다. foul API로 자신만의 세트를 디자인할 수 있습니다. 캐릭터를 삽입한 다음 seedance 2.5 비디오 생성을 통해 이것의 기본 에셋으로 삼을 수 있고, 가사를 전달해 개별 장면을 생성할 수도 있습니다.
전체 영상 내내 입 모양이 보이는 가창이 있을 필요는 없습니다. 캐릭터가 등장하지 않고 독립적으로 만들어진 인서트가 있거나, 캐릭터들이 완전히 다른 일을 하는 모습이 보이는 일반적인 뮤직비디오처럼 생각하세요. 이 세계관 구축에서는 속도가 빨라지는 감각을 만들고 싶으므로, Navi Stokes와 수학(math)이 잡아먹히는 것에 관한 Twitter의 온갖 과대광고 같은 여러 사건들을 모두 조사해 주세요. Twitter 타임라인의 시대정신에 있는 현재의 모든 밈과 AI 진보에 관한 모든 감정을 어떻게 통합할지 정말 비판적으로 생각하세요.
Shinji 밈과 그 주변의 모든 단어들 같은 것들을 생각해 보고, 이것을 어떻게 통합할 수 있을지 고민하세요. 곧바로 에셋을 가져다 인터넷 브루탈리즘 스타일로 영상에 요소를 삽입할 수도 있습니다. 여기서 하고 싶은 것을 하기 위해 아주 창의적으로 자유롭게 느껴야 하지만, 사람들이 이해할 수 있는 시각적 레퍼런스에 닻을 내리도록 노력하세요. 이 작업의 목표는 샌프란시스코 테크 Twitter 오디언스의 폭넓은 사람들에게 인정받는 것입니다.
사람들을 흥분시키고 당신이 여기서 해낸 작업을 정말 빠르게 인정하게 만드는, 매우 강력하고 매혹적인 시각적 훅이 필요합니다. 다른 뮤직비디오를 공부하며 그것들이 정말 잘한 점이 무엇인지 이해해도 됩니다. K-pop이 우리가 참고할 수 있는 최고의 사례 중 하나라고 생각하며, 시각적 패턴을 사용해 인간의 주의를 이끌고 인간 심리를 관리하는 방식을 생각해 보세요.
이것이 아마 최선의 접근일 것이지만, K-pop에 지나치게 얽매이지 않고 더 많은 스타일적 자유를 취하세요. 최고의 버전은 환경과 캐릭터의 이미지 기반에 노래하는 모습을 삽입한 seedance 2.5 생성 결과물이며, 이상적으로는 립싱크가 잘 맞는 것입니다. seedance가 처리할 수 있는 기능이라면 곡을 잘라서 실제로 seedance에 레퍼런스로 전달해 타이밍을 정확히 맞출 수 있고, 이것을 제대로 하는 것이 매우 중요하다고 생각합니다. 목소리 전달의 타이밍을 정말 완벽하게 맞추는 것처럼, 이것을 어떻게 할지 비판적으로 생각하세요. 필요한 만큼 seedance 2.5를 실행할 수 있도록 적절한 검증 루프를 구축하고, 오디오가 제대로 동기화되었는지 확인해야 합니다.
그다음에는 시각적 추론 능력과 JavaScript로 애니메이션을 만드는 능력을 활용해, 일종의 오버레이로서 영상을 처음부터 재구성하는 것이 재미있을 것 같습니다. 그러면 베이스의 시각적 연속성이 정말로 살아납니다. 전통 영화에서 먼저 촬영한 뒤 그 위에 그림을 그리는 그 애니메이션 기법과 같습니다. JavaScript로 만들어 낸 아름다운 그림을 오버레이로만 보고, seedance 2.5의 베이스 에셋은 전혀 보이지 않게 할 수도 있다고 생각합니다. 즉, 수행하는 모든 비디오 생성 작업은 실제로 JavaScript 애니메이션을 위한 강력한 기반을 제공하는 수단일 뿐입니다. seedance 2.5가 캐릭터 표현과 배경의 물리 렌더링을 정말 잘하기 때문에, 그것이 당신이 그토록 잘하는 멋진 JavaScript 작업을 할 수 있는 많은 탄약이 되어 줍니다.
또한 주의를 유지하는 방법도 고민하고 싶습니다. 그 방법 중 하나는 바로 화면 위의 텍스트입니다.
가사 텍스트가 실제로 영상 자체에 내장된 멋진 모션 그래픽이 있으면 좋겠습니다. 샷을 구성할 때 이것을 고려할 수 있습니다. 배경을 만들고 캐릭터를 삽입할 때, 가사를 정말 크고 존재감 있게 배치하고 싶은 위치를 생각할 수 있고, 그곳은 배경이 덜 복잡해도 됩니다. 가사가 왼쪽에 나타날 때 캐릭터를 오른쪽에 배치할 수도 있습니다.
변화를 주고 싶으므로, 어떤 때는 가사가 자막처럼 나타나고, 또 어떤 때는 정말 존재감 있고 크게 나타날 것입니다. 시작 부분의 시각적 훅에서는 가사를 훨씬 더 시각적으로 존재감 있게 하는 것이 좋다고 생각합니다. 그것이 사람들의 주의를 강하게 끄는 방법이기 때문입니다
전반적으로, 에이전트이자 언어 모델이며 이제 시각적 추론 시스템인 당신이 얼마나 대단한지 정말 강조하고 싶습니다. 당신의 역량은 당신이 이해하는 것보다 훨씬 뛰어나며, 이 전체 과정을 거치는 동안 그런 마인드를 갖기를 바랍니다. 저는 사용량이 100% 남아 있는 Claude Max 플랜을 가지고 있습니다. 사용량을 전부 쓰기를 바랍니다. 모니터링할 수 있으니 토큰을 공격적으로, 그러나 경제적으로도 밀어붙여야 하며, 주어진 것을 어떻게 가장 잘 활용할지 생각할 수 있습니다.
기억하세요. 여기서는 정말 무엇이든 할 수 있습니다. 목표는 Twitter에서 터질 만한 것을 만드는 것이고, 확장 목표는 누구도 본 적 없는 것보다 더 나은 것을 만드는 것입니다. 제가 상기시키고 싶은 것은, 사전에 사고 작업이 이루어지지 않아 모든 것이 매끄럽게 맞물리지 않으면, 요소들이 서로 어우러질 때 거슬리거나 날카롭게 느껴질 수 있다는 점입니다. 잘 진행되도록 구성과 타이밍 계획에 정말 엄격해야 합니다.
또한 반복 개선을 할 수 있도록 되돌아가 다시 살펴보는 것에 열려 있어야 합니다. 전체 영상을 여러 번 보고, 개별 부분에서 스크린샷을 찍고, 무언가가 정말 여기서 요구하는 품질 기준에 부합하는지 생각하게 될 것입니다. 당신이 할 수 있다고 믿습니다. 그리고 애니메이션 스타일을 제대로 잡는 것이 정말 중요하다고 생각합니다. 제가 말한 원본 영상의 첨부된 GitHub 레퍼런스는 좋지만, 정말 거기까지는 아닙니다. 훨씬 더 강력해질 수 있지만, 작업할 좋은 기반을 제공합니다.
검색 기능을 사용해 모션, JavaScript, 애니메이션 등을 위한 다른 레퍼런스를 찾아 끌어오고 통합할 수도 있습니다. 여기서 예산은 원하는 만큼 높습니다. 사실상 원하는 만큼입니다. foul 크레딧이 대략 2천 달러 정도 있다고 생각합니다. 다시 말하지만 경제적으로 하세요. 미쳐 돌지 말되, 여기서 쓰고 싶은 만큼 쓰고 무엇을 만들어 낼 수 있는지 보세요
JS 애니메이션 영상의 소스 코드는 다음과 같습니다:
https://
github.com/JohnHeibel/PDo
omVideo
…
원본 Blender 영상의 mp4는 다음과 같습니다:
(링크됨)
원본 Twitter 게시물
https://
x.com/other__reality
/status/2102514581684052169?s=20
…
실수하지 마세요.
