AI 요약관련 정보

• Apple의 Starflow는 OpenAI, Midjourney 등과 경쟁하는 새로운 AI 이미지 및 비디오 생성 모델로, 독특한 자기회귀 흐름(auto-regressive flow) 아키텍처를 사용하여 낮은 연산 요구량으로 고품질 결과물을 생성합니다. 🌟
• 이 모델은 기존 확산(diffusion) 모델과 달리 가우시안 노이즈를 단일 순방향 패스(single forward pass)로 변환하는 정규화 흐름(normalizing flow)과 자기회귀 모델의 장점을 결합하여 추론 속도를 최대 15배까지 향상시킵니다. ⚡️
• Starflow는 무료이며 오픈 소스로 제공되어 개발자들이 쉽게 접근하고 실험할 수 있습니다. 🌐
• Apple이 GitHub에 200개 이상의 머신러닝 관련 저장소를 보유하고 있다는 사실은 회사가 AI 분야로 점차 전환하고 있음을 시사합니다. 🍏
• 정규화 흐름의 가역성(invertibility) 덕분에 최종 이미지에서 노이즈 단계로, 다시 노이즈에서 정확히 동일한 최종 이미지로 돌아갈 수 있어 이미지나 비디오의 특정 부분을 정밀하게 수정할 수 있습니다. 🔬
• 현재 공개된 체크포인트는 256x256 해상도 이미지 생성만 가능하며, iPhone과 같은 로컬 기기나 Apple Silicon에 최적화되어 있지 않아 GPU 자원이 필요합니다. ⚠️
• 아직 연구 단계이며 비디오 생성 모델의 체크포인트는 공개되지 않았지만, 웹사이트 예시를 통해 객체 교체, 색상 변경, 비디오 확장 등 인상적인 고해상도 비디오 생성 잠재력을 보여줍니다. 🔮
• 전체 프로세스가 추론을 훨씬 빠르고 저렴하게 만들어, 특히 고해상도 비디오 생성에서 큰 이점을 가집니다. 💸