Framer เป็นเครื่องมือแทรกเฟรมเชิงนวัตกรรม ผสมผสานโมเดล diffusion ที่ผ่านการฝึกฝนล่วงหน้ากับการควบคุมเส้นทางจุดสำคัญ มอบความสามารถในการปรับแต่งการเปลี่ยนผ่านการเคลื่อนไหวที่แม่นยำให้กับผู้ใช้ เพียงอัปโหลดภาพเฟรมแรกและเฟรมสุดท้าย ก็สามารถสร้างวิดีโอเปลี่ยนผ่านเฟรมแรก-เฟรมสุดท้ายได้ ด้วยการควบคุมแบบอินเทอร์แอกทีฟและฟังก์ชันเพิ่มประสิทธิภาพอัตโนมัติ จึงบรรลุผลลัพธ์ทางภาพที่มีคุณภาพสูงและเป็นธรรมชาติในฉากการเคลื่อนไหวที่ซับซ้อนและกรณีที่รูปลักษณ์เปลี่ยนแปลงอย่างมีนัยสำคัญ
หมายเหตุ: โมเดลนี้รองรับการสร้างวิดีโอที่มีความละเอียด 512×320 เท่านั้น

ฟังก์ชันซอฟต์แวร์:
การแทรกเฟรมแบบอินเทอร์แอกทีฟ: รองรับการปรับแต่งจุดสำคัญและเส้นทางโดยผู้ใช้ เพื่อให้ควบคุมการเคลื่อนไหวเฉพาะจุดได้อย่างแม่นยำ
โหมดขับเคลื่อนอัตโนมัติ: ตรวจจับตำแหน่งจุดสำคัญโดยอัตโนมัติและเพิ่มประสิทธิภาพเส้นทางการเคลื่อนไหว สร้างผลลัพธ์ที่เป็นธรรมชาติและสอดคล้องกันตามลำดับเวลา
ขับเคลื่อนด้วยโมเดล diffusion: ใช้โมเดล Stable Video Diffusion ที่ผ่านการฝึกฝนล่วงหน้า เพื่อให้ได้ความละเอียดสูงและความสอดคล้องทางภาพในกระบวนการแทรกเฟรม
การจัดการฉากที่ซับซ้อน: สามารถรับมือกับการเคลื่อนไหวของวัตถุที่ซับซ้อน การเปลี่ยนแปลงรูปร่าง และความแตกต่างทางสไตล์ได้อย่างมีประสิทธิภาพ
การแสดงผลที่มีประสิทธิภาพ: มีอินเทอร์เฟซแบบอินเทอร์แอกทีฟที่ใช้งานง่าย ปรับจุดสำคัญและเส้นทางได้แบบเรียลไทม์ ให้การเพิ่มประสิทธิภาพที่เห็นผลทันทีที่ปรับ
สถานการณ์การใช้งาน:
การผลิตภาพยนตร์และวิดีโอ: ในการผลิตภาพยนตร์หรือวิดีโอ ช่วยเพิ่มเอฟเฟกต์สโลว์โมชันหรือซ่อมแซมการเปลี่ยนเฟรมที่ไม่ต่อเนื่องด้วยการแทรกเฟรม
การสร้างแอนิเมชัน: ช่วยให้นักแอนิเมชันสร้างเฟรมกลางระหว่างสองเฟรมได้อย่างรวดเร็วและเป็นธรรมชาติ
การวิจัยทางวิชาการ: สนับสนุนการวิจัยด้านการวิเคราะห์อนุกรมเวลาและการจำลองการเคลื่อนไหวในสาขาคอมพิวเตอร์วิทัศน์
การพัฒนาเกม: เพิ่มความลื่นไหลของแอนิเมชันตัวละคร ยกระดับประสบการณ์การเล่นเกม
การปรับแต่งเนื้อหาภาพ: ซ่อมแซมวิดีโอที่มีเฟรมเรตต่ำหรือเพิ่มความมีชีวิตชีวาของวิดีโอสั้น สำหรับใช้ในสื่อสังคมออนไลน์และงานออกแบบสร้างสรรค์
ข้อกําหนดของระบบ:
คอมพิวเตอร์ต้องมีคุณสมบัติดังต่อไปนี้:
ระบบปฏิบัติการ: Windows 10/11 64 บิต
การ์ดจอ: การ์ดจอ NVIDIA ที่มีหน่วยความจำอย่างน้อย 8G
CUDA >= 12.1
หลังจากแตกไฟล์ทั้งหมดจะมีขนาดประมาณ 41.9G ต้องเตรียมพื้นที่ฮาร์ดดิสก์ให้เพียงพอ
หากคอมพิวเตอร์ยังไม่ได้ติดตั้ง CUDA ดูบทสอนติดตั้งได้ที่:
วิธีดูยี่ห้อ รุ่น และหน่วยความจำการ์ดจอ:
เปิด Task Manager
คลิก "Performance"
คลิก "GPU"
มุมขวาบนจะเห็นรุ่นการ์ดจอ ด้านล่างจะเห็นขนาดหน่วยความจำการ์ดจอ

คู่มือการใช้งาน:
① ดาวน์โหลดชุดรวมแล้วแตกไฟล์;

หมายเหตุ: เส้นทางโฟลเดอร์และชื่อไฟล์ (รวมถึงชื่อไฟล์เสียง รูปภาพ วิดีโอ ฯลฯ) ไม่ควรมีอักษรจีน มิฉะนั้นซอฟต์แวร์บางตัวอาจอ่านไม่ได้และเกิดข้อผิดพลาด

② ดับเบิลคลิก "一键启动.bat" รอสักครู่ระบบจะเปิดหน้าจอการใช้งานในเบราว์เซอร์โดยอัตโนมัติ

③ อัปโหลดภาพเฟรมเริ่มต้นและเฟรมสิ้นสุด (ภาพจะถูกปรับขนาดเป็น 512×320 พิกเซลโดยอัตโนมัติ) คลิกปุ่ม "เพิ่มเส้นทางการเคลื่อนไหวใหม่" เพื่อเริ่มวาดเส้นทางการเคลื่อนไหว คลิกบนภาพเพื่อเพิ่มจุดเส้นทาง (เพิ่มเส้นทางแต่ละเส้นให้คลิก "เพิ่มเส้นทางการเคลื่อนไหวใหม่" หนึ่งครั้ง) ปรับพารามิเตอร์ความเข้มของการควบคุมและช่วงการเคลื่อนไหว คลิก "เรียกใช้" เพื่อสร้างวิดีโอ
หมายเหตุ: โมเดลนี้รองรับการสร้างวิดีโอที่มีความละเอียด 512×320 เท่านั้น

④ ด้านล่างจะแสดงตัวอย่างผลลัพธ์

⑤ ผลลัพธ์ที่สร้างขึ้นจะอยู่ในโฟลเดอร์ "outputs" ในแพ็กเกจไฟล์

ผลลัพธ์ที่สร้างขึ้น:

ที่อยู่โอเพนซอร์ส: https://github.com/aim-uofa/Framer