Upload 3 files
Browse files- app.py +215 -191
- requirements.txt +9 -10
- utils.py +17 -5
app.py
CHANGED
@@ -1,192 +1,216 @@
|
|
1 |
-
import asyncio
|
2 |
-
import mimetypes
|
3 |
-
import
|
4 |
-
import
|
5 |
-
import
|
6 |
-
import
|
7 |
-
|
8 |
-
|
9 |
-
|
10 |
-
from
|
11 |
-
from
|
12 |
-
from
|
13 |
-
from video_processing import
|
14 |
-
from
|
15 |
-
|
16 |
-
|
17 |
-
|
18 |
-
|
19 |
-
|
20 |
-
|
21 |
-
|
22 |
-
|
23 |
-
|
24 |
-
|
25 |
-
|
26 |
-
|
27 |
-
|
28 |
-
|
29 |
-
|
30 |
-
|
31 |
-
|
32 |
-
|
33 |
-
|
34 |
-
|
35 |
-
|
36 |
-
|
37 |
-
|
38 |
-
|
39 |
-
|
40 |
-
|
41 |
-
|
42 |
-
|
43 |
-
|
44 |
-
|
45 |
-
|
46 |
-
|
47 |
-
|
48 |
-
|
49 |
-
|
50 |
-
|
51 |
-
|
52 |
-
|
53 |
-
|
54 |
-
|
55 |
-
#
|
56 |
-
|
57 |
-
|
58 |
-
|
59 |
-
|
60 |
-
|
61 |
-
|
62 |
-
|
63 |
-
|
64 |
-
|
65 |
-
|
66 |
-
|
67 |
-
|
68 |
-
|
69 |
-
|
70 |
-
|
71 |
-
|
72 |
-
|
73 |
-
|
74 |
-
|
75 |
-
|
76 |
-
|
77 |
-
|
78 |
-
|
79 |
-
|
80 |
-
|
81 |
-
|
82 |
-
|
83 |
-
|
84 |
-
|
85 |
-
|
86 |
-
|
87 |
-
|
88 |
-
|
89 |
-
|
90 |
-
|
91 |
-
|
92 |
-
|
93 |
-
|
94 |
-
|
95 |
-
|
96 |
-
|
97 |
-
|
98 |
-
|
99 |
-
|
100 |
-
|
101 |
-
|
102 |
-
|
103 |
-
|
104 |
-
|
105 |
-
|
106 |
-
|
107 |
-
|
108 |
-
|
109 |
-
|
110 |
-
|
111 |
-
|
112 |
-
|
113 |
-
|
114 |
-
|
115 |
-
|
116 |
-
|
117 |
-
|
118 |
-
|
119 |
-
|
120 |
-
|
121 |
-
|
122 |
-
|
123 |
-
|
124 |
-
|
125 |
-
|
126 |
-
|
127 |
-
|
128 |
-
|
129 |
-
|
130 |
-
|
131 |
-
|
132 |
-
|
133 |
-
|
134 |
-
|
135 |
-
|
136 |
-
|
137 |
-
|
138 |
-
|
139 |
-
|
140 |
-
|
141 |
-
|
142 |
-
|
143 |
-
|
144 |
-
|
145 |
-
|
146 |
-
|
147 |
-
|
148 |
-
|
149 |
-
|
150 |
-
|
151 |
-
|
152 |
-
|
153 |
-
|
154 |
-
|
155 |
-
|
156 |
-
|
157 |
-
|
158 |
-
|
159 |
-
|
160 |
-
|
161 |
-
|
162 |
-
|
163 |
-
|
164 |
-
|
165 |
-
|
166 |
-
|
167 |
-
|
168 |
-
|
169 |
-
|
170 |
-
|
171 |
-
|
172 |
-
|
173 |
-
|
174 |
-
|
175 |
-
|
176 |
-
|
177 |
-
|
178 |
-
|
179 |
-
|
180 |
-
|
181 |
-
|
182 |
-
|
183 |
-
|
184 |
-
|
185 |
-
|
186 |
-
|
187 |
-
|
188 |
-
|
189 |
-
|
190 |
-
|
191 |
-
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
192 |
app.launch()
|
|
|
1 |
+
import asyncio
|
2 |
+
import mimetypes
|
3 |
+
import openai
|
4 |
+
import os
|
5 |
+
import tempfile
|
6 |
+
import glob
|
7 |
+
import fitz # PyMuPDF
|
8 |
+
import random
|
9 |
+
import gradio as gr
|
10 |
+
from docx import Document
|
11 |
+
from audio_processing import async_text_to_speech, text_to_speech
|
12 |
+
from content_generation import create_content, CONTENT_TYPES
|
13 |
+
from video_processing import create_video_func
|
14 |
+
from moviepy.editor import AudioFileClip, VideoFileClip, CompositeAudioClip
|
15 |
+
from utils import (combine_videos, get_pexels_video, get_bgm_file, download_video)
|
16 |
+
from video_processing import create_video
|
17 |
+
from content_generation import create_content, CONTENT_TYPES
|
18 |
+
|
19 |
+
def create_docx(content, output_path):
|
20 |
+
"""
|
21 |
+
Tạo file docx từ nội dung.
|
22 |
+
"""
|
23 |
+
doc = Document()
|
24 |
+
doc.add_paragraph(content)
|
25 |
+
doc.save(output_path)
|
26 |
+
|
27 |
+
def process_pdf(file_path):
|
28 |
+
"""
|
29 |
+
Xử lý file PDF và trích xuất nội dung.
|
30 |
+
"""
|
31 |
+
doc = fitz.open(file_path)
|
32 |
+
text = ""
|
33 |
+
for page in doc:
|
34 |
+
text += page.get_text()
|
35 |
+
return text
|
36 |
+
|
37 |
+
def process_docx(file_path):
|
38 |
+
"""
|
39 |
+
Xử lý file DOCX và trích xuất nội dung.
|
40 |
+
"""
|
41 |
+
doc = Document(file_path)
|
42 |
+
text = ""
|
43 |
+
for para in doc.paragraphs:
|
44 |
+
text += para.text
|
45 |
+
return text
|
46 |
+
|
47 |
+
def get_bgm_file_list():
|
48 |
+
"""
|
49 |
+
Trả về danh sách các tệp nhạc nền.
|
50 |
+
"""
|
51 |
+
# Giả sử bạn có một thư mục chứa các tệp nhạc nền
|
52 |
+
song_dir = "/data/bg-music"
|
53 |
+
return [os.path.basename(file) for file in glob.glob(os.path.join(song_dir, "*.mp3"))]
|
54 |
+
|
55 |
+
# Lấy API key từ biến môi trường
|
56 |
+
OPENAI_API_KEY = os.getenv("OPENAI_API_KEY")
|
57 |
+
|
58 |
+
# Khởi tạo client OpenAI
|
59 |
+
openai.api_key = OPENAI_API_KEY
|
60 |
+
|
61 |
+
def extract_key_contents(script, num_contents=10):
|
62 |
+
"""
|
63 |
+
Trích xuất các ý chính từ script.
|
64 |
+
"""
|
65 |
+
try:
|
66 |
+
response = openai.ChatCompletion.create(
|
67 |
+
model="gpt-3.5-turbo",
|
68 |
+
messages=[
|
69 |
+
{"role": "system", "content": f"Bạn là một chuyên gia phân tích nội dung. Hãy trích xuất chính xác {num_contents} ý chính quan trọng nhất từ đoạn văn sau, mỗi ý không quá 20 từ."},
|
70 |
+
{"role": "user", "content": script}
|
71 |
+
]
|
72 |
+
)
|
73 |
+
key_contents = response.choices[0].message.content.split('\n')
|
74 |
+
return key_contents[:num_contents]
|
75 |
+
except Exception as e:
|
76 |
+
print(f"Lỗi khi trích xuất nội dung: {str(e)}")
|
77 |
+
return []
|
78 |
+
|
79 |
+
# Định nghĩa danh sách giọng đọc
|
80 |
+
VOICES = ["alloy", "echo", "fable", "onyx", "nova", "shimmer"]
|
81 |
+
|
82 |
+
# Giao diện Gradio
|
83 |
+
def interface():
|
84 |
+
with gr.Blocks() as app:
|
85 |
+
gr.Markdown("# Ứng dụng Tạo Nội dung và Video")
|
86 |
+
|
87 |
+
with gr.Tab("Tạo Nội dung"):
|
88 |
+
prompt = gr.Textbox(label="Nhập yêu cầu nội dung")
|
89 |
+
file_upload = gr.File(label="Tải lên file kèm theo", type="filepath")
|
90 |
+
|
91 |
+
# Sử dụng gr.Radio thay vì gr.CheckboxGroup
|
92 |
+
content_type = gr.Radio(label="Chọn loại nội dung",
|
93 |
+
choices=CONTENT_TYPES,
|
94 |
+
value=None) # Giá trị mặc định là không có gì được chọn
|
95 |
+
|
96 |
+
content_button = gr.Button("Tạo Nội dung")
|
97 |
+
content_output = gr.Textbox(label="Nội dung tạo ra", interactive=True)
|
98 |
+
confirm_button = gr.Button("Xác nhận nội dung")
|
99 |
+
download_docx = gr.File(label="Tải xuống file DOCX", interactive=False)
|
100 |
+
download_audio = gr.File(label="Tải xuống file âm thanh", interactive=False)
|
101 |
+
status_message = gr.Label(label="Trạng thái")
|
102 |
+
|
103 |
+
def generate_content(prompt, file, content_type):
|
104 |
+
try:
|
105 |
+
status = "Đang xử lý..."
|
106 |
+
if file and os.path.exists(file):
|
107 |
+
mime_type, _ = mimetypes.guess_type(file)
|
108 |
+
if mime_type == "application/pdf":
|
109 |
+
file_content = process_pdf(file)
|
110 |
+
prompt = f"{prompt}\n\nDưới đây là nội dung của file tài liệu:\n\n{file_content}"
|
111 |
+
elif mime_type in (
|
112 |
+
"application/vnd.openxmlformats-officedocument.wordprocessingml.document",
|
113 |
+
"application/msword"):
|
114 |
+
file_content = process_docx(file)
|
115 |
+
prompt = f"{prompt}\n\nDưới đây là nội dung của file tài liệu:\n\n{file_content}"
|
116 |
+
else:
|
117 |
+
raise ValueError("Định dạng file không được hỗ trợ.")
|
118 |
+
|
119 |
+
if not content_type:
|
120 |
+
raise ValueError("Vui lòng chọn một loại nội dung")
|
121 |
+
|
122 |
+
script_content = create_content(prompt, content_type, "Tiếng Việt")
|
123 |
+
docx_path = "script.docx"
|
124 |
+
create_docx(script_content, docx_path)
|
125 |
+
|
126 |
+
status = "Đã tạo nội dung thành công!"
|
127 |
+
return script_content, docx_path, status
|
128 |
+
except Exception as e:
|
129 |
+
status = f"Đã xảy ra lỗi: {str(e)}"
|
130 |
+
return "", None, status
|
131 |
+
|
132 |
+
async def confirm_content(content):
|
133 |
+
docx_path = "script.docx"
|
134 |
+
create_docx(content, docx_path)
|
135 |
+
|
136 |
+
audio_path = await async_text_to_speech(content, "alloy", "Tiếng Việt")
|
137 |
+
return docx_path, audio_path, "Nội dung đã được xác nhận và âm thanh đã được tạo!"
|
138 |
+
|
139 |
+
content_button.click(generate_content,
|
140 |
+
inputs=[prompt, file_upload, content_type],
|
141 |
+
outputs=[content_output, download_docx, status_message])
|
142 |
+
|
143 |
+
confirm_button.click(lambda x: asyncio.run(confirm_content(x)),
|
144 |
+
inputs=[content_output],
|
145 |
+
outputs=[download_docx, download_audio, status_message])
|
146 |
+
|
147 |
+
with gr.Tab("Tạo Âm thanh"):
|
148 |
+
text_input = gr.Textbox(label="Nhập văn bản để chuyển đổi")
|
149 |
+
voice_select = gr.Dropdown(label="Chọn giọng đọc",
|
150 |
+
choices=VOICES) # Dropdown cho voice_select
|
151 |
+
audio_button = gr.Button("Tạo Âm thanh")
|
152 |
+
audio_output = gr.Audio(label="Âm thanh tạo ra")
|
153 |
+
download_audio = gr.File(label="Tải xuống file âm thanh", interactive=False)
|
154 |
+
|
155 |
+
def text_to_speech_func(text, voice):
|
156 |
+
audio_path = text_to_speech(text, voice, "Tiếng Việt")
|
157 |
+
return audio_path, audio_path
|
158 |
+
|
159 |
+
audio_button.click(text_to_speech_func,
|
160 |
+
inputs=[text_input, voice_select],
|
161 |
+
outputs=[audio_output, download_audio])
|
162 |
+
|
163 |
+
with gr.Tab("Tạo Video"):
|
164 |
+
script_input = gr.Textbox(label="Nhập kịch bản")
|
165 |
+
audio_file = gr.File(label="Chọn file âm thanh", type="filepath")
|
166 |
+
keywords_output = gr.Textbox(label="Từ khóa", interactive=True)
|
167 |
+
max_clip_duration = gr.Slider(minimum=2, maximum=5, step=1, label="Thời lượng tối đa mỗi video (giây)")
|
168 |
+
join_order = gr.Checkbox(label="Ghép ngẫu nhiên", value=True)
|
169 |
+
bgm_files = gr.Dropdown(choices=get_bgm_file_list(), label="Chọn nhạc nền")
|
170 |
+
video_output = gr.Video(label="Video tạo ra")
|
171 |
+
video_button = gr.Button("Tạo Video")
|
172 |
+
status_message = gr.Label(label="Trạng thái") # Thêm thông báo trạng thái
|
173 |
+
|
174 |
+
def create_video_func(script, audio_file, max_clip_duration, join_order, bgm_file):
|
175 |
+
""" Tạo video từ các thông tin đầu vào. """
|
176 |
+
try:
|
177 |
+
status_message.update("Đang xử lý...") # Cập nhật trạng thái
|
178 |
+
# 1. Tính toán thời lượng video
|
179 |
+
audio_clip = AudioFileClip(audio_file)
|
180 |
+
video_duration = audio_clip.duration
|
181 |
+
|
182 |
+
# 2. Trích xuất từ khóa từ kịch bản
|
183 |
+
keywords = extract_key_contents(script)
|
184 |
+
video_paths = []
|
185 |
+
for keyword in keywords:
|
186 |
+
video_url = get_pexels_video(keyword.strip())
|
187 |
+
if video_url:
|
188 |
+
video_path = download_video(video_url)
|
189 |
+
video_paths.append(video_path)
|
190 |
+
|
191 |
+
# 3. Ghép video
|
192 |
+
temp_dir = tempfile.mkdtemp()
|
193 |
+
if join_order:
|
194 |
+
random.shuffle(video_paths)
|
195 |
+
combined_video_path = os.path.join(temp_dir, "combined_video.mp4")
|
196 |
+
combine_videos(combined_video_path, video_paths, audio_file, max_clip_duration)
|
197 |
+
|
198 |
+
# 4. Gộp audio và nhạc nền
|
199 |
+
final_video_path = "final_video.mp4"
|
200 |
+
bgm_clip = AudioFileClip(bgm_file)
|
201 |
+
final_audio = CompositeAudioClip([audio_clip, bgm_clip])
|
202 |
+
final_video = VideoFileClip(combined_video_path).set_audio(final_audio)
|
203 |
+
final_video.write_videofile(final_video_path)
|
204 |
+
|
205 |
+
status_message.update("Video đã được tạo thành công!") # Cập nhật trạng thái
|
206 |
+
return final_video_path
|
207 |
+
except Exception as e:
|
208 |
+
status_message.update(f"Lỗi khi tạo video: {e}") # Cập nhật trạng thái
|
209 |
+
return None
|
210 |
+
|
211 |
+
return app
|
212 |
+
|
213 |
+
# Khởi chạy ứng dụng
|
214 |
+
if __name__ == "__main__":
|
215 |
+
app = interface()
|
216 |
app.launch()
|
requirements.txt
CHANGED
@@ -1,10 +1,9 @@
|
|
1 |
-
gradio
|
2 |
-
groq
|
3 |
-
openai
|
4 |
-
python-docx
|
5 |
-
PyMuPDF
|
6 |
-
Pillow
|
7 |
-
sentence-transformers
|
8 |
-
moviepy
|
9 |
-
loguru
|
10 |
-
requests
|
|
|
1 |
+
gradio
|
2 |
+
groq
|
3 |
+
openai
|
4 |
+
python-docx
|
5 |
+
PyMuPDF
|
6 |
+
Pillow
|
7 |
+
sentence-transformers
|
8 |
+
moviepy
|
9 |
+
loguru
|
|
utils.py
CHANGED
@@ -3,7 +3,18 @@ import os
|
|
3 |
import random
|
4 |
import requests
|
5 |
from loguru import logger
|
6 |
-
from moviepy.editor import
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
7 |
|
8 |
def get_pexels_video(query):
|
9 |
"""
|
@@ -23,14 +34,15 @@ def download_video(url, save_path="downloaded_video.mp4"):
|
|
23 |
"""
|
24 |
Tải video từ URL và lưu vào tệp cục bộ.
|
25 |
"""
|
26 |
-
|
27 |
-
|
|
|
28 |
with open(save_path, 'wb') as f:
|
29 |
for chunk in response.iter_content(chunk_size=1024):
|
30 |
f.write(chunk)
|
31 |
return save_path
|
32 |
-
|
33 |
-
logger.error(f"Failed to download video from {url}")
|
34 |
return None
|
35 |
|
36 |
def get_bgm_file(bgm_type: str = "random", bgm_file: str = ""):
|
|
|
3 |
import random
|
4 |
import requests
|
5 |
from loguru import logger
|
6 |
+
from moviepy.editor import VideoFileClip, concatenate_videoclips, AudioFileClip, CompositeAudioClip
|
7 |
+
|
8 |
+
# Đường dẫn đầy đủ tới các file
|
9 |
+
video_file = "input/video.mp4" # Đảm bảo có tên file và định dạng
|
10 |
+
bgm_file = "data/bg_music.mp3" # Đảm bảo có tên file và định dạng
|
11 |
+
output_path = "output/final_video.mp4" # Đảm bảo có tên file và định dạng
|
12 |
+
|
13 |
+
video = VideoFileClip(video_file)
|
14 |
+
bgm = AudioFileClip(bgm_file).subclip(0, video.duration)
|
15 |
+
final_audio = CompositeAudioClip([video.audio, bgm])
|
16 |
+
final_video = video.set_audio(final_audio)
|
17 |
+
final_video.write_videofile(output_path, audio_codec="aac")
|
18 |
|
19 |
def get_pexels_video(query):
|
20 |
"""
|
|
|
34 |
"""
|
35 |
Tải video từ URL và lưu vào tệp cục bộ.
|
36 |
"""
|
37 |
+
try:
|
38 |
+
response = requests.get(url, stream=True)
|
39 |
+
response.raise_for_status()
|
40 |
with open(save_path, 'wb') as f:
|
41 |
for chunk in response.iter_content(chunk_size=1024):
|
42 |
f.write(chunk)
|
43 |
return save_path
|
44 |
+
except requests.exceptions.RequestException as e:
|
45 |
+
logger.error(f"Failed to download video from {url}: {e}")
|
46 |
return None
|
47 |
|
48 |
def get_bgm_file(bgm_type: str = "random", bgm_file: str = ""):
|