Clips AI

Clips AI：開発者向けのAIビデオ再利用

Clips AIとは？ Clips AIは、長尺ビデオを魅力的なクリップに自動変換するように設計された、オープンソースのPythonライブラリです。ポッドキャスト、インタビュー、スピーチ、説教など、音声中心でナレーションベースのコンテンツ向けに作られています。わずか数行のコードで、ビデオを複数のクリップに分割し、アスペクト比を16:9から9:16に変更できます。

主な機能：

• 自動クリッピング： トランスクリプト分析を使用して、ビデオ内のキーセグメントを識別します。
• インテリジェントなサイズ変更： ビデオを動的にリフレームして現在のスピーカーに焦点を当て、ビデオをさまざまなアスペクト比に変換します。

Clips AIの使用方法：

1. インストール：

   • pipを使用してPythonの依存関係をインストールします。

     pip install clipsai
     pip install whisperx@git+https://github.com/m-bain/whisperx.git
     

   • libmagicとffmpegをインストールします。

2. クリップの作成：

   • WhisperX（Clips AIに統合されています）を使用してビデオをトランスクリプトします。

   • ClipFinderを使用して、トランスクリプトに基づいてクリップを識別および作成します。

     from clipsai import ClipFinder, Transcriber
     
     transcriber = Transcriber()
     transcription = transcriber.transcribe(audio_file_path="/abs/path/to/video.mp4")
     
     clipfinder = ClipFinder()
     clips = clipfinder.find_clips(transcription=transcription)
     
     print("StartTime: ", clips[0].start_time)
     print("EndTime: ", clips[0].end_time)
     

3. ビデオのサイズ変更：

   • スピーカーのダイアリゼーション（Pyannoteを使用）には、Hugging Faceアクセストークンが必要です。

     from clipsai import resize
     
     crops = resize(
         video_file_path="/abs/path/to/video.mp4",
         pyannote_auth_token="pyannote_token",
         aspect_ratio=(9, 16)
     )
     
     print("Crops: ", crops.segments)
     

Clips AIが重要な理由は何ですか？

Clips AIは、長尺ビデオをTikTok、Instagram Reels、YouTube Shortsなどのプラットフォームに適した短くて魅力的なクリップに再利用するプロセスを簡素化します。クリッピングとサイズ変更のプロセスを自動化することで、時間と労力を節約できます。

詳細情報の入手先：

• GitHub： https://github.com/
• デモ：
• クイックスタート：