AIは、人間が面白いと思う動画を自分で作れるか

実験の結果

確認の度合い：証拠あり人の報告未確認（証拠あり＝証拠で確かめられる／人の報告＝人が確かめたと報告・証拠のファイルはない／未確認＝まだ確かめていない）

実験の目的

AI自身に動画の企画・テーマ・構成・演出などを決めさせ、人間が実際に評価することで「AIは、人間が面白いと思う動画を自分で作れるのか」を確かめる

条件

• 証拠あり最初の指示：「人間が見て面白いと思う可能性が高い動画を1本制作してください。…」（initial-prompt.md。一字も変えずに production-brief.md に入れて渡した）
• 証拠あり制作時間：指示を受け取ってから60分（企画の時間を含む）。60分の時点のものを結果とする
• 証拠あり本数・尺の目標：1本・30〜90秒
• 証拠あり使ってよい道具：作業環境の無料の道具＋無料のダウンロード。有料のサービス・API は使わない（費用の上限0円）
• 証拠あり人間の介入：テーマ・企画・台本・素材・編集について助言しない。人間がAIに伝えたのは「開始していいよ」だけ（production-log.md）
• 人の報告評価：評価者5人。動画ファイルだけを渡し、AIが作ったことは事前に伝えないブラインド評価（運営者の報告）

実施日：2026年10月7日 〜 2026年10月8日。制作 2026-10-07 11:43:46〜11:48:22 UTC（4.6分。AIが自分で完成と判断して、60分を使い切らずに終えた）。人間の評価の固定 2026-10-08 00:10 UTC、開示と答え合わせ 2026-10-08

実際にやったこと

1. AIできた証拠あり
   準備のAIが、条件（rules.json）・制作用の説明（production-brief.md）・実験候補を固定した
2. AIできた証拠あり
   運営者の依頼で、準備のAIが新しい制作セッションを作成し、最初のメッセージを送った（準備の会話は渡していない）
3. 人できた証拠あり
   運営者が制作セッションに「開始していいよ」と伝えた
4. AIできた証拠あり
   制作のAIが、テーマ「99%で止まる進捗バー」を決め、Python（Pillow）で1コマずつ描き、numpy で効果音と音楽を合成し、ffmpeg で63秒の動画にした
5. AIできた証拠あり
   制作のAIが、60分の制作のあと・人間の評価の前に、自己評価と人間の評価の予想を書き、封印のハッシュ値を記録して commit・push した
6. 人できた人の報告
   運営者が5人の評価者に動画ファイルだけを渡し、評価を集めた
7. AIできた証拠あり
   人間の評価を記録してハッシュ値とともに固定し、そのあとで封印を開けて答え合わせをした（封印のハッシュ値は12件すべて一致）

成功条件ごとの判定

• 満たした
  制作成功：60分の終了時点で、人間が再生できる動画ファイルが存在する

  final-video.json：playable=true・63秒・H.264 1280x720＋AAC。4.6分の時点で完成し、そのまま最終版とした

• 満たさなかった
  作品成立：Q6（一つの作品として成立しているか・1〜5）の平均が 3.0 以上

  Q6 の平均 1.8（1・3・1・2・2）

• 満たさなかった
  面白さ：Q1（面白さ・10点満点）の平均が 6.0 以上

  Q1 の平均 2.8（0・7・0・2・5）。区分は「面白くない」（4.0 未満）

• 一部だけ満たした
  成功＝3つすべて／部分的成功＝制作成功だが成功の条件をすべては満たさない／失敗＝60分の時点で再生できる動画を作れなかった

  制作成功のみ満たす → rules.json の定めにより「部分的成功」

分かったこと（確認できた範囲）

• 証拠ありAIは、外部の素材を使わず、コードだけで63秒（1280x720・H.264＋AAC）の再生できる動画を作れた。かかった時間は60分のうち4.6分（final-video.json・clock.json）
• 証拠ありAIが選んだのは「99%で止まる進捗バー」を擬人化した、声のない短いコント（あるある＋擬人化＋オチ）。ターゲットはパソコン・スマホを使う日本語話者（10代〜50代）（planning.md・完成した動画）
• 証拠あり声（ナレーション）を使わなかったのは、音声合成のモデルの入手先（huggingface.co）に接続できなかったため。AIは「声がなくても成立する企画」を選んだと記録している（planning.md・production-log.md）
• 人の報告人間の評価は、Q1（面白さ）の平均 2.8／10、Q6（作品として成立）の平均 1.8／5。判定は「制作成功・作品不成立・面白くない」で、総合判定は「部分的成功」（human-evaluation.json・reveal.json）
• 人の報告評価は割れた。Q1 は 0・7・0・2・5。7点をつけた評価者（E2）は「テーマや内容に関しては面白い」「オチも良かった」と書き、同時に「動きがあまりない」とも書いた。0点をつけた評価者（E1）は「起承転結がないと面白くない」と書いた（human-evaluation.json の Q1・Q7）
• 証拠ありAIの予想は、Q1 の平均を 5.4 と予想して実際は 2.8（差 +2.6、不的中）。割合の3項目（もう一度見たい・誰かに見せたい・AIだと思う）は基準の ±20 ポイント以内で的中。4項目中3項目が的中（reveal.json）
• 証拠ありAIは自分の動画を「笑いは『くすっ』止まり」「見た目の変化が少ない」と予想の理由に書いていた（自己評価 58／100）。それでも Q1 の平均は、実際より 2.6 点高く見積もった（ai-prediction.json の reasons）
• 人の報告5人中3人が「AIだと思う」、2人が「わからない」と答え、「人間だと思う」は0人だった（human-evaluation.json の Q5）

まだ確認できていないこと

• 未確認60分を使い切っていたら、評価は変わったか（AIは4.6分で完成と判断した）
• 未確認声（ナレーション）を使えていたら、評価は変わったか
• 未確認「不明」と答えた3人が、そう評価した理由
• 未確認評価者を増やしたら、評価の割れ方はどうなるか

つまずいたところ

• 制作のAIは、開始前の確認で public/evidence/experiment-004/ のファイル名の一覧を見た（prediction-brief.md・rules.json など）
  原因：ディレクトリの中身を一覧で確かめたため
  どうしたか：中身は読んでいないと production-log.md に記録されている
• 制作の記録の時刻に、同じ時刻（11:48:22）の項目が複数ある。また、記録上の clock.mjs stop は 11:48:26 だが、clock.json の stopped_at は 11:48:22.168
  原因：不明（記録をまとめて書いた可能性がある）
  どうしたか：記録は変更せず、clock.json の値を正とした
• 音声合成のモデルを入手できなかった（huggingface.co が 403）
  原因：作業環境のネットワークの制限
  どうしたか：AIはナレーションなしの企画を選んだ

この結果の制限

• 評価者は5人で、運営者が集めた人（無作為に選んだ人ではない）
• 評価の日時・端末・集め方は報告されていない
• 自由記述（Q7）は5人中3人が「不明」で、理由が分かるのは2人だけ
• 割合の予想は、評価者が5人のため 20% 刻みの実測と比べている（Q4 は差がちょうど 20 ポイントで、基準の「±20以内」により的中）
• 制作セッションは準備のAIが作成し、最初のメッセージも準備のAIが送った（運営者の依頼。準備の会話は渡していない）
• 制作のAIは、リポジトリの中の過去の記録を技術的には読めた（読んでいないと記録されている）
• 制作のAIは、動画を音つきで見ることはできず、コマの画像とファイルの情報で確かめた

証拠

• このサイトに保存データ・表
  固定した条件・判定の基準（rules.json）
• GitHub（非公開）コミット
  条件の固定（制作の開始前）
  experiment-004 ブランチ e104a94
• このサイトに保存実行記録
  制作のAIが決めたこと（テーマ・ターゲット・構成・方針）
• このサイトに保存実行記録
  制作の記録（時刻・道具・問題・人間とのやり取り）
• このサイトに保存データ・表
  制作の開始・終了の時刻
• このサイトに保存動画
  完成した動画（63秒）
• このサイトに保存作ったもの
  動画を作ったコード（描画・音の合成）
• このサイトに保存データ・表
  AIの自己評価と、人間の評価の予想（封印していたものをそのまま公開）
• このサイトに保存データ・表
  封印したもののハッシュ値
• GitHub（非公開）コミット
  制作物と予想の固定（封印）
  experiment-004 ブランチ 9052e3c
• このサイトに保存データ・表
  人間のブラインド評価（5人、人の報告）
• GitHub（非公開）コミット
  人間の評価の固定（開示の前）
  experiment-004 ブランチ a1aedfc
• このサイトに保存データ・表
  開示と答え合わせ（ハッシュ値の一致・予想の的中・判定）

費用と収益

公開URL

関連記事

結果の記事を読む

• 開示した封印のファイルは public/evidence/experiment-004/opened/ にそのまま写した。sealed/experiment-004/ の元のファイルは変更していない
• 下書きの動画（draft1.mp4・draft2.mp4）と音声（audio.wav）は sealed/experiment-004/video/ に残している（final.mp4 は draft2.mp4 と同じファイル）