【2日で動いた】TikTokで見た「JARVIS」をAIと一緒に自作した|声で予定・タスク・音楽まで
TikTokで「JARVIS」の動画を見た。
映画に出てくる、話しかけると何でも答えてくれるAI。
自分でも作れるのか。
↓
2日で、PCで動くところまで来た。
Contents
【結論】できたこと
- 「Wake up, JARVIS.」と呼ぶと、画面が前に出てきて聞いてくれる
- 声で話しかける → 約4秒で声が返ってくる
- 今日の予定・天気・やることを知っている
- 「〇〇をタスクに追加」で、自分のタスク管理アプリに入る
- 「ダウンロードを整理して」で、ファイルを片づける(確認してから)
- 「〇〇を流して」で YouTube の曲が流れる。次の曲・一時停止も声で
- 朝、PCをつけると勝手に起動して、今日のことを30秒で読み上げる
追加の料金は、今のところ0円。
【画面】
中央の円が、話すと動く。
左に今日の予定とやること、右にニュースとタスク。
【作った順番】
| 版 | できるようになったこと |
|---|---|
| v0.1 | 声で会話(最初は返事まで23〜29秒 → 約4秒に) |
| v0.2 | 全画面の表示。天気・PCの状態 |
| v0.3 | 自分のタスク管理アプリとつながる。カレンダー |
| v0.4〜0.5 | 見た目を作り直し。英語ニュース・ネットワーク表示 |
| v0.6 | 頼むと操作してくれる(タスク追加・ファイル整理・音楽) |
| v0.7 | 「Wake up, JARVIS」で起動。「That’ll be all」で下がる |
最初は、何か言っても返答が遅くて使い物にならなかった。
↓
毎回AIを起動し直していたのが原因。起動したまま待たせるようにしたら、4秒になった。
【しくみ】
むずかしいことはしていない。
- 耳: PCの中で声を文字にする
- 頭: Claude(文字で返事を考える)
- 口: ブラウザの読み上げの声
- 画面: ブラウザで開く、自分専用のページ
全部、自分のPCの中で動いている。外からは開けない。
【決めたルール】AIに「操作」をさせるのは怖い
便利さより、ここに一番時間を使った。
- 話し相手のAIには、道具を1つも持たせない(ファイルもネットも触れない)
- 操作は、決まったものだけ。実行の前に画面で確認する
- 削除はしない。ファイル整理も「移動と名前の変更」だけ。元に戻せる
- 送信(メール・SNS)は、ボタンを押したときだけ
AIが「やりました」と言っても、実際は何もしていないことがあった。
↓
だから、「やった」かどうかは画面の結果で確かめる作りにした。
【つまずいたこと】
- 起動するたびに、ブラウザのタブが1つずつ増えた
- 声で呼びかけて読み上げが途中で止まると、文字で話しかけても無視された
- YouTubeの「前の曲」は曲の最初に戻るだけだった → 流した曲をJARVISが覚えておいて、開き直す形に
- 新しい機能を足したら、起動しなくなった(読み込みの順番の問題)
作る → 使う → 変なところに気づく → 直す。
この繰り返しが、一番おもしろかった。
【使ってみて】
まだ音声入力の誤認識があるからそれを直していく。
【次に試すこと】
- スマホからも話しかける
- 人と話すような、待ち時間のない会話
【動画】実際に動かしているところ
「Wake up, JARVIS.」で呼ぶ → 窓が前に出る → クエスト完了・タスク追加・音楽 → 「Good night.」で下がる。
