本ページはプロモーションが含まれています。
Playwrightで毎朝1回だけヘッドレスChromiumを動かしたい。ところが契約中のエックスサーバーではブラウザが起動せず、VPSや自宅サーバーに移すべきか迷っている人は多いはずです。この記事では、Playwrightを毎日実行するためのPython 3.12向けスクリプトを今の書き方で示します。そのうえで、共有サーバーで動かない理由を3つのコマンドで確かめる方法、ConoHa VPS・さくらのVPS・自宅サーバーで同じ条件の実測を取る手順、cronとsystemdタイマーで止めずに回し続ける設定までを順に説明します。
エックスサーバーでPlaywrightのChromiumが動かない理由を3コマンドで確認する
結論から書くと、共有レンタルサーバーでPlaywrightのChromiumを動かすのは難しいことが多いです。理由はPythonではなく、Chromiumが必要とするOS側の共有ライブラリにあります。共有ライブラリとは、複数のプログラムが共通で使う部品(.soファイル)のことです。
共有サーバーに足りないもの:root権限とOSパッケージ
- pip install playwright と playwright install chromium はユーザー権限で実行でき、ホームディレクトリ以下にブラウザ本体がダウンロードされる
- Chromiumを起動するには、OS側にフォントや描画用などのライブラリが入っている必要がある
- それらを入れる playwright install-deps は内部でaptなどのパッケージ管理を使うため、root権限(sudo)が必要になる
- 共有サーバーではrootを使えないので、不足しているライブラリを自分では入れられない
確認手順:不足ライブラリを ldd で数える
SSHでログインし、次の順に実行します。まず仮想環境(venv:プロジェクト専用のPython環境)を作り、Playwrightとブラウザを入れます。
cd /home/username/scraper
python3 -m venv .venv
. .venv/bin/activate
pip install playwright
playwright install chromium
次に、ダウンロードされたブラウザ本体の場所を探し、ldd(実行ファイルが必要とするライブラリを一覧表示するコマンド)で不足分を表示します。ブラウザのディレクトリ名はPlaywrightのバージョンによって変わるため、find で探す書き方にしています。
find ~/.cache/ms-playwright -type f \( -name chrome -o -name headless_shell -o -name chrome-headless-shell \)
ldd 上で見つかったパス | grep "not found"
出力の読み方は次のとおりです。
結果 | 意味 | 判断 |
|---|---|---|
「not found」が1行以上出る | OS側のライブラリが足りない | root権限がないと解決しにくい。VPSか自宅サーバーへ移す |
何も出ない | ライブラリは揃っている | 起動テストに進む。ただし共有サーバーのプロセス数・メモリ制限や利用規約で止まる可能性は残る |
「not found」が出なかった場合でも、共有サーバーはメモリやプロセス数に上限があり、ブラウザのような重いプロセスを長時間動かす用途を想定していません。リソースの扱いは契約先の利用規約とマニュアルで確認してください。なお、取得先がJavaScriptを使わない静的なページであれば、ブラウザを使わずに requests と BeautifulSoup で取得できます。その場合は共有サーバーのcronでも十分に動きます。ブラウザ自動化が本当に必要かどうかを先に見極めるのが、いちばん安上がりです。
今の書き方:Playwright(sync_api)で1日1回ヘッドレス取得するスクリプト
実行環境
項目 | 内容 | 補足 |
|---|---|---|
Python | 3.12(例として使用) | Playwrightが対応するPythonの範囲は公式ドキュメントで確認する |
OS | Ubuntu系Linux(VPS・自宅サーバー) |
|
パッケージ |
| バージョンは固定する(理由は下記) |
ブラウザ |
| pipパッケージを更新したら再実行が必要 |
バージョンを固定する理由:Playwrightは、pipパッケージのバージョンと対応するブラウザのビルドが組になっています。サーバー上で気づかないうちに pip install -U されると、ブラウザ本体が古いまま食い違い、翌朝の実行が止まります。動作を確認できた時点で pip show playwright でバージョンを確認し、pip freeze > requirements.txt で固定してください。更新するときは、次の3つをまとめて行います。
pip install -r requirements.txt(固定したバージョンを入れる)playwright install chromium(対応するブラウザを入れる)sudo playwright install-deps chromium(OS側ライブラリを入れる)
サブコマンドとオプションの一覧は playwright install --help で確認できます。
以前の書き方と今の書き方
観点 | 以前よく見かけた書き方 | 今の書き方 |
|---|---|---|
ライブラリ | Seleniumと、手動でダウンロードしたchromedriver。またはpyppeteer | Playwright(Python版) |
ブラウザの用意 | Chromeとドライバのバージョンを人が合わせる |
|
待機処理 |
|
|
後始末 | 例外時に |
|
pyppeteerは更新が止まっているため、新しく書くなら選ぶ理由はありません。Seleniumも現行版ではドライバを自動で用意する仕組みがありますが、ブラウザ本体とOS側ライブラリまでを1つのCLIで揃えられる点で、サーバー運用ではPlaywrightのほうが手順を短くできます。
スクリプト全体
import logging
import time
from datetime import date
from pathlib import Path
from playwright.sync_api import sync_playwright, TimeoutError as PlaywrightTimeoutError
URL = "https://example.com/"
BASE_DIR = Path("/home/username/scraper")
OUT_DIR = BASE_DIR / "data"
LOG_DIR = BASE_DIR / "logs"
OUT_DIR.mkdir(parents=True, exist_ok=True)
LOG_DIR.mkdir(parents=True, exist_ok=True)
logging.basicConfig(
filename=LOG_DIR / "run.log",
level=logging.INFO,
format="%(asctime)s %(levelname)s %(message)s",
)
def fetch_once(url):
with sync_playwright() as p:
browser = p.chromium.launch(headless=True)
try:
context = browser.new_context(
user_agent="example-daily-bot/1.0 (+https://example.com/bot)",
)
page = context.new_page()
page.goto(url, wait_until="domcontentloaded", timeout=30000)
page.wait_for_selector("h1", timeout=10000)
text = page.inner_text("h1")
context.close()
return text
finally:
browser.close()
def main():
for attempt in range(1, 3):
try:
text = fetch_once(URL)
out = OUT_DIR / f"{date.today():%Y-%m-%d}.txt"
out.write_text(text, encoding="utf-8")
logging.info("saved %s", out)
return 0
except PlaywrightTimeoutError:
logging.warning("timeout (attempt %d)", attempt)
except Exception:
logging.exception("failed (attempt %d)", attempt)
time.sleep(60)
return 1
if __name__ == "__main__":
raise SystemExit(main())
ブロックごとの説明
- 定数とディレクトリ作成:取得先URLと保存先を冒頭にまとめています。cronから起動すると、カレントディレクトリが想定どおりになりません。そのためパスは絶対パスで書き、
mkdir(parents=True, exist_ok=True)で初回実行時もエラーにならないようにしています。 - logging:cronやsystemdから動かすと画面に何も表示されないため、結果をすべてファイルに残します。翌朝に「動いたか」を確認する手段はこのログだけです。
- fetch_once:
sync_playwright()をwithで開き、finallyでbrowser.close()します。例外が起きてもChromiumのプロセスが残らないので、メモリの少ないVPSでも日を追うごとに重くなることがありません。user_agentには連絡先URLを含め、取得先の管理者が誰のアクセスか判別できるようにしています。 - 待機:
gotoはdomcontentloaded(HTMLの読み込み完了)で戻し、必要な要素はwait_for_selectorで待ちます。固定秒数のsleepより速く終わり、表示が遅い日にも対応できます。 - main:失敗時の再試行は最大2回までとし、間に60秒の間隔を空けます。相手のサーバーが不調なときに連打しないためです。終了コードを返しているので、systemdの
systemctl statusで成否を判別できます。
ConoHa VPS・さくらのVPS・自宅サーバーで実行時間とメモリを実測し、置き場所を決める
ブラウザ自動化に必要なメモリと実行時間は、取得先ページの重さ、CPU、ディスク速度によって大きく変わります。他人の数値を流用するより、候補の環境で同じスクリプトを測るほうが確実です。ここでは、同じ条件で比較するための測り方を示します。
実測の手順
実行時間は /usr/bin/time -v で測ります。ただし、ここで表示される「Maximum resident set size」は最も大きい1プロセス分の値です。Chromiumは複数のプロセスに分かれて動くため、合計のメモリはこれより大きくなります。そこで、合計は別の端末から1秒ごとに集計します。
# 端末1:実行時間を測る
/usr/bin/time -v /home/username/scraper/.venv/bin/python /home/username/scraper/daily.py 2>&1 | grep -E "Elapsed|Maximum resident"
# 端末2:実行中のユーザー全プロセスのメモリ合計(MB)を1秒ごとに表示
while sleep 1; do ps -u username -o rss= | awk '{s+=$1} END {printf "%.0f MB\n", s/1024}'; done
端末2の値は、実行前の値(シェルなどの分)を差し引いて読みます。初回はブラウザのキャッシュがないため遅くなりがちです。3回以上実行し、2回目以降の値を記録してください。各環境で記録しておきたい項目は次のとおりです。
記録する項目 | 見る理由 |
|---|---|
実行時間(Elapsed) | タイムアウト値の目安になる。極端に遅い環境は避ける |
実行中のメモリ合計の最大値 | プランのメモリ量に余裕があるかを判断する |
| OSや他の常駐プロセスを含めた残りメモリ |
| ブラウザ本体が占めるディスク容量 |
メモリ合計の最大値がプランのメモリ量に近い場合は、スワップ(メモリ不足時にディスクを代わりに使う領域)が設定されているかを swapon --show で確認してください。スワップがない小さなプランでは、ChromiumがOOM Killer(メモリ不足時にOSがプロセスを強制終了する仕組み)に止められることがあります。
3つの置き場所の比較
項目 | ConoHa VPS | さくらのVPS | 自宅サーバー |
|---|---|---|---|
root権限 | あり | あり | あり |
install-deps | 実行できる | 実行できる | 実行できる |
cron/systemdタイマー | 使える | 使える | 使える |
月額(2026年11月) | 公式料金ページで確認 | 公式料金ページで確認 | 電気代と機材代 |
契約時に確認すること | メモリ量、課金方式、最低利用期間、初期費用 | メモリ量、課金方式、最低利用期間、初期費用 | 常時通電できるか、停電後に自動起動するか |
固定IP・ポート開放 | 不要(外向きの通信だけ) | 不要(外向きの通信だけ) | 不要(外向きの通信だけ) |
料金は改定されることがあり、この記事では確証のある数値を示せないため、具体的な金額は載せていません。契約前に、各社の公式料金ページで、上の実測で得たメモリ合計に余裕を持って収まるプランの月額を確認してください。
1日1回だけ外に取りに行く処理は、外から接続を受ける必要がありません。そのため自宅サーバーでも、ポート開放やドメイン設定が不要です。Webアプリを常駐させる場合とは、ここが大きく違います。常駐させる場合の比較はNode.js 26 Express常駐 VPSか自宅か|11月にまとめています。
毎朝動かす設定:cronとsystemdタイマー
VPSで手軽に済ませるならcronを使います。crontab -e で次の1行を追加します。
15 6 * * * cd /home/username/scraper && /usr/bin/flock -n /tmp/daily-scraper.lock /home/username/scraper/.venv/bin/python daily.py >> /home/username/scraper/logs/cron.log 2>&1
15 6 * * *:毎日6時15分に実行するflock -n:前回の実行が残っていたら今回は起動しない。Chromiumが二重に起動してメモリを使い切るのを防ぐ- venvのpythonを絶対パスで指定するので、
activateは不要 - ブラウザ本体はユーザーのホーム以下(
~/.cache/ms-playwright)にある。そのためplaywright installを実行したのと同じユーザーのcrontabに書く。rootのcrontabに書くとブラウザが見つからない
自宅サーバーでは、systemdタイマーをおすすめします。Persistent=true を指定すると、予定時刻に電源が切れていた場合でも、起動後に取りこぼした分を1回実行してくれます。cronにはこの機能がありません。
# /etc/systemd/system/daily-scraper.service
[Unit]
Description=Daily Playwright scraper
[Service]
Type=oneshot
User=username
WorkingDirectory=/home/username/scraper
ExecStart=/home/username/scraper/.venv/bin/python daily.py
# /etc/systemd/system/daily-scraper.timer
[Unit]
Description=Run daily scraper every morning
[Timer]
OnCalendar=*-*-* 06:15:00
Persistent=true
[Install]
WantedBy=timers.target
sudo systemctl daemon-reload
sudo systemctl enable --now daily-scraper.timer
systemctl list-timers daily-scraper.timer
systemctl status daily-scraper.service
Type=oneshot は「実行して終わるジョブ」を意味します。list-timers で次回の実行時刻、status で前回の終了コードを確認できます。
それぞれが止まる条件
置き場所 | 止まる条件 | 対策 |
|---|---|---|
手元のPC | スリープ・シャットダウン、OS更新後の自動再起動、ノートPCを持ち出したとき | 試作専用と割り切る。毎日の運用には使わない |
共有レンタルサーバーのcron | Chromiumの依存ライブラリ不足、プロセス数・メモリ制限、利用規約 | ブラウザが不要な取得(requests)だけに使う |
VPS | 支払いの停止、ディスク満杯(ログ・保存データ)、メモリ不足によるOOM、pip更新によるブラウザとのバージョン不一致 | requirements.txtで固定、logrotateでログを整理、スワップを設定 |
自宅サーバー | 停電、回線障害、ルーターの再起動、機材の故障 | BIOSで通電時の自動起動を有効にし、systemdタイマーで |
どの環境でも、黙って止まるのがいちばん困ります。数日分のファイルが data/ にあるかを確認する、あるいはログに当日のsavedが出ているかを確認するだけでも、気づくまでの時間を大きく縮められます。
取得先サイトへの配慮:robots.txt・利用規約・1日1回のアクセス間隔
ブラウザ自動化は、画像やスクリプトまで読み込むため、通常のHTTP取得より相手のサーバーへの負荷が大きくなります。毎日動かす前に、次の3点を確認してください。
- 利用規約:自動取得を禁止していないか、取得したデータの利用範囲に制限がないかを読む。APIや公式のデータ提供があるなら、そちらを使う
- robots.txt:取得するパスが許可されているかを、実行前にスクリプトで確認する
- アクセス間隔:1日1回、必要なページだけを取得する。複数ページを取得する場合は、間に数秒以上の待ち時間を入れる。失敗時の再試行も回数と間隔を決めておく
robots.txtの確認は、標準ライブラリだけで書けます。
from urllib.robotparser import RobotFileParser
UA = "example-daily-bot/1.0 (+https://example.com/bot)"
def allowed(url, robots_url="https://example.com/robots.txt"):
rp = RobotFileParser()
rp.set_url(robots_url)
rp.read()
return rp.can_fetch(UA, url)
main() の最初で allowed(URL) を呼び、Falseなら取得せずにログへ記録して終了させます。ログインが必要なページ、CAPTCHA、アクセス制限がかかっているページを自動化で突破するのはやめてください。そうしたページが必要なら、提供元に正規の取得方法がないかを問い合わせるのが筋です。
関連する選択肢
毎日決まった時刻にスクリプトを動かすだけなら、共有のレンタルサーバーでも足ります。cronが使えるプランを選べば、自分でOSを管理する必要はありません。
※ 広告を含みます(A8.net)。リンク経由でお申し込みがあった場合、手数料を受け取ることがあります。
1日1回のブラウザ自動化は、VPSの小さなプランか常時稼働の自宅サーバーで動かす
Playwrightを毎日実行したい場合、エックスサーバーのような共有サーバーでは、root権限がなくChromiumの依存ライブラリを入れられないことがほとんどです。ldd で「not found」が出たら、早めにVPSか自宅サーバーへ移しましょう。スクリプトは sync_playwright を with と finally で閉じる書き方にし、pipのバージョンを固定して、更新時には playwright install もあわせて実行します。置き場所の選び方は次のとおりです。電源を確実に入れておける機材があるなら、自宅サーバーとsystemdタイマー(Persistent=true)の組み合わせが向いています。停電や外出時の不安を避けたいなら、ConoHa VPSかさくらのVPSのうち、実測したメモリ合計に余裕を持って収まるプランを選びます。料金は公式ページで確認してください。どの環境でも、robots.txtと利用規約を守り、アクセスは1日1回に抑えることが前提です。