手書きの日報をスマホで撮るだけで、いつものExcelに追記される仕組みを作る（Claude API + openpyxl）

スマホで撮影 → 共有フォルダに保存
    ↓
Pythonスクリプト（定期実行）
    ├ 画像を Claude API に送り、JSONで項目を抽出
    ├ 抽出結果を「確認待ち」CSVに書き出す
    └ 確認済みの行だけ、いつものExcelに追記（openpyxl）
    ↓
翌朝、集計シートが自動で更新される

SCHEMA = {
    "type": "object",
    "properties": {
        "date":        {"type": "string", "description": "YYYY/MM/DD"},
        "line":        {"type": "string"},
        "part_no":     {"type": "string"},
        "good_qty":    {"type": "integer"},
        "defect_qty":  {"type": "integer"},
        "defect_note": {"type": "string"},
        "stop_min":    {"type": "integer"},
        "remarks":     {"type": "string"},
        "confidence":  {"type": "number", "description": "0〜1。読み取りに自信がない項目があれば低くする"},
        "unclear":     {"type": "array", "items": {"type": "string"}, "description": "読み取れなかった、または自信のない項目名"},
    },
    "required": ["date", "line", "part_no", "good_qty", "defect_qty", "confidence", "unclear"],
}

import base64, json, os
from pathlib import Path
import anthropic
from schema import SCHEMA

client = anthropic.Anthropic(api_key=os.environ["ANTHROPIC_API_KEY"])
MODEL = "claude-sonnet-5-5"  # 使う時点の最新モデル名に合わせる

PROMPT = f"""これは製造現場の手書き日報の写真です。
次のJSONスキーマに従って、記入内容を抽出してください。
- 読み取れない、または自信のない項目は空にし、unclear にその項目名を入れてください
- 数字は推測で補わないでください
- JSON以外は出力しないでください

スキーマ:
{json.dumps(SCHEMA, ensure_ascii=False)}
"""

def extract(image_path: Path) -> dict:
    media = "image/jpeg" if image_path.suffix.lower() in (".jpg", ".jpeg") else "image/png"
    data = base64.b64encode(image_path.read_bytes()).decode()
    msg = client.messages.create(
        model=MODEL,
        max_tokens=1024,
        messages=[{
            "role": "user",
            "content": [
                {"type": "image", "source": {"type": "base64", "media_type": media, "data": data}},
                {"type": "text", "text": PROMPT},
            ],
        }],
    )
    text = "".join(b.text for b in msg.content if b.type == "text").strip()
    # コードブロックで囲まれて返ることがあるので外す
    if text.startswith("```"):
        text = text.strip("`").split("\n", 1)[1].rsplit("```", 1)[0]
    return json.loads(text)

import csv, shutil
from pathlib import Path
from extract import extract

INBOX   = Path(r"\\nas\nippo\inbox")      # スマホから写真が入る共有フォルダ
DONE    = Path(r"\\nas\nippo\done")
PENDING = Path(r"\\nas\nippo\pending.csv") # 事務の方が確認するファイル

COLS = ["file", "date", "line", "part_no", "good_qty", "defect_qty",
        "defect_note", "stop_min", "remarks", "confidence", "unclear", "ok"]

def main():
    new = not PENDING.exists()
    with PENDING.open("a", newline="", encoding="utf-8-sig") as f:
        w = csv.DictWriter(f, fieldnames=COLS)
        if new:
            w.writeheader()
        for img in sorted(INBOX.glob("*.jp*g")) + sorted(INBOX.glob("*.png")):
            r = extract(img)
            row = {c: r.get(c, "") for c in COLS}
            row["file"] = img.name
            row["unclear"] = "、".join(r.get("unclear", []))
            # 自信がある行は ok に ○ を入れておき、事務の方は×にするだけでよくする
            row["ok"] = "○" if r.get("confidence", 0) >= 0.9 and not r.get("unclear") else ""
            w.writerow(row)
            shutil.move(img, DONE / img.name)

if __name__ == "__main__":
    main()

import csv
from pathlib import Path
from openpyxl import load_workbook

PENDING = Path(r"\\nas\nippo\pending.csv")
EXCEL   = Path(r"\\nas\nippo\生産日報.xlsx")   # 事務の方が今使っているファイル
SHEET   = "日報"
# Excelの列順に合わせる（1列目=日付 … の並び）
ORDER = ["date", "line", "part_no", "good_qty", "defect_qty", "defect_note", "stop_min", "remarks"]
INT_COLS = {"good_qty", "defect_qty", "stop_min"}

def main():
    rows = list(csv.DictReader(PENDING.open(encoding="utf-8-sig")))
    todo = [r for r in rows if r["ok"] == "○"]
    if not todo:
        return
    wb = load_workbook(EXCEL)
    ws = wb[SHEET]
    for r in todo:
        ws.append([int(r[c]) if c in INT_COLS and r[c] else r[c] for c in ORDER])
    wb.save(EXCEL)
    # 追記した行は pending から除く（履歴は done フォルダの写真で追える）
    rest = [r for r in rows if r["ok"] != "○"]
    with PENDING.open("w", newline="", encoding="utf-8-sig") as f:
        w = csv.DictWriter(f, fieldnames=rows[0].keys() if rows else [])
        w.writeheader(); w.writerows(rest)

if __name__ == "__main__":
    main()