"""Données du pilier Service (voir service.py). 1. Réponses aux avis négatifs : pour chaque agence qui a au moins un avis Google à 3 étoiles ou moins, relève ses avis du plus mal noté au plus noté (capacité Firecrawl « firecrawl-maps / businesses/reviews », tri « lowest », 60 avis par appel, 10 crédits) et note pour chacun si l'agence a répondu. Une fois par agence, puis tous les 90 jours. 2. Lecture du texte des avis (Claude Haiku, lots de 40) : 'probleme' si l'avis signale un problème de service concret, 'ok' sinon. Seuls les avis pas encore lus sont envoyés. 3. Horaires d'ouverture : fiche Google (Places API, champ regularOpeningHours), une fois par agence puis tous les 30 jours. Variables : SERVICE_ONLY (ids séparés par des virgules), SERVICE_STEPS (replies,text ; défaut : les deux). """ import os, json, datetime, requests from common import load, save, time_left, fc_alex, claude_json, TODAY, REVIEWS_DIR, MODEL_EXTRACT ONLY = {int(x) for x in os.environ.get('SERVICE_ONLY', '').split(',') if x.strip()} STEPS = os.environ.get('SERVICE_STEPS', 'replies,text,hours') GKEY = os.environ.get('GOOGLE_PLACES_API_KEY') HOURS_EVERY = 30 REPLY_EVERY = 90 def rload(aid): p = REVIEWS_DIR / f'{aid}.json' return json.loads(p.read_text()) if p.exists() else {} def rsave(aid, d): (REVIEWS_DIR / f'{aid}.json').write_text(json.dumps(d, ensure_ascii=False)) def replies(a, store): g = store.get('google') or {} neg = [x for x in g.get('items', []) if (x.get('r') or 5) <= 3] if not neg or not g.get('fid'): return 0 seen = g.get('replies_seen') if seen and (TODAY - datetime.date.fromisoformat(seen)).days < REPLY_EVERY: return 0 by_id = {x['id']: x for x in g['items']} cursor, calls, done = None, 0, False while not done and calls < 10: opts = {'feature_id': g['fid'], 'count': 60, 'sort': 'lowest', 'language': 'fr'} if cursor: opts['cursor'] = cursor d = fc_alex('firecrawl-maps', 'businesses/reviews', opts); calls += 1 if not d: return calls for v in d.get('reviews', []): if (v.get('rating') or 5) > 3: done = True; break it = by_id.get(v['review_id']) if it is not None: it['reply'] = bool(v.get('owner_response')) cursor = d.get('next_cursor') if not d.get('has_more') or not cursor: done = True g['replies_seen'] = str(TODAY) return calls def hours(a): """Horaires Google : ouvert le samedi, et heures d'ouverture par semaine. True si relevé.""" h = a.get('hours') or {} if h.get('seen') and (TODAY - datetime.date.fromisoformat(h['seen'])).days < HOURS_EVERY: return False pid = next((e.get('place_id') for e in a['sources'].get('google', []) if e.get('place_id')), None) if not pid or not GKEY: return False try: r = requests.get(f'https://places.googleapis.com/v1/places/{pid}', timeout=60, headers={'X-Goog-Api-Key': GKEY, 'X-Goog-FieldMask': 'regularOpeningHours'}) except requests.RequestException: return False if r.status_code != 200: return False periods = ((r.json().get('regularOpeningHours') or {}).get('periods')) or [] tot, sat = 0.0, False for p in periods: o, c = p.get('open') or {}, p.get('close') or {} if not c: tot = 24 * 7; sat = True; break # ouvert en continu start = o.get('day', 0) * 1440 + o.get('hour', 0) * 60 + o.get('minute', 0) end = c.get('day', 0) * 1440 + c.get('hour', 0) * 60 + c.get('minute', 0) if end < start: end += 7 * 1440 tot += (end - start) / 60 if o.get('day') == 6: sat = True a['hours'] = {'sat': sat, 'h': round(tot, 1) if periods else None, 'seen': str(TODAY)} return True SCHEMA = {'type': 'object', 'required': ['avis'], 'properties': {'avis': {'type': 'array', 'items': {'type': 'object', 'properties': { 'i': {'type': 'integer'}, 'svc': {'type': 'string', 'enum': ['probleme', 'ok']}}}}}} PROMPT = ("Voici des avis clients d'une agence immobilière. Pour chacun, réponds « probleme » seulement si l'avis signale un problème " "de SERVICE concret vécu avec l'agence : agence injoignable ou qui ne rappelle pas, absence de suivi ou d'information, retard, " "engagement ou promesse non tenue, erreur dans un dossier ou une comptabilité, litige, restitution de dépôt de garantie " "ou de fonds tardive, comportement désagréable. Réponds « ok » pour tout le reste : avis positif, neutre, simple note, ou " "reproche qui ne porte pas sur le service rendu (prix du marché, logement lui-même, propriétaire). Un avis positif qui " "mentionne un petit bémol résolu reste « ok ». Ne devine pas : en cas de doute, « ok ».\n\n") def read_texts(store): todo = [x for v in store.values() if isinstance(v, dict) for x in v.get('items', []) if 'svc' not in x] for x in todo: if not (x.get('text') or '').strip(): x['svc'] = None todo = [x for x in todo if 'svc' not in x] n = 0 for k in range(0, len(todo), 40): if not time_left(): break lot = todo[k:k + 40] txt = '\n'.join(f"[{i}] ({x.get('r')}/5) {x['text'][:700]}" for i, x in enumerate(lot)) res = claude_json(PROMPT + txt, SCHEMA, model=MODEL_EXTRACT, max_tokens=3000) if not res: continue got = {e.get('i'): e.get('svc') for e in res.get('avis', []) if e.get('svc') in ('probleme', 'ok')} for i, x in enumerate(lot): if i in got: x['svc'] = got[i]; n += 1 return n def one(a): nh = int('hours' in STEPS and hours(a)) store = rload(a['id']) if not store: return 0, 0, nh c = replies(a, store) if 'replies' in STEPS else 0 n = read_texts(store) if 'text' in STEPS else 0 if c or n: rsave(a['id'], store) return c, n, nh def main(): from concurrent.futures import ThreadPoolExecutor db = load(); calls = lus = nh = 0 todo = [a for a in db['agencies'] if not a.get('excluded') and (not ONLY or a['id'] in ONLY)] with ThreadPoolExecutor(6) as ex: for c, n, h in ex.map(one, todo): calls += c; lus += n; nh += h save(db) print(f'Service : {calls} appels de relevé des réponses (~{calls * 10} crédits), {lus} avis lus, {nh} horaires relevés') if __name__ == '__main__': main()