Ce am învățat parsând timp de o zi toate depunerile SEC Form 4

Un inginer împărtășește lecțiile complexe învățate dintr-o zi petrecută parsând depunerile SEC Form 4, care sunt necesare pentru persoanele din interiorul companiilor care își tranzacționează propriile acțiuni. Inițial percepută ca o sarcină simplă ce implică interogarea unui flux public, lizibil automat pe EDGAR, proiectul a dezvăluit rapid obstacole semnificative. Fluxul Atom în timp real s-a dovedit nesigur, adesea pierzând depuneri din cauza bufferului său limitat, necesitând un proces de reconciliere folosind fișiere index zilnice pentru a asigura capturarea completă a datelor. Mai mult, presupunerea unor nume de fișiere XML consistente a fost spulberată, necesitând o metodă mai robustă de rezolvare a documentului primar de pe pagina index, ceea ce a adăugat suprasarcină procesului.

Parsarea în sine a prezentat provocări suplimentare, inclusiv o eroare masivă de evaluare provenită din interpretarea greșită a titlurilor de creanță ca acțiuni și o realizare critică despre natura "vânzării de către persoane din interior". O analiză aprofundată a celor 20 de coduri de tranzacție a relevat că marea majoritate a "vânzărilor" raportate nu au fost decizii discreționare, ci mai degrabă evenimente mecanice precum premii de compensare, exercitări de opțiuni sau rețineri de impozite. Chiar și vânzările pe piața deschisă au avut loc adesea în cadrul planurilor 10b5-1 pre-programate, diluând semnificativ semnalul de convingere reală a persoanelor din interior. Acest lucru a necesitat o abordare mai nuanțată pentru filtrarea datelor, distingând între deciziile reale de tranzacționare și evenimentele financiare de rutină.

În final, articolul subliniază importanța respectării limitelor de rată ale EDGAR și a formatării corecte a User-Agent pentru a evita limitarea sau blocarea, utilizând un limitator de tip token-bucket și o strategie de backoff pentru conformitate. Serviciul rezultat, InsiderTradingRadar, își propune să ofere alerte în timp util cu privire la activitatea reală a persoanelor din interior, filtrând acest "zgomot mecanic". Autorul subliniază nevoia continuă de feedback pentru a îmbunătăți acuratețea clasificării, în special pentru codurile de tranzacție ambigue care sfidează regulile simple.