Metodiky a postupy validace dat CZ-DRG

Transkript

1 Metodiky a postupy validace dat CZ-DRG Zbyněk Bortlíček, T. Pavlík, M. Bartůňková, P. Klika, M. Uher, P. Kovalčíková, M. Hlostová, J. Linda, L. Dušek a tým projektu DRG Restart Ústav zdravotnických informací a statistiky ČR

2 Síť referenčních nemocnic K bylo v síti 42 RN, z toho oceněné zdravotní u 37 RN za rok V roce 2018 dvě RN ze sítě vystoupily KNTB Zlín a Nemocnice Kroměříž (nebyly předmětem ocenění péče za rok 2016). V roce 2018 vstoupilo pět nových RN: Nemocnice Frýdlant Nemocnice Atlas Nemocnice Milosrdných sester sv. Karla Boromejského v Praze Nemocnice Nymburk Nemocnice Hodonín Za rok 2017 máme v síti 45 RN, z nichž u 39 máme oceněné a validované hospitalizační případy

3 Data předaná jednotlivými referenčními nemocnicemi jsou konzistentní v čase Objem hospitalizačních případů (HP) předávaných referenčními nemocnicemi je napříč celou sítí mezi roky 2016 a 2017 stabilní. RN 1 RN 2 RN 3 RN 4 RN 5 RN 6 RN 7 RN 8 RN 9 RN 10 RN 11 RN 12 RN 13 RN 14 RN 15 RN 16 RN 17 RN 18 % vyjádření počtu předaných HP za rok 2017 k počtu HP za rok % 20% 40% 60% 80% 100% 120% 114% 109% 106% 106% 105% 104% 104% 103% 102% 102% 101% 101% 101% 101% 101% 100% 100% 100% RN 19 RN 20 RN 21 RN 22 RN 23 RN 24 RN 25 RN 26 RN 27 RN 28 RN 29 RN 30 RN 31 RN 32 RN 33 RN 34 RN 35 RN 36 % vyjádření počtu předaných HP za rok 2017 k počtu HP za rok % 20% 40% 60% 80% 100% 120% 99% 99% 99% 98% 98% 98% 98% 97% 97% 97% 97% 97% 97% 97% 97% 96% 96% 96%

4 Validační aplikace Nově kontroluje konzistenci informace mezi sloupci jednoho souboru a zároveň i konzistenci informace mezi různými předávanými soubory.

5 Validační protokol

6 Počet případů Podíl případů (% NRHZS) Validace produkčních dat předaných RN proti datům NRHZS všechny RN za rok Počet hospitalizačních případů Rozdíl hodnot v měsících RN - NRHZS Minimum: -277 Maximum: +84 Medián: -4 Referenční nemocnice Data NRHZS Měsíc Nově využívána data NRHZS pro ověření objemu předaných dat. Data nahlášená z RN jsou objemem hospitalizačních případů shodná s daty NRHZS. Vykazování počtů hospitalizací i pacientů je v průběhu roku mezi oběma datovými zdroji konzistentní. Počet pacientů Podíl pacientů (% NRHZS) Počet pacientů Referenční nemocnice Data NRHZS Měsíc Měsíc Referenční nemocnice/ data NRHZS Měsíc Referenční nemocnice/ data NRHZS Rozdíl hodnot v měsících RN - NRHZS Minimum: -296 Maximum: +45 Medián: -41

7 Příklad validace produkčních dat předaných RN proti datům NRHZS za rok 2017 hlavní diagnózy vybrané RN MKN-10 kapitola I. Některé infekční a parazitární nemoci II. Novotvary III. Nemoci krve, krvetvor. orgánů a některé poruchy týkající se mechanismu imunity IV. Nemoci endokrinní, výživy a přeměny látek V. Poruchy duševní a poruchy chování VI. Nemoci nervové soustavy VII. Nemoci oka a očních adnex VIII. Nemoci ucha a bradavkového výběžku IX. Nemoci oběhové soustavy X. Nemoci dýchací soustavy XI. Nemoci trávicí soustavy XII. Nemoci kůže a podkožního vaziva XIII. Nemoci svalové a kosterní soustavy a pojivové tkáně XIV. Nemoci močové a pohlavní soustavy XV. Těhotenství, porod a šestinedělí XVI. Některé stavy vzniklé v perinatálním období XVII. Vrozené vady, deformace a chromozomální abnormality XVIII. Příznaky, znaky a abnormální klinické a laboratorní nálezy nezařazené jinde XIX. Poranění, otravy a některé jiné následky vnějších příčin XXI. Faktory ovlivňující zdravotní stav a kontakt se zdravotnickými službami Počet HP s hlavní diagnózou z dané MKN-10 kapitoly Referenční nemocnice NRHZS

8 Validace na pobyt na operačním sále u vybraných operačních výkonů Pro validaci na pobyt na operačním sále definován Seznam operačních výkonů, který obsahuje cca 1400 položek SZV nebo DRG markerů. Hospitalizační případy s operačním výkonem, které neobsahují operační protokol nejsou zahrnuty do výpočtu celkových průměrných nákladů. 5% Příklad: pro odstranění apendixu jsou do validace zahrnuty 4 výkony: APENDEKTOMIE NEBO OPERAČNÍ DRENÁŽ PERIAPENDIKULÁRNÍHO A PERIKOLICKÉHO ABCESU APENDEKTOMIE PŘI PERFORAČNÍ APENDICITIDĚ S PERITONITIDOU (DRG) APPENDEKTOMIE LAPAROSKOPICKY (DRG) APPENDEKTOMIE PŘI PERITONITIDĚ LAPAROSKOPICKY 95% Hospitalizační případy s apendektomií a zároveň s operačním protokolem Hospitalizační případy s apendektomií ale bez operačního protokolu

9 Validace na pobyt na operačním sále na příkladu apendektomie V rámci validace obsahu hospitalizačních případů bylo identifikováno celkem 130 HP z DRG skupiny 06-I19-05 bez operačního protokolu. Následující tabulka dokládá, že HP bez operačního protokolu chybí náklady na operační (cca 10 tisíc Kč), což koresponduje i s nižšími výslednými celkovými náklady. 06-I19-05 Odstranění apendixu pro méně rozsáhlý zánět nebo jiné onemocnění u pacientů ve věku let s CC=0-1 N Celkem Standardní pobytové Průměrné náklady (Kč) Intenzivní pobytové Operační Vyžádaná péče Zvlášť účtované položky - s operačním protokolem bez operačního protokolu Rozdíl

10 Validace na délku operačního výkonu Předchozí validací je zajištěno, že u operačních výkonů bude nákladová složka za operační nenulová. Je to postačující? V datech se objevují operační protokoly s délkou trvání v rámci jednotek minut. Osloveny odborné společnosti s dotazem na minimální délku trvání jednotlivých výkonů. Na základě výsledku diskuzí s odbornými společnostmi a pozorované délky operace jednotlivých výkonů nastaveno kritérium, kdy hospitalizační případy s operačním protokolem v délce trvání menší jak 1/3 mediánu délky trvání daného výkonu nejsou zahrnuty do výpočtu celkových průměrných nákladů. Toto kritérium je uplatněno pouze u operačních výkonů, které v mediánu trvají alespoň 30 minut.

11 Validace na délku operačního výkonu příklad resekce tlustého střeva Výkon RESEKCE A ANASTOMÓZA TLUSTÉHO STŘEVA NEBO REKTOSIGMATU BŘIŠNÍM PŘÍSTUPEM, KOLOMYOTOMIE Medián délky operačního protokolu u HP s výkonem je 119 minut při průměrných nákladech cca Kč. Pro výkon tedy nastavena hranice na 119/3 = cca 40 minut. % případů 20% 15% 10% 5% medián/3 11,3 5,1 medián 16,1 16,5 13,6 9,9 7,6 Případy s op. protokolem kratším jak 40 minut (a průměrnými náklady za op Kč) nejsou zahrnuty do výpočtu celkových průměrných nákladů. 5,3 4,0 3,0 1,7 1,7 1,2 0% 0,21 0,81 0,5 0,4 0,3 0,2 Délka operačního protokolu

12 Validace na vykázání anestezie u operačních výkonů Oslovena Česká společnost anesteziologie resuscitace a intenzivní medicíny s prosbou o spolupráci při definování seznamu výkonů pro validaci. Definován seznam položek SZV a DRG markerů, které odpovídají výkonům, jejichž obligatorní součástí je anestezie a je vykazována separátními položkami. Hospitalizační případy s nevykázanou anestezii nezahrnuty do dalších analýz. 06-I06-05 Resekce střeva nebo peritonea pro závažné onemocnění trávicí soustavy u pacientů ve věku 2 a více let s CC=0-3 Celkem Standardní pobytové Intenzivní pobytové Průměrné náklady (Kč) Operační Vyžádaná péče - anestezie Vyžádaná péče - ostatní Zvlášť účtované položky - s anestezií (n=1888) bez anestezie (n=22) Rozdíl

13 Validace na pobyt na oddělení intenzivní péče Osloveny odborné společnosti s dotazem na potřebu pobytu na JIP u jednotlivých výkonů. Výsledkem diskuzí je seznam položek SZV a DRG markerů, které odpovídají výkonům, po jejichž provedení je nezbytný alespoň jednodenní pobyt na JIP. HP bez JIP, ale s výkonem indikujícím JIP, nejsou zahrnuty do dalších analýz. 11-I01-02 Odstranění močového měchýře u pacientů s CC=0-3 Celkem Standardní pobytové Průměrné náklady (Kč) Intenzivní pobytové Operační Vyžádaná péče Zvlášť účtované položky Celkem - průměr Délka případu (dny) Na JIP - průměr Na JIP - medián - s pobytem na JIP (n=177) - bez pobytu na JIP (n=21) Rozdíl

14 Validace na výskyt zvlášť účtovaných položek u HP s vybraným výkonem Definován seznam položek SZV a DRG markerů pro validaci K nim jsou individuálně definovány seznamy zvlášť účtovaných položek. Hospitalizační případy s vykázaným výkonem, ale bez příslušející zvlášť účtované položky, nejsou zahrnuty do dalších analýz. 05-I14-04 Implantace dvoudutinového nebo jednodutinového kardioverteru-defibrilátoru u pacientů s CC=0-3 Celkem Standardní pobytové Průměrné náklady (Kč) Intenzivní pobytové Operační Vyžádaná péče Zvlášť účtované položky - s kardioverterem-defibrilátorem (n = 1 124) bez kardioverteru-defibrilátoru (n = 24) Rozdíl

15 Výsledek validace dat za rok 2017 ve srovnání s daty za rok 2016 Data za rok 2017 Data za rok 2016 Všechny HP odevzdané RN n = (100 %) n = (100 %) HP HP Zohlednění výsledku z validačního protokolu n = (99,2 %) n = (99,4 %) HP HP Validace kalkulačních jednic n = (97,6 %) n = (97,5 %) HP Validace obsahu hospitalizačních případů n = (94,5 %) nevyčísleno Data za rok 2017 byla validována do většího detailu s ohledem na obsah hospitalizačního případu.

16 Výsledek validací na obsah hospitalizačních případů V rámci validace obsahu hospitalizačních případů bylo celkem případů označeno za nevalidní a tedy vyřazeno z dalších analýz, potažmo z výpočtu celkových průměrných nákladů. Obecně lze říci, že největším problémem je chybění operačních protokolů. Počet HP s nekonzistentním obsahem Validace na pobyt na operačním sále Validace na vykázání anestezie Validace na výskyt zvlášť účtovaných položek Validace na délku operačního výkonu Validace na pobyt na oddělení intenzivní péče 2 607

17 Shrnutí Zatímco v IR-DRG byl proces vyřazování chybných záznamů z produkčních dat před výpočtem relativní váhy velmi jednoduchý (viz tak v CZ-DRG jsou produkční data validována do daleko většího detailu.

18 Shrnutí Zatímco v IR-DRG byl proces vyřazování chybných záznamů z produkčních dat před výpočtem relativní váhy velmi jednoduchý (viz tak v CZ-DRG jsou produkční data validována do daleko většího detailu.

19 Shrnutí Celý proces je meziročně doplňován jak o úplně nové validace, tak jsou kultivovány již nastavené validace dle získané zpětné vazby. Validační aplikace Validační protokol Analytické validace nad exportem z databáze

20 Schéma validace dat RN ANO ANO Datové soubory chystané referenčnínemonicí Spuštění validačního nástroje Byly validační aplikací zjištěny nesrovnalosti? Odeslání validačního protokolu referenční nemocnici Na základě výsledku validačního protokolu proběhly úpravy a byly nachystány nové datové soubory NE NE Nahrání do úložiště dat RN Zohledněny výsledky z validačního protokolu a nepřípustné záznamy vyřazeny z dalších analýz Formální kontroly s využitím validační aplikace Kontrola databázové konzistence (kontrola unikátnosti primárních klíčů a kontrola cizích klíčů) Validace zpracovaných dat proti průvodce Byly zjištěny nesrovnalosti? ANO Zaevidování do validačního protokolu Výpočet kalkulačních jednic Klasifikace hospitalizačních případů v CZ-DRG NE Validace objemu a struktury předaných dat proti datům Národního registru hospitalizovaných Validace objemu předaných dat proti účetním výkazům nemocnic Validace objemu předaných dat proti datům resortního statistického šetření státní statistické Konzistence údajů o organizační struktuře nemocnice Validace údajů o produkci přímých pracovišť Validace nákladů na provoz pracovišť Validace údajů o rozpouštění nákladů z nepřímých pracovišť Validace údajů o budovách a dlouhodobém majetku Objemové validace pro kontrolu nepřesáhnutí tolerovaných hodnot daného zjištění Byly zjištěny nesrovnalosti? NE Byly zjištěny nesrovnalosti? NE ANO ANO Zaevidování do validačního protokolu Zaevidování do validačního protokolu Finální datový soubor oceněných hospitalizačních případů zaklasifikovaných v CZ-DRG Benchmarking kalkulačních jednic mezi referenčními nemocnicemi, resp. identifikace nákladových středisek s extrémními jednicemi, kdy HP s péčí naceněnou pomocí extrémních jednic nejsou zahrnuty do dalších výpočtů Validace obsahu HP vyplývající z výsledné CZ-DRG klasifikace: - výskyt nákladů na zvlášť účtované položky - pobyt na operačním sále u HP definovaných kritickým operačním výkonem - pobyt na oddělení intenzivní péče u stavů, které ji nutně vyžadují - výskyt anestézie u rozsáhlých invazivních výkonů Byly u HP zjištěny nesrovnalosti? NE ANO Byly po diskuzi s RN opraveny zdrojové soubory pro odstranění nesrovnalostí NE ANO Validace dodržení metodiky sestavení HP IR-DRG Validace obsahu HP vzhledem k výsledné IR-DRG klasifikaci Validace dodržení základních pravidel kódování zdravotních služeb - diagnózy a výkony Validace dodržení základních logických vazeb mezi charakteristikami HP Objemové validace pro kontrolu nepřesáhnutí tolerovaných hodnot daného zjištění Byly zjištěny nesrovnalosti? NE ANO Zaevidování do validačního protokolu Analytickáidentifikace souboru typických HP jednotlivých DRG skupin, tzv. inliers Finální soubor typických HP pro každou DRG skupinu Byly u HP zjištěny nesrovnalosti? NE ANO Případ vyřazen z výpočtu RV Výpočet RV a stanovení průměrných charakteristik každé DRG skupiny pro individuální přiřazení RV

21 Děkuji za pozornost