PRAVDĚPODOBNOST A STATISTIKA. Bayesovské odhady

Podobné dokumenty
BAYESOVSKÉ ODHADY. Michal Friesl V NĚKTERÝCH MODELECH. Katedra matematiky Fakulta aplikovaných věd Západočeská univerzita v Plzni

I. D i s k r é t n í r o z d ě l e n í

p(x) = P (X = x), x R,

PRAVDĚPODOBNOST A STATISTIKA

Minikurz aplikované statistiky. Minikurz aplikované statistiky p.1

z Matematické statistiky 1 1 Konvergence posloupnosti náhodných veličin

Pravděpodobnost a aplikovaná statistika

Výběrové charakteristiky a jejich rozdělení

PRAVDĚPODOBNOST A STATISTIKA. Metoda momentů Metoda maximální věrohodnosti

Odhady - Sdružené rozdělení pravděpodobnosti

MATEMATICKÁ STATISTIKA. Katedra matematiky a didaktiky matematiky Technická univerzita v Liberci

Charakterizace rozdělení

Základy teorie odhadu parametrů bodový odhad

Bayesovské metody. Mnohorozměrná analýza dat

Téma 22. Ondřej Nývlt

BAYESOVSKÉ ODHADY V NĚKTERÝCH MODELECH

Pravděpodobnost a statistika I KMA/K413

Pravděpodobnost a statistika, Biostatistika pro kombinované studium. Jan Kracík

PRAVDĚPODOBNOST A STATISTIKA

oddělení Inteligentní Datové Analýzy (IDA)

Určujeme neznámé hodnoty parametru základního souboru. Pomocí výběrové charakteristiky vypočtené z náhodného výběru.

Odhady Parametrů Lineární Regrese

10. cvičení z PST. 5. prosince T = (n 1) S2 X. (n 1) s2 x σ 2 q χ 2 (n 1) (1 α 2 ). q χ 2 (n 1) 2. 2 x. (n 1) s. x = 1 6. x i = 457.

Apriorní rozdělení. Jan Kracík.

Matematika III. 4. října Vysoká škola báňská - Technická univerzita Ostrava. Matematika III

Číselné charakteristiky

Určete zákon rozložení náhodné veličiny, která značí součet ok při hodu a) jednou kostkou, b) dvěma kostkami, c) třemi kostkami.

P13: Statistické postupy vyhodnocování únavových zkoušek, aplikace normálního, Weibullova rozdělení, apod.

Dobývání znalostí. Doc. RNDr. Iveta Mrázová, CSc. Katedra teoretické informatiky Matematicko-fyzikální fakulta Univerzity Karlovy v Praze

PRAVDĚPODOBNOST A STATISTIKA. Odhady parametrů Postačující statistiky

Jiří Neubauer. Katedra ekonometrie, FVL, UO Brno kancelář 69a, tel

Náhodná veličina a její charakteristiky. Před provedením pokusu jeho výsledek a tedy ani sledovanou hodnotu neznáte. Proto je proměnná, která

Vybraná rozdělení náhodné veličiny

1 Klasická pravděpodobnost. Bayesův vzorec. Poslední změna (oprava): 11. května 2018 ( 6 4)( 43 2 ) ( 49 6 ) 3. = (a) 1 1 2! + 1 3!

Pravděpodobnost a statistika (BI-PST) Cvičení č. 9

KMA/P506 Pravděpodobnost a statistika KMA/P507 Statistika na PC

Náhodná veličina a rozdělení pravděpodobnosti

Pravděpodobnost a matematická statistika Doc. RNDr. Gejza Dohnal, CSc.

Bakalářské studium na MFF UK v Praze Obecná matematika Zaměření: Stochastika. 1 Úvodní poznámky. Verze: 13. června 2013

Praktická statistika. Petr Ponížil Eva Kutálková

a způsoby jejího popisu Ing. Michael Rost, Ph.D.

Pravděpodobnost a matematická statistika

11. cvičení z PSI prosince hodnota pozorovaná četnost n i p X (i) = q i (1 q), i N 0.

PRAVDĚPODOBNOST A STATISTIKA

Odhad parametrů N(µ, σ 2 )

15. T e s t o v á n í h y p o t é z

Náhodné vektory a matice

Základy biostatistiky II. Veřejné zdravotnictví 3.LF UK - II

Všechno, co jste chtěli vědět z teorie pravděpodobnosti, z teorie informace a

Přijímací zkouška na navazující magisterské studium 2014

Základy teorie pravděpodobnosti

MATEMATICKÁ STATISTIKA - XP01MST

NMAI059 Pravděpodobnost a statistika

E(X) = np D(X) = np(1 p) 1 2p np(1 p) (n + 1)p 1 ˆx (n + 1)p. A 3 (X) =

Normální (Gaussovo) rozdělení

JAK MODELOVAT VÝSLEDKY NÁH. POKUSŮ? Martina Litschmannová

VYBRANÁ ROZDĚLENÍ. SPOJITÉ NÁH. VELIČINY Martina Litschmannová

Deskriptivní statistické metody II. Míry polohy Míry variability

Nestranný odhad Statistické vyhodnocování exp. dat M. Čada

Základy teorie pravděpodobnosti

pravděpodobnosti Pravděpodobnost je teorií statistiky a statistika je praxí teorie pravděpodobnosti.

Základní statistické modely Statistické vyhodnocování exp. dat M. Čada ~ cada

ÚVOD DO TEORIE ODHADU. Martina Litschmannová

Lékařská biofyzika, výpočetní technika I. Biostatistika Josef Tvrdík (doc. Ing. CSc.)

TECHNICKÁ UNIVERZITA V LIBERCI

MATEMATICKÁ STATISTIKA

9. T r a n s f o r m a c e n á h o d n é v e l i č i n y

NEPARAMETRICKÉ BAYESOVSKÉ ODHADY V KOZIOLOVĚ-GREENOVĚ MODELU NÁHODNÉHO CENZOROVÁNÍ. Michal Friesl

Tématické okruhy pro státní závěrečné zkoušky. bakalářské studium. studijní obor "Management jakosti"

12. cvičení z PST. 20. prosince 2017

STANOVENÍ SPOLEHLIVOSTI GEOTECHNICKÝCH KONSTRUKCÍ. J. Pruška, T. Parák

Poznámky k předmětu Aplikovaná statistika, 5.téma

Úvodem Dříve les než stromy 3 Operace s maticemi

AKM CVIČENÍ. Opakování maticové algebry. Mějme matice A, B regulární, potom : ( AB) = B A

Cvičení ze statistiky - 5. Filip Děchtěrenko

6. ZÁKLADY STATIST. ODHADOVÁNÍ. Θ parametrický prostor. Dva základní způsoby odhadu neznámého vektoru parametrů bodový a intervalový.

Intervalové Odhady Parametrů

AVDAT Klasický lineární model, metoda nejmenších

X = x, y = h(x) Y = y. hodnotám x a jedné hodnotě y. Dostaneme tabulku hodnot pravděpodobnostní

Tématické okruhy pro státní závěrečné zkoušky. bakalářské studium. studijní obor "Management jakosti"

Přijímací zkouška na navazující magisterské studium 2017

TESTOVÁNÍ STATISTICKÝCH HYPOTÉZ ZÁKLADNÍ POJMY

Chyby měření 210DPSM

NÁHODNÁ VELIČINA. 3. cvičení

PSY117/454 Statistická analýza dat v psychologii přednáška 8. Statistické usuzování, odhady

Náhodný vektor. Náhodný vektor. Hustota náhodného vektoru. Hustota náhodného vektoru. Náhodný vektor je dvojice náhodných veličin (X, Y ) T = ( X

Rozdělení náhodné veličiny. Distribuční funkce. Vlastnosti distribuční funkce

Přednáška. Diskrétní náhodná proměnná. Charakteristiky DNP. Základní rozdělení DNP

NÁHODNÉ VELIČINY JAK SE NÁHODNÁ ČÍSLA PŘEVEDOU NA HODNOTY NÁHODNÝCH VELIČIN?

1. Přednáška. Ing. Miroslav Šulai, MBA

Odhad parametrů N(µ, σ 2 )

Tématické okruhy pro státní závěrečné zkoušky. bakalářské studium. studijní obor "Management jakosti"

1 Tyto materiály byly vytvořeny za pomoci grantu FRVŠ číslo 1145/2004.

7. Rozdělení pravděpodobnosti ve statistice

Požadavky k písemné přijímací zkoušce z matematiky do navazujícího magisterského studia pro neučitelské obory

Transkript:

PRAVDĚPODOBNOST A STATISTIKA Bayesovské odhady

Bayesovské odhady - úvod Klasický bayesovský přístup: Klasický přístup je založen na opakování pokusech sledujeme rekvenci nastoupení zvolených jevů Bayesovský přístup je založen také na opakování pokusech a také se vychází z další inormace o procesu. Tedy je do procesu zapojena další subjektivní inormace. Tato inormace se označuje apriorní inormace apriorní pravděpodobnost, prion,. Využiti dodatečné inormace způsobí,že nemusíme dělat tak rozsáhlý výběr.

Bayesovské odhady - úvod Dedukce založená na klasické teorii

Bayesovské odhady - úvod Dedukce založená na bayesovské teorii

Bayesovské odhady - úvod

Bayesovské odhady - úvod

Podmíněná pravděpodobnost Bayesova věta Nechť B i i {,,, n} je rozklad základního prostoru Ω. n B i i B i B j A náhodný jev Známe pravděpodobnosti: PB i, PA/B i. Pak P B j / A n P B i j P A P B P A i B j B i

Bayesovský přístup V obvyklém modelu matematické statistiky máme k dispozici výsledky náhodného pokusu v podobě pozorování náhodných veličin X X,, X n s hustotou,. Hustota je známa jen částečně, je znám její tvar až na několik parametru. Např. víme, že X tvoří náhodný výběr z normálního rozdělení X ~ N,, jehož parametry θ,, ale neznáme. Úkolem je učinit určité závěry o rozdělení pozorovaných hodnot týkající se parametru nebo jeho unkcí. T

Bayesovský přístup Při klasickém přístupu počítáme s parametrem jako s neznámou, ale pevnou konstantou, k závěrům používáme tvar hustoty / a pozorování X. Různé typy odhadu zahrnují odhad metodou maimální věrohodnosti, momentové odhady, atd. Při bayesovském přístupu naproti tomu považujeme parametr za náhodnou veličinu, jejíž hodnotu sice nepozorujeme, ale jejíž rozdělení známe. Hustotu veličiny označme h. Tato hustota vyjadřuje apriorní inormaci o možných hodnotách parametru.je to inormace, kterou máme ještě před pokusem, tedy získanou nezávisle na pozorováních X. Technicky, hustotu pozorování, chápeme při tomto přístupu jako podmíněnou hustotu / veličiny X při daných hodnotách veličiny. K závěrům pak oproti klasickému přístupu navíc použijeme apriorní hustotu h.

Podmíněné rozdělení T Nechť X X,, X n je náhodný vektor. Tento vektor rozdělme na dvě T T T části X X, X. Chceme najít rozdělení pro X, za předpokladu, že část X nabývá předem zvolených hodnot. T Nechť X X,, X n je diskrétní náhodný vektor s pravděpodobnostní unkcí p= p, a marginální pravděpodobnostní unkcí p pro část X. Nechť je pevně zvolené a p 0. Pak unkci proměnné : p p, p nazýváme podmíněnou pravděpodobností unkcí X za podmínky X =.

Podmíněné rozdělení T Nechť X X,, X n je náhodný vektor. Tento vektor rozdělme na dvě T T T části X X, X. Chceme najít rozdělení pro X, za předpokladu, že část X nabývá předem zvolených hodnot. T Nechť X X,, X n je spojitý náhodný vektor s hustotou pravděpodobnosti =, a marginální pravděpodobnostní unkcí pro část X. Nechť je pevně zvolené a 0. Pak unkci proměnné : nazýváme podmíněnou hustotou pravděpodobností X za podmínky X =.,

Podmíněné rozdělení Platí: pokud pro každé platí: p p nebo pak složky náhodného vektoru X T T X, X T jsou nezávislé.

Podmíněné rozdělení Nechť SX SX, X je unkce náhodného vektoru transormovaná náhodná veličina. Pak unkce proměnné S, p g S, d g Z nazýváme podmíněnou střední hodnotou náhodné veličina S za podmínky X =. a značíme: E S X E S X Nechť SX SX, X je unkce náhodného vektoru, E D S X ES ES X X. Pak nazýváme podmíněný rozptyl náhodné veličina S za podmínky X =. S

Podmíněné rozdělení Platí: Nechť SX SX, X je unkce náhodného vektoru, ES je konečná. Pak E S X ES X je konečná pro skoro všechna a platí: E S EES X Platí: Nechť S X S X, X a S X S X, X mají konečné střední hodnoty. Pak pro a,b R platí: skoro jistě. Speciálně: E E as bs X aes X bes X a a X

Platí: Náhodný vektor - Bayesova věta:. tedy podobně pak podmíněná hustota za podmínky Tedy T T T, X X X SP3 Bayesovské odhady,,, X, d d Bayesovský přístup

Označení: T Náhodný vektor X X,, X n -, θ,,,θ marginální hustoty:, h θ podmíněné hustoty: k θ, Pak za podmínky: θ X Bayesovský přístup lze uvažovat k θ Vzhledem k X lze marginální hustotu považovat za konstantu, potom lze Bayesův vzorec zapsat ve tvaru: θ h k θ θ hθ apriorní hustota pravděpodobnostní unkce k θ aposteriorní hustota pravděpodobnostní unkce znamená je úměrné k θ k θ h θ, k R θ h θ

Bayesovský přístup Aposteriorní hustota k θ je až na nějakou normovací konstantu rovna součinu věrohodnostní unkce θ Lθ pro parametr na základě pozorování X a apriorní hustoty hθ. k θ k L θ h θ, k R Kombinuje tak apriorní inormaci o parametru s inormací obsaženou v pozorováních.

Bayesovský přístup Podobně jako u klasických odhadů, rozlišujeme i při bayesovském přístupu různé typy odhadu. Jako bodový odhad můžeme použít obdobu maimálně věrohodného odhadu, tj. tu hodnotu, kde aposteriorní hustota k θ nabývá nejvyšší hodnoty. Jiným typem odhadu jsou střední hodnota aposteriorního rozdělení θˆ E θ odpovídající minimalizaci průměrné ztráty při ztrátové kvadratické unkci L θˆ, θ c θˆ θ nebo aposteriorní medián, odpovídající minimalizaci průměrné ztráty při ztrátové s absolutní hodnotou L θˆ, θ c θ ˆ θ X

Bayesovský přístup Bayesovskou množinu I, pro niž. - konidenční oblast interval deinujeme jako takovou P θ I X O hypotézách můžeme rozhodovat přímo porovnáním pravděpodobností, s jakými při aposteriorním rozdělení nastávají, nebo také pomocí ztrátových unkcí.

Bayesovský přístup Tedy Při použití ztrátové kvadratické unkce L θˆ, θ θˆ θ lze θˆ spočítat jako podmíněnou střední hodnotu aposteriorního rozdělení. θˆ E θ X k θ d Analogicky při použití ztrátové unkce L θˆ, θ c θ ˆ θ bychom minimalizací L získali odhad θˆ, kterým by byl 50% kvantil posteriorního rozdělení k θ Poznámka: Apriorní hustota hθ splňovat: h θ dθ Příklad: / h θ 0, apriorní rozdělení může být nevlastní, tj. nemusí 0 0

Bayesovské odhady - příklad Příklad Nechť X je náhodná proměnná s rozdělením Poλ. Chceme odhadnout parametr λ. K dispozici máme tuto apriorní inormaci: Nechť parametr λ je realizací náhodné veličiny T. Dále víme,že P T 3 P T 3 3 Odvoďte aposteriorní pravděpodobnost, odhadněte parametr pomocí aposteriorní pravděpodobnosti. Jaký bude bayesovský odhad λ pokud máme realizaci: a X = b X =4

Bayesovské odhady - příklad Příklad Chceme odhadnou pravděpodobnost výskytu nějakého jevu - p. K dispozici máme apriorní inormaci h p. Nechť X je náhodný výběr rozsahu n: X,, X n Odvoďte aposteriorní pravděpodobnost k p. Nechť p je pravděpodobnost padnutí 6. /3 Odvoďte aposteriorní pravděpodobnost k p pro h p /3 Odhadněte parametr p pomocí aposteriorní pravděpodobnosti. Jaký bude bayesovský odhad p pokud máme realizaci: n =0 a X X,, X 0,0,,0,0,,,0,0,0 0 p p 5 6

Bayesovské odhady - příklad Příklad Chceme odhadnou pravděpodobnost výskytu nějakého jevu - p. K dispozici máme apriorní inormaci h p. Nechť X je náhodný výběr rozsahu n: X,, X n Odvoďte aposteriorní pravděpodobnost k p. Nechť p je pravděpodobnost padnutí 6. Nechť parametr p je realizací náhodné veličiny T, T ~ Ro0, Odvoďte aposteriorní pravděpodobnost k p pro h p h p Odhadněte parametr p pomocí aposteriorní pravděpodobnosti. Jaký bude bayesovský odhad p pokud máme realizaci: n =0 a X X,, X 0,0,,0,0,,,0,0,0 0 0 p p 0, 0,

Náhodná veličina X s Beta rozdělením X~Beα, β, α, β R, α, β >0, má základní prostor Z = R a hustotu pravděpodobnosti: Beta rozdělení Beα, β Charakteristiky: střední hodnota: rozptyl: Rozdělení B; odpovídá rovnoměrnému spojitému rozdělení na intervalu 0, EX X D, B SP Náhodná proměnná speciální rozdělení

SP Náhodná proměnná speciální rozdělení Beta rozdělení Beα, β

Bayesovské odhady - příklad Příklad Chceme odhadnou pravděpodobnost výskytu nějakého jevu - p. K dispozici máme apriorní inormaci h p. Nechť X je náhodný výběr rozsahu n: X,, X n Odvoďte aposteriorní pravděpodobnost k p. Nechť p je pravděpodobnost padnutí 6. Nechť parametr p je realizací náhodné veličiny T, T ~ e, Beta rozdělení Odhadněte parametr p pomocí aposteriorní pravděpodobnosti. Jaký bude bayesovský odhad p pokud máme realizaci: n =0 a X X,, X 0,0,,0,0,,,0,0,0 0

Bayesovské odhady V následující tabulce je uveden stručný přehled rozdělení θ, ze kterých vycházíme, apriorní rozdělení h θ a aposteriorní rozdělení k θ. Vychází se z hustot eponenciálního tvaru. Pozorovaná data se považují za nezávislá, n je počet pozorování a vztahy jsou pro výběrový průměr n X i X i θ hθ θ h k θ θ

Bayesovské odhady θ hθ θ h k θ θ

SP Náhodná proměnná speciální rozdělení Gamma rozdělení Γk, λ Náhodná veličina X s Gamma rozdělením X~Γk, λ, je zobecněním Erlangova rozdělení pro kr,λr, k,λ>0, má hustotu pravděpodobnosti: k k e 0 k 0 jinak Charakteristiky: střední hodnota: rozptyl: koe. šikmosti: koe. špičatosti: E X D X k k A3 X k 6 A X 3 k 4 3

SP Náhodná proměnná speciální rozdělení Gamma rozdělení Γk, λ ѳ = /λ

Bayesovské odhady - příklady Příklad Nechť θ označuje inteligenční kvocient jistého dítěte. Jeho hodnotu určujeme pomocí IQ testu. Je známo, že výsledek testu X má normální rozdělení pravděpodobnosti se střední hodnotou θ a směrodatnou odchylkou 0. Dlouhodobé výzkumy ukázaly, že rozložení kvocientu u dětí příslušného věku je normální N00, 5. Odhadněte θ.

Bayesovské odhady

Bayesovské odhady