Stokastik matris - Stochastic matrix - Wikipedia

İçinde matematik, bir stokastik matris bir Kare matris a'nın geçişlerini tanımlamak için kullanılır Markov zinciri. Girişlerinin her biri bir negatif olmayan gerçek Numara temsil eden olasılık.[1][2]:9–11 Aynı zamanda olasılık matrisi, geçiş matrisi, ikame matrisiveya Markov matrisi.[2]:9–11

Stokastik matris ilk olarak Andrey Markov başlangıcında 20. yüzyıl ve dahil olmak üzere çok çeşitli bilimsel alanlarda kullanım bulmuştur olasılık teorisi, İstatistik, matematiksel finans ve lineer Cebir, Hem de bilgisayar Bilimi ve popülasyon genetiği.[2]:1–8

Birkaç farklı stokastik matris tanımı ve türü vardır:[2]:9–11

Bir sağ stokastik matris her satırın toplamı 1 olan gerçek bir kare matristir.
Bir sol stokastik matris her sütunun toplamı 1 olan gerçek bir kare matristir.
Bir ikili stokastik matris her satır ve sütunun toplamı 1 olan negatif olmayan gerçek sayılardan oluşan bir kare matristir.

Aynı şekilde, bir tanımlanabilir stokastik vektör (olarak da adlandırılır olasılık vektörü) olarak vektör elemanları, toplamı 1 olan negatif olmayan gerçek sayılardır. Dolayısıyla, bir sağ stokastik matrisin her satırı (veya bir sol stokastik matrisin sütunu) bir stokastik vektördür.[2]:9–11

İngiliz dili matematik literatüründe yaygın bir kongre kullanmaktır satır vektörleri olasılıkların ve sağ stokastik matrislerin sütun vektörleri olasılıkların ve sol stokastik matrislerin; bu makale bu kuralı izler.[2]:1–8

Tarih

Stokastik matris, Markov zinciri ile birlikte geliştirildi Andrey Markov, bir Rus matematikçi ve profesör St.Petersburg Üniversitesi konuyu ilk kez 1906'da yayınlayan.[2]:1–8 [3] İlk kullanım amacı dilbilimsel analiz ve diğer matematiksel konulardı. kart karıştırma, ancak hem Markov zincirleri hem de matrisler diğer alanlarda hızla kullanım buldu.[2]:1–8 [3][4]

Stokastik matrisler, aşağıdaki gibi bilim adamları tarafından daha da geliştirilmiştir. Andrey Kolmogorov, sürekli Markov süreçlerine izin vererek olanaklarını genişleten.[5] 1950'lere gelindiğinde, stokastik matrisleri kullanan makaleler, Ekonometri[6] ve devre teorisi.[7] 1960'larda, stokastik matrisler, daha geniş bir bilimsel çalışmada ortaya çıktı. davranış bilimi[8] -e jeoloji[9][10] -e yerleşim planlaması.[11] Buna ek olarak, bu on yıllar boyunca, stokastik matrisin kullanım aralığını ve işlevselliğini geliştirmek için birçok matematiksel çalışma yapıldı ve Markov süreçleri daha genel olarak.

1970'lerden günümüze, stokastik matrisler, formel analiz gerektiren hemen hemen her alanda kullanım bulmuştur. yapısal bilim[12] -e tıbbi teşhis[13] -e çalışan yönetimi.[14] Ek olarak, stokastik matrisler geniş kullanım alanı bulmuştur. arazi değişikliği modellemesi, genellikle Markov matrisi terimi altında.[15]

Tanım ve özellikler

Stokastik bir matris, bir Markov zinciri Xt üzerinde sonlu durum alanı S ile kardinalite S.

Eğer olasılık -dan taşınmak ben -e j bir zaman adımında Pr (j|ben) = Pben,jstokastik matris P kullanılarak verilir Pben,j olarak ben-nci sıra ve j-th sütun öğesi, ör.

Bir durumdan geçiş olasılığının toplamı ben diğer tüm eyaletler için 1 olmalıdır,

bu nedenle bu matris bir sağ stokastik matristir.[2]:1–8

Her satırda yukarıdaki eleman bazında toplam ben nın-nin P daha kısaca şöyle yazılabilir: P1 = 1, nerede 1 ... Shepsinin boyutlu vektörü. Bunu kullanarak, iki sağ stokastik matrisin çarpımının P ve P′′ aynı zamanda doğru stokastiktir: PP′′ 1 = P′ (P′′ 1) = P1 = 1. Genel olarak kgüç Pk sağ stokastik matrisin P aynı zamanda doğru stokastiktir. Geçiş olasılığı ben -e j iki adımda daha sonra (ben, j)-karenin. öğesi P:

Genel olarak, matris tarafından verilen sonlu bir Markov zincirinde herhangi bir durumdan başka bir duruma geçme olasılığı geçişi P içinde k adımlar tarafından verilir Pk.

Durumların ilk olasılık dağılımı, sistemin başlangıçta nerede ve hangi olasılıklarla olabileceğini belirterek, satır vektör.

Bir sabit olasılık vektörü π bir satır vektörü olarak yazılan ve geçiş matrisinin uygulaması altında değişmeyen bir dağılım olarak tanımlanır; yani sette olasılık dağılımı olarak tanımlanır {1, …, n} bu da bir sıra özvektör olasılık matrisinin özdeğer 1:

Doğru spektral yarıçap her sağ stokastik matrisin en fazla 1'i Gershgorin daire teoremi. Ek olarak, her sağ stokastik matris, özdeğer 1 ile ilişkili "açık" bir sütun özvektörüne sahiptir: vektör 1, koordinatları 1'e eşit olan (sadece bir satırın çarpımını gözlemleyin) Bir zamanlar 1 satırın girişlerinin toplamına eşittir ve dolayısıyla 1'e eşittir). Bir kare matrisin sol ve sağ özdeğerleri aynı olduğundan, her stokastik matris en azından bir satıra sahiptir. özvektör ile ilişkili özdeğer 1 ve tüm özdeğerlerinin en büyük mutlak değeri de 1'dir. Son olarak, Brouwer Sabit Nokta Teoremi (sonlu kümenin tüm olasılık dağılımlarının kompakt dışbükey kümesine uygulanır {1, …, n}), aynı zamanda bir durağan olasılık vektörü olan bazı sol özvektörlerin olduğunu ima eder.

Öte yandan, Perron-Frobenius teoremi ayrıca her birinin indirgenemez Stokastik matris böyle bir durağan vektöre sahiptir ve bir özdeğerin en büyük mutlak değeri her zaman 1'dir. Ancak, bu teorem bu tür matrislere doğrudan uygulanamaz çünkü indirgenemez olmaları gerekmez.

Genel olarak, bu tür birkaç vektör olabilir. Bununla birlikte, kesin olarak pozitif girdilere sahip bir matris için (veya daha genel olarak, indirgenemez periyodik olmayan bir stokastik matris için), bu vektör benzersizdir ve herhangi biri için bunu gözlemleyerek hesaplanabilir. ben aşağıdaki sınırımız var

nerede πj ... jsatır vektörünün -th öğesi π. Diğer şeylerin yanı sıra, bu, uzun vadeli bir durumda olma olasılığının j başlangıç ​​durumundan bağımsızdır ben. Bu hesaplamaların her ikisinin de aynı sabit vektörü vermesi, bir ergodik teorem, bu genellikle çok çeşitli enerji tüketen dinamik sistemler: sistem zamanla bir sabit durum.

Sezgisel olarak, bir stokastik matris bir Markov zincirini temsil eder; Stokastik matrisin bir olasılık dağılımına uygulanması, toplam kütlesini korurken, orijinal dağılımın olasılık kütlesini yeniden dağıtır. Bu işlem tekrar tekrar uygulanırsa, dağıtım Markov zinciri için sabit bir dağılıma yakınsar.[2]:55–59

Örnek: kedi ve fare

Bir zamanlayıcı ve sıfır zamanında ilk kutuda bir kedi ve beşinci kutuda bir fare olmak üzere beş bitişik kutudan oluşan bir sıra olduğunu varsayalım. Kedi ve fare rastgele atlar komşu Zamanlayıcı ilerlediğinde kutu. Örneğin. kedi ikinci kutudaysa ve fare dördüncü kutudaysa, olasılık dörtte birdir kedi ilk kutuda olacak ve zamanlayıcı ilerledikten sonra beşinci sıradaki fare. Kedi ilk kutudaysa ve fare beşinci kutudaysa, zamanlayıcı ilerledikten sonra kedinin ikinci kutuda ve farenin kutu dördüncü kutuda olma olasılığı birdir. Kedi, her ikisi de aynı kutuya düşerse fareyi yer ve bu sırada oyun sona erer. rastgele değişken K farenin oyunda kaldığı süre adımlarının sayısını verir.

Markov zinciri Bu oyunu temsil eden, pozisyonların birleşimiyle (kedi, fare) belirtilen aşağıdaki beş durumu içerir. Unutmayın ki saf bir durum sayımı 25 durum listeleyecek olsa da, çoğu imkansızdır çünkü fare asla kediden daha düşük bir indekse sahip olamaz (bu, farenin kedinin kutusunu işgal ettiği ve onu geçmek için hayatta kaldığı anlamına gelir) veya çünkü iki endeksin toplamı her zaman eşit olacaktır eşitlik. Ek olarak, farenin ölümüne yol açan 3 olası durum bir araya getirilir:

  • Durum 1: (1,3)
  • Durum 2: (1,5)
  • Durum 3: (2,4)
  • Durum 4: (3,5)
  • Durum 5: oyun bitti: (2,2), (3,3) & (4,4).

Stokastik bir matris kullanıyoruz, (aşağıda), temsil etmek için geçiş olasılıkları (bu matristeki satırlar ve sütunlar, satır olarak geçiş öncesi durum ve sütun olarak geçiş sonrası durum olmak üzere yukarıda listelenen olası durumlar tarafından indekslenir).[2]:1–8 Örneğin, durum 1 - 1. satırdan başlayarak - sistemin bu durumda kalması imkansızdır, bu nedenle ; sistem ayrıca durum 2'ye geçemez - çünkü kedi aynı kutuda kalırdı - yani ve fare için benzer bir argümanla, . Durum 3 veya 5'e geçişlere izin verilir ve bu nedenle .

Uzun vadeli ortalamalar

Başlangıç ​​durumu ne olursa olsun, kedi sonunda fareyi (olasılıkla 1) ve sabit bir durumu yakalayacaktır. π = (0,0,0,0,1) limit olarak yaklaşılır.[2]:55–59 Her bir S durumu için, Y stokastik değişkeninin uzun vadeli ortalamasını veya beklenen değerini hesaplamak içinj ve zaman tk Y'nin bir katkısı varj, k· P (S = Sj, t = tk). Sağkalım, hayatta kalan bir durum için Y = 1 ve sonlandırılmış durum için Y = 0 olan bir ikili değişken olarak ele alınabilir. Y = 0 olan eyaletler uzun vadeli ortalamaya katkı sağlamaz.

Faz tipi gösterimi

Farenin hayatta kalma işlevi. Fare en azından ilk adımda hayatta kalacaktır.

Durum 5 emici bir durum olduğundan, absorpsiyona kadar geçen zaman dağılımı ayrık faz tipi dağıtılmış. Sistemin vektör ile gösterilen durum 2'de başladığını varsayalım . Farenin öldüğü durumlar, hayatta kalma ortalamasına katkıda bulunmadığından beşinci durum göz ardı edilebilir. Başlangıç ​​durumu ve geçiş matrisi,

ve

nerede ... kimlik matrisi, ve durumların toplamı olarak hareket eden tüm olanların bir sütun matrisini temsil eder.

Her eyalet bir adım süreyle meşgul olduğundan, farenin hayatta kalması için beklenen süre yalnızca toplam hayatta kalan tüm eyaletler ve zaman içindeki adımlar üzerindeki işgal olasılığı,

Daha yüksek sipariş anları tarafından verilir

Ayrıca bakınız

Referanslar

  1. ^ Asmussen, S.R. (2003). "Markov Zincirleri". Uygulanan Olasılık ve Kuyruklar. Stokastik Modelleme ve Uygulamalı Olasılık. 51. s. 3–8. doi:10.1007/0-387-21525-5_1. ISBN  978-0-387-00211-8.
  2. ^ a b c d e f g h ben j k l Gagniuc, Paul A. (2017). Markov Zincirleri: Teoriden Uygulama ve Denemeye. ABD, NJ: John Wiley & Sons. s. 9–11. ISBN  978-1-119-38755-8.
  3. ^ a b Hayes Brian (2013). "Markov zincirindeki ilk halkalar". Amerikalı bilim adamı. 101 (2): 92–96. doi:10.1511/2013.101.92.
  4. ^ Charles Miller Grinstead; James Laurie Snell (1997). Olasılığa Giriş. American Mathematical Soc. s. 464–466. ISBN  978-0-8218-0749-1.
  5. ^ Kendall, D. G .; Batchelor, G.K .; Bingham, N. H .; Hayman, W. K .; Hyland, J.M.E .; Lorentz, G. G .; Moffatt, H. K .; Parry, W .; Razborov, A. A .; Robinson, C. A .; Whittle, P. (1990). "Andrei Nikolaevich Kolmogorov (1903–1987)". Londra Matematik Derneği Bülteni. 22 (1): 33. doi:10.1112 / blms / 22.1.31.
  6. ^ Solow, Robert (1952-01-01). "Doğrusal Modellerin Yapısı Üzerine". Ekonometrik. 20 (1): 29–46. doi:10.2307/1907805. JSTOR  1907805.
  7. ^ Sittler, R. (1956-12-01). "Ayrık Markov Süreçlerinin Sistem Analizi". Devre Teorisi Üzerine IRE İşlemleri. 3 (4): 257–266. doi:10.1109 / TCT.1956.1086324. ISSN  0096-2007.
  8. ^ Evans, Selby (1967-07-01). "Vargus 7: Markov süreçlerinden hesaplanan modeller". Davranış bilimi. 12 (4): 323–328. doi:10.1002 / bs.3830120407. ISSN  1099-1743.
  9. ^ Gingerich, P.D. (1969-01-01). "Döngüsel alüvyal çökeltilerin Markov analizi". Sedimanter Araştırmalar Dergisi. 39 (1): 330–332. Bibcode:1969JSedR..39..330G. doi:10.1306 / 74d71c4e-2b21-11d7-8648000102c1865d. ISSN  1527-1404.
  10. ^ Krumbein, W. C .; Dacey, Michael F. (1969-03-01). "Markov zincirleri ve jeolojide gömülü Markov zincirleri". Uluslararası Matematiksel Jeoloji Derneği Dergisi. 1 (1): 79–96. doi:10.1007 / BF02047072. ISSN  0020-5958.
  11. ^ Wolfe, Harry B. (1967-05-01). "Konut Yapılarının Yaşlandırılmasına Yönelik Modeller". Amerikan Plancılar Enstitüsü Dergisi. 33 (3): 192–196. doi:10.1080/01944366708977915. ISSN  0002-8991.
  12. ^ Krenk, S. (Kasım 1989). "Yorulma yükü simülasyonu ve yağmur akışı aralığı değerlendirmesi için bir Markov matrisi". Yapısal Güvenlik. 6 (2–4): 247–258. doi:10.1016/0167-4730(89)90025-8.
  13. ^ Beck, J. Robert; Pauker, Stephen G. (1983-12-01). "Tıbbi Prognozda Markov Süreci". Tıbbi Karar Verme. 3 (4): 419–458. doi:10.1177 / 0272989X8300300403. ISSN  0272-989X. PMID  6668990.
  14. ^ Gotz, Glenn A .; McCall, John J. (1983-03-01). "Kalma / Ayrılma Kararının Sıralı Analizi: ABD Hava Kuvvetleri Görevlileri". Yönetim Bilimi. 29 (3): 335–351. doi:10.1287 / mnsc.29.3.335. ISSN  0025-1909.
  15. ^ Kamusoko, Cesaret; Aniya, Masamu; Adi, Bongo; Manjoro, Munyaradzi (2009-07-01). "Zimbabwe'de tehdit altında kırsal sürdürülebilirlik - Markov-hücresel otomata modeline dayalı olarak Bindura bölgesinde gelecekteki arazi kullanımı / örtü değişikliklerinin simülasyonu". Uygulamalı Coğrafya. 29 (3): 435–447. doi:10.1016 / j.apgeog.2008.10.002.