Ηλεκτρονική Διάθεση Μαθήματος
Περιεχόμενο Μαθήματος
Ορισμός της στοχαστικής διαδικασίας, Ταξινόμηση των στοχαστικών διαδικασιών. Μαρκοβιανές αλυσίδες. Θεώρημα ύπαρξης. Οι πιθανότητες μετάβασης σε ν-βήματα. Στοχαστικές ιδιότητες των καταστάσεων : η επικοινωνία, η περιοδικότητα, η επαναληπτικότητα. Η ισχυρή ιδιότητα του Markov. Ταξινόμηση των καταστάσεων των πεπερασμένων Μαρκοβιανών αλυσίδων. Μαρκοβιανές αλυσίδες αριθμήσιμου χώρου καταστάσεων. Κλαδωτές αλυσίδες. Μαρκοβιανές αλυσίδες συνεχούς παραμέτρου. Παραδείγματα. Εφαρμογές.