Informacja

Drogi użytkowniku, aplikacja do prawidłowego działania wymaga obsługi JavaScript. Proszę włącz obsługę JavaScript w Twojej przeglądarce.

Wyszukujesz frazę "proces Markowa" wg kryterium: Temat


Tytuł:
Metoda diagnozowania przydatności obiektów technicznych do użytkowania w systemie eksploatacji
Usefulness diagnosis method of the technical objects to be used in the maintenenace system
Autorzy:
Woropay, M.
Landowski, B.
Perczyński, D.
Powiązania:
https://bibliotekanauki.pl/articles/328624.pdf
Data publikacji:
2004
Wydawca:
Polska Akademia Nauk. Polskie Towarzystwo Diagnostyki Technicznej PAN
Tematy:
diagnozowanie
jednorodny proces Markowa
proces eksploatacji
diagnosis
homogenous Markov process
maintenance process
Opis:
W artykule przedstawiono metodę diagnozowania przydatności obiektów technicznych do realizacji zadań przyjętych przez podsystem sterujący badanego systemu eksploatacji. Obiektem badań, na którym zilustrowano rozważania przedstawione w niniejszej pracy, jest system eksploatacji autobusów komunikacji miejskiej w wybranej aglomeracji miejskiej. W celu rozwiązania omawianego problemu przyjęto założenie, że matematycznym modelem procesu eksploatacji autobusów jest jednorodny proces Markowa. Jako kryterium wyboru (zakupu) określonej marki autobusu do eksploatacji przyjęto wskaźnik wykorzystania potencjału użytkowego. W artykule nie rozważa się aspektów ekonomicznych związanych z realizacją zakupu obiektu technicznego.
This paper presents the usefulness diagnosis method of the technical objects to realise the tasks received by the controlling subsystem. The investigation object being the basis to illustrate the considerations presented herein, is a municipal-transport bus maintenance system in a selected urban agglomeration. In order to solve the discussed problem it has been assumed that the mathematical model of the bus maintenance process is homogenous Markov process. As a criterion to select (purchase) a specific bus type to be maintained, the usefulness potential usage rate. The paper does not cover investigation of the economic aspects related to the purchase of a specific bus type.
Źródło:
Diagnostyka; 2004, 32; 95-100
1641-6414
2449-5220
Pojawia się w:
Diagnostyka
Dostawca treści:
Biblioteka Nauki
Artykuł
Tytuł:
Zastosowanie teorii procesów Markowa do modelowania procesów eksploatacji układu izolacyjnego urządzeń elektroenergetycznych
Application of Markov theory for modeling of exploitation process of insulated system of electrical power devices
Autorzy:
Moskwa, S.
Powiązania:
https://bibliotekanauki.pl/articles/268912.pdf
Data publikacji:
2008
Wydawca:
Politechnika Gdańska. Wydział Elektrotechniki i Automatyki
Tematy:
eksploatacja
modelowanie
proces Markowa
układ izolacyjny
exploitation
modeling
Markov process
Opis:
Urządzenia elektroenergetyczne są narażone w trakcie eksploatacji na działanie różnych czynników o charakterze losowym. Proces ich eksploatacji obejmujący tryb pracy, przestoju, obsługi oraz naprawy, można modelować jako proces losowy. Dzięki wykorzystaniu możliwości obliczeniowych komputerów można prowadzić symulacje procesów z wieloma zmiennymi wykorzystujących ich modele matematyczne. W artykule przedstawiono model matematyczny procesu eksploatacji urządzeń elektroenergetycznych, wykorzystujący teorię procesów losowych Markowa. Wyniki symulacji komputerowych opartych na prezentowanym modelu pozwalają na optymalizację czasu obsługi urządzeń oraz nakładów z tym związanych.
The paper presents the possibility of exploitation procedure modelling based on statistical exploitation data and probabilistic approach. With regard to the random character of states changes and damage of electrical power devices, model of these processes based on Markov random processes theory have been proposed. Particularly Markov random processes are introduced and discussed and some theoretical example is elaborated as a presentation.
Źródło:
Zeszyty Naukowe Wydziału Elektrotechniki i Automatyki Politechniki Gdańskiej; 2008, 25; 95-98
1425-5766
2353-1290
Pojawia się w:
Zeszyty Naukowe Wydziału Elektrotechniki i Automatyki Politechniki Gdańskiej
Dostawca treści:
Biblioteka Nauki
Artykuł
Tytuł:
A Model the Process of Overcoming Multizone Protection Stationary Object by an Intruder
Model procesu pokonywania wielostrefowej ochrony obiektu stacjonarnego przez intruza
Autorzy:
Konopacki, G.
Powiązania:
https://bibliotekanauki.pl/articles/305949.pdf
Data publikacji:
2012
Wydawca:
Wojskowa Akademia Techniczna im. Jarosława Dąbrowskiego
Tematy:
ochrona obiektów
modelowanie
proces Markowa
protection of objects
modeling
process of Markov
Opis:
The article examines a model of the process to overcome multi-zone protection for a stationary object (buildings, together with the adjacent area) by a determined passive intruder, which means the intruder is not affecting the active protection system (for both equipment and people) and not intending to stop the action before achieving a protected object. As a tool for describing the actions the intruder was proposed a process of Markov class CD, whose character is presented in the form of analytical equations Chapman - Kolmogorov. The article presents a solution to this system and discusses its practical usefulness.
W artykule rozpatruje się model procesu pokonywania wielostrefowej ochrony obiektu stacjonarnego (zabudowania wraz z przyległym terenem) przez pasywnego intruza zdeterminowanego, co oznacza intruza nie oddziałującego czynnie na system ochrony (dotyczy zarówno urządzeń, jak i osób) oraz nie zamierzającego przerwać działań przed ociągnięciem celu, tj. obiektu chronionego. Jako narzędzie opisu procesu działań intruza został zaproponowany proces Markowa klasy CD, którego postać analityczną przedstawiono w postaci układu równań Chapmana - Kołmogorowa. W artykule przedstawiono rozwiązanie tego układu i omówiono jego przydatność praktyczną.
Źródło:
Biuletyn Instytutu Systemów Informatycznych; 2012, 9; 9-14
1508-4183
Pojawia się w:
Biuletyn Instytutu Systemów Informatycznych
Dostawca treści:
Biblioteka Nauki
Artykuł
Tytuł:
The use of the start-up process analysis in the estimation of the technical state of diesel engine
Wykorzystanie analizy procesu rozruchu w ocenie stanu technicznego silnika o zapłonie samoczynnym
Autorzy:
Droździel, P.
Krzywonos, L.
Powiązania:
https://bibliotekanauki.pl/articles/329064.pdf
Data publikacji:
2007
Wydawca:
Polska Akademia Nauk. Polskie Towarzystwo Diagnostyki Technicznej PAN
Tematy:
rozruch silnika
zapłon samoczynny
proces Markowa
diesel engine start-up
Markov process
Opis:
This article presents the propositions and the assumptions of the estimation method of the diesel engine technical state. The proposed evaluation method uses the analysis of the diesel engine start-up stages and is based on the calculation of the probability value of the successful start-up modeling as the homogeneous discrete Markov process with continuous time.
Niniejszy artykuł przedstawia propozycję i założenia metody oceny stanu technicznego samochodowego silnika o zapłonie samoczynnym. Proponowana metoda oceny wykorzystuje analizę etapów rozruchu tego silnika oraz opiera się na określeniu wartości prawdopodobieństwa udanego rozruchu modelowanego jako jednorodny, dyskretny proces Markowa.
Źródło:
Diagnostyka; 2007, 3(43); 11-14
1641-6414
2449-5220
Pojawia się w:
Diagnostyka
Dostawca treści:
Biblioteka Nauki
Artykuł
Tytuł:
Zastosowanie zasady Bellmana do optymalizacji dynamicznej procesu - przykład
Application of Bellmans principle for dynamic optimization of a process - example
Autorzy:
Szparaga, Ł.
Tarnowski, W.
Bartosik, P.
Powiązania:
https://bibliotekanauki.pl/articles/155147.pdf
Data publikacji:
2010
Wydawca:
Stowarzyszenie Inżynierów i Techników Mechaników Polskich
Tematy:
proces Markowa
zasada optymalności
optymalizacja wieloetapowa
Markov process
optimality principle
multi level optimization
Opis:
Celem pracy jest omówienie i porównanie metody analitycznej oraz numerycznej rozwiązywania zagadnień optymalizacji wieloetapowych procesów decyzyjnych Markowa. Procedury obliczeniowe zilustrowane są na przykładzie zadania optymalizacji izotermicznej kaskady reaktorów. Opisana została również procedura numeryczna umożliwiająca optymalizację procesu opartą na zasadzie optymalności Bellmana. Wskazane są również wady i zalety każdej z metod jak i zakres ich stosowalności.
The aim of this work is to present and to compare the analytical and numerical method of optimization multilevel Markov processes. For the sake of the integrity of the work an essence of optimality principle for Markov processes and short derivation of Bellman's equation is given. Calculation procedures are illustrated on an example of isotherm cascade of reactor optimization. Analytical solution of the problem was given by S. Sieniutycz and Z. Szwast [5]. The main goal of this work is to present a simple numerical optimization procedure based on Bellman's principle and to compare the numerical results with an analytical solution from the literature [5]. Tables 1-3 shows respectively a comparison of values of state and decision variables and values of optimal functions for the 3-level process obtained in the numerical and in the analytical way. Figure 2 shows an evolution of the state variable for different initial states and known fixed final state. Obtained numerical results comply with analytical ones. The sim-plicity of the presented method is an undeniable advantage and gives a great opportunity of application.
Źródło:
Pomiary Automatyka Kontrola; 2010, R. 56, nr 6, 6; 610-612
0032-4140
Pojawia się w:
Pomiary Automatyka Kontrola
Dostawca treści:
Biblioteka Nauki
Artykuł
Tytuł:
Jakość transmisji usług w systemie GPRS/GSM
Quality of service transmission in GPRS/GSM system
Autorzy:
Skrok, W.
Perzyński, T.
Powiązania:
https://bibliotekanauki.pl/articles/313482.pdf
Data publikacji:
2017
Wydawca:
Instytut Naukowo-Wydawniczy "SPATIUM"
Tematy:
jakość usług
transmisja danych
GPRS
GSM
proces Markowa
service quality
data transmission
Markov process
Opis:
W artykule omówiony został problem związany z jakością usług w systemie GPRS/GSM. Omówiono podstawowe zagadnienia związane z transmisją. Przedstawiono również przykład modelowania systemów transmisji na bazie procesów Markowa.
The article discusses the problem of quality of service in GPRS/GSM system. The basic issues related to transmission are discussed. In the paper is presented an example of modeling of transmission systems on the basis of Markov processes.
Źródło:
Autobusy : technika, eksploatacja, systemy transportowe; 2017, 18, 12; 1786-1789, CD
1509-5878
2450-7725
Pojawia się w:
Autobusy : technika, eksploatacja, systemy transportowe
Dostawca treści:
Biblioteka Nauki
Artykuł
Tytuł:
Application of Markov decision process as a mathematical model of operation and maintenance process
Zastosowanie decyzyjnego procesu Markowa jako matematycznego modelu procesu eksploatacji
Autorzy:
Landowski, B.
Powiązania:
https://bibliotekanauki.pl/articles/359385.pdf
Data publikacji:
2010
Wydawca:
Akademia Morska w Szczecinie. Wydawnictwo AMSz
Tematy:
komunikacja miejska
proces eksploatacji
decyzyjny proces Markowa
urban transport system
operation and maintenance process
Markov decision process
Opis:
This paper presents an example of applying Markov decision process to model and analyse the bus operation and maintenance process within an urban transport system and to forecast the influence of the operation and maintenance strategies realised for the technical objects on the transport system behaviour. Setting the values of the indices describing the process under the analysis is performed on the basis of a computerised simulation of the Markov decision process, being a mathematical model of the technical objects operation and maintenance process. In order to simulate the operation and maintenance process (Markov decision process) and to evaluate the influence of the decisions being made on the course and effectiveness of the process being realised within the study object a simulation algorithm has been elaborated and a computer calculation program has been written. The model presented herein has been created in such a way to assure that it shall be possible to use it in as extensive as possible class of the problems regarding the operation and maintenance of the technical objects.
W artykule przedstawiono przykład zastosowania decyzyjnego procesu Markowa do modelowania i analizy procesu eksploatacji autobusów komunikacji miejskiej oraz prognozowania wpływu realizowanych strategii eksploatacji obiektów technicznych na zachowanie się systemu transportowego. Wyznaczanie wartości wskaźników charakteryzujących analizowany proces realizowane jest na podstawie komputerowej symulacji decyzyjnego procesu Markowa, będącego matematycznym modelem procesu eksploatacji obiektów technicznych. W celu symulacji procesu eksploatacji (decyzyjnego procesu Markowa) i oceny wpływu podejmowanych decyzji na przebieg i efektywność procesu realizowanego w obiekcie badań opracowano algorytm symulacji i napisano komputerowy program obliczeniowy. Przedstawiony w pracy model został skonstruowany w taki sposób, by zapewnić możliwość jego wykorzystania w jak najszerszej klasie problemów związanych z eksploatacją obiektów technicznych.
Źródło:
Zeszyty Naukowe Akademii Morskiej w Szczecinie; 2010, 24 (96); 12-16
1733-8670
2392-0378
Pojawia się w:
Zeszyty Naukowe Akademii Morskiej w Szczecinie
Dostawca treści:
Biblioteka Nauki
Artykuł
Tytuł:
Telematics as a method for improvement the transport safety
Autorzy:
Lewiński, A.
Perzyński, T.
Powiązania:
https://bibliotekanauki.pl/articles/393405.pdf
Data publikacji:
2019
Wydawca:
Polskie Stowarzyszenie Telematyki Transportu
Tematy:
telematics system
transport safety modelling
Markov process
system telematyczny
modelowanie bezpieczeństwa transportu
proces Markowa
Opis:
The transport systems are now equipped with more telematics devices for improvement the functionality and safety purposes. One of the methods of evaluating telematics systems is modeling. The paper presents the basic model of typical land transport means (vehicle with anti-collision system, railway system) related to standard reliability model including non-safety, critical state. This model based on Markov processes theory may be more detailed corresponding to “telematics” control state connected with system reaction for driving improper action or device failure and activation the emergency control procedure.
Źródło:
Archives of Transport System Telematics; 2019, 12, 3; 3-7
1899-8208
Pojawia się w:
Archives of Transport System Telematics
Dostawca treści:
Biblioteka Nauki
Artykuł
Tytuł:
Metoda wyznaczania gotowości systemu transportu miejskiego z uwzględnieniem skuteczności wykonywanych napraw
The method of shaping the availability designed for the transport system on the basis of the effectiveness of performed repairs
Autorzy:
Woropay, M.
Migawa, M.
Powiązania:
https://bibliotekanauki.pl/articles/327986.pdf
Data publikacji:
2001
Wydawca:
Polska Akademia Nauk. Polskie Towarzystwo Diagnostyki Technicznej PAN
Tematy:
system transportowy
gotowość
proces Markowa
diagnozowanie
transport miejski
naprawa
transport system
urban bus
repair
effectiveness
diagnostic
Opis:
W pracy przedstawiono metodę wyznaczania gotowości systemu transportowego z wykorzystaniem oceny skuteczności realizowanych napraw na stanowiskach podsystemu utrzymania ruchu. W wyniku identyfikacji procesu eksploatacji realizowanego w rzeczywistym systemie transportu miejskiego został zbudowany zdarzeniowy model tego procesu. Na tej podstawie wyznaczono prawdopodobieństwa graniczne pi* przebywania pojedynczego autobusu w poszczególnych stanach procesu eksploatacji zakładając, że modelem procesu eksploatacji obiektów technicznych (autobusów miejskich) jest jednorodny proces Markowa X(t).
The paper presents the method of shaping the availability of the transport system on the basis of evaluation of the effectiveness of repairs, performed on special stations of the road traffic subsystem. The occurence model was created as the result of identification of the maintenance process, realized in the real urban transport system. Furthermore, all border probabilities pi* of finding the single bus in individual maitenance conditions have been determined, with the general assumption, that the homogeneous Markov's process X(t) is the model of the maintenance process of mentioned technical objects (urban buses).
Źródło:
Diagnostyka; 2001, 25; 30-36
1641-6414
2449-5220
Pojawia się w:
Diagnostyka
Dostawca treści:
Biblioteka Nauki
Artykuł
Tytuł:
Mieszanie układu ziarnistego jako proces Markowa
Mixing of granular system as Markov’s process
Autorzy:
Knapik, A. T.
Powiązania:
https://bibliotekanauki.pl/articles/288612.pdf
Data publikacji:
2005
Wydawca:
Polskie Towarzystwo Inżynierii Rolniczej
Tematy:
jednorodny proces Markowa
mieszalnik bębnowy
układ ziarnisty
mieszanie
Markov's homogenous process
drum mixer
transition rate
granular system
Opis:
W pracy przedstawiono wyniki badań doświadczalnych i modelowych procesu mieszania niejednorodnego układu ziarnistego w mieszalniku bębnowym. Jako modelu użyto jednorodny proces Markowa, w którym intensywności przejścia wyznaczono doświadczalnie. Stwierdzono, że w omawianym przypadku zaproponowany model matematyczny stanowi dobre przybliżenie danych eksperymentalnych.
The work presents experimental and model results of investigations on the process of mixing the heterogeneous granular system in a drum mixer. Markov’s homogenous process was used as a model, where the transition rate was determined experimentally. It was found that the assumed mathematical model in the case being discussed was in good agreement with experimental data.
Źródło:
Inżynieria Rolnicza; 2005, R. 9, nr 9, 9; 175-180
1429-7264
Pojawia się w:
Inżynieria Rolnicza
Dostawca treści:
Biblioteka Nauki
Artykuł
Tytuł:
Discrete-time Markovian jump linear systems
Autorzy:
Szajowski, K.
Koning, W.
Powiązania:
https://bibliotekanauki.pl/articles/205971.pdf
Data publikacji:
1998
Wydawca:
Polska Akademia Nauk. Instytut Badań Systemowych PAN
Tematy:
proces Markowa
sterowanie optymalne
układ optymalny liniowy
delayed observation
detectability
jump linear systems
Markov chain
optimal control
stabilizability
Opis:
The paper considers a problem of optimal control of a linear system with the parameters dependent on the states of a Markov chain. The cost criterion is quadratic in the controls and states of the system. The criterion parameters also depend on the states of the Markov chain. Two models of observation of the Markov chain are adopted - delay for one step and no delay. It is shown that under appopriate mean square detectability and stabilizability conditions the infinite horizon optimal control problem for the general case of Markovian jump linear quadratic systems has a unigue mean square stabilizing solution. Necessary and sufficient conditions are given to determine if a system is mean square stabilizable.
Źródło:
Control and Cybernetics; 1998, 27, 1; 63-80
0324-8569
Pojawia się w:
Control and Cybernetics
Dostawca treści:
Biblioteka Nauki
Artykuł
Tytuł:
Fitting traffic traces with discrete canonical phase type distributions and Markov arrival processes
Autorzy:
Mészáros, A.
Papp, J.
Telek, M.
Powiązania:
https://bibliotekanauki.pl/articles/329820.pdf
Data publikacji:
2014
Wydawca:
Uniwersytet Zielonogórski. Oficyna Wydawnicza
Tematy:
fitting traffic traces
discrete phase type distribution
discrete Markov arrival process
canonical representation
rozkład fazowy
proces Markowa
przedstawienie kanoniczne
Opis:
Recent developments of matrix analytic methods make phase type distributions (PHs) and Markov Arrival Processes (MAPs) promising stochastic model candidates for capturing traffic trace behaviour and for efficient usage in queueing analysis. After introducing basics of these sets of stochastic models, the paper discusses the following subjects in detail: (i) PHs and MAPs have different representations. For efficient use of these models, sparse (defined by a minimal number of parameters) and unique representations of discrete time PHs and MAPs are needed, which are commonly referred to as canonical representations. The paper presents new results on the canonical representation of discrete PHs and MAPs. (ii) The canonical representation allows a direct mapping between experimental moments and the stochastic models, referred to as moment matching. Explicit procedures are provided for this mapping. (iii) Moment matching is not always the best way to model the behavior of traffic traces. Model fitting based on appropriately chosen distance measures might result in better performing stochastic models. We also demonstrate the efficiency of fitting procedures with experimental results.
Źródło:
International Journal of Applied Mathematics and Computer Science; 2014, 24, 3; 453-470
1641-876X
2083-8492
Pojawia się w:
International Journal of Applied Mathematics and Computer Science
Dostawca treści:
Biblioteka Nauki
Artykuł
Tytuł:
The method for selection of technical objects to be used in an operation system
Metoda doboru obiektów technicznych do użytkowania w systemie eksploatacji
Autorzy:
Woropay, M.
Perczyński, D.
Powiązania:
https://bibliotekanauki.pl/articles/359614.pdf
Data publikacji:
2010
Wydawca:
Akademia Morska w Szczecinie. Wydawnictwo AMSz
Tematy:
metoda doboru
transport miejski
jednorodny proces Markowa
proces eksploatacji
method for selection
urban transport system
Markov process
operation and maintenance process
Opis:
The article presents a method for choosing technical objects to be used for execution of tasks by a control subsystem. The research object used to illustrate the discussion presented in the paper is a municipal bus transport network, in a given agglomeration. In order to solve the discussed problem the homogenous Markov's process has been accepted to be a mathematical model of the bus operation process. The ratio of the object's mean probability of being in its serviceability state to a time unit, has been accepted as a criterion for choice (purchase) of a given make of the bus.
W artykule przedstawiono metodę doboru obiektów technicznych do realizacji zadań przyjętych przez podsystem sterujący. Obiektem badań, na którym zilustrowano rozważania przedstawione w niniejszej pracy, jest system eksploatacji autobusów komunikacji miejskiej w wybranej aglomeracji. W celu rozwiązania omawianego problemu przyjęto założenie, że matematycznym modelem procesu eksploatacji autobusów jest jednorodny proces Markowa. Jako kryterium wyboru (zakupu) określonej marki autobusu do eksploatacji przyjęto wskaźnik prawdopodobieństwa przebywania obiektu technicznego w stanie zdatności na jednostkę czasu.
Źródło:
Zeszyty Naukowe Akademii Morskiej w Szczecinie; 2010, 24 (96); 154-157
1733-8670
2392-0378
Pojawia się w:
Zeszyty Naukowe Akademii Morskiej w Szczecinie
Dostawca treści:
Biblioteka Nauki
Artykuł
Tytuł:
Probabilistyczne aspekty zużycia skojarzeń ciernych układów korbowo-tłokowych na przykładzie okrętowych silników spalinowych dwusuwowych napędu głównego
Autorzy:
Girtler, Jerzy
Powiązania:
https://bibliotekanauki.pl/articles/2073537.pdf
Data publikacji:
2019
Wydawca:
Politechnika Gdańska. Wydział Inżynierii Mechanicznej i Okrętownictwa
Tematy:
prawdopodobieństwo
skojarzenie cierne
układ korbowo-tłokowy
proces semi-Markowa
okrętowy silnik spalinowy
zużycie
Opis:
W artykule przestawiono propozycję rozpatrywania zarówno obciążenia jak i zużywania ślizgowych skojarzeń ciernych (łożysk głównych i korbowych) układów korbowo-tłokowych silników spalinowych, zwłaszcza głównych, a także skojarzeń „tłok-tuleja” tych silników, jako procesów stochastycznych. Propozycję tę uzasadniono tym, że deterministyczne podejście do badania zarówno obciążenia jak i zużycia wspomnianych skojarzeń uniemożliwia oszacowanie prawdopodobieństw pojawianie się wartości zużycia dopuszczalnego i niedopuszczalnego. Z tego powodu nie można zastosować takich systemów diagnozujących (SDG), które umożliwiłyby podejmowanie decyzji ostrożnych. To zaś prowadzi do uszkodzeń tych skojarzeń, np. takich, jakie przedstawiono w artykule. Zaproponowano hipotezy wyjaśniające specyfikę obciążenia i zużycia ślizgowych skojarzeń układów korbowo-tłokowych silników. W podsumowaniu przedstawiono te kwestie, które (zdaniem autora) mają najistotniejsze znaczenie w badaniach rzeczywistych procesów obciążeń, zużycia i uszkodzeń skojarzeń ciernych układów korbowo-tłokowych silników głównych.
Źródło:
Journal of Polish CIMEEAC; 2019, 14, 1; 79--96
1231-3998
Pojawia się w:
Journal of Polish CIMEEAC
Dostawca treści:
Biblioteka Nauki
Artykuł
Tytuł:
Bottom-up learning of hierarchical models in a class of deterministic POMDP environments
Autorzy:
Itoh, H.
Fukumoto, H.
Wakuya, H.
Furukawa, T.
Powiązania:
https://bibliotekanauki.pl/articles/330566.pdf
Data publikacji:
2015
Wydawca:
Uniwersytet Zielonogórski. Oficyna Wydawnicza
Tematy:
partially observable system
Markov decision process
hierarchical model
bottom up learning
układ częściowo obserwowalny
decyzyjny proces Markowa
model hierarchiczny
Opis:
The theory of partially observable Markov decision processes (POMDPs) is a useful tool for developing various intelligent agents, and learning hierarchical POMDP models is one of the key approaches for building such agents when the environments of the agents are unknown and large. To learn hierarchical models, bottom-up learning methods in which learning takes place in a layer-by-layer manner from the lowest to the highest layer are already extensively used in some research fields such as hidden Markov models and neural networks. However, little attention has been paid to bottom-up approaches for learning POMDP models. In this paper, we present a novel bottom-up learning algorithm for hierarchical POMDP models and prove that, by using this algorithm, a perfect model (i.e., a model that can perfectly predict future observations) can be learned at least in a class of deterministic POMDP environments.
Źródło:
International Journal of Applied Mathematics and Computer Science; 2015, 25, 3; 597-615
1641-876X
2083-8492
Pojawia się w:
International Journal of Applied Mathematics and Computer Science
Dostawca treści:
Biblioteka Nauki
Artykuł

Ta witryna wykorzystuje pliki cookies do przechowywania informacji na Twoim komputerze. Pliki cookies stosujemy w celu świadczenia usług na najwyższym poziomie, w tym w sposób dostosowany do indywidualnych potrzeb. Korzystanie z witryny bez zmiany ustawień dotyczących cookies oznacza, że będą one zamieszczane w Twoim komputerze. W każdym momencie możesz dokonać zmiany ustawień dotyczących cookies