MDP

MDP : Markov Decision Process -> processus de decision markovien

formule le probleme de trouver de facon sequentielle la meilleure decision a prendre en fonction de l'etat actuel du systeme et les actions possibles.

Le MDP requiert un environnement completement observable: le systeme connait l'etat ou il est parfaitement!

Il y a une incertitude sur l'effet des actions.

Il est compose de:

- etat initial

- ensemble de transitions entre les etats. la valeur des transitions depend seulement de l'etat courant, pas de l'historique!

- une fonction recompense qui depend d'un etat.

Le but est de trouver quelles actions faire en fonction de l'etat courant, des actions possibles, des probabilites de resultats possibles et des gains possibles.

La decision de choisir l'action a faire en fonction de l'etat actuel est appele la politique.

C'est plutot adapte pour les systemes et environnements stables, c.a.d qui ne changent pas au cours du temps ou des interactions..

voir l'article Wikipedia.

probleme LaTeX

Commencons par l'installation de LaTex:
     sudo apt-get install texlive-full

Un petit message pour repertorier tous les petits problemes fournis par LaTeX durant l'ecriture d'articles de recherche ou redaction de these (en utilisant ce template)..

1) message d'erreur:  
... can be used only in preamble.
solution: mettre la commande designee avant l'instruction \begin{document}

2) message d'erreur:  
... .File 'nomencl.sty' not found
solution: installer le package texlive-latex-extra -> sudo apt-get install texlive-latex-extra
( ..si texlive-full n'avait pas ete installe avant..)

probleme Kile (Ubuntu 8.04 H)

probleme:
- lancement de kile 2
- une fenetre popup affichant une erreur en rapport avec dcopserver, le rectangle kile 2, puis un autre popup d'erreur "Malformed URL"
- puis l'application se ferme toute seule

solution trouvees qui n'ont pas marche pour moi:
- le changement des permissions du repertoire /home/$USER/.kde -> chown -R $USER:$USER /home/$USER/.kde
- reinstaller kile

Ce que j'ai fais:
- lancer dcopserver manuellement -> retire la premiere popup d'erreur mais pas la deuxieme!
- virer les fichiers de configurations relatifs a kile dans .kde -> une autre erreur est apparue quand on lance depuis le terminal "kile: ERROR: : couldn't create slave : Cannot talk to klauncher"

Ce qui a marche (apres avoir fait les 2 actions au dessus.. mais ca marche peut etre tout seul)
- lancer dans le terminal: dcopserver_shutdown
- puis: kdeinit

.. et kile redemarre! ..avec des messages d'erreur dans le terminal mais ca a l'air de marcher..