Ing. Marko Ruman

Doktorand

Marko Ruman
Vědecké zájmy: Zpětnovazebné učení, přenos znalostí, aplikace strojového učení.

Životopis

Seznam publikací

Vzdělání

Současnost - červen 2018 Ph.D. - Státní doktorská zkouška z matematického inženýrství s vyznamenáním Fakulta jaderná a fyzikálně inženýrská ČVUT Praha, Česká republika

červen 2018 - září 2016 Ing. - Matematické inženýrství GPA: 3,97 Magna cum laude Fakulta jaderná a fyzikálně inženýrská, ČVUT, Praha, Česká republika 

srpen 2016 - září 2013 Bc. - Matematické inženýrství GPA: 3,55 Magna cum laude Fakulta jaderná a fyzikálně inženýrská, ČVUT, Praha, Česká republika 

Pracovní zkušenosti 

Současnost - červenec 2015 odborný asistent - Ústav teorie informace a automatizace AV ČR 

 • Spoluautor 7 článků o posilovaném učení, učení dynamických stochastických prostředí a modelování lidského rozhodování jako rozhodovacích procesů Markova

• Prezentace vlastního výzkumu na konferencích NIPS, ICANN a ICCAIRO

• Vyvinutá knihovna Python odhadující původní univerzálně aproximující model dynamických prostředí nazvaný podílové směsi 

• Nedávno vyvinutá nová metoda pro přenos znalostí v hlubokém posilování učení

• Podílel se jako člen týmu na dvou mezinárodních a čtyřech českých výzkumných projektech

• Působil jako člen organizačních výborů konferencí COST 2019 GAMENET, COST Dynalife 2025

Výzkumné zájmy 

• Přenos znalostí ve výuce hlubokého posilovaného bayesovského učení dynamických stochastických prostředí

• Markovské rozhodovací procesy 

• Leden 2020 duben 2018 spoluzakladatel – Optimifica 

• Vyvinutý vlastní model ML pro předpovídání zájmu zákazníků o konkrétní produkty používané 

   maloobchodními společnostmi

• Dosaženo 40% úspěšnosti při doporučení 5 produktů do nového koše pro maloobchodní společnosti s nízkofrekvenční zákaznickou základnou (v průměru 2-3 návštěvy ročně)

• Zvýšení marže maloobchodních společností o 5 % díky využití doporučení málo cílených produktů 

  vytvořených vlastním modelem ML 

• Duben 2018 říjen 2004 ML a vývoj webu jako nezávislý pracovník

• Svůj první web jsem kódoval, když mi bylo 12, od té doby jsem řešil mnoho projektů strojového učení a vývoje webu

Články v časopisech

  1. Ruman Marko, Guy Tatiana Valentine: N-to-1 Knowledge Transfer in Reinforcement Learning via Adaptive Q-Function Selection, IEEE Access 14 1 (2026), p. 45964-45976 Stáhnout Stáhnout DOI: 10.1109/ACCESS.2026.3676711 [2026]
  2. Ruman Marko, Guy Tatiana Valentine: Knowledge Transfer in Deep Reinforcement Learning via an RL-Specific GAN-Based Correspondence Function, IEEE Access 12 1 (2024), p. 177204-177218 Stáhnout Stáhnout DOI: 10.1109/ACCESS.2024.3497589 [2024]
  3. Kárný Miroslav, Ruman Marko: Mixture ratio modeling of dynamic systems, International Journal of Adaptive Control and Signal Processing 35 5 (2021), p. 660-675 Stáhnout Stáhnout DOI: 10.1002/acs.3219 [2021]

Ostatní publikace

  1. Guy Tatiana Valentine, Kárný Miroslav, Gaj Aleksej, Ruman Marko, Ružejnikov Jurij, Pelikán M.: 2025 DYNALIFE Conference on QUANTUM INFORMATION AND DECISION MAKING IN LIFE SCIENCES PROGRAMME and ABSTRACTS, Czech University of Life Sciences Prague (Prague, 2025) Stáhnout DOI: https://doi.org/10.5281/zenodo.15854639 [2025]
  2. Ruman Marko, Kárný Miroslav: Dynamic Mixture Ratio Model, Proceedings of the 2019 International Conference on Control, Artificial Intelligence, Robotics & Optimization (ICCAIRO), p. 92-99, The Institute of Electrical and Electronics Engineers, Inc. (2020) Stáhnout DOI: 10.1109/ICCAIRO47923.2019.00023 [2020]
  3. Guy Tatiana Valentine, Ruman Marko, Hůla František, Kárný Miroslav: Experimental Performance of Deliberation-Aware Responder in Multi-Proposer Ultimatum Game, Proceedings of the NIPS 2016 Workshop on Imperfect Decision Makers, p. 51-60, Eds: Guy Tatiana Valentine, Kárný Miroslav, Rios-Insua D., Wolpert D. H. Stáhnout [2017]
  4. Ruman Marko, Hůla František, Kárný Miroslav, Guy Tatiana Valentine: Deliberation-aware Responder in Multi-Proposer Ultimatum Game, Artificial Neural Networks and Machine Learning – ICANN 2016, p. 230-237 Stáhnout DOI: 10.1007/978-3-319-44778-0_27 [2016]
  5. Hůla František, Ruman Marko, Kárný Miroslav: Adaptive Proposer for Ultimatum Game, Artificial Neural Networks and Machine Learning – ICANN 2016, p. 330-338 Stáhnout DOI: 10.1007/978-3-319-44778-0_39 [2016]