Datengetriebene und aufgabenorientierte Wahl des Regularisierungsraumes
Data-driven and problem-oriented choice of the regularization space
Wissenschaftsdisziplinen
Mathematik (100%)
Keywords
-
Meta-learning,
Component-wise penalization,
Regularization in adaptively chosen spaces,
A priori and a posteriori regularization,
Multi-penalty regularization,
Geomathematics
Regularisierung ist eine Methode für eine approximative Rekonstruktion einer unbekannten funktionale Abhängigkeit von vorgegebenen verrauschten Daten. Diese Methode basiert sich oft auf einen Kompromiss zwischen dem Versuch, die gegebenen Daten bestmöglich anzupassen, und dem Wunsch, die Komplexität eines Datenfitters zu vereinfachen. Ausgehend von der Pionierarbeiten von Tikhonov und Wahba, Kimeldorf in der Mitte der sechziger Jahre ist der Hauptteil der Regularisierungstheorie herum das Thema der Wahl des Regularisierungsparameters, der nur eine einzige Zahl ist, gebaut worden. Gleichzeitig führt der neueste Trend der Regularisieung zu einer neuen Forschungslinie, die sich mit der adaptiven Wahl des Regularisierungsraumes beschäftigt und die bis jetzt viele ungelöste Fragen besitzt. Das Gesamtziel des aktuellen Projekts besteht darin, die umfassende theoretische Analyse und die ausführlichen numerischen Untersuchungen dieser Forschungslinie durchzuführen. Insbesondere werden zwei Forschungsrichtungen erkundet werden. Einer von denen führt zu der multi-penalty Regularisierung (MPR), in der nur die ersten theoretisch begründeten Ergebnisse der adaptiven Wahl von mehreren Regularisierungsparameter sind erhielt worden. Da die Idee der Verwendung von MPR attraktiv ist, denn die erstellt die Möglichkeit der Kombination mehreren Approximationsaufgaben wie Prognose bei der Interpolation oder Extrapolation, behauptet man, dass die Regularisierung in einem adaptiv gewählten Raum zu einer multi-penalty Regularisierung mit einer komponentenweisen Penalisation unter einigen Annahmen reduziert werden kann. Eine andere Forschungslinie taucht auf der Grenze zwischen Regularisierungstheorie und Meta-Learning auf. Grob gesprochen, Meta-Learning basierte Regularisierung bedeutet, dass die Instanzen des Regularisierungsverfahrens mit Erfahrung bzgl. ähnlichen Methoden in anderen Anwendungen gewählt sind. Solche Rahmen decken einige neulich vorgeschlagene Methoden, in denen nur eine einzige Instanz von Erfahrung extrahiert ist. Trotzdem scheint es erfolgversprechend zu sein, die Erfahrung für die Regelfestellung für die Wahl der Regularisierungsinstanzen in Abhängigkeit von Eigenschaften (Meta-Features) einer bestimmten Anwendung zu benutzen. Es ergibt sich, dass solche Methode in der Regularisierungstheorie bis jetzt nicht systematisch studiert wurde, und das aktuelle Projekt strebt Licht auf dieses erfolgversprechend, aber momentan noch nicht ausgeforschte Gebiet, zu werfen. Beide von den obengenannten Projektziele können künftig einen Mainstream in der Regularisierungstheorie aufbauen und können für einige praktische Anwendungen, wie z.B. Geomathematik und Diabetologische Technologie, eine fundamentale Rolle spielen.
Die Regularisierung schlecht-gestellter Probleme basiert auf einem Kompromiss zwischen der Anpassung der Lösung an die gegebenen Daten und dem Wunsch, die Komplexität des Lösers, der typischer Weise in einem zuvor bestimmten Raum operiert, gering zu halten. Die ist im Gegensatz zum Projekt P25424-N26, in dem die Möglichkeit studiert wurde, wie durch eine adaptive Anpassung des Raumes in dem die Datenanpassung stattfindet, die Leistung des Lösers verbessert werden kann.Die hauptsächlichen Bemühungen richteten auf zwei Arten, den Regularisierungsraum zu bestimmen: Regularisierung durch multiple Strafterme und Aggregierung verschiedener Löser. Durch das Projektteam wurden fundierte Ergebnisse zu beiden Ansätzen erzielt. Deren Sinnhaftigkeit wurde demonstriert anhand von Beispielen aus der Geomathematik, dem maschinellen Lernen, und der Diabetes-Technologie.Eines der besonderen Ergebnisse ist ein neuer Regularisierungsansatz, der darin besteht, verschiedene approximative Lösungen mittels der sogenannten 'linear functional strategy' zu aggregieren. Dieser Zugang wurde zur Vorhersage von Unterzuckerung (Hypoglycemia) von Diabetespatienten benutzt; verschiedene bekannte Vorhersage-Mechanismen wurden aggregiert mittels des oben beschriebenen Ansatzes. Der resultierende Algorithmus wurde in einer eigens entwickelten Applikation für Smartphones implementiert. Er erweist sich als ein zuverlässiges Mittel der Vorhersage, und er hat das Potential zum Einsatz in der täglichen Nutzung durch die Patienten zur Selbstkontrolle des Blutzuckergehalts. Die Forschungen wurden in Zusammenarbeit mit klinischen Partnern und Kollegen das Projekts AMMODIT, gefördert im Rahmen des EU Horizon 2020 Programms, durchgeführt.
Research Output
- 244 Zitationen
- 25 Publikationen
-
2015
Titel Meta-Learning Based Blood Glucose Predictor for Diabetic Smartphone App DOI 10.1007/978-3-319-25913-0_6 Typ Book Chapter Autor Naumova V Verlag Springer Nature Seiten 93-105 -
2015
Titel A linear functional strategy for regularized ranking DOI 10.1016/j.neunet.2015.08.012 Typ Journal Article Autor Kriukova G Journal Neural Networks Seiten 26-35 -
2015
Titel Regularization by Aggregation of Global and Local Data on the Sphere DOI 10.1515/cmam-2015-0039 Typ Journal Article Autor Tkachenko P Journal Computational Methods in Applied Mathematics Seiten 299-307 -
2015
Titel Pointwise Computation in an Ill-Posed Spherical Pseudo-Differential Equation DOI 10.1515/cmam-2015-0006 Typ Journal Article Autor Pereverzyev S Journal Computational Methods in Applied Mathematics Seiten 213-219 -
2017
Titel Complexity of linear ill-posed problems in Hilbert space DOI 10.1016/j.jco.2016.10.003 Typ Journal Article Autor Mathé P Journal Journal of Complexity Seiten 50-67 Link Publikation -
2017
Titel Nyström type subsampling analyzed as a regularized projection DOI 10.1088/1361-6420/33/7/074001 Typ Journal Article Autor Kriukova G Journal Inverse Problems Seiten 074001 Link Publikation -
2017
Titel Multi-Penalty Regularization for Detecting Relevant Variables DOI 10.1007/978-3-319-55556-0_15 Typ Book Chapter Autor Hlavácková-Schindler K Verlag Springer Nature Seiten 889-916 -
2016
Titel Prediction of nocturnal hypoglycemia by an aggregation of previously known prediction approaches: proof of concept for clinical application DOI 10.1016/j.cmpb.2016.07.003 Typ Journal Article Autor Tkachenko P Journal Computer Methods and Programs in Biomedicine Seiten 179-186 -
2016
Titel Glycemic Control Indices and Their Aggregation in the Prediction of Nocturnal Hypoglycemia From Intermittent Blood Glucose Measurements DOI 10.1177/1932296816670400 Typ Journal Article Autor Sampath S Journal Journal of Diabetes Science and Technology Seiten 1245-1250 Link Publikation -
2014
Titel Minimization of multi-penalty functionals by alternating iterative thresholding and optimal parameter choices DOI 10.1088/0266-5611/30/12/125003 Typ Journal Article Autor Naumova V Journal Inverse Problems Seiten 125003 Link Publikation -
2014
Titel Discretized Tikhonov regularization for Robin boundaries localization DOI 10.1016/j.amc.2013.10.036 Typ Journal Article Autor Cao H Journal Applied Mathematics and Computation Seiten 374-385 Link Publikation -
2014
Titel Parameter Choice Strategies for Multipenalty Regularization DOI 10.1137/130930248 Typ Journal Article Autor Fornasier M Journal SIAM Journal on Numerical Analysis Seiten 1770-1794 -
2016
Titel Two-parameter regularization of ill-posed spherical pseudo-differential equations in the space of continuous functions DOI 10.1016/j.amc.2015.10.053 Typ Journal Article Autor Cao H Journal Applied Mathematics and Computation Seiten 993-1005 Link Publikation -
2016
Titel A parameter choice strategy for the inversion of multiple observations DOI 10.1007/s10444-016-9477-9 Typ Journal Article Autor Gerhards C Journal Advances in Computational Mathematics Seiten 101-112 -
2016
Titel On the convergence rate and some applications of regularized ranking algorithms DOI 10.1016/j.jco.2015.09.004 Typ Journal Article Autor Kriukova G Journal Journal of Complexity Seiten 14-29 Link Publikation -
2015
Titel A Parameter Choice Strategy for the Inversion of Multiple Observations DOI 10.48550/arxiv.1507.02076 Typ Preprint Autor Gerhards C -
2015
Titel Two-parameter regularization of ill-posed spherical pseudo-differential equations in the space of continuous functions DOI 10.48550/arxiv.1501.00362 Typ Preprint Autor Cao H -
2015
Titel Parameter choice strategies for least-squares approximation of noisy smooth functions on the sphere DOI 10.48550/arxiv.1501.02090 Typ Preprint Autor Pereverzyev S -
2015
Titel Aggregation of regularized solutions from multiple observation models DOI 10.1088/0266-5611/31/7/075005 Typ Journal Article Autor Chen J Journal Inverse Problems Seiten 075005 -
2013
Titel Discretized Tikhonov regularization for Robin boundaries localization DOI 10.48550/arxiv.1305.1106 Typ Preprint Autor Cao H -
2013
Titel Regularized collocation for spherical harmonics gravitational field modeling DOI 10.1007/s13137-013-0054-9 Typ Journal Article Autor Naumova V Journal GEM - International Journal on Geomathematics Seiten 81-98 -
2013
Titel Filtered Legendre expansion method for numerical differentiation at the boundary point with application to blood glucose predictions DOI 10.1016/j.amc.2013.09.015 Typ Journal Article Autor Mhaskar H Journal Applied Mathematics and Computation Seiten 835-847 Link Publikation -
2013
Titel Multi-penalty regularization with a component-wise penalization DOI 10.1088/0266-5611/29/7/075002 Typ Journal Article Autor Naumova V Journal Inverse Problems Seiten 075002 -
2015
Titel Parameter Choice Strategies for Least-squares Approximation of Noisy Smooth Functions on the Sphere DOI 10.1137/140964990 Typ Journal Article Autor Pereverzyev S Journal SIAM Journal on Numerical Analysis Seiten 820-835 Link Publikation -
2014
Titel Minimization of multi-penalty functionals by alternating iterative thresholding and optimal parameter choices DOI 10.48550/arxiv.1403.6718 Typ Preprint Autor Naumova V