Kullback-Leibler-Divergenz
31Überraschungswert — Der Begriff der Information, wie er in der Informationstheorie nach Shannon[1] verwendet wird, ist streng von dem gewöhnlichen Gebrauch dieses Begriffes zu unterscheiden. Insbesondere darf darin die Information nicht mit dem Begriff der Bedeutung …
32Entropie — Der Begriff Entropie (griechisches Kunstwort εντροπία [entropía], von εν [en ] – ein , in und τροπή [tropē] – Wendung, Umwandlung) steht für: Mathematik Entropieschätzung, verschiedene Methoden zur statistischen Schätzung der Shannon Entropie auf …
33Entropie (Informationstheorie) — Entropie ist ein Maß für den mittleren Informationsgehalt oder auch Informationsdichte eines Zeichensystems. Der Begriff in der Informationstheorie ist in Analogie zur Entropie in der Thermodynamik und Statistischen Mechanik benannt. Das… …
34Entropieschätzung — Das Themengebiet der Entropieschätzung befasst sich mit den unterschiedlichen Methoden für die statistische Schätzung der Shannon Entropie auf der Basis von endlichen Stichproben. Für die formale Berechnung der Shannon Entropie ist gemäß… …
35Informationsgehalt — Der Begriff der Information, wie er in der Informationstheorie nach Shannon[1] verwendet wird, ist streng von dem gewöhnlichen Gebrauch dieses Begriffes zu unterscheiden. Insbesondere darf darin die Information nicht mit dem Begriff der Bedeutung …
36KLD — ist eine Abkürzung für: die polnische Partei Liberal Demokratischer Kongress in der Germanistik für das Sammelwerk Deutsche Liederdichter des 13. Jahrhunderts von Carl von Kraus, kurz Kraus Lieder Dichter in der Wahrscheinlichkeitsrechnung für… …
37Korrelation — Eine Korrelation beschreibt eine Beziehung zwischen zwei oder mehreren Merkmalen, Ereignissen oder Zuständen. Eine kausale Beziehung zwischen den Merkmalen, Ereignissen oder Zuständen muss jedoch nicht bestehen. In der Statistik wird die… …
38Relative Entropie — Der Begriff relative Entropie wird als Synonym für folgende Begriffe verwendet: Transinformation (gegenseitige Information) Kullback Leibler Divergenz Um Verwechslungen auszuschließen, sollte der Begriff relative Entropie jedoch gemieden werden …
39Kl — KL, als Abkürzung, steht für: Bezirk Klagenfurt Land in Kärnten, Österreich, als Kraftfahrzeugkennzeichen Deutsche Konzentrationslager in der Zeit des Nationalsozialismus Kaiserslautern sowie den Landkreis Kaiserslautern, in Rheinland Pfalz,… …
40KL — KL, als Abkürzung, steht für: Bezirk Klagenfurt Land in Kärnten, Österreich, als Kraftfahrzeugkennzeichen Konzentrationslager in der Zeit des Nationalsozialismus Kapitänleutnant Kaiserslautern sowie den Landkreis Kaiserslautern als deutsches Kfz… …
