stat

neural networks と bayesian networks

Feed Forward Neural Networks (Multi-layer Perceptron)と Baysian Networks (Belief Networks) は、DAG で表現された学習・推論のモデルであるという点で似ている。FFNNでは、1つのノードは入力の線形和に対する閾値関数として定義され、 線形和の重みと閾…

Graphical Models

http://www.cs.ubc.ca/~murphyk/bayes/bayes.html directed graphical model が中心だけど、 undirected model の文献紹介もある。graphical models な講義 10-708 Probabilistic Graphical Models, Fall 2006 EE512 Algorithms for Graphical Models (AGM)…

Chris Meek's Homepage

http://research.microsoft.com/~meek/Factorization of discrete probability distributions 対数線形モデルとマルコフ確率場の等価性をあたえた Hammersley-Clifford theorem の拡張 Collaborative filteringついでに。 Hammersley-Clifford theorem は原…

2D Conditional Randon Fields for Web Information Extraction

http://research.microsoft.com/users/znie/icml2005_2d-crf.pdf However, as the information on a Web page is two-dimensionally laid out, previous linear-chain CRFs have their limitations for Web information extraction.

Shaojun Wang

http://www.cs.wright.edu/~swang/ Latent Maximum Entropyの人であり、 長距離言語モデルの代表選手の一人。

情報統計力学の深化と展開 チュートリアル

チュートリアルマニアなので。 樺島祥介 (東京工業大学大学院総合理工学研究科) “More is different”の話 Lecture Note: PDF 渡邊澄夫 (東京工業大学精密工学研究所) 物理学者でない人のための統計力学 lecture note もアップされてる。

Gaussian Process で滑らかな関数を発生させる

Gaussian Process は関数空間上の確率変数の一種。 #! /usr/bin/env perl use strict; use warnings; use Math::Random qw/:all/; my @xs = map { ($_/30) } (0..20); # 関数への入力値列 my $n = scalar @xs; my @v = map { my $x=$_; [map {exp -1/2*( ($x…

EDA(Estimation of Distribution Algorithm)

http://ibisforest.org/index.php?eda Genetic Algorithm revisited

Sharon Goldwater

http://www.stanford.edu/~sgwater/ D論ゲット Nonparametric Bayesian Models of Lexical Acquisition いわゆるひとつの Unsupervised Morphological Segmentation です。

統計学習

http://www.ec.kagawa-u.ac.jp/~hori/statedu.html 統計の勉強リンク集

RjpWiki - RjpWiki

http://www.okada.jp.org/rwiki/

MUSASHI -- datamining

http://musashi.sourceforge.jp/ いわゆるひとつのデータマイニングツール。 ある時系列量を与えると、年間変動とノイズと長期的変動を分離したりできると思う。 (みてない)

Fall 2005 Statistics (Jim Pitman)

http://bibserver.berkeley.edu/205/lec_hwk.html 伊庭先生おすすめの 確率論講義ノートがあるページ。 Pitman 先生です。

SIG-DMSM

予稿集が公開されました

Probability Tutorials

http://www.probability.net/ 確率論の演習がたくさん。 解答つき

Language Modeling with the Maximum Likelihood Set -- Complexity Issues and the Back-off Formula

http://www.ipam.ucla.edu/publications/ds2006/ds2006_5861.pdf Maximum Likelihood Set [2006-04-06-4] 応用の解説プレゼン。最尤推定では、単体上で格子状の点集合のどれかしかとれず、 周縁に位置することにより、0確率がたくさんできてしまう。可能な点…

Bayesian Methods for NLP

http://www.isi.edu/~hdaume/bayes/

Volker Tresp. Dirichlet processes and nonparametric bayesian modelling.

http://wwwbrauer.in.tum.de/~trespvol/papers/dptresp2006.pdf

Nonparametric Bayesian Learning conference list

[[Workshop on Learning with Nonparametric Bayesian Methods June 29, 2006|http://www2.informatik.hu-berlin.de/~bickel/npb_workshop.html]] Nonparametric Bayes NIPS*05 Workshop — Nonparametric Bayesian Methods Bayesian Methods for Natural Lan…

「統計数理」総目次

http://www.ism.ac.jp/editsec/toukei/contents.html 統計数理研究所の。

Li -- Using Sketches to Estimate Two-way and Multi-way Associations - Google Scholar

http://scholar.google.com/scholar?hl=en&lr=&cluster=4804964007952417849 Locality Sensitive Hashing 関連。

Moses Charikar's Home Page

http://www.cs.princeton.edu/~moses/ Similarity Estimation Techniques from Rounging Algorithmsなど。 近似アルゴリズムの専門家。 Locality Sensitive Hashing は、 2つのオブジェクトのハッシュ値が一致する確率が、 2つのオブジェクトの類似度と同じ…

論文書庫 -- 貞光九月

http://www.milab.is.tsukuba.ac.jp/~sadamitsu/archive/

Publications -- 持橋大地

http://chasen.org/~daiti-m/paper/

JSAI SIG-DMSM

http://www.med.shimane-u.ac.jp/med_info/sig-dmsm/ 人工知能学会の「データマイニングと統計数理研究会」 第一回は7月11日統数研で。

Modeling word burstiness using the Dirichlet distribution

http://portal.acm.org/citation.cfm?id=1102420 Dirichlet分布を使った文書モデル。 単語頻度の経験的分布において、 多項分布によって表すことができない性質があることを示し、 それを Dirichlet 分布で表すことができることを示す。 (明らかに傾向が違…

A tutorial on Learning Dynamical Systems

http://www.cs.brown.edu/research/ai/dynamics/tutorial/ Mathematica による動的システムのチュートリアル、演習。 グラフィカルモデルと学習もあり。

Shane Legg

http://www.idsia.ch/~shane/ AIと統計的学習と遺伝的アルゴリズム。

The Elements of Statistical Learning, Hastie, Tibshirani and Friedman (2001)

http://www-stat-class.stanford.edu/~tibs/elemstatlearn/ 0387952845 Manning & Schultze よりも、Jurafsky & Martin + Hastie et alとの評を見て。例によって、経済学部図書館にある。

ICML 2006 Workshop on Learning with Nonparametric Bayesian Methods

http://www2.informatik.hu-berlin.de/~bickel/npb_workshop.html Dirichlet Process とか。