Skip to main content

マルコフ行列の中の著者達: どの著者がもっとも人々に影響を与えたのか? (24)

Google PageRank

ここで PageRank という手法 [2] を紹介する.Web page 間の影響力というものをどう考えるかについて,Sergey Brin と Lawrence Page という二人は,Web page のリンクを隣接関係として考え,その固有値問題を解くことでWeb の重要度を計算し,それを Web page のサーチの基礎として利用することを提案した.後にこの二人はこのアルゴリズムを使ったサーチエンジンの会社Google を設立する.この論文には,Jon Kleinberg が既に Web 環境を用いて引用関係をリンクによって表現する場合,これを固有値問題として考えることを提案していると記されている.固有値問題そのものは線形代数で基本的なものとして長年研究されてきた.では PageRank そのものは新しくなく,この二人は運が良かっただけではないかというと私はそうは思わない.シンプルでソリッドなアイデアを実際に世界規模で使えるように実装したというところがすごいことだと思う.また,Web のサイズを考えれば,単に固有値を求めるということも単純ではない.

ここでの私の説明は,文献 [9] の書法に従っているが,PageRank の論文[2] ではちょっと違う書法を用いているので注意しておく.
PageRank の論文中, page 4, 2nd paragraph では固有値が,\(R=cAR\)となる c となっている.ここでは\(Mx = \lambda x\) の \(\lambda\)と記述した.したがって,\(\lambda = \frac{1}{c}\) である.
PageRank の論文では,Web のグラフは不完全であるため,そのまま固有値計算をすることはできないことを説明している.たとえば,リンク切れを除くことや,リンクがループしている場合などを挙げ,その対策を述べている.基本的にはユーザがリンクをランダムにクリックしていくが,時々リンクとはまったく関係ないランダムなページにも移動するという考えを用いている.すなわち,PageRank は,Web をスキャンして隣接行列を作成し,リンク切れやループなどの処理を行なった後,ランダムに移動する項を加え,Markov matrix を作成して,固有値問題を解くということになる.もちろん,大規模なWeb であるから,固有値を求める手法にも工夫がなされている.

私はこの論文を読んだ時に,線形代数をかくもエレガントに使うアルゴリズムに心酔した.しかもそれが実用として使い易いというところにも感動した.論文そのもの自体興味深いので一読することをおすすめする.その感動は論文を読んでから何年も心のどこかにあったのだろう.友人からの質問を聞いた瞬間に私はこの論文を思い出した.そこでこのような blog を書いているわけである.現在のGoogle のアルゴリズムはスパム対策など様々な改良がなされていると聞いているが,基本的な考えは同じであると思う.

今回で理論編は終了する.次回からは実験編としてここまでに述べた方法を著者のグラフに適用した結果を述べよう.

References

[2] Sergey Brin, Lawrence Page, ``The PageRank Citation Ranking: Bringing Order to the Web,'' Stanford University, Technical Report, 1998

[9] Gilbert Strang, ``Introduction to Linear Algebra, 4th Edition'', Wellesley-Cambridge Press,  2009

Comments

Popular posts from this blog

共有メモリによるプロセス間通信

Unix の共有メモリを使ったプロセス間通信について調べて実験をしてみた.対象は1つのホスト上での複数のプロセスである.ネット上でいくつか例題はないかと探したが,どうも良い例となるコードが見当たらなかった.結局はある解説記事と,Stack Overflow の議論と,man page を見て作ってみたものになったので,例をここに置くのも有用かと考え,この記事を書く.(もしかしたら探し方が悪くて良いコード例をみつけられなかっただけかもしれない.) mmap を使うかどうかという話がいくつもでていたが,POSIX の方向としては,shmem_open と mmap を使うという方向があるということだったので,それを信じてその形での実装を試してみた. 基本的なコードの流れは次のようになる. 共有メモリ領域を1つのプロセスが shm_open() を使って作成する.その際に,プロセス間で共通の文字列を識別子(``identifier'')とする.(Linux ではこれが /dev/shm/identifier のように見える.) 共有メモリ領域を mmap() でメモリにマップする.共有メモリポインター (shared_ptr)が得られる. shared_ptr を使って複数のプロセスで通信をする. 利用終了後は munmap() をつかってマップを消す. 共有メモリオブジェクトを shm_unlink() によって消す. 以下に示すプログラムは,server と client の2つのプロセスが共有メモリを使って通信をするものである.ここで,server プロセス数と client プロセス数は共に 1 を仮定する.server と client は自分の領域にしか値を書き込まないことで,ロックを避けている.互いに相手の値を読み,それよりも1大きい数を一定の期間ごとに自分の領域に書くという例題である.シンプルではあるが,共有メモリで通信をする基本としては十分なものだと思う.ソースコード(shmem_test.cpp)を以下に付加する.ソースコードのコメントにコンパイル方法とどのように利用するかを書いておく. /*   Shared memory inter process communication minimal exa

複数の線を持つ線グラフを Jenkins の plot plugin で描く方法

私は毎夜のソフトウェアテストを自動化するために Jenkins というツールを使っています.今回は, valgrind  を使ってメモリーリークのテストを自動化することにし ました.その際,エラーの数の結果をグラフとして表そうと思って, Plot plugin  を使うことにしました. Plot plugin の例図からは,複数のデータラインを描くことができるのは明らかなのですが,どうやったらいいのかは参照のページや,例としてあった Perl script,plugin 中の help からは私にはよくわからなかったのです. ここで重要な考えは,それぞれのデータラインにはそれぞれの出力ファイルが必要ということでした.私はこれを誤解していました. 例として,ビルドの時に次の property データファイルを出力します.それぞれのファイルが1つのデータラインを表します. valgrind_trunk_result.definitely.property valgrind_trunk_result.indirectly.property valgrind_trunk_result.possibly.property それぞれのデータの中身は1行のデータ点です.たとえば, valgrind_trunk_result.definitely.property ファイルの中身は次のような1行 です. YVALUE=0 このファイルを ${WORKSPACE} ディレクトリ以下に出力します.ここで," WORKSPACE " は jenkins が提供する環境変数です. 図1が私の plot plugin の設定を示しています.これは jenkins の config 画面です.3つの data series があって,それぞれにデータファイルがあります. Figure 1: Plot plugin configuration in Jenkins 図2が結果です.複数の線が描かれているのがわかります.(実際には 3 本の線がありますが,最初の線と2番目の線が同じデータなので,重ねって見えません.) Fugure 2: Plot data with multiple data lines

ソニーのカメラ (α 5000) の 30 分のビデオ録画時間の制限を外す方法

私は Sony の Alpha 5000 を気にいって使っています。しかし一つだけ問題がありました。それはビデオの録画時間の制限が 30 分というものです。 今日,ちょっと気になって探したらこの制限を解除できることがわかりました。以下のビデオがその紹介です。 https://youtu.be/7cstA_PuRIg このビデオの作者によれば,ほとんどのソニーのカメラのビデオの制限はなくせるそうです。ただし私が試したのは,Alpha 5000 のみです。 手順 カメラ側 スイッチ On Menu -- Setup --- USB connection を MTP にする スイッチ Off and On USB ケーブルでカメラをコンピュータに接続する (以下接続したままにする) コンピュータ側でソフトのダウンロードとインストール (私は Windows 10 で試しました) 次の URL に行く https://sony-pmca.appspot.com/apps ただし,Internet Explorer か Safari のみサポートということでした。Chrome では上手くいきませんでした。私が試したのは Windows 10,Internet Explore 11 です。 注意事項: このサイトは Sony のサイトですが,ここにあるソフトウェアは Sony のものとは限らないので保証はありません。御自分でリスクを判断してご利用下さい。当方も何も責任を負えません。 上記の URL から,OpenMemories のページに移動する。 このページにある PMCADownloader plugin (PMCADownloader.msi) をダウンロードする PMCADownloader をインストールする 私はいちどここでページを閉じてもう一度 https://sony-pmca.appspot.com/apps を開き,OpenMemories のページに移動しました ここで log に Loading plugin Plugin loaded と表示されます。PMCADownloader の Install がされていない時には,``Plugin loaded'&#