livedoor clipでクリップされてるホスト（2009年6月）
ずいぶんと時間が経ってしまったが、EDGE Datasetsの2009年6月分を頂いたので、前回の「livedoor clipでクリップされてるドメイン - 鯨飲馬食コード」と同じようなことをやってみた。というか、あまりにもノイズが多いので簡単に除去しようとした際の副産物なんだけども。
とりあえず簡単な統計情報。
| データ数 | ID数 | URL数 | |
|---|---|---|---|
| 2009年6月 | 2,108,349 | 37,785 | 278,986 |
| 2008年12月 | 1,572,742 | 25,370 | 211,663 |
| 増加数 | 535,607 | 12,415 | 67,323 |
トップ100の結果を一目見て気付くのは、今回激増した以下のホスト。
- www.japanranking.jp
- www.sns-japan.com
- www.cuteencounter.com
- youtube.xn--vuqu5e01ym1kc4e552c.com
- idolimagesearch.blog28.fc2.com
- xn--youtube-ol0l32di35g7i9a.adticketauction.com
- xn--vuqu5e01ym1kc4e552c.com
- www.sumai-zukuri.com
そして増加数0のホスト。
- cashp7.sakuraweb.com
- genkin7p.sakuraweb.com
- coolweb.jp
- afiliate.okidoki.main.jp
- www.job-forum.jp
上記のホストはデータから除去するのもいいし、ある手法がこれらを検出できるかどうかのテストに使用してもよさそう。
その他として、朝日・産経・読売・毎日などの新聞社の増加率が高め。nicovideoの増加率は高いがyoutubeは低め、などが見える。増田のクリップ数も順調（?）に増加しているようだ。
以下トップ100の結果。
| 順位 | ホスト | クリップ数 | 2008/12 | 増加数 | 増加率 |
|---|---|---|---|---|---|
| 1 | d.hatena.ne.jp | 153565 | 120169 | 33396 | 27% |
| 2 | blog.livedoor.jp | 70954 | 60433 | 10521 | 17% |
| 3 | www.itmedia.co.jp | 52797 | 42742 | 10055 | 23% |
| 4 | gigazine.net | 46549 | 39869 | 6680 | 16% |
| 5 | japan.cnet.com | 44581 | 36952 | 7629 | 20% |
| 6 | www.asahi.com | 29489 | 17754 | 11735 | 66% |
| 7 | heartattack507.blog84.fc2.com | 28178 | 21367 | 6811 | 31% |
| 8 | itpro.nikkeibp.co.jp | 21907 | 18676 | 3231 | 17% |
| 9 | phpspot.org | 20466 | 17923 | 2543 | 14% |
| 10 | journal.mycom.co.jp | 18748 | 15197 | 3551 | 23% |
| 11 | www.japanranking.jp | 18681 | 3372 | 15309 | 454% |
| 12 | www.nicovideo.jp | 18178 | 13028 | 5150 | 39% |
| 13 | www.atmarkit.co.jp | 16955 | 13795 | 3160 | 22% |
| 14 | www.ideaxidea.com | 16335 | 12087 | 4248 | 35% |
| 15 | www.sns-japan.com | 15960 | 0 | 15960 | - |
| 16 | anond.hatelabo.jp | 14412 | 8362 | 6050 | 72% |
| 17 | coliss.com | 14337 | 9564 | 4773 | 49% |
| 18 | jp.techcrunch.com | 13308 | 10759 | 2549 | 23% |
| 19 | sankei.jp.msn.com | 12490 | 5159 | 7331 | 142% |
| 20 | japanese.engadget.com | 11927 | 9401 | 2526 | 26% |
| 21 | www.moongift.jp | 11638 | 8554 | 3084 | 36% |
| 22 | www.popxpop.com | 11622 | 11865 | -243 | -3% |
| 23 | alfalfa.livedoor.biz | 10067 | 7255 | 2812 | 38% |
| 24 | internet.watch.impress.co.jp | 10054 | 7766 | 2288 | 29% |
| 25 | www.cuteencounter.com | 9871 | 1178 | 8693 | 737% |
| 26 | cashp7.sakuraweb.com | 9224 | 9224 | 0 | 0% |
| 27 | www.designwalker.com | 9184 | 7758 | 1426 | 18% |
| 28 | www.100shiki.com | 9158 | 7878 | 1280 | 16% |
| 29 | headlines.yahoo.co.jp | 8942 | 4436 | 4506 | 101% |
| 30 | netafull.net | 8941 | 8093 | 848 | 10% |
| 31 | www.youtube.com | 8764 | 8268 | 496 | 5% |
| 32 | www.gizmodo.jp | 8680 | 7576 | 1104 | 14% |
| 33 | e0166.blog89.fc2.com | 8600 | 7798 | 802 | 10% |
| 34 | www.forest.impress.co.jp | 8592 | 7010 | 1582 | 22% |
| 35 | wiredvision.jp | 8392 | 5942 | 2450 | 41% |
| 36 | plusd.itmedia.co.jp | 8321 | 6077 | 2244 | 36% |
| 37 | web-tan.forum.impressrd.jp | 8242 | 6666 | 1576 | 23% |
| 38 | youtube.xn--vuqu5e01ym1kc4e552c.com | 8127 | 0 | 8127 | - |
| 39 | blog.goo.ne.jp | 7574 | 6060 | 1514 | 24% |
| 40 | slashdot.jp | 7504 | 4989 | 2515 | 50% |
| 41 | www.lifehacker.jp | 7438 | 2156 | 5282 | 244% |
| 42 | news4vip.livedoor.biz | 7425 | 6640 | 785 | 11% |
| 43 | business.nikkeibp.co.jp | 7311 | 5828 | 1483 | 25% |
| 44 | labs.unoh.net | 7225 | 6819 | 406 | 5% |
| 45 | ameblo.jp | 7082 | 5325 | 1757 | 32% |
| 46 | www.yomiuri.co.jp | 6653 | 2602 | 4051 | 155% |
| 47 | labs.cybozu.co.jp | 5715 | 5374 | 341 | 6% |
| 48 | google-mania.net | 5495 | 5084 | 411 | 8% |
| 49 | news.livedoor.com | 5467 | 4850 | 617 | 12% |
| 50 | genkin7p.sakuraweb.com | 5025 | 5025 | 0 | 0% |
| 51 | blogs.yahoo.co.jp | 4903 | 4528 | 375 | 8% |
| 52 | ascii.jp | 4897 | 3042 | 1855 | 60% |
| 53 | blog.creamu.com | 4840 | 3885 | 955 | 24% |
| 54 | kengo.preston-net.com | 4615 | 4343 | 272 | 6% |
| 55 | idolimagesearch.blog28.fc2.com | 4471 | 0 | 4471 | - |
| 56 | www.geocities.jp | 4467 | 4046 | 421 | 10% |
| 57 | codezine.jp | 4410 | 3595 | 815 | 22% |
| 58 | lifehacking.jp | 4389 | 3806 | 583 | 15% |
| 59 | guideline.livedoor.biz | 4383 | 4113 | 270 | 6% |
| 60 | q.hatena.ne.jp | 4312 | 3762 | 550 | 14% |
| 61 | pc.watch.impress.co.jp | 4273 | 2737 | 1536 | 56% |
| 62 | gihyo.jp | 4265 | 3426 | 839 | 24% |
| 63 | genkinp7.sakuraweb.com | 4136 | 4136 | 0 | 0% |
| 64 | urasoku.blog106.fc2.com | 3671 | 2514 | 1157 | 46% |
| 65 | xn--youtube-ol0l32di35g7i9a.adticketauction.com | 3651 | 0 | 3651 | - |
| 66 | www.j-cast.com | 3650 | 2748 | 902 | 32% |
| 67 | satoshi.blogs.com | 3646 | 3509 | 137 | 3% |
| 68 | japan.internet.com | 3595 | 3048 | 547 | 17% |
| 69 | www.future-planning.net | 3501 | 3496 | 5 | 0% |
| 70 | it.nikkei.co.jp | 3457 | 2134 | 1323 | 61% |
| 71 | www.geekpage.jp | 3435 | 3058 | 377 | 12% |
| 72 | builder.japan.zdnet.com | 3353 | 2396 | 957 | 39% |
| 73 | cyblog.jp | 3279 | 2967 | 312 | 10% |
| 74 | labaq.com | 3268 | 2461 | 807 | 32% |
| 75 | mainichi.jp | 3259 | 1584 | 1675 | 105% |
| 76 | portal.nifty.com | 3246 | 2938 | 308 | 10% |
| 77 | dain.cocolog-nifty.com | 3226 | 2937 | 289 | 9% |
| 78 | coolweb.jp | 3166 | 3166 | 0 | 0% |
| 79 | gitanez.seesaa.net | 3165 | 2706 | 459 | 16% |
| 80 | markezine.jp | 3137 | 2378 | 759 | 31% |
| 81 | bb.watch.impress.co.jp | 3058 | 2214 | 844 | 38% |
| 82 | subtech.g.hatena.ne.jp | 3036 | 2542 | 494 | 19% |
| 83 | clip.livedoor.com | 2976 | 2687 | 289 | 10% |
| 84 | www.watch.impress.co.jp | 2956 | 2702 | 254 | 9% |
| 85 | afiliate.okidoki.main.jp | 2939 | 2939 | 0 | 0% |
| 86 | news23vip.blog109.fc2.com | 2851 | 1786 | 1065 | 59% |
| 87 | www.oshiete-kun.net | 2818 | 1115 | 1703 | 152% |
| 88 | xn--vuqu5e01ym1kc4e552c.com | 2786 | 0 | 2786 | - |
| 89 | www.excite.co.jp | 2778 | 2254 | 524 | 23% |
| 90 | zen.seesaa.net | 2774 | 2589 | 185 | 7% |
| 91 | www.ringolab.com | 2705 | 2363 | 342 | 14% |
| 92 | akihitok.typepad.jp | 2692 | 2534 | 158 | 6% |
| 93 | la.ma.la | 2600 | 2578 | 22 | 0% |
| 94 | takagi-hiromitsu.jp | 2480 | 1930 | 550 | 28% |
| 95 | yaplog.jp | 2417 | 1499 | 918 | 61% |
| 96 | jibun.atmarkit.co.jp | 2399 | 1763 | 636 | 36% |
| 97 | www.sumai-zukuri.com | 2363 | 0 | 2363 | - |
| 98 | mobairoiro.sakura.ne.jp | 2352 | 2240 | 112 | 5% |
| 99 | www.job-forum.jp | 2314 | 2314 | 0 | 0% |
| 100 | k-tai.impress.co.jp | 2285 | 1532 | 753 | 49% |
