2007年5月20日日曜日

How to Make 27 Million People Hate You

Web2.0Expoのセッションより。

Firefoxのhomeのおうちアイコンを作るのに40回も作り直したとか。
愛されているからこそ要望やフィードバックがあり
フィードバックがあるからよりよいサービスを作ることができると。
本当に2700万人が嫌ってるわけじゃないさ!

How to Make 27 Million People Hate You





2007年5月15日火曜日

世界中のデータを可視化

全世界のいろいろなデータを可視化して図示すると真実が見える by Gigazine

Jonathan Harris氏によってタバコとか水、兵器、映画、アメリカ政府、ファーストフードチェーンについて可視化した図も公開されています。どれもこれもなかなかおもしろい。

たしかにこれThe Work of Jonathan Harris相当おもしろい。
すごい色んなaward取ってる人なんですね。



Flickrvision

Twittervisionに続いてFlickrvision
ジオクリもちと似てるかも。
Jaikuvision
3DTwittervisionあ。ほんもの3DTwittervision



Google以外の検索



by Read/Write Web


●Query Pre-processing

user's intent-ユーザの意図を反映

1. Natural Language Processing

 Hakiaや Powersetに代表。ユーザのクエリーの背景にあるsemanticsやmeaningを理解しようとする。

Google等との大きな違いは"stopwords" で、 by, for, about, of, in を重視する(Googleは無視する)

2. Personal relevance (aka personalization)

Googleはログインしていれば可能だが、John
Battelleはじめ「それってこわいよね」という意見
もある。

Matt Cutts@Googleはそんなことないと反論しているが。anonymousでもパーソナライズできる仕組みや

複数のサイトで使えるパーソナライゼーション等に期待。

Collarity

3. Canned, specialized searches

SimplyHired仕事のvertical search engine( "employers friendly to mature workers", "dog-friendly
employers" 等)

●Information Sources

情報源にフォーカスし、情報源を制限して検索結果の信頼性をあげる。


4. New content types

今の若者達は携帯で写真や動画をやりとりする。ウェブでは画像、音声、映像、テレビ等の
rich media contentやsemantic informationが急増し、検索エンジンもそれらに対応。


- Rich media search: Audio (odeo, podzinger), Video (Youtube, truveo), TV (Blinkx ), Images (Picsearch, Netvue)

- Specialized content search: Blogs (Technorati), News (Topix), Classifieds (oodle)

もちろんGoogleも Google Blogsearch (blogs), Searchmash
(images), Google Video, Google News等がある。

一つの検索で複数のメディアを出す Searchmash や Retrevo 。

5. Restricted Data Sources

spamやSEOによって検索結果が荒れるので、検索する情報源を限定。A9.com Google Co-op Yahoo! Search Builder Rollyo


6. Domain-specific search (Vertical Search)

 Alex Iskold's article on the Read/WriteWebもしくは  this overview on Software Abstractions blog 参照。
Sramana Mitra's overview of online travel services も

●Algorithm Improvement


7. Parametric search

テキスト検索というよりDatabase query(や問題解決)。

Shopping.com indeed(zip codeで仕事探し)GlobalSpec (Engineering components)

8. Social Input

Yahoo!のBradley Horowitzは social input が検索テクノロジーの差別化要因になると考えている (Microsoft も).  wisdom of crowdsってやつだ。

del.icio.us comparison among the different findability solutions StumbleUpon, Squidoo


GoogleのPageRankもcollective intelligence.

9. Human Input

ChaChaは人間のオペレータが検索クエリーに対応。Yahoo! Answers

(うわー検索したらchat live with a guideって出て来た!)

10. Semantic Search

 Semantic Webの可能性。

Monitor110 Spock(plans to have a 100 million profiles) Riya

11. Discovery support

searchとRSSなど。

Bloglines "Recommended Feeds" Aggregate Knowledge

●Results Visualization and Post-processing


12. Classification, tag clouds and clustering

Quintura Clusty

13. Results visualization

Visual Thesaurus Inxight Software HeatMaps (Trulia HousingMaps

14. Results refinement and Filters


 Healia demographic filtersを使って検索結果をtweakできる医療検索エンジン。

医療だと特に性別年代人種により症状や服薬に影響を与えるので重要。

Google OneBox widget と Plusbox feature

15. Results platforms

TiVoが映画を検索できたりやNintendoがオンラインゲームやレシピを検索できるように?

Plazoo Quintura

API Alexa Web Search platform oodle, zillow trulia


16. Related Services


the web's too bigという検索エンジンはイギリスのPR会社のサイトにある情報だけを探せる検索エンジン。

複数のPR会社への問い合わせを一気に出来る機能も搭載 不動産のZestimate Home Q&A機能


17. Search agent

Copernic
Connotate Technologies

search engineについて詳しく書いているRead/WriteWebの記事 にて紹介→ Allth.at Swamii Searchbots.net


●References


Josh Kopelman/Redeye VC: Google - The next vertical search engine?

O'Reilly Rader (via Sarah Milstein): Thoughts on the State of Search

Don Dodge: What's new in search technology? Is Google it?

Rich Skrenta: How to beat Google, part 1

Information Arbitrage: Domain Expertise: The Key to Next Generation Search

David Berkowitz: The Hunt for Search Engine Innovation, Part 1

Richard MacManus/RWW: Interview with Google's Matt Cutts about Next-Generation Search

Phil Butler on Hakia and Powerset

Bob Stumpel: SEARCH 2.0 - consolidated

Google Operating System: What Has Google Done in Search Lately?



2007年5月14日月曜日

blog analytics

Blog Analytics...into the Void.


MeasureMap - Google

- closed beta

StandardStats - Feedburner


- 元 blogbeat 無料の feedburner 有料の TotalStats

pMetrics - Performancing


- 1K pageviews
per day未満なら無料、有料版は$15 per year

Mint - Shaun Inman


- 見た目はいいが仕事としては。。。$30 per site.

BlogPulse - Nielsen

- 無料でおおまかなトレンドが追える

Google Blog Search - Google

- 無料でおおまかなトレンドが追える

Technorati

- 無料でおおまかなトレンドが追える。ランキングも見れる。※日本では有料でブログ分析も行っています♪



political blogosphereの研究

Methodologies for mapping political blogosphere


オーストラリアで「David Hicks」をケースとして行われた研究レポートで、
彼らはテクノラティのデータを使っています。
原文は非常に長く細かいので是非原文をあたってみてください。


"david hicks"というキーワードでの、テクノラティでのキーワード検索結果。

 


 

Figure 1: Traffic volume for David Hicks posts with a lot, some and a little authority, dating back from 8 February 2007, as reported by Technorati. (The notable increase in traffic in the days before 8 February is due to renewed political debate on the issue since the start of February.)



●High Authority Crawl




そもそも、アメリカのブログはよくリンクをしあうので被リンク数が多いが

オーストラリアのブログは被リンク数が少ないので、
このレンジではU.S.–basedなブログが多いため、マップも少ない。

New York Times, Los Angeles Times, Fox News, CNN, The Guardian等とのリンクが多く見られ、「会話」より「情報」のネットワークになっているようだ。

 

Figure 2: Network resulting from high-authority seeds; relative node size determined by number of inlinks

Figure 2: Network resulting from high–authority seeds; relative node size determined by number of inlinks


下記 Figure 3ではnode sizeを被リンク数ではなく被リンク数の多い特定のサイトのinboundlink/outboundlinkを利用。
The Australian
newspaperとTim Blair(オーストラリアの右派政治ブロガー)以外のAustralian blogsやAustralian sitesがマップから消えた。  

Figure 3: Network resulting from high-authority seeds; relative node size determined by site centrality.

Figure 3: Network resulting from high–authority seeds; relative node size determined by site centrality

 


●Medium Authority Crawl
このレンジにオーストラリアのブログが多い。


Larvatus Prodeo, Road to Surfdom, and John Quiggin,等がオーストラリアのブログの会話の中心にいるようだ。

(Tim Blair, On Line Opinion, Crikey, and the NewsCorp columnist ‘blogs’ at Blogs.News.com.au等の有名ブログも
ネットワーク上にはいるが) 

Figure 4: Network resulting from medium-authority seeds; relative node size determined by number of inlinks

Figure 4: Network resulting from medium–authority seeds; relative node size determined by number of inlinks

ネットワークの中心は左下あたりの中道左派の政治ブログになっている。

マイナーなクラスターを見てみると非常によくネットワーク化されたサブグループがあり、しかもこのクラスターはコアネットワークにはあまりリンクしていなかったり色々なグループの特徴がみえてくる。international blogsやnews sourcesはマップの右側にある。


●Low Authority Crawl

このレンジにオーストラリアのブログが多いため、オーストラリア国内の政治ブログ界にズームインしたかっこう。
一つの大きなオーストラリアドメスティックなブログとBBC News や Amnesty International や Flickr
のような
情報ソースとしてリンクを集めてブログ界の会話を広めているようなサイトが見受けられる。中道左派およびアカデミックブログも見受けられる。

 

Figure 6: Network resulting from low-authority seeds; relative node size determined by number of inlinks

Figure 6: Network resulting from low–authority seeds; relative node size determined by number of inlinks