ハッカーニュースから学んだこと

2009年2月

ハッカーニュースは先週で2歳になりました。最初はサイドプロジェクトとして始まり、Arcを磨くためのアプリケーションであり、現在および将来のY Combinatorの創業者たちがニュースを交換する場所であるはずでした。それは私が予想していたよりも大きく成長し、より多くの時間を取るようになりましたが、それについて後悔はしていません。なぜなら、私はそれに取り組むことで多くのことを学んだからです。

成長

2007年2月に私たちが立ち上げたとき、平日のトラフィックは約1600のユニークユーザーでした。それ以来、成長して約22,000になりました。この成長率は私が望むよりも少し高いです。サイトが成長することを望んでいます。なぜなら、少なくともゆっくりと成長していないサイトはおそらく死んでいるからです。しかし、DiggやRedditのように大きく成長することは望んでいません。主にそれはサイトの性格を薄めることになるからですが、スケーリングにすべての時間を費やしたくないからでもあります。

私はすでにそれに関して十分な問題を抱えています。覚えておいてください、HNの元々の動機は新しいプログラミング言語をテストすることであり、さらに言えば、パフォーマンスではなく言語設計の実験に焦点を当てたものでした。サイトが遅くなるたびに、私はマッキルロイとベントレーの有名な引用を思い出して自分を奮い立たせます。

パフォーマンスの鍵は優雅さであり、特別なケースの大軍ではない。

そして、私は最も少ないコードで取り除けるボトルネックを探します。これまでのところ、パフォーマンスは14倍の成長にもかかわらず一貫して平凡であり続けています。次に何をするかはわかりませんが、おそらく何かを考えつくでしょう。

これが私のサイトに対する一般的な態度です。ハッカーニュースは実験であり、非常に若い分野での実験です。この種のサイトはまだ数年しか経っていません。インターネットの会話自体も数十年しか経っていません。したがって、私たちはおそらく最終的に発見することになるもののほんの一部しか発見していないのです。

だからこそ、私はHNに対して非常に楽観的です。この技術がこれほど若いとき、既存の解決策は通常ひどいものであり、それはより良いことができるはずであることを意味します。つまり、解決不可能に思える多くの問題は実際にはそうではないのです。私が望むのは、成長によって多くの以前のコミュニティが苦しんできた問題が解決されることです。

希薄化

ユーザーはサイトが数ヶ月経った頃からそのことを心配していました。これまでのところ、これらの警報は誤報でしたが、常にそうであるとは限りません。希薄化は難しい問題です。しかし、おそらく解決可能です。「常に」20のインスタンスに等しいとき、オープンな会話が「常に」成長によって破壊されてきたということはあまり意味がありません。

しかし、私たちが新しい問題を解決しようとしていることを忘れないことが重要です。なぜなら、それは私たちが新しいことを試みなければならないことを意味し、そのほとんどはおそらくうまくいかないからです。数週間前、私は平均コメントスコアが最も高いユーザーの名前をオレンジ色で表示することを試みました。 [1] それは間違いでした。突然、ほぼ一つにまとまっていた文化が、持っている者と持っていない者に分かれてしまいました。文化がどれほど団結していたかを分かれて初めて気づきました。それを見るのは痛々しかったです。 [2]

したがって、オレンジのユーザー名は戻ってきません。（申し訳ありません。）しかし、将来的には同様に壊れたように見える他のアイデアが出てくるでしょう。そして、うまくいくことが判明するアイデアは、うまくいかないアイデアと同じくらい壊れているように見えるでしょう。

私が希薄化について学んだ最も重要なことは、それがユーザーよりも行動で測定されるということです。悪い人々よりも悪い行動を排除したいのです。ユーザーの行動は驚くほど柔軟であることがわかりました。人々が期待されているように行動すると、彼らはそうする傾向があります。そしてその逆もまた然りです。

もちろん、悪い行動を禁じることは悪い人々を遠ざける傾向があります。なぜなら、彼らは良い行動をしなければならない場所で不快に制約を感じるからです。しかし、彼らを遠ざけるこの方法は、明示的な障壁よりも穏やかで、おそらくより効果的です。

コミュニティサイトにも壊れた窓理論が適用されることは今や明らかです。この理論は、軽微な悪行がより悪い行為を助長するというものです。落書きや壊れた窓がたくさんある近所は、強盗が発生する場所になります。私はニューヨークに住んでいたとき、ジュリアーニが壊れた窓理論を有名にする改革を導入し、その変革は驚くべきものでした。そして、私はRedditのユーザーだったとき、逆のことが起こり、その変革も同様に劇的でした。

私はスティーブやアレクシスを批判しているわけではありません。Redditに起こったことは放置から起こったわけではありません。最初から彼らはスパム以外の何も検閲しない方針を持っていました。さらに、Redditはハッカーニュースとは異なる目標を持っていました。Redditはスタートアップであり、サイドプロジェクトではありませんでした。その目標はできるだけ早く成長することでした。急速な成長とゼロの検閲を組み合わせると、結果は無法地帯になります。しかし、もし彼らが再びやることになったとしても、彼らはあまり違ったことはしないと思います。トラフィックで測定すると、Redditはハッカーニュースよりもはるかに成功しています。

しかし、Redditに起こったことがHNに必然的に起こるわけではありません。いくつかの局所的な最大値があります。無法地帯の場所とより思慮深い場所が存在することができ、現実の世界と同様に、人々はどちらにいるかによって異なる行動をとります。

私はこれを実際に観察しました。Redditとハッカーニュースでクロスポスティングしている人々を見たことがありますが、実際に2つのバージョンを書く手間をかけていました。Reddit用の炎上投稿と、HN用のより控えめなバージョンです。

投稿

ハッカーニュースのようなサイトが避けるべき主要な問題は2つあります：悪いストーリーと悪いコメントです。これまでのところ、悪いストーリーの危険性は小さいようです。現在のフロントページのストーリーは、HNが始まったときにそこにあったであろうものと大体同じです。

私は一度、クソをフロントページから排除するために投票に重みをつけなければならないと思っていましたが、まだその必要はありませんでした。フロントページがこれほどうまく維持されるとは予想していませんでしたし、なぜそうなっているのかもわかりません。おそらく、より思慮深いユーザーだけがリンクを提出し、アップボートすることを気にかけているので、1人のランダムな新しいユーザーの限界コストはゼロに近づくのです。あるいは、フロントページが自らを保護しているのかもしれません。期待される投稿のタイプを広告することによって。

フロントページにとって最も危険なものは、アップボートしやすすぎるものです。誰かが新しい定理を証明した場合、読者がそれをアップボートするかどうかを決定するにはいくらかの労力が必要です。面白い漫画はそれよりも少ない労力で済みます。タイトルが叫び声のようなランツはゼロの労力で済みます。なぜなら、人々はそれを読むことさえせずに投票するからです。

したがって、私が呼ぶ「フラフ原則」が成り立ちます：ユーザー投票のニュースサイトでは、最も簡単に判断できるリンクが支配することになります。特別な対策を講じない限り。

ハッカーニュースにはフラフに対する2種類の保護があります。最も一般的なフラフリンクのタイプは、オフトピックとして禁止されています。子猫の写真、政治的な弁論などは明示的に禁止されています。これにより、ほとんどのフラフが排除されますが、すべてではありません。いくつかのリンクは、非常に短いという意味でフラフであり、かつトピックにも関連しています。

それに対する単一の解決策はありません。リンクが単なる空のランツである場合、編集者はそれがハッキングに関するトピックであっても、知的好奇心を刺激するという本当の基準に基づいてトピックではないため、時々それを削除します。サイトの投稿がこのタイプのものである場合、私は時々それを禁止します。つまり、そのURLの新しい投稿は自動的に削除されます。投稿がリンクベイトのタイトルを持っている場合、編集者は時々それをより事実に基づいた表現に言い換えます。これは、タイトルが叫び声のようなリンクに特に必要です。そうでなければ、それらは暗黙の「あなたがそうであると信じるなら投票してください」投稿になり、これはフラフの最も極端な形です。

リンクに対処するための技術は進化しなければなりません。なぜなら、リンク自体が進化するからです。アグリゲーターの存在は、彼らが集めるものにすでに影響を与えています。作家たちは今や、アグリゲーターからトラフィックを引き寄せるために意図的に物を書くことがあります—時には特定のものに対してさえ。（いいえ、この発言の皮肉は私には失われていません。）そして、リンクジャッキングのようなより陰湿な変異もあります。他人の記事のパラフレーズを投稿し、元の記事の代わりにそれを提出することです。これらは多くのアップボートを得ることができます。なぜなら、記事の中で良いものの多くはしばしば残るからです。実際、パラフレーズが盗作に近いほど、より多くのものが残ります。 [3]

投稿を削除するサイトは、ユーザーが何が削除されたのかを見る方法を提供することが重要だと思います。これにより、編集者は正直であることが求められ、同様に重要なのは、ユーザーが編集者が正直でなくなった場合に気づく自信を持つことができることです。HNのユーザーは、プロフィールの「showdead」というスイッチを切り替えることでこれを行うことができます。 [4]

コメント

悪いコメントは、悪い投稿よりも難しい問題のようです。HNのフロントページのリンクの質はあまり変わっていませんが、中央値のコメントの質は若干低下したかもしれません。

コメントには2つの主要な悪さがあります：意地悪さと愚かさ。両者の間には多くの重複があります—意地悪なコメントは愚かなコメントである可能性が disproportionately 高いですが、それらに対処するための戦略は異なります。意地悪さは制御しやすいです。意地悪であってはいけないというルールを設けることができ、もしそれを施行すれば、意地悪さを抑えることが可能なようです。

愚かさを抑えることは難しいです。おそらく、愚かさはそれほど簡単に区別できないからです。意地悪な人々は、自分が意地悪であることを知っている可能性が高いですが、愚かな人々は自分が愚かであることを知っている可能性は低いです。

最も危険な形の愚かなコメントは、長いが間違った議論ではなく、愚かなジョークです。長いが間違った議論は実際には非常に稀です。コメントの質と長さの間には強い相関関係があります。コミュニティサイトのコメントの質を比較したい場合、平均の長さは良い予測因子となるでしょう。おそらくその原因は人間の本性にあり、コメントスレッドに特有のものではありません。おそらく、愚かさは間違ったアイデアを持つよりも、アイデアが少ない形をとることが多いのです。

原因が何であれ、愚かなコメントは短くなる傾向があります。そして、情報量が多い短いコメントを書くのは難しいので、人々は代わりに面白くすることでそれらを区別しようとします。愚かなコメントにとって最も魅力的な形式は、いわゆるウィットに富んだ侮辱です。おそらく、侮辱がユーモアの最も簡単な形だからです。 [5] したがって、意地悪を禁じることの一つの利点は、これらも減少させることです。

悪いコメントはクズのようです：急速に支配します。コメントは新しいコメントに対して、投稿が新しい投稿に与える影響よりもはるかに大きいです。誰かがつまらない記事を投稿すると、他の投稿がすべてつまらなくなるわけではありません。しかし、誰かがスレッドに愚かなコメントを投稿すると、それがその周辺のトーンを設定します。人々は愚かなジョークに愚かなジョークで返します。

解決策は、コメントに対して人々が反応できるまでの遅延を追加し、その遅延の長さをその質の予測に反比例させることかもしれません。そうすれば、愚かなスレッドは遅く成長するでしょう。 [6]

人々

私が説明したほとんどの技術が保守的であることに気づきます。それらはサイトの性格を強化するのではなく、保存することを目的としています。これは私の偏見ではないと思います。それは問題の形状によるものです。ハッカーニュースは良いスタートを切る幸運に恵まれたので、この場合、文字通り保存の問題です。しかし、この原則は異なる起源を持つサイトにも適用されると思います。

コミュニティサイトの良いものは、技術よりも人々から来ています。悪いものを防ぐことにおいて、技術が関与します。技術は確かに議論を強化することができます。たとえば、ネストされたコメントはそうです。しかし、私は、より進んだ機能を持つサイトよりも、原始的な機能を持ち、賢くて親切なユーザーがいるサイトを好みます。トロールのようなユーザーがいるサイトよりも。

したがって、コミュニティサイトができる最も重要なことは、望む種類の人々を引き寄せることです。できるだけ大きくなろうとするサイトは、すべての人を引き寄せたいと思っています。しかし、特定のユーザーのサブセットを目指すサイトは、ちょうどその人々を引き寄せなければなりません。そして同様に重要なのは、他のすべての人を遠ざけることです。私はHNでこれを意識的に行う努力をしています。グラフィックデザインはできるだけシンプルで、サイトのルールは劇的なリンクタイトルを抑制します。目標は、HNに初めて訪れる人が興味を持つ唯一のものが、そこに表現されているアイデアであるべきだということです。

特定の人々を引き寄せるようにサイトを調整することの欠点は、その人々にとって、あまりにも魅力的になりすぎる可能性があることです。私はハッカーニュースがどれほど中毒性があるかを十分に理解しています。私にとって、そして多くのユーザーにとって、それは一種のバーチャルタウンスクエアです。仕事から休憩を取りたいとき、私は広場に入ります。まるで物理的な世界のハーバードスクエアやユニバーシティアベニューに入るかのように。 [7] しかし、オンラインの広場は物理的な広場よりも危険です。もし私がユニバーシティアベニューで半日をぶらぶらしていたら、気づくでしょう。そこに行くには1マイル歩かなければならず、カフェに座ることは仕事をすることとは異なる感覚です。しかし、オンラインフォーラムを訪れるのはクリック一つで済み、表面的には仕事をしているように感じます。あなたは時間を無駄にしているかもしれませんが、怠けているわけではありません。誰かがインターネットで間違っているのです。そして、あなたはその問題を解決しています。

ハッカーニュースは確かに有用です。私はHNで読んだことから多くを学びました。私はそこでコメントとして始まったいくつかのエッセイを書きました。だから、私はそのサイトが消えてしまうことを望んでいません。しかし、私はそれが生産性に対してネットの負担になっていないことを確認したいです。それがどれほどの災害になるか、賢い人々を時間を無駄にするサイトに引き寄せることになるのです。私はHNがそのような説明にならないことを100％確信できればいいのですが。

私は、ゲームやソーシャルアプリケーションの中毒性がまだほとんど解決されていない問題だと感じています。今の状況は1980年代のクラックのようです。私たちは非常に中毒性のある新しいものを発明しましたが、それから自分たちを守る方法はまだ進化していません。私たちは最終的にそれを進化させるでしょう。そして、それが私が次に焦点を当てたい問題の一つです。

ノート

[1] 私はユーザーを平均と中央値のコメントスコアの両方でランク付けしようとしましたが、平均（高スコアを除外したもの）が高品質のより正確な予測因子のようでした。ただし、中央値は低品質のより正確な予測因子かもしれません。

[2] この実験から学んだもう一つのことは、人々を区別するつもりなら、正しく行うことを確信しておくべきだということです。これは、迅速なプロトタイピングが機能しない問題の一つです。

実際、さまざまなタイプの人々を区別しない理由は、皆が同じだからではなく、間違って行うことが悪いことであり、正しく行うことが難しいからです。

[3] 私は、著しくリンクジャックされた投稿を見つけたとき、URLを彼らがコピーしたものに置き換えます。習慣的にリンクジャックするサイトは禁止されます。

[4] Diggはその透明性の欠如で悪名高いです。問題の根本は、Diggを運営している人々が特に狡猾であることではなく、フロントページを生成するための間違ったアルゴリズムを使用していることです。Redditのように、投票が増えるにつれて下から浮かび上がるのではなく、ストーリーは上から始まり、新しい到着者によって押し下げられます。

この違いの理由は、DiggがSlashdotから派生しているのに対し、RedditはDelicious/popularから派生しているからです。Diggは、編集者の代わりに投票を行うSlashdotであり、Redditは、ブックマークの代わりに投票を行うDelicious/popularです。（彼らのグラフィックデザインには、彼らの起源の化石がまだ見られます。）

Diggのアルゴリズムは、フロントページに載るストーリーが新しいトップストーリーであるため、ゲームに対して非常に脆弱です。これにより、Diggは極端な対策を講じることを余儀なくされます。多くのスタートアップは、初期の頃に頼らざるを得なかった策略について何らかの秘密を持っており、私はDiggの秘密がトップストーリーが事実上人間の編集者によって選ばれていた程度であると疑っています。

[5] ビーバスとバットヘッドの対話は主にこれらで構成されており、本当に悪いサイトのコメントを読むと、彼らの声でそれを聞くことができます。

[6] 愚かなコメントを抑制するための技術はまだ発見されていないと思います。Xkcdは、IRCチャンネルで特に巧妙なものを実装しました：同じことを2回言わせないことです。一度「失敗」と言ったら、誰もそれを再び言うことはできません。これは特に短いコメントにペナルティを与えることになります。なぜなら、衝突を避ける余地が少ないからです。

もう一つの有望なアイデアは、愚かフィルターです。これは、愚かでないコメントのコーパスに基づいて訓練された確率的スパムフィルターのようなものです。

悪いコメントを排除する必要はないかもしれません。長いスレッドの下部にあるコメントはほとんど見られないため、コメントのソートアルゴリズムに質の予測を組み込むだけで十分かもしれません。

[7] ほとんどの郊外が非常に士気を失わせる理由は、歩いて行ける中心がないからです。

感謝をJustin Kan、Jessica Livingston、Robert Morris、Alexis Ohanian、Emmet Shear、Fred Wilsonに、草稿を読んでくれたことに感謝します。

コメントこのエッセイについて。