[脫嫌悪社会] 30日早朝「緊急対応令」発動… 呼吸したネイバー・カカオの12時間
入力2022.11.02。午前6時 修正2022.11.02. 午前6時02分
チェ・ユリ記者
有害投稿対応組織緊急対応、遮断後の異議申し立て
届受付された投稿露出遮断…作成者サービス制限措置も
編集者
死傷者307人、死亡155人、「梨泰院惨事」で元国民が大きな衝撃を受けたこの時、ヘムクは「嫌悪」が再び夢を見ている。種類も種類も多様だ。政府が被害者支援方針を出すと、「踊って遊びに行って買ったが、なぜ私が出した税金を使うのか」という反応から、「団体に出てきた中国人が押した」という根拠のない疑惑と人種・性別の割れが起きる。
嫌悪投稿には加害者も被害者も存在しない。加害者は別の嫌悪加害者によって被害者に転落し、伝染病のように一瞬で広がる。結局これを防ぐことができるのは韓国社会の深夜努力だけだ。
惨事以後息を切った私たちの二日を振り返って嫌悪社会を抜け出して、私たちがどこに行くべきかを調べた。
梨泰院大型圧死惨事による国家哀悼期間が続いている1日、ソウル龍山区梨泰院惨事現場に警察兵力が出入りを統制している。
「ハロウィンパーティーが進行中の梨泰院で圧死事故が発生しました。選定的な映像、写真はもちろん、悪意のある噂、嫌悪発言などが予想されますので、皆モニタリング強化願います。」
30日早朝「緊急対応令」発動
365日24時間申告受付された投稿を見て措置する。普段同じであれば、有害な投稿者に異議を申し立てる人が多いが、夜明けの時間だと申告件数も多くない。人工知能(AI)でフィルタリングできるイメージには、極めて選定的またはポルノに準ずる投稿がほとんどだ。
29日真夜中に梨泰院(イテウォン)圧事事故関連のニュースが一つ二つ伝えられた。事故に関して確認されていない事実が広がることも源泉を遮断することは不可能だった。放送会社も現場にいる市民たちの電話インタビューをろ過なく出していた状況が続いた。
現地の状況をよく知らない利用者が被害者に向けて毒説を注ぎ出し、再びこれを反論する文が続いて「嫌悪」と「憎悪」、世代・性別間の葛藤を助長する悪性のコメントまで登場し、状況は歩くことができないほど大きくなった。
有害投稿を管理するネイバー利用者保護パートとカカオモニタリング専任チームは緊急対応令を発動させた。この事態のように社会的波長が大きく2次被害が懸念される場合、緊急対応に入る。
今回の緊迫した状況が続いた30日明け方、モザイクやぼかし処理などの措置をしていない現場写真や映像、事故に関して確認されなかった事実などがオンライン上で急速に広がりながらモニタリングを行う2社の社員はさらに忙しくなった。毎日映像を遮断して利用者が見ることができないように隠すことをしなければならなかった。
30日正午「梨泰院事態」緊急告知後、有害投稿集中遮断
30日正午ネイバーとカカオは梨泰院事態緊急対応令発動12時間で掲示文関連の緊急告知を上げた。惨事現場の写真、映像を最大限控え、虚偽の事実などの流布を中断してほしいという勧告事項を掲示した。以後注がれる申告件を処理し、検索、企画、事業チームなど関連機関を総動員して有害な投稿を見つけてブロックし始めた。選定的な写真と映像は一つ二つずつ跡を包み、嫌悪と憎しみを込めたコメントは隠された。

ネイバーはモニタリング専任チームと緊急届出センターで有害投稿対応を担当している。
有害な投稿による被害を最小限に抑えるために報告が入ると、監視後にその投稿をブロックし、後で作成者に異議を申し立てる。淫乱投稿に対してはリアルタイムでイメージを感知して露出を防ぐAI技術「X-eye」を適用中だ。
梨泰院惨事後、ネイバーは投稿モニタリングを強化している。去る30日からカフェ、ブログなどコミュニティ通知を通じて約款に違反するコンテンツは申告手続きを通じて処理するよう案内している。
カカオ、「オープンチャット」も露出をブロック… 報告累積時にユーザーIDを停止
カカオは利用者保護パートを中心に対応中だ。
普段は有線、オンラインで届け出た後に対応するが、今回の事態のように重大な問題が発生すればアクティブモニタリングに突入する。報告を受けた投稿は露出をブロックします。特定の投稿やコメントだけでなく、問題コンテンツを無分別に共有したカカオトークオープンチャットも検索結果に露出しないなど措置対象となる。
コメントの場合、届出がなくても運営政策に違反した場合、「セーフボット」の人工知能(AI)技術で分析してブラインド処理する。
届出が累積される場合、当該掲示物をあげた利用者に対しても措置を行う。カカオトークでは、友達リストから検索及び露出制限からメッセージ転送制限、チャットルーム利用制限、サービス全体利用制限まで一時的・永久的に可能だ。次に、IDを一時または永久に停止できます。
カカオ関係者は「利用者保護パートと連携部署が週末から緊急対応に入った」とし「モニタリングを強化する一方、外部機関と協業してコンテンツ規制ガイドラインなど利用者保護政策を作っている」と話した。

Facebook、Twitterなど主要SNSも対応に乗り出した。Twitterは、機械学習などを利用して運営原則に違反するコンテンツを識別・削除している。悪意のある投稿に対する申告を受けて該当コンテンツを監視するTwitter運営原則施行チームを運営中だ。Facebookも独自のガイドラインと悪用事例申告チャンネルを通じて措置している。
(注)例のように推敲が十分ではないので、適宜整理し直しています。