隨著智能手機等聯網設備逐漸普遍化，網絡已成為現代生活不可或缺的一部分，然而伴隨而來的網絡暴力更是四處泛濫。網絡暴力是一類在網絡上發表具有傷害性、侮辱性和煽動性的言語、圖片、視頻的行為現象，被稱之為“無形的殺手”，近年來導致自殺抑郁等心理摧殘的網絡暴力事件層出不窮。

面對泛濫的網絡暴力，Instagram正在采取行動反對其平臺上的欺凌行為。去年，Instagram推出了一個增強版的評論過濾器，該過濾器通過機器學習，能夠發現具有網絡暴力性質的關鍵詞和語言。

隨著公眾對Facebook的信任度下降，Instagram仍然是該公司產品陣容的亮點，而且它還有可能被Facebook破壞的丑聞所波及。在這種情況下，使用人工智能來幫助清除令人反感的內容，并讓Instagram成為一個擁有良好氛圍的家園是非常重要的。

現在，該公司正在擴大有關照片和字幕類似篩查的覆蓋范圍。最近，Instagram宣布它將使用AI“主動檢測欺凌性言語”，這是一種機器學習工具，用于檢測照片和字幕中的欺凌行為。如果人工智能工具認為照片不合適或不受歡迎，它會發送給Instagram社區運營團隊進行進一步審核然后再將內容發送給人工審查。

去年在Wired發表的一篇報道解釋了Instagram的機器學習評論過濾器的一些細節，并確定這種技術不適用于內容審核。大規模部署人工智能成本較低，但它仍然無法處理人類背景之下的細微差別，這就是為什么這些新的欺凌過濾器還需要向人工篩檢人員發送內容以執行最終檢查，沒有監督的自動化是一種災難。

這個名為DeepText的系統基于人工智能系統和word embeddings的概念，旨在于模仿人類語言的理解方式。當系統解釋一個單詞時，它會嘗試以人腦識別單詞的方式，并結合語境來確定其含義。DeepText作為內部工具構建的，可以讓Facebook工程師快速分類大量文本，創建分類規則，然后構建產品用以幫助用戶。

據Instagram發言人稱，人工智能工具會檢測字幕和評論中的欺凌行為，例如攻擊某人的外表或幸福。它還對圖像和字幕進行比較，排名和評級，以便在照片中發現欺凌行為，例如分屏圖像中某人的惡意比較。

并且Instagram還為直播視頻推出了欺凌評論過濾器。過濾器可以在直播期間檢測并阻止令人反感的單詞。Instagram已于5月推出了過濾器，用于Feed，Explore和Profile中的照片和視頻評論過濾。

Instagram表示，人工智能系統不只是分析照片標題來識別欺凌，還有照片本身。在向The Verge發表講話時，一位發言人舉例說明，人工智能正在尋找分屏圖像作為潛在欺凌的例子，因為一個人可能會與另一個人進行負面比較。人工智能將尋找的其他因素尚不清楚，但這可能是一個好主意，當Facebook宣布它將使用人工智能時，人們就立即開始考慮如何應對這些過濾器了。

Facebook和Twitter也推出了類似的舉措來限制其平臺上的欺凌行為。Twitter在去年十月制定了一個時間表，以便從其平臺中刪除裸露和仇恨圖像等內容。本月早些時候，Facebook添加了一些工具，允許用戶一次隱藏或刪除多條評論，并允許用戶代表朋友或家人報告欺凌或騷擾。

除了新的過濾器，Instagram還推出了“善意的相機效果”，這聽起來像是一種傳播積極信息并能提高用戶參與度的方法。使用后置攝像頭時，效果會在屏幕上顯示“多種語言的親切評論”；切換到前置攝像頭，你會得到一絲閃亮的心和禮貌的鼓勵來“標記你想要的朋友”。

網絡是把鋒利的雙刃劍，當我們利用網絡拉近世界各地之間距離的同時，不也能忽視網絡“噴子”、“鍵盤手”的危害，這次instagram所做舉動，是否能為現今魚龍混雜的網絡環境帶來一股清流，是值得我們期待的。