深度事實查核workshop
====
國家社會想辦法透過民間力量擊退不實訊息，。有很多平台與工具自律。
做很多事情確保平台呈現的資訊有品質、好訊息。

網路會有一些不是完全真實的訊息存在，google 2018開始google initiate，新聞倡議全事業的新聞記者。
強化他們新聞採訪的能力和查核事實的能力，一起攜手對抗不實訊息
去年推出後帶到了亞太：例如 Trust Media Summit

不只大家熱門討論也帶來困擾，循著global慣例，和有公正力的第三方
去年和事實查核中心討論，把google資源帶進來。
結合台灣實例提供更多事實查核的能量！

## Eoghan
德國來的講師，和google長期配合
到亞太做過很多訓練，本月都在亞太，昨天在香港
was journalist then works for news agency
tackling

## Irene
新加坡今年還有meet up社群和查核專家
相信google有責任確保平台跟產品高品質

## Sophia
我很開心有機會通過google跟owen合作分享在事實查核的經驗
中文社交媒體社群媒體事實查核的技巧，同時也向大家學習

### Eoghan
free available online
- account RUSSIAN troll farm:Jenna Abrams
- tweet送bitc

（網路行銷的成本非常低）
sometimes the information is too important to wait
- 各種不同l1|的Real Donald Trump
- India,whatsapp killing
- kidnapping 的 public safety awareness

### Sophia

資訊查證時代的中文媒體
劉強東影片和音檔
影響整個社會對事件的認識和輿論走向

介紹中國社群版圖：
- 微博、今日頭條、社區平台(知乎)
- 即時信息、資訊、一站式生活服務平台、(公眾號、小程序）
- 短片直播平台
抖音和今日頭條都是最新的，打破過去的微信獨大

今日頭條做到內容推薦，微信每天用戶超過十億
用戶使用時間佔據移動用戶的34%
對比其他國家facebook流量佔有率還是很突出

新網路使用者對網路不熟悉
有不同的媽媽群在複製訊息

- 2014年10月官方公眾號：謠言過濾器
聯合其他不同力量新聞、醫療、科技等等權威媒體
- 微信2015就有闢謠中心，幫助用戶用關鍵字搜索
建立謠言庫，找到謠言訊息舉報給第三方平台進行驗證
- 2016微信開始有產品的觀念，做了謠言小助手可以對謠言庫進行對比
- 2017年騰訊的新聞發佈了的一個進行「較真平台」專注查證大家關注的信息
微信小程序：微信闢謠助手
較真闢謠神器：進入平台後作為讀者填表格寫出想驗證的問題

闢謠文件閱讀超過10.96億次，閱讀人數2.95億-----2018 騰訊網路謠言治理報告
:::warning

Q&A
這些微博有沒有可能被中共政府操控？
這是一個非常好的問題，很多人問。
政府對網路平台的監控這是顯而易見的事情，所有中國都被監控，不會用闢謠平台這麼細節去監控
可能更高層級會監控，但闢謠平台，政府的警務或是政府的發佈機構他其實是第三方
:::

### Eoghan TOOLS

site:........org keywords

FACEBOOK數據追蹤
crowdtangle
可以幫你看到四個平台不同內容的工具包含twitter,instagram, reddit,facebook
很多分享crowdtangle.com/resources

幫助其他新聞記者跟查核者完成日常工作。
每天都會用到：關鍵字、保存、歷史紀錄找特定內容
每天觀測更新狀態
創造dashboard

看到基本頁面，把關鍵內容寄給你
explore 建立 list
變成自訂的關注 list
找到意見領袖 Leaderboard

crowd tangle link checker:chrome 外掛
crowd tangle love display
crowd tangle 需要 透過 Facebook 獲得權限

**TWITTER**

list
1.分地區
2.分類
3.主題
4.特殊事件

- site:twitter.com/*/lists __________
- twitter list copy
- tweetdeck
- twXplorer

## 你也能成為人肉高手
[WhoPostedWhat](https://whopostedwhat.com/)
[PeoplefindThor](https://peoplefindthor.dk/)
[IntelTechniques](https://inteltechniques.com/)
[followerwonk](https://followerwonk.com/)
[searchmybio ](https://www.searchmy.bio/)

### au

請大家先掃這QR code，或是輸入這個，號碼大家都知道。
按讚的人越多，上面的問題會先回答

說我們怎麼對抗假訊息卻不用做到言論查核，保護新聞工作者的紀錄
為什麼我們不使用假新聞三個字？而是使用假訊息
因為學習到如何區分假訊息的思路和國際分享

有很多人把台灣當成重要的模範。
例如如何透過當年垃圾郵件解決的方式
我們下一代不是每個人都在奈及利亞有王子朋友
當年的垃圾郵件之後這中間很感謝gmail和許多平台業者加上檢舉垃圾郵件的功能
過去反垃圾郵件的工作是各自為政，spam house會把大家送出的特徵放到列表上
列表會從哪些網域來、哪些關鍵字在全世界收信有哪些
去區分這些應該要跑到收件夾裡還是垃圾資料夾裡，這不是言論管制
他寄到了，但不會進到我們的注意力裡。第一
我們現在處理假訊息也希望用類似的作法
改變傳染力但不適用事前審查的方法
:::info

有五位朋友問：
你怎麼可以這樣酷呢
:::
:::success

第一
每天不斷練習這樣的問答
出現剛剛尷尬的情況就會請院裡做出新的網站來
這樣下次我問到這個問題就會比較從容

第二
這種互動過程他會讓我們的關注力在彼此身上而不是螢幕上
這就是有很多講法
assistive intelligence
讓我們把時間花在彼此身上而不是手機上
比如大學生上課時
拿起手機就會有想按讚的衝動
或是發廢文的衝動
如果你是老師不能沒收手機
但講課到20分鐘不讓學生用社交媒體他們可能會手發抖的戒斷症狀
但是讓學生掃QRcode就會讓人按讚的衝動被滿足
這就是空間的滿足

第三
這個互動過程沒有保持一定要講什麼的心情
如果我自己有一定要講什麼的話就沒辦法好好聽大家說話
所以為什麼要很酷
我希望我的話題是大家一起決定的
國家有沒有AI國家行動方案
然後我就去查詢行動方案到底是什麼
後來我們就註冊了一個網域就叫做ai taiwan
我們也沒做SEO但他就一直在上面了
因為這個網域就叫ai taiwan所以沒有人可以跟我們拼了
起碼不會各自為政啦
裡面就是經濟部跟科技部

讓真實訊息很容易被找到
政府因為很多原因沒辦法整合
但我每次被問倒都會整合一次

:::
(一直到這裡都只為了回答怎麼可以這麼酷XDDD)

沒有提早結束
舉手的順序高於上面

回答問題
如何看待同溫層的問題

接收訊息都會跟我們認同的東西類似的
感到舒適的圈子
這部分不能太大

同溫層不只現在台灣
應該把訊息包裝成「這跟我有一點關係」的形式
例如我的twitter
我會試著去迎合我想互動的那些人想知道的事情
例如最近台灣五個政府的政策
陳其邁用網路上大家都會喜歡的貓咪
字是有點模糊啦
但你還是會看完嘛

像這樣就沒有同溫層的問題，
有時候同溫層不是因為事實能不能接受
而是感受上給人不舒服的感受
讓人覺得原本相信的東西被挑戰
人對這個東西的忍耐是有限的
但只要配一些貓咪圖片跟溫柔音樂
都可以讓不同見解的朋友慢慢把它看完
這件事情本身可以超越誰po的這件事

所以簡單說如果你讓人感受比較好
那同一個這樣的事情就可以被觸發
行政院會看到上伯恩夜夜秀根還願跟貓咪影片
我想這是我們去處理假訊息的觀察
流傳的假訊息60分鐘內把看到的訊息包裝成和假訊息同等有傳染力的形狀
那他就可能先收到我們的
這在同一個news cycle可以做平衡報導
如果拖到6個小時就會變成比較單面的報導
所以我們現在用可愛的方法突破同溫層

Q3
新聞兩個字在中文同時是news跟journalst的翻譯
但我們講假新聞時可以講不是新聞的東西假裝成新聞
或是記者寫出來的東西覺得是假的
這兩個在中文裡語意不重疊
有一次和柯文哲討論時
記者寫出來的是真的，但編輯下了標題那是假的
我們可以看到這三種情況在操作型定翼不重疊

這對於新聞工作者的名譽有不好的結果
像是把新聞工作者推到對立面
行政院不會用假新聞三個字啦
我努力很久
行政院都適用假訊息三個字
這個定義比較明確

intentional harmful untruth
對不特定大眾的危害
有傳染病時對身體有危害
harming the public, not just government

所以這裡特別要講
惡假害都要滿足
1.非惡意
2.不是假的
3.沒有造成傷害
就不算假訊息

台灣沒有因為處理假訊息而導致言論自由倒退
這是好價值會繼續保持

防治假訊息和言論控制的影響該如何解決
柯文哲市長對談時說是編輯下標不滿意
但我覺得標題殺人或是圖文不符都比叫做假新聞好
我們沒有防治假消息
我們是防範假消息帶來的「危害」

只有當假訊息惡假害的害高到一個程度，我們才會值得花心力去進行澄清
第一我們預算有限
第二他本來沒有要流行，但你一澄清他就跟著流行

為什麼澄清不是言論箝制
我們只是希望把訊息分享給大家
也不會像新加坡覺得政府應該更正就強行要求其他媒體一起去抨擊那家媒體
我們透過即時澄清去讓可以即時平衡報導的各位可以平衡報導

如何避免政府擴權影響言論自由
1.言論自由的影響分成
事前審查
貼出去帳號不見、貼不出去
在PRC有閒論自由但是沒有言論後自由
2.寒蟬效應
覺得發出訊息會有不好的後果，被追訴
他不是在網路上做一件事情去舉發他
而是不是網路上如果講這句話散佈謠言
比如金融秩序上，就會網路上面對面造成公眾危害
現在只是有法規命令說在網路做這件事也要適用相同法律
如果本來對言論自由有所約束，是因為這些公共利益大於言論自由
不是線上言論就有不同講法

A.不做事前審查
B.懲罰假抑制假以現有的法律制度

我這樣會講得太快嗎？
我以前做口譯工作，很在意口譯品質

主觀批瓶、陰謀論
以事實查核的角度
如果我感受不舒服怎麼查核呢？
人有偏見，污名化很難處理
社群網站最容易傳播的就是憤怒按鈕
個人憤怒可以透過群體憤怒變成outrage
憤慨
會想一起做點什麼

被獵巫的感覺很不好
這種感覺也容易蔓延

我有個樂觀的回答
隨著大家看到越來越多這些訊息
每次都是減敏療法
本來對什麼過敏，太容易被召喚，所以到100次就會覺得算了
但不能解決短期讓社會分裂的題目被召喚。
悲觀的講法是
不覺得在新的讓社會分歧的事情可以讓社會遏止同仇敵愾
分成我群他群的
雖然沒辦法根治，但還是有很多線上工具讓大家看到實際情況

例如polis
跟AIT
讓對外交有興趣的朋友回答
如何讓台灣在國際社會積極參與
他最大的不同就是
他沒有回覆的按鈕
如果有回覆那troll小白、中二
就會很容易人身攻擊

如果你看到問題很爛，你只能問更好地問題
你不能回應她
那你的問題會來到跟你接近的位置

只能網上投票跟往下投票
雖然只看大眾媒體
只有這五件事情佔據所有人注意力
但這種沒有人回覆的空間
大部分人其實是很一致的

今天早上數位對話的分享裡大部分人可以分成兩邊
唯一差別是對一兩個想法statement很不一樣
每次中國阻擋台灣參加國際活動時美國應該要找另一個活動可以加入
不管你是什麼營
都同意做基本的東西
我們討論時基於這些做討論，而不是拿少少的浪費大家時間空間
任何人都可以藉此發展出新的疫苗，對於公共討論
看到這個形狀就不會輕易被煽動

了解不同立場的人有一些共同價值
這件事情我覺得是最重要的
他每一次在傳播時機率可以減低

行政院目前的網軍編制如何

行政院目前以發言人為主
有一些部會例如農委會收到很多假訊息
就有請五樓、不是專業團隊
他的編制裡有新媒體溝通的朋友跟作政治判斷的朋友
其實六十分鐘是一個理想值
有一些事100多分鐘左右

我們有個平均統計
發言人都要強調不會有賞罰
但是有同儕壓力
旁邊都回得好快喔，我必須強調不會成為考積的參考
大家速度會越來越快

現在主要假訊息仍是以人力查核為主
不是什麼事情都要機器判斷
如果沒有人類在中間會變成system bias
我要強調這不是政府網站
它中間是一個0啊
他沒有無反性別平等法

你每次看到讓你義憤填膺的謠言影響精神衛生
機器人是不會有心理問題的
你就會有機器人幫你吸收不滿
機器人會告訴你有很多朋友看過這則訊息
他是用互動性的方法
讓只會用LINE但是不會用google的朋友能用這個介面去破解謠言
就是email放一個flag不一樣的
這就是我們這些辛苦查證的朋友

我們用真的假的就能知道台灣最流行的謠言是哪些
為了精神健康
事實查核中心可以利用這個跟其他朋友合作
知道哪些事情正在流行
大家的時間可以花在真的有potential的事情上
不用花在看過就算了的事情上
這種共生關係我覺得是很好的例子
中間machine learning能讓人放在有好的影響力的事情上
最重要是媒體識讀的能力
例如打電話問醫師，可能還是要倚賴人

最後裡面每一個重複的部分都能用機器簡化

事實查核報告都在手上了
對方權力比你大
社會資本會被扣啊

可以使用美玉姨由這位阿姨幫你回應
這樣可以比較快回應這些謠言
如果美玉姨沒用除了發明另一個等等之外
比較好的做法就是不要針對訊息說不是真的
而是跟他分享一些真的訊息
只是剛好跟他分享過的有關聯
我常常去看真的假的裡面是真的的部分
這些對我來說是很有用的
這些看起來是假訊息但其實是真的
這些內藏的訊息是真實的

這告訴我們說
衛福部疾管署可以來看
讓長輩更容易轉傳的方式

一直去看查證是真實的
就能好好做成長輩圖

大家只是想關心家人
他們只是想要關心家人
你就多給他一些已經查過是正確的彈藥庫又能讓他關心家人
他能累積社會資本
但是他又能關心家人

讓他們在同一個生態位

你就需要解決一次你的痛苦

八成真兩成假
回應兩成假的部分呀
看行政院即時訊息澄清
他的新聞工作裡
有很多不是錯的
報導真的，但他有一個揣測
但我們可以說，你揣測是我們沒有講清楚
兩成假不一定是故意的，他就沒有惡意了
misinformation
這樣我們就可以去說，我幫你把兩成的拼圖拼起來
大家有看到我在網路上去擁抱小白精神按摩
我都會很正經的針對我能貢獻的部分去具體回應
他是回給旁邊看到的人看的
我很願意分享從我角度看到的事情
公信力喪失會救不回來
斯多葛學派聊很多面對這件事情

對於大陸，我想你是說中國大陸嗎？這裡應該不是指南極大陸
中國

我覺得我們本來就可以影響輿論
但你是願意署名或是假裝成別人
我們政治工作跟新聞工作，寫東西就是要給人看
廣義來說都是影響輿論
我們願意負文責[cofacts] 真的假的專案簡介

如果你是境外朋友砸錢讓某個人當選
不會用政治獻金
而是公關公司精準行銷投放
上次選舉時這些都是合法的

我們在亡羊補牢情況
把美國的誠實廣告法案一字不漏抄到行政院草案
競選期間想讓人當選不當選
Honest Ads
(這裡都被吃掉了QAQQQQ)

源源不絕的訊息從自動整理到查核
讓各個平台
如

建議媒體指出行政院發出的新聞稿有哪些差距
我們追金流為主
我們透過選罷法和公投法修正處理這些問題

自動把新聞稿語言翻成鄉民想看的語言或是貓咪圖片
只是如何確保轉譯完後的效果

文字部分有個talk to transformer
是英文的AI
可以寫出任何東西來

有空多玩
這就是我們的對手手上有的東西
我們也需要相同的創造力
把冗長的圖片翻譯成貓咪圖片
他其實就是機器學習技術

這一整個研究都是open AI
開放原始碼

惡意虛假危害

拼湊出完整的真實
了解事情不是非黑即白
把圖片放到下一代所有成長的環境

common understanding

---
https://www.osintessentials.com/
Ex：twitter Italy
presume suicide bomber
one of the terrorist by Spanish
其實只是記者拿他的新ipad自拍啦啊啊啊
推特跟fb的熱門話題
有沒有人知道這個小孩在哪
Ex.2
G20很多人圍著普丁

https://docs.google.com/presentation/d/1LJ-0roEUwlehrWgBXHrzYvo5swXQAel0mNyU7CTSzAI/edit#slide=id.g5878ca62c0_1_4335
### REVERSE IMAGE SEARCH
善用google圖片filter
Eoghan最常用的是時間
Crop and search for objects, logos etc
Use thumbnails & key frames for video searches

Powerful alternative:[Yandex](https://yandex.com/)
google圖片給你useful content
Yandex neutral 中性
所以兩邊可以同時使用
一樣用照相機icon找找
強項是臉跟logo，有些google找不到的會找到。

不同情況下適用不同工具
所以都可以用用看❤️

[TinEye](https://www.tineye.com/)
通常用在找找照片或設計是不是被盜用的
用Filter，時間filter好好用
sort by oldest first
use as back-up

#### Extensions
- RevEye(chrome外掛)
RevEye Reverse Image Search
點右鍵，就可以用各種方式一次找上述的圖片找找

- Image Search Options(Firefox add-ones)

google lense
visual search
圈哪裡就找哪裡

- INVID
反向影片找找，請用url
會出現上傳時間
automatic grneralize time

### 中文圖片搜索
百度BAIDU識圖
圖片庫：免費試用圖像搜索
google/TinEye/
360 識圖(公眾人物圖像識別+HD)
國搜識圖(地理位置、風景，辨別圖片在某地點拍攝)
Lightshot(截圖工具) chrome extension
(可是就像我不會下載抖音，所以這個不太想嘗試.....Q_Q)

Q:「參數不合法」....是什麼意思
Q:圖片出現在中國，google會找不到嗎？
A:google的中文素材不夠多

抖音、快手都會自帶浮水印，會有用戶名
第一個找weibo

### Finding Origin Content

Ex.Dihydrogen Monoxide
how you frame information
## Analysing
Usage permission
- Legal
- Ethical
Verification

Scrapers
- dramatic videos
- video vary in kind and location
- dramatic language !!!!you would never believe what happen next
- urged to subscribe and like

consistent with previous posts
有financial motivation嗎？viral, money, ads
有其他帳號嗎

普通人會同時有很多社交平台使用中

社群媒體稽核
[knowem?](https://knowem.com/)
用user name，死都口他to check
where the user name is available

請注意沒有available的，表示正在用
然後一一去找，看是不是同一個人

Evaluating twitter accounts
twitter有很多假訊息
when the account set up?
之前的tweets
where are the tweeting from?
links to other social profile?
profile photo original?

twitter上也會有長得漂亮的姊姊假帳號

Spoonbill
看investigating the history of twitter account
不用登入
spoonbill.io/data/username

sign in :可以訂閱信件，daily email
follow up twitter
keep track of changes on account you are following
心理學家應該會滿有興趣研究呢？

Youtube
tab
/about
show initiative
還會連到死翹翹的google plus

使用twitter推測mail
go to twitter
forgot password
email a link to ___________
很多公司有protocol email

[hunter.io](https://hunter.io/)
help find email address associated domain
see most common pattern

Searched Spokeo
可以找到正確的人
among listed family members

### pipl
### MAPS
- google map
- Yandex.ru/maps
- Bing
bing.com/maps
### wikimapia

### Stalkscan
https://stalkscan.com/
### instagram 大頭貼找找原圖
https://www.instadp.com/
### Tweetbeaver
### TRAVIC
### FlightAware
### LiveATC
### Archive
### Webrecorder

---

## Verification
### Date and Time

Time Stamp
- twitter:twitter設定時區(沒有登入就用標準時間)
- Facebook:看電腦時區
- Youtube:永遠用pacific standard time
- Instagram:available in pacific standard time and coordinated universal time(UTC)
(national standard, doesn't change in summer time)
twitter的時間是依照你自己設定的時區
made the post, 不在乎他人待在哪個時區
因為看的是內部設定，所以跟在哪裡都沒關係

twitter setting and privacy, setting time zone
Facebook duration:ex.2 days ago
but thetime can be seen by hovering over date in the static post
(click on the time),

### InVid
set private to unlisted public, that it can find the video as uploaded
check youtube video, even posted as private
critical to use it in the right time

(click analysis)
allow you search with Google imagage, yandex,TinEye

### Instagram
查證instagram的時間
右下角的點點們
options, embed
Embed code get!
「Copy embeded Code」
cmd+F datetime code
copy the code
ex:datetime= 2018-02-05 T10>Feb 5 2018 (pacific standard time)

instagram 限時動態暫時還無法。未來也會研究VK, snapchat

### SunCalc
來看太陽角度
[SunCalc](https://www.suncalc.org/)
watch the sun
3條線
sun rise, sun set
chaging the latitude, season

(我覺得這個超難的)

### WolframAlpha
收集不同時間的天氣情況
ex.一週間

### Geoguessr
https://geoguessr.com/

### 中國情況
[weibo scope](https://weiboscope.jmsc.hku.hk/wsr/)
找被刪除的貼文
現在已經只做research
看到最新被刪除的。
[Wechat Scope](https://wechatscope.jmsc.hku.hk/)

- 短影片網站
ex 抖音
對短影片，發佈時間不重要
所以查證很難

### exercise

https://www.osintessentials.com/87kjyhdrthsretyh
1.Yeats statue outside Ulster Bank building
2.曼谷 hint palace hotel
3.SPAR Vienna 3航廈
4.透過google map 俯視看得到

### Trainer's Guide
在googole initiative
know your trainees

verification skill
core tools
start community: slack, facebook, messenger,LINE group, telegram, whatsapp
台灣的媒體競爭還沒有印度嚴重喔

### Presenting the material
engage the group, ask questions
user personal experiences
don't bluff
turn off desktop notifications!!!!

http://v.gd/TPpractice

https://docs.google.com/presentation/d/1LJ-0roEUwlehrWgBXHrzYvo5swXQAel0mNyU7CTSzAI/edit#slide=id.g5878ca62c0_1_4197

### Workflow
Delivery

know your team
- expertise(technical, linguistic...)
- experiences(travel, military)
- using spreadsheet (把人都記下來)

Crowdsourcing knowledge
- reach out public
- be aware of potential pitfalls
- based on inventory

Transparency保持資訊透明呀呀
- trust
- open about workflows
- Engage