顯示廣告
隱藏 ✕
※ 本文為 MindOcean 轉寄自 ptt.cc 更新時間: 2018-11-07 01:26:17
看板 Gossiping
作者 clothg34569 (提拉米蘇冰淇淋)
標題 [爆卦] 異常爆文分析器V1.2_新增推文ID統計
時間 Wed Nov  7 00:56:23 2018


一樣,東西放在GIT
https://github.com/Daniel34569/PTTCrawler
GitHub - Daniel34569/PTTCrawler: 測試看看PTT的爬蟲
[圖]
測試看看PTT的爬蟲. Contribute to Daniel34569/PTTCrawler development by creating an account on GitHub. ...

 

然後使用方式和介紹前面兩篇有了就不贅述:
https://www.ptt.cc/bbs/Gossiping/M.1541499806.A.EB8.html
[爆卦] 異常爆文分析器V1.0 - 看板 Gossiping - 批踢踢實業坊
[圖]
[圖]
[圖]

大家安安,八卦板首PO,如果有違反板規麻煩告知一下,我再修改 0.前言: 就,最近想說拿八卦版來玩玩爬蟲,又看到一堆人說八卦有異常爆文的情形 所以就寫了個異常爆文分析器來當練習 1.介紹:
 
https://www.ptt.cc/bbs/Gossiping/M.1541510766.A.2BE.html
Re: [爆卦] 異常爆文分析器V1.1 - 看板 Gossiping - 批踢踢實業坊
[圖]
[圖]
[圖]

簡單做一個小改版 增加了分析特定ID的功能 檔案一樣放在GIT上  多了兩項參數可以設定:要不要搜尋ID和搜尋的ID
 


首先這次改版主要是新增了ID統計功能

簡單來說,異常爆文中(定義看前篇),N推內的ID會被記錄起來,N為自定義參數

再跑完目標範圍(可以為指定篇數,EX:770000~780000;或者特定ID發的文)之後

會統計出每個ID的出現頻率


如果要找網軍的話,我是建議可以搭配之前那個i'Analyseur使用效果更好XD
另外也建議要翻一下那篇文章中特定ID發了甚麼言再比對

不過共通盲點應該是找不出政治廢人和網軍的差別


接下來會以Soyud12和Kingkingcold的發文當作範圍來作為範例

使用這兩個的原因是,剛好兩個不同立場,而且都有大量爆文可以作為分析使用

不得不說,八卦版真的是練習資料分析的好地方,八十萬筆公開資料可以使用

格式又很整齊漂亮




首先是Soyud12

參數與運行結果(因為只有11篇所就全貼了)

這次參數門檻為,第25篇推文與發文間隔<10分鐘...
雖然Soyud的就算用5分鐘也只會少一篇
https://i.imgur.com/XApSb4B.png
[圖]
 

符合設定門檻的10篇的前25則推文,總共250則推文
其中的每個ID推文次數
https://i.imgur.com/CRayU9A.png
[圖]
 

前50則推文,共500則
每個ID推文次數
https://i.imgur.com/lZfHNLK.png
[圖]
 


再來是KKC

參數同Soyud12
https://i.imgur.com/8vTkNB2.png
[圖]
 

擷取前25則推文
只有一張的原因是因為KKC兩百多篇,跑兩次好累= =




結論:

其實單從這個結果來看,我會認為KKC的文章似乎比較少受到網軍影響

而且他過門檻的比例也低很多(191篇中81篇過)

然後重複ID推文數也少很多

而Soyud12,我覺得已經可以接近網軍分析的範本了

雖然Vner那個更誇張,但是Vner發文量太少所以就分析Soyud12的

14篇文章中,11篇文為爆文(剩下三篇非政治),其中10篇過門檻

甚至有9篇過5分鐘的門檻


然後重複ID推文比例,10篇中可以和KKC 81篇相比

就我自己而言,我覺得這是意外的機率有點低啦

應該可以合理推測,這是網軍的機率還蠻高的

PS:rorobus我不知道是政治狂熱還是網軍

---

最後,如果有心做標籤的話,其實今年的選舉蠻適合拿來做機器學習分類練習的

用語意分析來找出大量推文者的政治傾向,以及是否為網軍(不管是紅藍綠)

應該都是不錯的娛樂XD

--
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 140.112.73.69
※ 文章代碼(AID): #1RuSUvES (Gossiping)
※ 文章網址: https://www.ptt.cc/bbs/Gossiping/M.1541523385.A.39C.html
chrisliu0530: 哇1F 101.137.201.42 台灣 11/07 00:56
angelgirl13: 一定沒有我2F 49.218.49.142 台灣 11/07 00:56
Tchachavsky: 可以納入立院ip進去3F 140.117.221.5 台灣 11/07 00:57
josi5566: 水喔,雖然一堆黨工都認得了4F 49.217.55.12 台灣 11/07 00:57
asukaseen: 專業5F 42.74.118.217 台灣 11/07 00:57
Tchachavsky: 210.69.138.XXX 這串6F 140.117.221.5 台灣 11/07 00:58
limoncool: 神 推7F 220.135.150.248 台灣 11/07 00:58
ruokcnn: 少了ground truth做label怎麼train8F 114.136.211.81 台灣 11/07 00:58
LSLLtu: 推9F 123.193.91.218 台灣 11/07 00:58
DDR678: 推熱情10F 118.160.93.97 台灣 11/07 00:59
maxisam: 推 opensource11F 174.34.35.197 美國 11/07 01:00
funkD: 這個超猛  網軍無所遁形了12F 223.141.193.33 台灣 11/07 01:01
joohsieh: PTT果然是學術論壇   專業給推13F 111.246.116.147 台灣 11/07 01:01
cowardlyman: 讚14F 49.159.128.75 台灣 11/07 01:01
a80563: 肉肉巴真的很熱血餒15F 118.171.69.74 台灣 11/07 01:02
hvariables: 八卦板突然多了一些奇怪的爆文16F 114.25.68.75 台灣 11/07 01:02
hvariables: 裡面的推文內容比人工智慧推文還不如
Rrrxddd 
Rrrxddd: 一丁沒有我18F 223.137.225.178 台灣 11/07 01:03
mithralin: 肉肉巴士黨工無誤19F 118.167.114.38 台灣 11/07 01:03
ph1142002: 推拉20F 175.182.190.174 台灣 11/07 01:04
dddc: 感覺很好玩21F 36.238.50.225 台灣 11/07 01:04
Rrrxddd 
Rrrxddd: 幹 為什麼沒有我22F 223.137.225.178 台灣 11/07 01:05
girafa: 推!GJ23F 223.139.71.149 台灣 11/07 01:06
kkes0001: 樓上很常見24F 101.14.243.25 台灣 11/07 01:06
CAKE85C: 之前一堆五毛抹黑蘇貞昌有網軍都被站長專25F 223.137.155.203 台灣 11/07 01:06
CAKE85C: 業打臉了
twic: XDDDD政治廢人跟網軍選一個27F 36.225.28.1 台灣 11/07 01:06
david22: 超強28F 101.15.97.20 台灣 11/07 01:06
x007: 這啥29F 1.165.188.2 台灣 11/07 01:07
darknote: 從北連中胡那時就一堆網軍在出沒了30F 114.43.100.83 台灣 11/07 01:07
darknote: 只是那時是在政黑 輸了後就改往八卦跑
pttxo: 推32F 114.136.104.155 台灣 11/07 01:08
baiweilo: 推33F 118.168.233.155 台灣 11/07 01:08
Tchachavsky: 黑柯的都立院ip出來的34F 140.117.221.5 台灣 11/07 01:08
scores: 我家裡也有況啊 挖彼特幣35F 114.45.157.21 台灣 11/07 01:08
jaguars33: 幫高調36F 27.147.19.249 台灣 11/07 01:08
sheepxo: 專業37F 180.177.99.158 台灣 11/07 01:09
lwamp 
lwamp: 這樣黨工要買更多ID 又更值錢了38F 180.217.150.51 台灣 11/07 01:09
OEC100: 網軍會不會來噓你阿39F 110.50.168.181 台灣 11/07 01:09
justice2008: rorobus之前有人講過了 他有四隻分身40F 218.161.49.70 台灣 11/07 01:10
s81048112: 推!41F 111.250.181.92 台灣 11/07 01:10
justice2008: Soyud12的問題很大 為啥我說這程式42F 218.161.49.70 台灣 11/07 01:10
burk11832: 推這篇  整天看有心人帶風向很無言43F 106.107.131.235 台灣 11/07 01:10
justice2008: 是網軍殺手 不適沒原因的44F 218.161.49.70 台灣 11/07 01:10
chiubaoer: 高調45F 220.129.63.40 台灣 11/07 01:11
resudi: 這個可以46F 114.37.165.220 台灣 11/07 01:11
CAKE85C: LSO55666等100人專門打蘇貞昌47F 223.137.155.203 台灣 11/07 01:11
tony900735: 八卦再次回來XDD48F 114.136.59.241 台灣 11/07 01:11
granx: 推49F 111.248.76.200 台灣 11/07 01:11
justice2008: 講反了吧? lso5566專打蘇網軍50F 218.161.49.70 台灣 11/07 01:12
SupCat 
SupCat: 五毛吃屎51F 114.37.173.17 台灣 11/07 01:12
ZMTL: 第一時間還覺得兩邊最多推文都18推啊,仔細52F 218.166.254.9 台灣 11/07 01:13
justice2008: 另外今天那篇ai系列也可以分析一下53F 218.161.49.70 台灣 11/07 01:13
ZMTL: 一看才發現是18/250跟18/2025 XDDDDDDDDDD54F 218.166.254.9 台灣 11/07 01:13
funkD: 別再提那100人名單了 我看了都笑死了55F 223.141.193.33 台灣 11/07 01:13
jaeomes: 推56F 49.217.80.144 台灣 11/07 01:13
yamitis: 網軍急了 幫QQ57F 114.43.115.110 台灣 11/07 01:14
funkD: 當網軍也不認真點 薪水怎能領的下去58F 223.141.193.33 台灣 11/07 01:14
jimmyliu1217: 不是還有一個鰲拜 那個應該也是廠公59F 61.58.167.195 台灣 11/07 01:15
neverli: 推60F 115.43.136.207 台灣 11/07 01:15
hachibuya: 推61F 119.104.132.252 日本 11/07 01:15
samrt5566: 推62F 123.192.88.244 台灣 11/07 01:16
cowardlyman: 好文一定要推3次63F 49.159.128.75 台灣 11/07 01:16
bruce1119: 讚讚 潮水退了64F 36.225.87.196 台灣 11/07 01:16
Oceanss: 辛苦!65F 114.44.123.165 台灣 11/07 01:17
pain0: 兩邊擷取的量是不是不一樣啊66F 223.136.93.147 台灣 11/07 01:17
hk5566:67F 61.223.96.45 台灣 11/07 01:18
ZMTL: 因為兩邊的文章量有差 Soyud12發了11篇文,68F 218.166.254.9 台灣 11/07 01:18
Cactusman: 笑死69F 223.140.48.83 台灣 11/07 01:18
nsaids: 厲害70F 118.170.76.116 台灣 11/07 01:19
ZMTL: 其中10篇文符合這篇設定的關注條件,KKC po71F 218.166.254.9 台灣 11/07 01:19
ZMTL: 了191篇文,其中81篇符合關注條件
loverxa: 廠工廠工 夜裡哭哭 之前對DPP不利的新聞73F 153.234.2.247 日本 11/07 01:20
samrt5566: 廠工的ID大家都看到快背出來了74F 123.192.88.244 台灣 11/07 01:20
loverxa: 還有連噓50次以上的75F 153.234.2.247 日本 11/07 01:20
ZMTL: 然後再深入去看Soyud12這10篇文的前25推/總76F 218.166.254.9 台灣 11/07 01:20
mmc109815038: 哈哈77F 110.50.189.244 台灣 11/07 01:20
ZMTL: 數(10*25)跟KKC這81篇文的25推/總數(81*25)78F 218.166.254.9 台灣 11/07 01:20
janhon: 如果是real time的,去Q 推文的登入時間79F 36.233.46.209 台灣 11/07 01:21
janhon: 跟推文時間的差距應該很有趣
Aquariussoul:81F 114.37.233.131 台灣 11/07 01:21
ant0210: 只能推了82F 220.142.200.182 台灣 11/07 01:22
dfast: 推83F 180.176.108.164 台灣 11/07 01:22
pipitruck:84F 49.219.160.192 台灣 11/07 01:22
jimmyliu1217: 這篇還沒被推爆 看來是打到廠公了85F 61.58.167.195 台灣 11/07 01:22
kolsir: 好猛喔…86F 101.12.211.26 台灣 11/07 01:23
ZMTL: 不過這程式要先裝好多東西ww87F 218.166.254.9 台灣 11/07 01:23
zxc8903756: 厲害88F 101.9.63.73 台灣 11/07 01:24
humphrey0923: 推89F 42.77.162.53 台灣 11/07 01:24
zxc8903756: 我這樣重複推會被算入網軍嗎90F 101.9.63.73 台灣 11/07 01:25
zxc8903756: 呵呵
qk3380888: 政治廢人和網軍應該在內容上會有點差別92F 49.159.115.129 台灣 11/07 01:25

--
※ 看板: Gossiping 文章推薦值: 3 目前人氣: 0 累積人氣: 777 
作者 clothg34569 的最新發文:
點此顯示更多發文記錄
分享網址: 複製 已複製
( ̄︶ ̄)b fishbone1965, leon999su, nohost 說讚!
1樓 時間: 2018-11-07 02:31:07 (台灣)
  11-07 02:31 TW
loverxa 廠公廠公叫! 結果IP在國外呢! 笑死!
11-07 02:31 TW
Kabrera:[自己刪除]
3樓 時間: 2018-11-07 03:09:01 (美國)
  11-07 03:09 US
統計的實際運用於生活 依不一樣的主題都可以寫論文了
4樓 時間: 2018-11-07 15:37:30 (台灣)
  11-07 15:37 TW
去地方板抓會更精彩
5樓 時間: 2018-11-08 01:07:32 (美國)
  11-08 01:07 US
廠工是中國用語
r)回覆 e)編輯 d)刪除 M)收藏 ^x)轉錄 同主題: =)首篇 [)上篇 ])下篇