[問題] 備份網站的技術?
花了很多P幣,跟時間再研究google跟備份網站
備份網站不是用多線程爬蟲技術嗎?
但是好像發現了,沒有這麼簡單
好像每個版,測試過,被備份的方式不同....
說簡單,但也不簡單
這類網站所依賴的技術,其實滿簡單的
但是PTT只要發文權限跟方式不改,永遠都一定會被備份
發文的那個瞬間,因為很多地方不能改變,只能發文後再改
所以,第一次的文章標題,還有發文者一定會被紀錄
本文可以修改,所以必須等第二次才能解決
想問一下,PTT備份網站,像是PTTWEB 所仰賴的技術.....
謝謝!
損失好多P幣跟時間,血淚,才得到這種結論.....
人腦真的比不上電腦QQ
--
※ PTT 留言評論
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 101.137.78.205 (臺灣)
※ PTT 網址
→
好屌
噓
單純問爬蟲技術,請洽專板,謝謝
專版人少,不見得能解答,之前這裡有人解答備份網站的動機! 超厲害!
推
去引文就會備份了 哈哈
→
已備份
→
蛤 你在說啥
→
※ 編輯: yobook (101.137.78.205 臺灣), 10/08/2021 18:38:07
已備份你的備份
噓
你怎麼會在這裡問這個 ... 這裡像 crawler 版?
→
要問也去八卦吧
→
softjob問看看??
27
[請益] 備份網站的技術?花了很多P幣,跟時間再研究google跟備份網站 備份網站不是用多線程爬蟲技術嗎? 但是好像發現了,沒有這麼簡單 好像每個版,測試過,被備份的方式不同.... 說簡單,但也不簡單7
[問卦] 真的沒辦法停止PTT的網路爬蟲?PTT很多備份網站 多道真的有點誇張,很多鄉民都有貼了 但是 真的不能停止requuests的發送嗎? 或是就算備份,也不讓google搜尋搜到的方法?7
[問卦] 在ptt發的文章加上台獨字眼防爬蟲備份現在爬蟲網站盛行 Ptt的文章 只要一發佈 就會被大量備份 你刪文也刪不掉這些備份下來的痕跡 但這些爬蟲網站 好像就說都是中國那邊的 主要都是要產出到內容農場之類的7
[問題] pttweb是PTT的官方網站嗎?最近發現一個網站,裡面全部是PTT的文章 想問一下,因為之前已經刪掉的文章,竟然還在裡面出現? 而且這個網站是號稱官方的備份網站? 很好奇,這個網站是PTT官方的網頁板?1
[請益] 備份網站可以拿來做資料庫實驗嗎?因為寫了很多的e-mail 拜託備份網站刪文 但是一年多來,都沒有結果 想問一下,既然這種沒有經過作者同意的備份網站 處於非法狀態,而且主機端又在海外 那乾脆自己研究,然後查詢其主機端5
[問卦] 所以說 ptt的發文到底怎麼刪乾淨大家都知道 現在一堆爬蟲網站 即時性地在備份ptt 只要一發文 沒多久就能在各種xxptt pttxx之類的網站翻到 你刪文還沒用4
Re: [問卦] 軍武版認為該版遭中共監看一定會監看 很多年以前中國就有一個網站 UCPTT 到現在都還活得好好的 隨時備份PTT站上的所有文章 基本上只要發文就會被 UCPTT 備份了 軍武板討論軍事情報 必然會被監看3
[問卦] 驚!Ptt發文、留言備份484掛了?最近去看一下Ptt網頁板 就去查發文留言的網站 沒想到最近好像掛了 最新紀錄只有到2天前 一般發個半小一小就會被備份了1
[問題] 查詢2010年2月女孩版的所有文章?因為最近要對某段時期的PTT系統,還有文章做研究 想問一下 不知道有沒有辦法,可以了解某段時間 像是我所說的 如何切到例如2010年2月間的,像是2月6日到2月13日 特定時間女孩版的文章
23
[心情] 父母走了 還會跟兄弟姐妹聯絡嗎?12
[閒聊] 立冬吃什麼進補?5
[問題] 如何建議提高菸捐呢?7
[閒聊] 被問到隱私會怎麼回答?7
[心情] 每到重要時刻就肚子痛5
[討論] 今天晚上吃甚麼好呢5
[討論] 阿給要怎麼改才能到處都有4
[閒聊] 節慶月的旺季到了@@4
[閒聊] 去夜市都吃啥4
[灑花] 今天下班要順便去取貨3
[難過] 原來培根不是肉3
[討論] 自律神經提早老化?9
[討論] 越晚精神越好2
Re: [閒聊] 上班等下班 每月等發薪7
[閒聊] 女孩們睡前也會報復性滑手機嗎?2
[討論] 對正妹全心全意付出有機會至少牽到手嗎1
Re: [討論] 理髮師娶越南人回顧探討1
[閒聊] 不知道該怎麼表達對長輩關心5
[心情] 不要因為人情買保險5
[閒聊] 上班等下班 每月等發薪1
[難過] 路好窄車好寬 :(1
[閒聊] 減肥1
[閒聊] 女生今天有申購 「全家餐飲」嗎?4
[問題] 路邊攤真的賺很多嗎?X
[閒聊] 行政干預結婚2
[閒聊] 關心人的不同方式X
[閒聊] 什麼情況會跟男友捉i?誰主動?