AdvertCN - 廣告中國

 找回密碼
 立即注冊

QQ登錄

只需一步,快速開始

PropellerAds
 谷歌+必應一級代理商開戶 
易賺網長期兌換paypal美元全球COD物流 可做預付款50%
微信/電話13560706171
BINOM TRACKER 60% OFF!
PropellerAds - 你的流量來源AdCombo - 你的廣告聯盟Facebook一級代理開戶東南亞COD專線物流 簽收返款
批發FB/Ins/Twitter/Gmail等賬號PayPal/海外賬戶收款提現0費率攻略 FB批量養號及自動廣告系統 Q76762大牛都在用的虛擬卡渠道-專供FB
跑CPL Smartlink 送$50紅包Facebook廣告投放一站式解決方案iMonetizeIt - 最好交友智能鏈接支持FB賬號多開的免費指紋瀏覽器
FB虛擬卡/支持單張開卡/續費僅4.5%這個Tracker,免費!!!!!!!!!Antidetect瀏覽器AEZAKMI+FB帳戶無限額結匯+虛擬卡批量申請
Smartlinks&BONUS free tracker原生廣告代理商開戶[可跑歐美offer]穩定跑PP/FB廣告虛擬信用卡廣告位出租
查看: 540|回復: 11
打印 上一主題 下一主題

請教一個采集數據的前端展示問題

[復制鏈接]

29

主題

107

廣告幣

321

積分

初級會員

Rank: 2

積分
321

社區QQ達人

跳轉到指定樓層
樓主
發表于 2020-3-12 08:26:07 | 只看該作者 回帖獎勵 |倒序瀏覽 |閱讀模式
請問一下,

將爬取到的數據存入數據庫,然后在前端展示出來,

如何解決數據格式化的問題?

比如:我通過一些api得到一些文本數據,這些數據就是一段,中間沒有換行符、分段符這些,我存入數據庫,再在自己網站展示的話,也是一段,中間沒有分段,換行,很難看。

從網站直接抓取數據也是類似的情況,比如用python的request庫,直接取的結果的content,直接過濾掉了分段,換行符,那么到時前端展示也變成了一段。

請問這個有好的解決方法么?可以維持原來網站的展示格式,謝謝。               
相關帖子
Jumbleberry
回復

使用道具 舉報

15

主題

1048

廣告幣

2174

積分

高級會員

Rank: 4

積分
2174
沙發
發表于 2020-3-12 08:48:49 | 只看該作者
回復 支持 反對

使用道具 舉報

0

主題

71

廣告幣

100

積分

初級會員

Rank: 2

積分
100
板凳
發表于 2020-3-12 09:42:42 | 只看該作者
分段,換行符也一起入庫 是一個辦法,但是有可能會把雜七雜八的東西也一起弄進來。
最好還是自己寫個程序處理下吧
簡單點 比如 存成字符串list,list之間每個元素為一個br,
或者 再存一個 標簽list
目前暫時沒有想到什么其他更好的辦法,感覺也不一定是最優的辦法,只是能湊合用一下

點評

采集的時候只留下標簽,其它所有標簽都去掉,應該就不會有雜七雜八的東西了  詳情 回復 發表于 2020-3-13 08:07
回復 支持 反對

使用道具 舉報

0

主題

71

廣告幣

100

積分

初級會員

Rank: 2

積分
100
地板
發表于 2020-3-12 09:43:21 | 只看該作者
另外樓主你2018年就問過這個問題了,還沒解決么
http://www.bqbbza.live/thread-84034-1-1.html

點評

是啊, 去年一年搞量化去了,沒搞網站。有的網站主機都過期了。 今年又重新來過。  詳情 回復 發表于 2020-3-12 14:33
回復 支持 反對

使用道具 舉報

35

主題

2581

廣告幣

2793

積分

版主

Rank: 7Rank: 7Rank: 7

積分
2793

社區QQ達人

5#
發表于 2020-3-12 13:50:26 | 只看該作者
你可以把最外層的標簽包含所有內容取出來,然后插入你自己的標簽里面,這樣就可以保持原有的格式。
回復 支持 反對

使用道具 舉報

29

主題

107

廣告幣

321

積分

初級會員

Rank: 2

積分
321

社區QQ達人

6#
 樓主| 發表于 2020-3-12 14:33:49 | 只看該作者
本帖最后由 dengwen168 于 2020-3-12 14:44 編輯
wxiao333 發表于 2020-3-12 09:43
另外樓主你2018年就問過這個問題了,還沒解決么
http://www.bqbbza.live/thread-84034-1-1.html ...

是啊,

去年一年搞量化去了,沒搞網站。有的網站主機都過期了。

結果搞量化沒賺到錢,還虧了,想再搞網站賺點生活費。


回復 支持 反對

使用道具 舉報

67

主題

1414

廣告幣

2503

積分

版主

Rank: 7Rank: 7Rank: 7

積分
2503

社區QQ達人

7#
發表于 2020-3-12 16:41:21 | 只看該作者
現在那么多插件,直接保存換行符啊。

點評

好久沒看到你了。。還在做amazon?  詳情 回復 發表于 2020-3-12 18:03
回復 支持 反對

使用道具 舉報

1193

主題

9193

廣告幣

1萬

積分

管理員

宇宙無敵河馬天神

Rank: 9Rank: 9Rank: 9

積分
17243

社區QQ達人

8#
發表于 2020-3-12 18:03:13 | 只看該作者
yincthh 發表于 2020-3-12 16:41
現在那么多插件,直接保存換行符啊。

好久沒看到你了。。還在做amazon?

點評

不做了。現在亞馬遜瘋了,各種互相留差評。  詳情 回復 發表于 2020-3-13 15:45
回復 支持 反對

使用道具 舉報

15

主題

1048

廣告幣

2174

積分

高級會員

Rank: 4

積分
2174
9#
發表于 2020-3-13 08:07:06 | 只看該作者
wxiao333 發表于 2020-3-12 09:42
分段,換行符也一起入庫 是一個辦法,但是有可能會把雜七雜八的東西也一起弄進來。
最好還是自己寫個程序處 ...

采集的時候只留下<p><br>標簽,其它所有標簽都去掉,應該就不會有雜七雜八的東西了
回復 支持 反對

使用道具 舉報

67

主題

1414

廣告幣

2503

積分

版主

Rank: 7Rank: 7Rank: 7

積分
2503

社區QQ達人

10#
發表于 2020-3-13 15:45:21 | 只看該作者
河小馬 發表于 2020-3-12 18:03
好久沒看到你了。。還在做amazon?


不做了。現在亞馬遜瘋了,各種互相留差評。

點評

開始互相傷害了嗎?  詳情 回復 發表于 2020-3-13 16:07
回復 支持 反對

使用道具 舉報

98

主題

1186

廣告幣

2208

積分

高級會員

Rank: 4

積分
2208
11#
發表于 2020-3-13 16:07:16 | 只看該作者
yincthh 發表于 2020-3-13 15:45
不做了。現在亞馬遜瘋了,各種互相留差評。

開始互相傷害了嗎?
回復 支持 反對

使用道具 舉報

2

主題

6

廣告幣

31

積分

初級會員

Rank: 2

積分
31

社區QQ達人

12#
發表于 2020-3-13 16:57:46 | 只看該作者
pandas來組織你的數據,然后pd.DataFrame.to_sql存數據庫,既然你做過量化,肯定對pandas很熟悉吧
回復 支持 反對

使用道具 舉報

您需要登錄后才可以回帖 登錄 | 立即注冊

本版積分規則

Adplexity

關于我們|聯系我們|DMCA|廣告服務|小黑屋|手機版|Archiver|Github|AdvertCN |網站地圖

GMT+8, 2020-5-31 08:57 , Processed in 0.060286 second(s), 16 queries , Gzip On, MemCache On.

Powered by Discuz

© 2007-2019 AdvertCN

快速回復 返回頂部 返回列表
黑龙江时时彩五星