原创 內容電商毀了內容之後,PRESSone可以做些什麼?

作者:DOV 編輯:PRS佈道者 01 互聯網 “互聯網在開放、平等、促進信息流動這些方面,曾經發揮了很多積極的作用,但資本、數據、流量的高度集中,已經讓互聯網逐漸背離了許多最初的願景。”—— PRESSone 白皮書 現在,是

原创 grafana 連接mysql 和 postgresql,如何查看數據庫所有表格及表格字段?

以 grafana 連接以上不同數據源,mysql 和 postgresql 的處理不同。這是基礎操作,簡單整理如下。 查看數據庫的所有表格: --mysql show tables; --postgresql select *

原创 能寫數據後臺,需要掌握哪些進階的sql語句?

國慶假期花了一些時間,首次嘗試並玩轉 grafana,這幾天繼續不斷優化和完善,如今看着自己的成果,相當滿意。——逐步接近我想要的理想後臺啦。 需求是不停歇的。今天我又給自己發掘了一些新需求,比如變量、篩選框之類,都收集下來等有空

原创 小結 python 實戰中遇到的幾種需要化名的情境

笑來在《自學是門手藝》的《2.4.3 化名與匿名》中,講到了函數的化名。經過幾個月的實戰,我發現,實際上化名無處不在。我有時也會稱之爲“別稱”,意思一樣。函數化名只是化名的一種應用場景,還有好幾種使用化名的地方,本篇筆記將整理小結

原创 mysql 數據分析如何實現日報、週報、月報和年報?

以天爲統計週期,是常見需求。週報、月報更是常見需求。長週期項目,甚至有年報需求。我已經掌握了mysql中按天統計,如何實現按年、按月、按周統計呢? 1、已掌握的技能:按天統計 實現以天爲統計週期很簡單。具體來說,date() 函數

原创 數據分析師如何自力更生統計用戶行爲頻次?

不懂數據分析的 growth hacker 不是好運營。近日我想要統計我家產品 xue.cn 用戶的編程自學行爲的頻次,且在不給技術開發部門帶來任何新需求的情況下自力更生。那麼,我該如何定義並統計這個數據指標呢? 1、定義學習這個

原创 告別硬編碼,mysql 如何實現按某字段的不同取值進行統計

上週我突然意識到,我在grafana上寫的 sql 語句存在多處硬編碼。這篇筆記將記錄如何實現沒有硬編碼的sql語句,以及自學編程過程中如何應對自己的笨拙代碼和難題不斷的狀況。 1、有效但粗笨的硬編碼 所謂硬編碼,大意是指代碼中出

原创 windows 10 如何設定計劃任務自動執行 python 腳本?

我用 python 寫了一些腳本,有一些是爬蟲腳本,比如爬取知乎特定話題的熱門問題,有一些是定期的統計分析腳本,輸出統計結果到文檔中。之前我都是手動執行這些腳本,現在我希望如何這些腳本能自動定時執行。那麼,windows 10 操

原创 win10 設定計劃任務時提示所指定的賬戶名稱無效,如何解決?

我想把我的 python 爬蟲腳本設定爲自動定時執行,我的設備是win10 操作系統,這將用到系統自帶的計劃任務功能。且我希望不管用戶是否登錄都要運行該定時任務,但在設置計劃任務的屬性時,遇到一個報錯:所指定的賬戶名稱無效。該報錯

原创 pandas數據分析輸出excel產生文本形式存儲的百分比數據,如何處理?

關鍵詞: python、pandas、to_excel、文本形式存儲的數據 需求描述: 我用 python pandas 寫了數據統計與分析腳本,並把計算結果用 pandas 的 to_excel() 存入到 excel 表格提交

原创 pandas.to_sql()失敗,遇到 pandas.io.sql.DatabaseError:1146 提示表格不存在的解決辦法

在寫我的爬蟲腳本 csdn_my_article 時,遇到一處報錯: pandas.io.sql.DatabaseError: Execution failed on sql ‘select * from csdn_my_ar

原创 用 python 寫個小爬蟲監控某人的 CSDN 文章數據

用 python / pandas + mysql 寫了一個簡單的小爬蟲,用來爬取 我的 csdn 文章基本數據。python代碼如下。如果不用 mysql,把文件讀寫的部分改成 pandas 的 read_csv / to_cs

原创 python 字符串替換功能 string.replace()可以用正則表達式,更優雅

說起來不怕人笑話,我今天才發現,python 中的字符串替換操作,也就是 string.replace() 是可以用正則表達式的。 之前,我的代碼寫法如下,粗笨: 自從發現了正則表達式也生效後,代碼變得優雅簡潔: 備註:上圖中