① 方法論是什麼
方法論,就是關於人們認識世界、改造世界的方法的理論。
它是人們用什麼樣的方式、方法來觀察事物和處理問題。概括地說,世界觀主要說明世界「是什麼」的問題,方法論主要說明「怎麼辦」的問題。
方法論是一種以解決問題為目標的理論體系或系統,通常涉及對問題階段、任務、工具、方法技巧的論述。方法論會對一系列具體的方法進行分析研究、系統總結並最終提出較為一般性的原則。
方法論也是一個哲學概念。人們關於「世界是什麼、怎麼樣」的根本觀點是世界觀。用這種觀點作指導去認識世界和改造世界,就成了方法論。方法論是普遍適用於各門具體社會科學並起指導作用的范疇、原則、理論、方法和手段的總和。歷史唯物主義的著作中經常提到方法論這個概念。
② 構建邏輯學的基本框架
邏輯學是一切學科的基礎,他就像是打磨鑽石的工具。而其他的學科,例如,數學,心理學,經濟學,這些都是沒有經過打磨的鑽石。只有把邏輯學學的透徹了,才能打磨出璀璨奪目的鑽石。
下面我就從五個方面來介紹怎樣來培養自己的邏輯學框架。用於復習《五分鍾商學院》本周內容。
下面從邏輯思維的三大定律 ,同一律,矛盾律,和排中律 。還有兩大方法論,三段論 (推演法)和歸納法 來進行復習。
案例,人存在了幾百萬年了,而你沒有存在幾百萬年,所以你不是人。我們一聽就知道,這句話肯定有問題。可是問題在哪裡那,可能我們又不知道了。上面句子中提到了兩個人。可是這是兩個截然不同和的概念。人存在了幾百萬年,這里的人指的是人類這個種群。而你不是人,這里的人,指的是你做為人這個個體。這顯然是不對的。
邏輯學家針對這種情況,給邏輯學定下了邏輯學的三大定律。第一條,同一律,就是一句話中出現的兩個相同的文字,提到的必須是同一個概念。不然就是邏輯不嚴謹。
請聽下面的話。本商品搞活動,買一送一。我想靜靜,靜靜是誰。上面兩個是典型的偷換概念的語句。買一送一,指的是你要買的商品,和送的小禮物。而兩個靜靜,第一個是安靜的靜。而第二個就是人的名字,靜靜。 善意的用偷換概念,就是幽默。而惡意的用偷換概念,就是詭辯。那樣雙方就只能是雞同鴨講,只會浪費更多的時間。
矛盾律,也就是不矛盾律。兩個相互否定的觀點,不可能都對。案例,今年過節不收禮,收禮只收腦白金。你都不收禮了,還收什麼腦白金那。這明顯就是矛盾的。
什麼是兩個相互否定的觀點。她是女人,的否定式是她不是女人。而不是男人,有可能還是太監那。成功的否定是不成功。而不是失敗。有可能是暫時不成功,以後會成功那。
運用,如何識別自相矛盾的邏輯謬誤。有三點需要注意。 一,識別自相矛盾的概念. ,例如,一個黃昏的早晨。一個年輕的老人。 二,自相矛盾的判斷 。如這個山洞從來沒有人進去過,進去過的人也從來沒出來過。
從來沒有人進去過。可以理解,進去過的人從來沒有出來過,那不是和沒有人進去過矛盾了嗎。 三,悖論 。我說的這句話是假的。這就是一個很經典的悖論。如果這句話是真的,那麼就是假的。
如過這句話是假的,假假就變成了真的了 。小結,遵守矛盾律,要訓練識別自相矛盾的概念,自相矛盾的判斷,和還有悖論的能力。
就是兩個相互矛盾的觀點,一定有一個是對的。不存在一個中間狀態。生存,和毀滅。沒有中間狀態。例如,在這件事情上,我做的既是成功了,也沒有成功。這些都違背了排中律。
排中律很重要,但是他的兒子反證法更是名震四海。反證法,根據排中律,既然兩個自相矛盾的觀點,一定有一個是對的,沒有都不對這種中間狀態。那麼,只要我證明了兩個觀點中有一個是正確的,那麼另一個肯定是錯誤的。
經典案例,劉墉以為直言進諫,觸怒龍顏,乾隆皇帝寫了生死兩個紙團讓劉墉抓紙鬮。劉墉明知道兩個都是死,怎麼辦啊。他急中生智,抓了一個紙鬮就吃了下去。既然是生死鬮,那麼,看剩下的那個 紙鬮,就知道吃的那個了。果然,剩下的那個是死的紙鬮。就這樣,劉墉撿了一條命。這就是充分利用的反證法的例子。生死,一個生,一個死,沒有中間狀態。
怎樣在生活中更好的應用反證法那。有三個步驟, 反設,歸謬,存真。
論題,算命先生不能預知未來。反設,算命先生能預知未來。歸謬,算命先生既然能預知未來,那麼提前買彩票,肯定會中。可現實是,他們買了大概率還是不中。存真,算命先生不能預知未來。
下面我們來說說邏輯推理的兩個方法。
。概念,簡單來說,這是一種「大前提,小前提,結論」式的推理。基本邏輯是:如果一類東西的全部都是什麼,那麼,它的部分也必然是什麼;如過一類東西的全部都不是什麼,那麼,它的部分也必然不是什麼。比如蘇格拉底著名的三段論,大前提:所有人都是要死的;小前提:蘇格拉底是人;結論:所以蘇格拉底都是要死的。這個很簡單把。那麼接下來請聽題。
我是愛國的,所以我去砸日本車;既然我是愛國的,而你阻止我砸,所以你是賣國的;賣國是不對的,而你是賣國的,所以你的觀點是不對的;你的觀點是不對的,而我的觀點與你的不同,所以更加證明了我的觀點是正確的。
聽完後,是不是感覺,這是什麼神邏輯啊。邏輯嚴謹的三段論要遵守五項基本原則。 第一,四項錯誤。 一個三段論中,只能存在三個基本的概念。有四個,就一定錯了。上面舉得那個例子,人已經存在幾百萬年了;而你沒有存在幾百萬年;所以你不是人。這個三段論中,看上去有三個基本概念:人,幾百萬年,你。但是因為前後兩個《人》,違反了「同一律「,是不同的,所以一共出現四個概念:人類,幾百萬年,你,人體。這明顯是錯誤的。
第二,中項兩部周延 。什麼叫中項,所有人都要死的,蘇格拉底是人。這里的"人",連接大前提和小前提,就是中項。什麼是周延?所有中國人,指的是全部,是周延的概念,也就是固定的,沒有歧義。一部分中過人,就是不周延的概念,因為同樣是一部分,可以指的不同的概念。事例,一部分中國人愛吃辣椒,河南人是一部分中國人,所以河南人愛吃辣椒。河南人可能是那一部分不愛吃辣椒的人。
第三大項擴大,小項擴大 。事例,天鵝是會飛的,天鵝是鳥類,所以鳥類都是會飛的。一聽就不對,鴕鳥就不會飛。上面事例中的小前提是天鵝是一種鳥類,結論確實,所有鳥類都是會飛的。結論是所有,就是小項擴大。第四,前提都為否,結論不必然。
第五,前提有一否,結論必為否 。事例,人非草木,哲學家是人,哲學家非草木。鳥類都是生蛋的,此動物不是生蛋的,所以此動物不是鳥類。
小結,三段論簡單來說,是一種"大前提,小前提,結論」式的推理。想要一眼識別詭辯,需要注意三段論的五項基本原則。四項錯誤,中項兩不周延。大項擴大,小項擴大。前提都為否,結論不必然。前提有一否,結論必然為否。
」
概念,從現象中提煉出猜想。
事例,農場里有群火雞,農場主每天中午十一點來餵食。火雞中有位科學家觀察了近一年無例外後宣布發現了宇宙一個偉大定律:「每天上午十一點,會有食物降臨。」感恩節早晨,它向火雞們公布了這個定律,但這天上午十一點食物沒有降臨,農場主將它們捉去殺掉,把它們變成了食物。
從現象中提煉出猜想,可能是不對的。那麼就需要用推演法來證明其正確。使它成為定律。我們所學的知識,都是從歸納法歸納出猜想,然後從推演法證明成定律的。
比如,牛頓三大定律。等等物理學中的定律都是。如何訓練歸納法那,下面介紹著名的穆勒五法。
第一,求同法。第二求異法。第三,公用法。第四,共變法。第五,剩餘法。
歸納法是一種從特殊,推出一般的方法。歸納法,是從現象提出猜想,演繹法,將猜想證明為定律。一切我們知道的知識,都始於歸納法 。但是知識是有邊界的,我們必須對猜想之外的可能性,也就是黑天鵝。永遠心存敬畏。
最後總結要想構建邏輯學基本框架,要知道邏輯學三大定律, 同一律,矛盾律,排中律 。而有兩個方法論也必須熟知, 三段論和歸納法。 他們是相輔相成的關系,缺一不可。邏輯學很燒腦,但是它是一切學科的基礎,很有必要學習。
③ 如何構建自己的知識體系
1 知識的四個層次
知識,是以「概念」和「聯系」的方式,儲存在我們大腦當中的。概念和概念的聯系就形成了知識體系。我們在獲取信息的時候,要學會從「相同」的事物中尋找「不同」,並且去探求「不同」的背後,有著什麼樣的邏輯和原因。不斷地增加新節點,擴大整張網路的范圍。
2 什麼時有效知識
有效知識是指可以引發進一步思考,還能通過與其它知識的聯結,改變其它知識或者孕育出新的知識。
3 系統閱讀與碎片化閱讀
系統閱讀是成體系的閱讀,你每一次系統閱讀的開始就先要在腦中整理相關知識,才能接著往自己的體系裡面加東西。我們需要先建立起自己關於判斷知識的知識體系,分辨出需要哪部分知識,哪些不需要,還需要補齊相關背景知識,才能將碎片化閱讀變成我們建立每一個知識體系的入口,從而將碎片化閱讀起步,過度到系統閱讀。
什麼時體系呢,書籍的目錄是作者寫作本書的體系,一門課程的大綱是課程的體系,剛接觸一門學科的時候,可以先借用現成的體系,隨著學習的深入,不斷添加與刪除,建立自己的體系。
4 閱讀的基本原則和方法——FCR閱讀法
1 完善你的元知識
元知識是組成知識本身的知識,簡單來說,就是要得出A知識,首先要掌握哪些B知識,以及B知識到A知識的演算法是什麼?元知識就是更底層的基礎和演算法,要打造知識體系就要從元知識開始武裝。
庫伯學習圈:具體經驗 → 反思 → 抽象性概括 → 應用於實踐
a:具體經驗——問題導向
一切從問題出發,橫向拓展,不斷的嘗試新鮮的事物,縱向拓展,不斷的問自己為什麼?
b:反思——知識的復盤與拓展
復盤是從材料中提煉有價值的部分,進行內化,在此基礎上,不斷學習新的知識,拓展出新的關聯,把有價值的知識提煉出來,再與心的知識建立連接,就構成了一個更高層次,更系統化的一個整體。
拓展:
上一層拓展:知識的源頭,背景,原理是什麼?
同級拓展:這個知識是用來解決什麼問題的,在什麼情境下使用,有沒有相似的模型?
下一層次拓展:這個知識點是如何操作的,流程是怎麼樣的?
c:抽象性概括——理論化和遷移
對上一步的零散的知識點,進行組裝和整合,編織成一張網,就是所謂的知識體系。
經驗,進行向上抽象,概念化,讓它適應解決一整類有共性的問題,指導實踐,把框架抽象出來,再把框架放到別的問題中去,看能不能解決別的問題,這一步叫做遷移。不斷這樣思考,不斷把你所抽象、歸納、整理出來的方法論,進行理論化和遷移,再在實踐中去檢驗。
d:實踐:
整理出來的方法論,去指導實踐。
2 深度思考
深度思考是對元知識這種底層演算法的測試和修正的過程,發現錯誤,發現矛盾,及時修正元知識,而非完全順著腦子里原有的條條框框深化固有知識的過程。
要保持開放性思維,不斷拓展自己的觸角,每次輸入一個知識點,閱讀一篇材料,要不斷的發現這個材料中,有哪些對我來說是新的,哪些是不變的,嘗試著自己去發明和創造新的模型。垂直方向上,深耕一兩個領域,水平方向上,盡量涉及更多的概念,模型和原理,不斷的建立新的鏈接。
3 構建知識體系的流程
知識體系有兩部分組成,大量的知識點,有序的結構,深度思考完善自己的元知識——分清哪些是我們需要的有效知識——將需要的有效知識挑出來——提升有效知識的層析——將信息變成加工知識——進一步打造成體系知識甚至智慧。
1 學習的動力
自我管理能力超強的人都有一個共同的特性——就是具有清晰的學習目標,並且懂得行為和目標之間的關聯。
2 收益可見
最簡單的方式就是目標分解,分解成短期,中期,長期目標
3 不斷的閱讀學習完善自己的知識體系——不斷的與原有知識產生聯系
在學習任何一個知識點時,不斷的問自己三個問題:
a:它是什麼?——不斷的在腦海中找到相似的概念,他們之間的異同點是什麼?
b:它從哪裡來?——向上溯源,找到知識的源頭。誰提出的,解決什麼問題的?
c:它往哪裡去?——向下拓展,找到這個知識的應用點。
4 輸出——費曼技巧
通過輸出倒逼輸入,不斷優化自己的知識體系。
a:案例:自己實際解決一個問題的經歷;
b:框架:總結針對這一類問題的方法論;
c:新知:對重要概念、知識點的理解和復述。
④ 如何學好方法論
還是老話,理論的與實踐的兩方面緊密結合。結合自己的思想實際,經常加以哲學的思考,這是特別重要的。不進行經常的哲學科學勞動,思想就不會有提高和深化。但它的內涵不應僅指教材之內,而應是在教材之外,特別是深入研讀一些大哲學家的原著。不讀他們的原著,永遠也不可能實現哲學入門,特別是現在條目式的哲學教材,它甚至不是用於啟迪思維,反而好象是要窒息人的思維。
⑤ 韋伯怎樣用類型學方法建構自己的社會學理論
韋伯社會學的方法論
基礎成分:解釋性理解、主觀意義、價值中立(這個字面理解)、理想類型(社會行動的四種類型)、社會學的目的
方法核心:試圖「解釋性地理解」人們看待自己「社會行動」的方式。
行動是否是「社會」的取決於它的主觀意義是否考慮到他人的行為並且因此在其過程中受到指導。
包含的意思:
1) 行動個體對其行為賦予主觀的意義。
2) 行動者的行動指向他人,因而與他人的行為發生意義關聯。
解釋性理解:社會學家根據行動者自己的意圖來理解社會行動。包括在智力上把握行動者由他們的行動創造的意義,或者通過「直觀的」或「移情作用」的理解。
韋伯主張一個單一的「外在形式」內部蘊藏著千姿百態的動機。
要使社會行動成為一種有效的分析工具,需要建構起關於社會行動的類型學體系(理想類型)。
理想類型作為一種概念工具,並不是現實中實際存在的行動類型,而是借著理想類型的構建,拉開了社會學與現實之間的距離。理想類型是通過比較某個實際行動過程和一個(或多個)社會學概念(即理想類型)之間的近似度如何,再據此分析這一現象,展示這一行動過程的意義脈絡。
社會行動的四種類型:
工具—目的理性的行動:目的、手段及其間接的成果都得到合乎理性的考慮和權衡,其中包括對同一目的的不同手段的選擇、對目的與間接成果的關系以及最後對可能出現的不同結果的相關重要性的理性思考。
價值理性行動:通過有意識的某些倫理的、美學的、宗教的或其他形式的固有價值信仰,不管最後能否獲得成功的行動。該行動始終包括在行動者看來對其有約束力的『命令』和『要求』。
感情行動:由行動者特定的情緒和情感狀況決定的,包含有一種情感依戀,必須與上述兩種理性行動明確區分開來。
傳統行動:是由根深蒂固的習慣和古老的風俗決定的,經常只是對普通刺激的一種常規反應。
有意義的行動的每種類型在各個時代和各個文明階段都會出現。現代人並沒有與生俱來就擁有一種比祖先更優越的駕馭某種行動類型的能力。然而,作為一種社會勢力的結果,某些時代可能會對某一種特定的行動類型倍加青睞。韋伯確信通過運用社會行動類型學的類型,社會學家甚至能夠理解生活在全然不同的文化中的人們其社會行動具有的主觀意義,並且因此作出因果性的解釋。
韋伯社會學的目的:韋伯研究重點放在對特定實例及其發展因果分析上。他認為對「歷史個體」的因果解釋應該作為社會學的基本目的「我們希望一方面理解它的背景和特有的表現形式的文化意義,另一方面要理解它在歷史上之所以成為如此而非其他的原因」。
因此韋伯反對實證主義學派(實證主義主張遵循自然科學方法,確定一套歷史和社會變革的普遍規律,然後憑演繹程序解釋所有特定實例及其發展)。他反對社會科學以「建構一套封閉的概念體系,能夠以某種確定的方式包容事實並對其分類,並且由此可以對其再次推論」為目標的觀點。「我們不能抽象地理解兩個歷史偶然事件之間存在著某種聯系這一現象,而只是在承認在它具體形成的方式上存在著某種內在一致這樣的基礎上來把握」。
從根本上對動機多元論的強調把韋伯的社會學與行為主義所有流派、「把社會結構置於最重要位置」的所有觀點(如塗爾乾的「社會事實」或者馬克思的「階級」),以及所有賦予規范、作用和規則以一種對人有明確控制權的實證主義觀點區分開來。
⑥ 方法論具體內容是什麼
方法論(Discours de la méthode)是笛卡兒在1637年出版的著名哲學論著,對西方人的思維方式,思想觀念和科學研究方法有極大的影響,有人曾說:歐洲人在某種意義上都是笛卡兒主義者,就是指的受方法論的影響,而不是指笛卡兒的二元論哲學。
笛卡兒在方法論中指出,研究問題的方法分四個步驟:
1. 永遠不接受任何我自己不清楚的真理,就是說要盡量避免魯莽和偏見,只能是根據自己的判斷非常清楚和確定,沒有任何值得懷疑的地方的真理。就是說只要沒有經過自己切身體會的問題,不管有什麼權威的結論,都可以懷疑。這就是著名的「懷疑一切」理論。例如亞里士多德曾下結論說,女人比男人少兩顆牙齒。但事實並非如此。
2. 可以將要研究的復雜問題,盡量分解為多個比較簡單的小問題,一個一個地分開解決。
3. 將這些小問題從簡單到復雜排列,先從容易解決的問題著手。
4. 將所有問題解決後,再綜合起來檢驗,看是否完全,是否將問題徹底解決了。
在1960年代以前,西方科學研究的方法,從機械到人體解剖的研究,基本是按照笛卡兒的方法論進行的,對西方近代科學的飛速發展,起了相當大的促進作用。但也有其一定的缺陷,如人體功能,只是各部位機械的綜合,而對其互相之間的作用則研究不透。直到阿波羅1號登月工程的出現,科學家們才發現,有的復雜問題無法分解,必須以復雜的方法來對待,因此導致系統工程的出現,方法論的方法才第一次被綜合性的方法所取代。系統工程的出現對許多大規模的西方傳統科學起了相當大的促進作用,如環境科學,氣象學,生物學,人工智慧等等。
笛卡兒在方法論中還第一次提出「我思,故我在」的名言,第一次引入笛卡兒坐標系。對牛頓和萊布尼茨發明微積分理論有很大的作用。
⑦ 什麼是方法論
方法論 ,亦稱方法學 ,是哲學的一門分支學科,是關於如何認識世界和改造世界的學說。
通俗地講,世界觀主要解決世界「是什麼」、「怎麼樣」的問題,方法論主要解決「怎麼辦」的問題,方法論是指導人們認識世界和改造世界的根本原則和根本方法,是關於如何運用世界觀的理論。世界觀與方法論的一致性不是簡單的同一,懂得世界觀並不等於掌握方法論。方法論是運用世界觀的理論,但運用世界觀、掌握方法論均需要做專門研究。
方法論按不同層次的劃分,有哲學方法論、一般科學方法論、具體科學方法論。哲學方法論是關於認識世界和改造世界的最根本的方法理論。一般科學方法論、具體科學方法論是關於認識和改造世界某一領域的最根本的方法理論。哲學方法論離不開世界觀,一般科學方法論、具體科學方法論也必須以科學觀為前提。各門具體科學的研究方法歸根結底也受一定世界觀的制約,這種制約以不同層次的方法論為中介。各層次的方法論不直接統一,它們之間存在著某種差別。
⑧ 大道至簡的數據體系構建方法論
大道至簡的數據體系構建方法論
由上至下地梳理數據指標體系
1.確定目標
這是第一個應該問自己的問題。花大力氣做數據分析,最終為了什麼呢?如果這都沒想清楚,那數據體系肯定無從下手。
是想提高用戶活躍度、增加用戶、增加銷量,還是別的什麼目標?這么一想,好像我都想要。都想要沒有問題,但是會讓工作的邊界無限蔓延,導致事情無法推進。所以,應該從最關心的那個目標/KPI入手。
那麼,什麼問題才是我們最需要關心的目標呢?
對於不同領域、不同階段的公司和不同角色的用戶而言,這個問題的答案都不一樣:對於很多公司老闆來說,利潤就是他們最關心的目標;對於非售賣產品/服務的公司或政府而言,也許客戶滿意度是最關心的目標;對於交易平台類公司或早期電商公司而言,利潤不是重點,交易量是最關心的目標。
最關心的目標搞定了,下面是不是可以解決都想要的問題了呢?並不是這樣。大數據帶來的最大一個誤區就是數據量和欄位數越多越好。但是,在真正解決具體業務問題時,我們一定是從大數據的全集中切出相關的一個子集來使用的。
對於單人而言,無論是老闆還是執行層,同時關注的目標/KPI都不宜過多。同時看幾十個KPI,想像一下也知道會很暈,且耗費時間。但是,對企業而言確實有很多KPI都是非常重要的。這該怎麼辦?可以分解到多人,即不同角色一起協作,每個角色關注自己的目標,所有角色合在一起是公司所有目標/KPI的全集。
假設老闆最關注的目標是利潤,利潤=收入-成本,可以將這個目標分解為由銷售總監來關注收入,運營總監來關注成本。當然,並不是說老闆不能看收入,而是把常規性的關注目標鎖定在一個可行的范圍之內。
2.分解指標
目標確定了,下一步是分解出相關的指標。
針對目標,需要哪些指標來監控或分析能達成目標呢?比如利潤,相關指標就是收入和成本,當然這太粗了,收入有哪幾類,成本有哪幾類,都應該考慮進去。比如對於零售行業的銷售額,可以分解為客流量、進店率、購買率、客單價和復購率等。
所以,分解的方式有很多種,需要遵循MECE原則(完全窮舉,相互獨立)。
3.細化欄位
針對指標的計算公式,涉及到哪些欄位,分別在哪些庫的哪些表裡,是否需要數據清洗,清洗規則是什麼等。
比如購買率,是通過公式「購買人數/進店人數」算出來的,購買人數又是對「客戶ID」進行計數計算得出來的,這些指標涉及到的欄位對應到資料庫里哪張表的哪個欄位,需要梳理清楚,這部分就需要IT人員或資料庫管理員的介入和配合了。
4.非功能需求
上述第3步完成之後,我們其實已經算是梳理完了指標體系,可以落地了,但為了讓最終形成的數據系統更加完備、友好、可用,還需要一些非功能需求的梳理。
UI:偏好什麼樣的展示風格,這點看著無關緊要,但實際上用戶每天都會與數據系統打交道,美觀、體驗好的系統UI會讓用戶更加喜歡。
頁面流:哪些相關指標擺放到同一個報告頁面上,頁面之間的層次關系如何,用戶可以在頁面之間如何跳轉。
許可權:誰能看哪些數據范圍,誰能看哪些欄位和指標,需要有統一的許可權控制,避免出現數據安全問題。
ETL:數據從數據源同步到分析系統的頻率如何,規則如何。
集成:是否需要在界面、預警消息等層面與其它系統進行集成。
性能:看不見摸不著,但是直接決定系統可用性。如果數據量大時需要幾分鍾甚至幾十分鍾才能看到結果,相信這個系統就不會有人願意用了。
5.系統實施
上述4項完成之後,我們就形成了《數據運營系統需求文檔/實施方案》,即可落地到數據運營系統里,然後,再根據報告頁面數量、數據准備復雜度等確定工作量和時間計劃。
二.由下至上地實施落地到BI系統
1.連接數據
根據需求文檔/實施方案,一步步進行系統搭建工作。這個系統有的企業稱之為大數據平台,有的企業稱之為BI系統。大數據平台的范疇會更廣一些,但對企業數據化運營而言,BI一定是核心構成。
那麼,無論是開發還是基於像永洪科技一樣的第三方工具快速實施,系統搭建的第一步都是連接各個數據源,打通和各個數據源之間的通路。
在企業里,數據環境往往是異構的,數據源可能包括資料庫、Hadoop系列平台、Excel文件、日誌文件、NoSQL資料庫、第三方介面等,需要對每種數據源都有快速友好的對接方式。
最終,我們在系統里能看到所需要的各個數據源中所有的表格和欄位。
2.數據處理
數據源里的數據往往是有或多或少的不規范性存在的,比如有重復記錄,比如有遺漏的空值,比如有明顯不合理的異常值(比如有2020年的成交訂單),還可能有同一個事物在系統中存在多個名稱的情況。
這些數據如果不做一些處理或稱之為清洗的工作,是會對分析的准確性產生很大影響的,所以需要做些預處理。這個過程往往是最耗時、最枯燥的,但也是十分重要的。
作者提醒:這個環節的問題將在下一篇《大道至簡的數據治理方法_論》文章中再深入探討。
3.數據建模
數據處理好了,下一步就該做數據建模了。
一提到建模,非技術背景的用戶就生畏,覺得高深不可理解。其實建出的模是個什麼東西呢?簡單來講,把多張表關聯到一起,就是一個數據模型。
比如,公司要做績效分析,需要員工的工齡、學歷、項目數、項目金額、項目利潤率等指標,其中工齡、學歷在個人信息表裡,項目數、項目金額在項目表裡,項目利潤率在財務表裡,這三張表有個共同欄位「員工編號」,通過這個欄位把這三張表關聯起來,這就是一個數據模型,一個績效分析主題的數據模型。
4.製作數據報告
⑨ 什麼是方法論方法論的概念
方法論,就是關於人們認識世界、改造世界的方法的理論。
它是人們用什麼樣的方式、方法來觀察事物和處理問題。概括地說,世界觀主要解決世界「是什麼」的問題,方法論主要解決「怎麼辦」的問題。
方法論是一種以解決問題為目標的理論體系或系統,通常涉及對問題階段、任務、工具、方法技巧的論述。方法論會對一系列具體的方法進行分析研究、系統總結並最終提出較為一般性的原則。
(9)構建方法論怎麼學擴展閱讀:
世界觀,通俗地講,就是「觀世界」,是人們對世界的總體看法和根本觀點。方法論,就是人們認識世界、改造世界的一般方法,是人們用什麼樣的方式、方法來觀察事物和處理問題。概括地說,世界觀主要解決世界「是什麼」的問題,方法論主要解決「怎麼辦」的問題。
唯物辯證法是馬克思和恩格斯在唯物主義基礎上改造黑格爾唯心主義辯證法,所創立的唯一科學的方法論。它是在概括總結各門具體科學積極成果的基礎上,根據自然、社會、思維的最一般的規律引出的最具普遍意義的方法論。
唯物辯證法是對客觀規律的正確反映,它要求人們在認識和實踐活動中一切從實際出發,實事求是,自覺地運用客觀世界發展的辯證規律,嚴格地按客觀規律辦事。
⑩ 如何把握政治經濟學的方法論體系
把握政治經濟學的方法論體系,個人認為這個還是應該堅持唯物主義的觀點,這樣才能夠真正學好