摘要:數(shù)據(jù)描述,我們來看看數(shù)據(jù)的格式到為個(gè)不同類別的特征,為列,一共有條數(shù)據(jù),下面列舉其中一條當(dāng)作例子數(shù)據(jù)處理與數(shù)據(jù)分析下面展示一下數(shù)據(jù)處理流程,主要是處理了一下缺失值,然后根據(jù)特征按連續(xù)型和離散型進(jìn)行分別處理,使用了里面的包,下面的代碼都...
摘要:可以用來設(shè)置當(dāng)便利出現(xiàn)錯(cuò)誤的處理函數(shù)該函數(shù)接受一個(gè)的實(shí)例作為參數(shù),設(shè)置為空則不作處理。返回的是一個(gè)個(gè)元素的元組,分別表示遍歷的路徑名,該路徑下的目錄列表和該路徑下文件列表。 os.walk目錄遍歷 每個(gè)月都有那么幾天想劃水,又到劃水的日子了...
摘要:分享最近看到的相關(guān)的幾篇好文我只是想偷懶形象解釋了什么是知乎上相關(guān) 分享最近看到的python相關(guān)的幾篇好文(我只是想偷懶) 形象解釋了什么是GIL http://cenalulu.github.io/pyt... 知乎上 Pythonic 相關(guān) https://www.zhihu.com/questio... https:...
摘要:目前正在開發(fā)一個(gè)系統(tǒng),對于前端模塊化與打包這塊出現(xiàn)了一些選擇。采用模塊化及打包由于項(xiàng)目比較小,稍微了解后,覺得沒必要采用。組件化,目前比較流行的如等。項(xiàng)目較小需要交互更新頁面的并不多,沒有采用。 目前正在開發(fā)一個(gè)python markdown wiki系...
摘要:如果有一個(gè)異常程序沒有處理,那么將調(diào)用默認(rèn)的處理器處理,并終止程序且給出提示。引發(fā)異常你可以用語句來引發(fā)一個(gè)異常。異常錯(cuò)誤對象必須有一個(gè)名字,且它們應(yīng)是或類的子類。參考資料凌風(fēng)技術(shù)站異常機(jī)制講解 當(dāng)你的程序中出現(xiàn)異常情況時(shí)就需要異常處...
摘要:模塊簡介的模塊提供了靈活的日志處理相關(guān)功能可以用來追蹤程序運(yùn)行的情況。模塊設(shè)置的默認(rèn)等級時(shí)這意味著默認(rèn)情況下,日志級別為的日志會被記錄,而的日志會被忽略。線程安全模塊是通過線程鎖保證線程安全的。 Logging 模塊 簡介 Python的 logging ...
摘要:應(yīng)用在開發(fā)中會使用各種各樣的包,通常我們會用來對各應(yīng)用項(xiàng)目依賴的解釋器版本及其包進(jìn)行隔離。應(yīng)用的外部第三方包的依賴由設(shè)定,并在時(shí)帶入應(yīng)用的目錄作為依賴。我們需要一種把各組腳本運(yùn)行環(huán)境隔離的方式,就是用解決。 python freeze python應(yīng)用在...
一,使用contextmanager from contextlib import contextmanager import MySQLdb DB_CONFIG = { "host": "192.168.1.253", "user": "pythondb", "passwd&quo...
摘要:上一章搭建風(fēng)控系統(tǒng)道路上踩過的坑信息采集我們介紹了第一點(diǎn),如何去獲取足夠多的數(shù)據(jù),而接下來的事情就是要創(chuàng)建一個(gè)機(jī)制去靈活的處理這些信息,為自動分析捕捉風(fēng)險(xiǎn)事件提供基礎(chǔ)原料,進(jìn)而借助規(guī)則引擎從中分析出風(fēng)險(xiǎn)事件。 上一章《搭建風(fēng)控系統(tǒng)道路...
摘要:用不了多久,我們就會發(fā)現(xiàn)我們已經(jīng)無力償還這份技術(shù)債務(wù)啦,只能重構(gòu)啦。當(dāng)然,最重要的其實(shí)是把技術(shù)債務(wù)的重要性提到一個(gè)被認(rèn)可的位置上。切記一些重要的技術(shù)債務(wù)遠(yuǎn)遠(yuǎn)比開發(fā)新系統(tǒng)的優(yōu)先級要高很多。 技術(shù)債務(wù) 「技術(shù)債務(wù)」是開發(fā)團(tuán)隊(duì)在設(shè)計(jì)或架構(gòu)選...
摘要:定義列表生成器有兩種方式,一種是算式列表生成器我起的名字,一種通過關(guān)鍵詞。算式列表生成器算式列表生成器雨列表生成式類似,但需要換成。我們可以用一個(gè)包含關(guān)鍵字的函數(shù)來定義一個(gè)列表生成器。 通過列表生成式我們可以方便的生成列表。但是在有的...
摘要:今天分享一個(gè)的小模塊可以用它方便地獲取某一文件某一行的內(nèi)容。而且它也被模塊用來獲取相關(guān)源碼信息來展示。用法很簡單第一參數(shù)是文件名,第二個(gè)參數(shù)是行編號。如果請求的行數(shù)超過文件行數(shù),函數(shù)不會報(bào)錯(cuò),而是返回空字符串。 linecache 今天分享一...
摘要:有序字典簡介示例有序字典和通常字典類似,只是它可以記錄元素插入其中的順序,而一般字典是會以任意的順序迭代的。 有序字典-OrderedDict簡介 示例 有序字典和通常字典類似,只是它可以記錄元素插入其中的順序,而一般字典是會以任意的順序迭代的。...
摘要:一般情況下,我們使用裝飾器提供的語法糖,來簡化上面的寫法像上面的情況,可以動態(tài)修改函數(shù)或類功能的函數(shù)就是裝飾器。本文標(biāo)題為會打扮的裝飾器本文鏈接為參考資料修飾器的函數(shù)式編程中的裝飾器介紹思誠之道裝飾器入門與提高賴明星 裝飾器 我們知道...
摘要:然而對于它為什么要這樣實(shí)現(xiàn)我還不是很清楚,留待以后繼續(xù)探究。這里是我在上關(guān)于這個(gè)問題的提問。 問題 在看 collections.OrderedDict 的源碼時(shí),對于它如何構(gòu)造有序的結(jié)構(gòu)這一部分不是很理解,代碼如下: class OrderedDict(dict): "Dictionary ...
摘要:使用表情組成漢字或者簡筆畫,在微信的傳播中甚廣,就會想著要不自己也試著做出來吧比如下圖實(shí)現(xiàn)步驟一開始想到的實(shí)現(xiàn)方案就是首先將漢字轉(zhuǎn)化成白底黑字的圖片然后將圖片根據(jù)灰度值映射成不同的字符打印在終端。 這只是一個(gè)娛樂性的實(shí)現(xiàn),純屬突發(fā)奇想...
摘要:神秘符號很多時(shí)候我們在打開的時(shí)候會有等很多像問號的編碼出現(xiàn)這時(shí)候我們打開這個(gè)文件的二進(jìn)制就會發(fā)現(xiàn)問號對應(yīng)的十六進(jìn)制編碼就是。因?yàn)樽詣訉⑹盏降臄?shù)據(jù)進(jìn)行了解碼。 utf-8 神秘符號 efbf bdef bfbd 很多時(shí)候我們在打開utf-8的時(shí)候會有 ? 等很多像...
摘要:最近修改了項(xiàng)目里的相關(guān)功能,用到了標(biāo)準(zhǔn)庫里的模塊,在此做一些記錄。可能沒有線程名。可能沒有用戶輸出的消息日志級別有如下級別,,,,默認(rèn)級別是,模塊只會輸出指定以上的。在或者中這是很常見的方式。正常的做法應(yīng)該是全局只配置一次。 最近修改...
摘要:探測圖片類型今天遇到一個(gè)小問題,如何探測圖片的文件類型。總結(jié)如下模塊的地址在這,可以用來方便地探測文件類型,使用示例如下,可以方便地探測一個(gè)文件或是字節(jié)流文件。提供的標(biāo)準(zhǔn)庫可以用來確定圖片的類型,參見這里。如下接受文件名作為參數(shù)。 探...
摘要:收入的波動來自于不同部門或類目的收入漲跌。我們的目標(biāo)是利用實(shí)現(xiàn)收入波動的分析模型。有了這個(gè)函數(shù),我們只要給到數(shù)據(jù)源和細(xì)分項(xiàng),就能得到影響最大的細(xì)分項(xiàng)。我們來認(rèn)識下如何處理日期。 環(huán)境準(zhǔn)備:sublime+ipython 打開代碼編輯器sublime——本質(zhì)...
摘要:寫在前面最近在優(yōu)化網(wǎng)站的搜索部分,網(wǎng)站是用實(shí)現(xiàn)的,主要業(yè)務(wù)是在線視頻教育網(wǎng)站,之前搜索只是一段模型中的模糊匹配,所以只能搜索關(guān)鍵字,但是突然又想在網(wǎng)站做個(gè)類似于百度問答的功能。篩選出大于概率的詞至此實(shí)現(xiàn)簡單分詞就寫完了。 寫在前面 最...
摘要:環(huán)境在處理微信朋友圈數(shù)據(jù)的過程中,需要對進(jìn)行一些處理,只處理增量數(shù)據(jù)。已經(jīng)處理過的,不再處理。使用在中有位的,默認(rèn)是自增的。 環(huán)境:python2.7 在處理微信朋友圈數(shù)據(jù)的過程中,需要對sqlite進(jìn)行一些處理,只處理增量數(shù)據(jù)。已經(jīng)處理過的,不再處...
摘要:取多個(gè)元素從頭開始取多個(gè)元素切片結(jié)束,但是不包括該的元素。切片開始的不填則默認(rèn)是從最前端即開始。當(dāng)然,從尾端開始切片,也支持省略代表一直切到尾部。其他編程語言入都提供了很多操作字符串的函數(shù),其實(shí)中可以利用切片輕松完成。 取一個(gè)list或者...
摘要:由于蘋果原生蛋疼的協(xié)議致使本來很簡單的個(gè)推送服務(wù)讓人望而卻步。直到蘋果最近的協(xié)議的出現(xiàn)才有所改善。如果推送失敗后蘋果的推送服務(wù)器會返回個(gè)錯(cuò)誤的信息。結(jié)語雖然通過使用來實(shí)現(xiàn)蘋果的推送服務(wù)是個(gè)比較簡單的事情甚至?xí)X得比較枯燥無味的事情。 ...
摘要:中我們可以對或者其他可迭代的對象進(jìn)行迭代從而遍歷取出各個(gè)元素。如何判斷一個(gè)對象是不是一個(gè)可迭代對象判斷一個(gè)對象是不是可迭代對象可以使用判斷是否是模塊的類型。迭代字典本身帶有和。利用迭代的時(shí)候,默認(rèn)是迭代。 python中我們可以對list、tupl...
ChatGPT和Sora等AI大模型應(yīng)用,將AI大模型和算力需求的熱度不斷帶上新的臺階。哪里可以獲得...
大模型的訓(xùn)練用4090是不合適的,但推理(inference/serving)用4090不能說合適,...
圖示為GPU性能排行榜,我們可以看到所有GPU的原始相關(guān)性能圖表。同時(shí)根據(jù)訓(xùn)練、推理能力由高到低做了...