摘要:數據描述,我們來看看數據的格式到為個不同類別的特征,為列,一共有條數據,下面列舉其中一條當作例子數據處理與數據分析下面展示一下數據處理流程,主要是處理了一下缺失值,然后根據特征按連續型和離散型進行分別處理,使用了里面的包,下面的代碼都...
摘要:可以用來設置當便利出現錯誤的處理函數該函數接受一個的實例作為參數,設置為空則不作處理。返回的是一個個元素的元組,分別表示遍歷的路徑名,該路徑下的目錄列表和該路徑下文件列表。 os.walk目錄遍歷 每個月都有那么幾天想劃水,又到劃水的日子了...
摘要:分享最近看到的相關的幾篇好文我只是想偷懶形象解釋了什么是知乎上相關 分享最近看到的python相關的幾篇好文(我只是想偷懶) 形象解釋了什么是GIL http://cenalulu.github.io/pyt... 知乎上 Pythonic 相關 https://www.zhihu.com/questio... https:...
摘要:目前正在開發一個系統,對于前端模塊化與打包這塊出現了一些選擇。采用模塊化及打包由于項目比較小,稍微了解后,覺得沒必要采用。組件化,目前比較流行的如等。項目較小需要交互更新頁面的并不多,沒有采用。 目前正在開發一個python markdown wiki系...
摘要:如果有一個異常程序沒有處理,那么將調用默認的處理器處理,并終止程序且給出提示。引發異常你可以用語句來引發一個異常。異常錯誤對象必須有一個名字,且它們應是或類的子類。參考資料凌風技術站異常機制講解 當你的程序中出現異常情況時就需要異常處...
摘要:模塊簡介的模塊提供了靈活的日志處理相關功能可以用來追蹤程序運行的情況。模塊設置的默認等級時這意味著默認情況下,日志級別為的日志會被記錄,而的日志會被忽略。線程安全模塊是通過線程鎖保證線程安全的。 Logging 模塊 簡介 Python的 logging ...
摘要:應用在開發中會使用各種各樣的包,通常我們會用來對各應用項目依賴的解釋器版本及其包進行隔離。應用的外部第三方包的依賴由設定,并在時帶入應用的目錄作為依賴。我們需要一種把各組腳本運行環境隔離的方式,就是用解決。 python freeze python應用在...
一,使用contextmanager from contextlib import contextmanager import MySQLdb DB_CONFIG = { "host": "192.168.1.253", "user": "pythondb", "passwd&quo...
摘要:上一章搭建風控系統道路上踩過的坑信息采集我們介紹了第一點,如何去獲取足夠多的數據,而接下來的事情就是要創建一個機制去靈活的處理這些信息,為自動分析捕捉風險事件提供基礎原料,進而借助規則引擎從中分析出風險事件。 上一章《搭建風控系統道路...
摘要:定義列表生成器有兩種方式,一種是算式列表生成器我起的名字,一種通過關鍵詞。算式列表生成器算式列表生成器雨列表生成式類似,但需要換成。我們可以用一個包含關鍵字的函數來定義一個列表生成器。 通過列表生成式我們可以方便的生成列表。但是在有的...
摘要:今天分享一個的小模塊可以用它方便地獲取某一文件某一行的內容。而且它也被模塊用來獲取相關源碼信息來展示。用法很簡單第一參數是文件名,第二個參數是行編號。如果請求的行數超過文件行數,函數不會報錯,而是返回空字符串。 linecache 今天分享一...
摘要:有序字典簡介示例有序字典和通常字典類似,只是它可以記錄元素插入其中的順序,而一般字典是會以任意的順序迭代的。 有序字典-OrderedDict簡介 示例 有序字典和通常字典類似,只是它可以記錄元素插入其中的順序,而一般字典是會以任意的順序迭代的。...
摘要:一般情況下,我們使用裝飾器提供的語法糖,來簡化上面的寫法像上面的情況,可以動態修改函數或類功能的函數就是裝飾器。本文標題為會打扮的裝飾器本文鏈接為參考資料修飾器的函數式編程中的裝飾器介紹思誠之道裝飾器入門與提高賴明星 裝飾器 我們知道...
摘要:然而對于它為什么要這樣實現我還不是很清楚,留待以后繼續探究。這里是我在上關于這個問題的提問。 問題 在看 collections.OrderedDict 的源碼時,對于它如何構造有序的結構這一部分不是很理解,代碼如下: class OrderedDict(dict): "Dictionary ...
摘要:使用表情組成漢字或者簡筆畫,在微信的傳播中甚廣,就會想著要不自己也試著做出來吧比如下圖實現步驟一開始想到的實現方案就是首先將漢字轉化成白底黑字的圖片然后將圖片根據灰度值映射成不同的字符打印在終端。 這只是一個娛樂性的實現,純屬突發奇想...
摘要:神秘符號很多時候我們在打開的時候會有等很多像問號的編碼出現這時候我們打開這個文件的二進制就會發現問號對應的十六進制編碼就是。因為自動將收到的數據進行了解碼。 utf-8 神秘符號 efbf bdef bfbd 很多時候我們在打開utf-8的時候會有 ? 等很多像...
摘要:最近修改了項目里的相關功能,用到了標準庫里的模塊,在此做一些記錄??赡軟]有線程名??赡軟]有用戶輸出的消息日志級別有如下級別,,,,默認級別是,模塊只會輸出指定以上的。在或者中這是很常見的方式。正常的做法應該是全局只配置一次。 最近修改...
摘要:探測圖片類型今天遇到一個小問題,如何探測圖片的文件類型??偨Y如下模塊的地址在這,可以用來方便地探測文件類型,使用示例如下,可以方便地探測一個文件或是字節流文件。提供的標準庫可以用來確定圖片的類型,參見這里。如下接受文件名作為參數。 探...
摘要:收入的波動來自于不同部門或類目的收入漲跌。我們的目標是利用實現收入波動的分析模型。有了這個函數,我們只要給到數據源和細分項,就能得到影響最大的細分項。我們來認識下如何處理日期。 環境準備:sublime+ipython 打開代碼編輯器sublime——本質...
摘要:寫在前面最近在優化網站的搜索部分,網站是用實現的,主要業務是在線視頻教育網站,之前搜索只是一段模型中的模糊匹配,所以只能搜索關鍵字,但是突然又想在網站做個類似于百度問答的功能。篩選出大于概率的詞至此實現簡單分詞就寫完了。 寫在前面 最...
摘要:環境在處理微信朋友圈數據的過程中,需要對進行一些處理,只處理增量數據。已經處理過的,不再處理。使用在中有位的,默認是自增的。 環境:python2.7 在處理微信朋友圈數據的過程中,需要對sqlite進行一些處理,只處理增量數據。已經處理過的,不再處...
摘要:取多個元素從頭開始取多個元素切片結束,但是不包括該的元素。切片開始的不填則默認是從最前端即開始。當然,從尾端開始切片,也支持省略代表一直切到尾部。其他編程語言入都提供了很多操作字符串的函數,其實中可以利用切片輕松完成。 取一個list或者...
摘要:由于蘋果原生蛋疼的協議致使本來很簡單的個推送服務讓人望而卻步。直到蘋果最近的協議的出現才有所改善。如果推送失敗后蘋果的推送服務器會返回個錯誤的信息。結語雖然通過使用來實現蘋果的推送服務是個比較簡單的事情甚至會覺得比較枯燥無味的事情。 ...
摘要:中我們可以對或者其他可迭代的對象進行迭代從而遍歷取出各個元素。如何判斷一個對象是不是一個可迭代對象判斷一個對象是不是可迭代對象可以使用判斷是否是模塊的類型。迭代字典本身帶有和。利用迭代的時候,默認是迭代。 python中我們可以對list、tupl...
ChatGPT和Sora等AI大模型應用,將AI大模型和算力需求的熱度不斷帶上新的臺階。哪里可以獲得...
大模型的訓練用4090是不合適的,但推理(inference/serving)用4090不能說合適,...
圖示為GPU性能排行榜,我們可以看到所有GPU的原始相關性能圖表。同時根據訓練、推理能力由高到低做了...