原创 基礎前端

前端基礎學習 HTML: HTML:Hyper Text Markup Language (超文本標記語言-即不是純文本,而是帶格式的文本) 超文本:比普通文本功能更強大,可以添加各種格式 標記語言:通過一組標籤來對一組內容進

原创 TF2-HyperparameterSearch-2

import tensorflow as tf import matplotlib as mlp import matplotlib.pyplot as plt %matplotlib inline import numpy as

原创 商品名稱一級分類-CNN and RNN 方法測試

商品名稱一級分類-CNN and RNN 方法測試 EPOCHES = 3 #TEXT_CNN參數: IN_CHANNELS = 100 # 輸入特徵的維度,在文本處理中就是詞向量的維度,在圖像處理中就是通道數 OUT_

原创 讀書筆記-統計學習方法(李航)第一章

第一章 統計學習方法概論1.1 統計學習統計學習的主要特點是:統計學習的對象:統計學習的目的:統計學習的方法:實現一個統計學習方法的步驟如下:1.2 監督學習聯合概率分佈:假設空間:1.3 統計學習三要素統計學習常用的損失函數期望

原创 讀書筆記-統計學習方法(李航)第四章

第四章 樸素貝葉斯法4.1 樸素貝葉斯法的學習和分類4.2 樸素貝葉斯法的參數估計實踐: 4.1 樸素貝葉斯法的學習和分類 樸素貝葉斯法是基於貝葉斯定理 和條件獨立假設的分類方法。 先驗分佈: 條件概率分佈: 如果對條件概率

原创 讀書筆記-統計學習方法(李航)第三章

第三章 K 近鄰算法3.1 k近鄰算法3.2 k近鄰模型距離度量k值的選擇決策規則實踐:手動實現sklearn 實現 3.1 k近鄰算法 k近鄰是一種基本的分類 和 迴歸 方法 k近鄰法的三個基本要素爲: 1:k值的選擇 2:距離

原创 讀書筆記-統計學習方法(李航)第二章

第二章 感知機2.1 感知機模型2.2 感知機學習策略2.3 感知機的學習算法2.3.1 感知機學習算法的原始形式2.3.2 感知機學習算法的對偶形式 感知機是二分類的線性分類模型,其輸入爲實例的特徵向量,輸出爲類別。 2.1 感

原创 Spark-鍵值對

Spark-鍵值對操作 動機 Spark爲包含鍵值對類型的RDD提供了一些專有操作,這些RDD被稱爲 Pair RDD . 其提供了並行操作各個鍵或跨節點重新進行數據分組的操作接口. 創建Pair RDD # 在python中

原创 文獻記錄-Attention Is All You Need

Attention Is All You Need 摘要: 不同與傳統的機器翻譯模型使用複雜的循環神經網絡和卷積神經網絡去構成翻譯器的encoder 和decoder,attention機制大大提升了模型訓練時的並行化程度,並減少

原创 文獻記錄-BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding

摘要: bert 是用transformer的encoder 來構建的雙向預訓練模型,訓練過程是無監督的,並且可以通過fine-tune的方式去獲得較好的多個下游任務的效果. 簡介: 預訓練模型對於NLP的數據特徵的提取有着很大

原创 Kaggle_tweet_emotion_bert_transformers

import pandas as pd import numpy as np import matplotlib import matplotlib.pyplot as plt import seaborn as sns impo

原创 讀書筆記-統計學習方法(李航) 第七章

第七章 支持向量機7.1 線性可分支持向量機與硬間隔最大化7.2 線性支持向量機與軟間隔最大化7.3 非線性支持向量機與和函數7.4 序列最小最優化算法實戰: 7.1 線性可分支持向量機與硬間隔最大化 支持向量機是一種二分類模型,

原创 讀書筆記-統計學習方法(李航) 第六章

第六章 邏輯迴歸和最大熵模型6.1 邏輯斯蒂迴歸模型6.2 最大熵模型6.3 模型學習的最優化算法實戰: 6.1 邏輯斯蒂迴歸模型 二項邏輯斯蒂迴歸模型: 極大似然估計: 多分類: 6.2 最大熵模型 最大熵原理是在滿足約束

原创 讀書筆記-統計學習方法(李航)第五章

第五章 決策樹5.1 決策樹模型的學習5.2 特徵選擇5.3 決策樹的生成5.4 決策樹的剪枝5.5 CART 5.1 決策樹模型的學習 決策樹是一種基本的分類和迴歸的方法,在分類問題中,可以認爲是if-then規則的集合。也可以

原创 Kaggle_tweet_emotion_bert

import pandas as pd import numpy as np import matplotlib import matplotlib.pyplot as plt import seaborn as sns impo