-
Sklearn 点评文本情感分析
一、准备工作1、数据导入import numpy as npimport pandas as pddata = pd.read_csv('/Users/liming/Downloads/review_star.csv')print(data.shape)data.head()(10000, 3) reviewid reviewbody star 0 661655779 感谢大众点评的...…
-
Pytorch 点评文本情感分析
import numpy as npimport pandas as pddata = pd.read_csv('/Users/liming/Downloads/review_star.csv')print(data.shape)data.head()(10000, 3) reviewid reviewbody star 0 661655779 感谢大众点评的vip会员卷。很多好吃的...…
-
keras 时间序列预测
num表示自行车数量,weekday表示星期几,hour表示小时。一共45949条数据,这些数据是按一分钟一次的顺序排列的。用RNN进行预测的话,实际上用num字段就够了,其他两个字段作为额外的参考信息,读者不妨利用这两条信息构建更复杂的模型,提高预测精度。接下来我们将用多层LSTM 的RNN神经网络去预测这些序列的值,简单来说,我们有9个连续的num,那么如何预测第10个num是多少?(知道前九分钟的num,预测下一分钟的num)# 加载依赖库import matplotlib.pypl...…
-
Pyspark 机器学习实战
一、SparkSessionfrom pyspark.sql import SparkSessionspark = SparkSession.builder.appName('test').getOrCreate()1、回归(Regression)df = spark.read.csv('cruise_ship_info.csv',inferSchema=True,header=True)df.show(5)+-----------+-----------+---+------------...…
-
Pyspark 入门教程
from pyspark.sql import SparkSession## 设置要连接的Spark主节点URL,"local"表示在本地运行,"local[2]"表示在本地调用2个核心运行spark = SparkSession.builder.master('local[2]').appName('Basics').getOrCreate()一、Spark SQLdf = spark.read.csv('appl_stock.csv',inferSchema=True,header=T...…
-
Pyspark 基础
一、SparkSessionfrom pyspark.sql import SparkSession## 设置要连接的Spark主节点URL,"local"表示在本地运行,"local[2]"表示在本地调用2个核心运行spark = SparkSession.builder.master('local[2]').appName('Basics').getOrCreate()二、DataFrameDataFrame 是带有 schema 信息的 RDD,类似于传统数据库中的二位表格。## 从...…
-
Pytorch 入门理论
一、PyTorch 第一步1、tensorTensor是PyTorch中重要的数据结构,可认为是一个高维数组。它可以是一个数(标量)、一维数组(向量)、二维数组(矩阵)以及更高维的数组。Tensor和Numpy的ndarrays类似,但Tensor可以使用GPU进行加速。Tensor的使用和Numpy及Matlab的接口十分相似,下面通过几个例子来看看Tensor的基本使用。import sysprint(sys.executable)/opt/anaconda3/bin/pythonfr...…