Promise
arcgis
基础学习
XXL-JOB
尚品汇
SAP ABAP
软件
Hudi
PID算法
java项目实战
毛球修剪器方案
滤波器
后台开发
illustrator
ACK
基础知识
重构
nullptr
拉格朗日函数
教程
数据分析
2024/4/11 12:44:33
Python数据分析：pandas数据操作和分析案例
Python数据分析：pandas数据操作和分析案例
项目介绍：
https://www.kaggle.com/openfoodfacts/world-food-facts
项目任务：
统计各个国家食物中的食品添加剂种类个数
import zipfile
import os
import pandas as pd
import matplotlib.py…
机器学习：伦敦出租车示例（数据分析，数据处理）
原地址：http://ju.outofmemory.cn/entry/299056
记得有一个出租车对于数据分析是很好的参考范例。找找转发过来以后参考！ 在纽约，出租车分为两类：黄色和绿色。黄色出租(Yellow TAXI)车可以在纽约五大区（布朗克斯区、布…
为什么网上Python爬虫教程这么多，但是做爬虫的却很少呢？别再被忽悠啦
网上教程多，是因为入门简单，容易获得成就感，容易忽悠小白
爬虫就是因为太有技术含量，所以会的人少，可能看起来做的人就少了
爬虫远比我们想的复杂
大多数人会的，只是造一颗螺丝钉，而整个爬虫…
python零基础不用怕，程序媛轻松教你入门，连安装步骤都给你准备啦
python零基础不用怕，程序媛轻松教你入门，连安装步骤都给你准备啦你还有什么理由不学习！！ 大家好，今天带领大家进行Python从入门到提高的学习路程。首先我们先对Python有个基本的了解和清晰的概念，然后再一步…
生态环境脆弱性评价模型构建、时空格局演变分析与RSEI 指数的生态质量评价及拓展
近年来，国内外学者在生态系统的敏感性、适应能力和潜在影响等方面开展了大量的生态脆弱性研究，他们普遍将生态脆弱性概念与农牧交错带、喀斯特地区、黄土高原区、流域、城市等相结合，评价不同类型研究区的生态脆弱特征，其研究内容…
【读书笔记-＞统计学】02-01 各种“平均数”-均值、中位数和众数概念简介
各种“平均数”
在这之前，请大家先要知道这里的“平均数”可不指代平常的概念，在统计学中，平均数可以帮我们把握一批数据的总体情况。
均值
均值，就是我们日常生活中经常用到的平均数，只需要将所有数字加起来除以数…
【读书笔记-＞统计学】05-01 “概率”的整体影响-期望、方差、标准差概念简介
“概率”的整体影响
老虎机的“秘密”
书中以老虎机为情境来介绍知识。所以我们可以先看看什么是老虎机。 一个简化版的老虎机就是上图的样子，我们可以用1美元的成本拉一次杆，随后三个窗口会滚动，每种符号出现的概率如上图所示。如果碰到以…
【读书笔记-＞统计学】07-02 离散型概率分布-二项分布概念简介
二项分布
假设一个情境：你参加了一个问答节目，一共3道题，每道题有4个选项。但是你一点都不知道答案，那么求能答对题数的概率分布。
下面是3个问题的概率树： 如果X表示答对的题数，我们看看具体的概率&…
【读书笔记-＞数据分析】02 BDA数据分析准备
数据分析准备
介绍 章节内容 数据分析前关于数据的收集、存储以及预处理等准备工作 考试内容 数据收集 （1） ⼆⼿资料数据的收集 （2） 样本数据的收集 （3） ⼤数据的收集数据存储 （1） …
【学习笔记】Pandas数据分析库基础学习
Series，DataFrame
Series可以看成一个定长的有序字典
一下默认import pandas as pd pd.Series([x,x,x,x])# 创建Series，索引未指定的话，为默认值 pd.Series([x,x,x,x],index[a,b,c,d])创建Series，指定索引值 Series.values查看…
Python数据分析：时间数据重采样
Python数据分析：时间数据重采样
重采样： 将时间序列从一个频率转换到另一个频率得的过程，需要聚合 高频率转换为低频率，downsampling，相反的过程为upsampling pandas中的resample方法实现重采样 产生resample对象 i…
pandas分组与聚合
pandas分组与聚合
分组（groupby）： 对数据集进行分组，然后对每组进行统计分析 SQL能够对数据进行过滤，分组聚合 pandas能利用groupby进行更加复杂的分组运算 分组运算过程 split（拆分）&#…
Datawhale动手学数据分析打卡
1.1 第一章：数据载入及初步观察
1.1.1 任务一：导入numpy和pandas
import numpy as np
import pandas as pd1.1.2 任务二：载入数据
(1) 使用相对路径载入数据 (2) 使用绝对路径载入数据
import os
print(os.getcwd())
os.chdir(d:\\user\\…
Linux常用的26条指令
文章目录 前言
1.ls指令
1.1功能
1.2常用选项 2.pwd指令
2.1功能
3.cd指令
3.1 功能
3.2常用选项
4.touch指令
4.1功能
4.2常用选项 5.mkdir指令
5.1mkdir功能
5.2mkdir常用选项
6.rmdir指令 和rm指令
6.1功能
6.2常用选项
7.man指令
7.1功能
7.2常用选项
7…
Pandas模块之DataFrame：01-基本概念及创建
"二维数组"Dataframe：是一个表格型的数据结构，包含一组有序的列，其列的值类型可以是数值、字符串、布尔值等。Dataframe中的数据以一个或多个二维块存放，不是列表、字典或一维数组结构。
DataFrame带有index࿰…
Apache Doris 入门教程35：多源数据目录
概述
多源数据目录（Multi-Catalog）功能，旨在能够更方便对接外部数据目录，以增强Doris的数据湖分析和联邦数据查询能力。
在之前的 Doris 版本中，用户数据只有两个层级：Database 和 Table。当我们需要连接…
Numpy基础用法介绍
Numpy使用
什么是Numpy
一个在Python中做科学计算的基础库，重在数值计算，也是大部分Python科学计算库的基础库，多用于在大型、多维数组上执行数值计算。
Numpy数组的创建
import numpy as np
import random
# 使用numpy生成数组
p1 n…
VIF 多重共线性膨胀因子
方差膨胀系数(variance inflation factor，VIF)是衡量多元线性回归模型中复 (多重)共线性严重程度的一种度量。它表示回归系数估计量的方差与假设自变量间不线性相关时方差相比的比值。
多重共线性是指自变量之间存在线性相关关系，即一个自变量可以是其他…
27、28岁的程序员转行做Python开发，这3个要点你准备了吗？
之前程序员界流行一句话：人生苦短，请用Python。
随着Python成为网红语言之后，不少程序员想多学这一门语言好傍身。
甚至有些27、28岁的程序员开始考虑要从安卓转行做Python。 这是一个非常有趣的现象:之前安卓比较火热，很多人从…
Python学习干货，如何用Python进行数据分析？
1.为什么选择Python进行数据分析？
Python是一门动态的、面向对象的脚本语言，同时也是一门简约，通俗易懂的编程语言。Python入门简单，代码可读性强，一段好的Python代码，阅读起来像是在读一篇外语文章。Pyth…
三十岁跨行跳槽数据分析工作，我是如何做到的？
30岁跨行求职的困境
在求职过程中，我面临的有两个问题，一个是年龄上偏大，我现在30多岁。还有一点是我是跨行跨专业求职，打算入职数据分析行业。下面就针对我的个人情况，跟大家分享一下我的应对方法。
首先我在CDA学习…
四年Python开发，年薪60W，分享我的python之路
在今年6月的时候，我从事python就有四年了，当初的菜鸟小白也成长了，趁着今天上午空闲的时间，编辑这篇帖子，分享一下我当初自学Python时走的弯路，希望大家引以为鉴，不要多走前人走过的弯路。 最开…
10分钟学会python写游戏脚本！Python其实很简单
前言
最近在玩儿公主连结，之前也玩儿过阴阳师这样的游戏，这样的游戏都会有个初始号这样的东西，或者说是可以肝的东西。
当然，作为一名程序员，肝这种东西完全可以用写代码的方式帮我们自动完成。游戏脚本其实并不高深…
2023亿发一体化新零售POS收银解决方案，打造连锁门店经营新未来
在零售业不断演变的今天，门店形态繁多，收银环节的共通性与差异性并存。传统的通用解决方案已不适应多样化的业态需求，而在线上线下一体化的时代背景下，全渠道经营能力也成为商家的迫切需求。
一体化新零售POS收银系统，…
数据分析系列 之python中元组内容介绍
1 介绍 Python的元组与列表类似，不同之处在于元组的元素不能修改，元组使用小括号，列表使用方括号。基于此，Tuple 没有的方法有： (1) 不能向 tuple 增加元素，没有 append 、 extend 、insert 等方法…
数据分析系列 之python中字典内容介绍
1 介绍 字典是另一种可变容器模型，且可存储任意类型对象； 字典的每个键值对用冒号分割，每个键值对之间用逗号分割，用花括号 { }表示，字典数据的存储是无序的，可以通过访问key来得到value； key一…
数据分析系列 之python中拓展库SciPy的使用
1 概述： SciPy中的数据结构： ndarray(N维数组) Series(变长字典) DataFrame(数据框)
常用的库： NumPy：强大的ndarray对象和ufunc函数，比较适合线性代数和随机数处理等科学计算，具有有效的通用多维数据&…
数据分析系列 之python中数据的可视化
1 介绍 Matplotlib绘图：python绘图库，主要用于二维绘图，利用绘图API–pyplot模块。 pandas绘图：可以实现基于Series和DataFrame的某些绘图功能。可以直接将DataFrame的index作为x轴数据，各组values作为y轴数据。
2 折…
【实习准备】开年要有好迹象，牛客网校招题第一刷-搜狐畅游2020校招笔试-数据分析师
新年伊始，掐指一算。猛地发现距离需要实习的日子不远了，排除掉留校读博的秃头机会，大概率北上南下去面向工资找工作。所以大概还有五六个月，只是大概，按照真正拥有的时间，其实最多三个月，因为校…
Python数据分析基础——CSV文件——选取特定的列
参考文献：《Python数据分析基础》 目录一.前言二.使用列索引值创建脚本脚本代码注释运行脚本查看结果三.使用列标题创建脚本脚本代码注释运行脚本查看结果四.结语一.前言
有时，并不需要文件中所有的列。可以使用Python选取所需要的列。本文演示两种可以…
Python数据分析基础——图与图表——matplotlib
参考文献：《Python数据分析基础》 前言
Python提供了若干种用于绘图的扩展包，包括matplotlib、pandas、ggplot和seaborn。因为matplotlib是最基础的扩展包，它为pandas和seaborn提供了一些基础的绘图概念和语法。
matplotlib
matplotlib是一…
两组之间的非参数检验：Mann-Whitney检验
Mann-Whitney检验
曼-惠特尼U检验又称“曼-惠特尼秩和检验”，是由H.B.Mann和D.R.Whitney于1947年提出的。它假设两个样本分别来自除了总体均值以外完全相同的两个总体，目的是检验这两个总体的均值是否有显著的差别。
可以看作是对两均值之差的参数检验…
python和r数据分析_在大数据分析和数据科学方面，Python会比R更好吗？ #rstats #python
python和r数据分析翻译自: https://www.pybloggers.com/2015/08/is-python-going-to-be-better-than-r-for-big-data-analytics-and-data-science-rstats-python/python和r数据分析
熊猫压缩怎么使用_如何使用熊猫示例选择行和列
熊猫压缩怎么使用In this tutorial we will learn how to use Pandas sample to randomly select rows and columns from a Pandas dataframe. There are some reasons for randomly sample our data; for instance, we may have a very large dataset and want to build our m…
数据挖掘-4.Pandas高级
文章目录pandas高级1 高级处理-缺失值处理学习目标1 如何处理nan2 电影数据的缺失值处理2.1 判断缺失值是否存在2.2 存在缺失值nan,并且是np.nan2.3 不是缺失值nan，有默认标记的3 小结2 高级处理-数据离散化学习目标1 为什么要离散化2 如何数据的离散化3 股票的涨跌…
数据挖掘——seaborn
import seaborn as sns
import numpy as np
import pandas as pd
import matplotlib.pyplot as plt绘制单变量分布
# seaborn.distplot(a, binsNone, histTrue, kdeTrue, rugFalse, fitNone, colorNone)
# 上述函数中常用参数的含义如下：
# (1) a：表示要…
python中iloc与loc的区别
loc和iloc都是pandas工具中定位某一行的函数，loc是location的意思，而iloc中的 i 指的是Integer，二者的区别如下：
loc：通过行标签名称索引行数据iloc：通过行号索引行数据
pandas分析电影评分
import pandas
import math
import numpy#pandas要读取表格型内容 如：#pandas.read_sql()
#pandas.read_excel()u_cols1[users_id,age,sex,job,zip_code]
users_infopandas.read_csv(uers_info.txt, sep|, namesu_cols1, encodingISO-8859-1)
#print(users_info)u_…
lagrange插值法、多项式插值法习题---python实践
1.等分点、lagrange插值法 lagrange算法实现参考我的 拉格朗日差值法python实现 文章 b站视频教程：https://www.bilibili.com/video/BV14Z4y1z78B?share_sourcecopy_web
import numpy
import matplotlib
import math
from matplotlib import pyplot
import time
N…
探秘！智能工厂如何深挖数据价值
约4500平的厂房内整齐排列着高度自动化的13条生产线。每条产线上由 MES 系统直接调度的机器人完成复杂的装配工序，在线无损检测系统和功能性测试系统牢牢把好产品质量关。每天，近6万件汽车发动机、变速箱系列零部件产品在这里生产出厂后，输送…
Java详解：成功拿下美团offer，附赠课程+题库
前言 本文脑图 Java BIO 问题分析 nio介绍 Selector 、 Channel 和 Buffer 的关系图： 缓冲区(Buffer) channel Selector 示意图和特点说明 最后 需要这份文档的朋友可以点击此处领取福利即可免费获取！
资料整理不易，点个关注再走吧ÿ…
如何用低代码搞垮一家公司？
作者| Mr.K 整理| Emma来源| 技术领导力(ID：jishulingdaoli)老读者知道，老K是技术出身，技术人都比较本分，从来不去想天上掉馅饼的事情，还是看看地上有没有钱捡比较靠谱。时间告诉我们，装逼的年龄已经过了…
OpenTSDB 指标和时间序列说明
文章目录Understanding Metrics and Time SeriesYour first datapointsYour first plotAggregatorsDownsamplingTag FiltersAdding More MetricsGetting FancyGuidelines When to Create MetricsTags vs. MetricsCounters and RatesTags are your FriendPrecisions on Metrics …
OpenTSDB 日期时间说明
文章目录Dates and TimesRelativeAbsolute Unix TimeAbsolute Formatted TimeTime ZonesDates and Times 原文地址：http://opentsdb.net/docs/build/html/user_guide/query/dates.html OpenTSDB 在查询数据时支持多种日期和时间格式。 通过 GUI、CliQuery 工具或 HT…
高维数据PCA降维可视化(KNN分类)
在做机器学习的时候，经常会遇到三个特征以上的数据，这类数据通常被称为高维数据。数据做好类别分类后，通过二维图或者三维图进行可视化，对于高维数据可以通过PCA(Principal Component Analysis)，即主成分分析方法&…
Mongodb将csv导入以及改变字段类型
Mongodb
将csv文件导入到monggo
执行命令
mongoimport -h 127.0.0.1 -d test -c csv --type csv --file D:\Radio.csv --headerline --upsert
-d 数据库名test
-c 集合名csv --type
--type 导入的数据类型
--file 要导入的文件位置 D:\Radio.csv
--head…
numpy创建array
import numpy as np# 关键字:
# array：创建数组
# dtype：指定数据类型
# zeros：创建数据全为0
# ones：创建数据全为1
# empty：创建数据接近0
# arrange：按指定范围创建数据
# linspace：创建线段…
彻底搞懂Python字典
一、字典简介
字典（dictionary）是包含若干“键:值”元素的无序可变序列，字典中的每个元素包含用冒号分隔开的“键”和“值”两部分，表示一种映射或对应关系，也称关联数组。
定义字典时，每个元素的“键”和“…
大数据专业职业前景如何
大数据专业毕业生未来的岗位选择空间比较大，有三大类岗位可选择分别是大数据开发岗位、大数据分析岗位和大数据运维岗位，在不同的行业和技术体系结构下这些岗位也包含很多细分的岗位。
大数据开发岗位分为平台研发岗位和行业场景开发岗位两大类…
对比Excel学习SQL（5）：分组和子查询
今天这篇文章是对比Excel学习SQL系列的第5篇文章，之前3篇的传送门在这里：《计算字段》、《对行和列的操作》、《库/表/记录的增查删改》、《写给小白的SQL学习文章》。本节内容要用到的数据表：成绩表（sc）,学生基本信息…
送书，一路走来感谢有你
Hello，提前祝大家国庆节快乐，值此举国同庆之际，为回馈广大粉丝持续以来的关注和支持，特送书4本，都是数据分析类的书籍，包邮到家，真 无套路，因无赞助，所以都是平时自己书…
动态图表揭秘：“动”的关键——取数
这一节内容介绍动态交互图表制作的核心内容，就是取数。没看过前两节的朋友可移步《这样用Excel动态交互图表，还要什么前端？》、《动态图表交互揭秘：制作选择器的奥秘》。首先要理解，图表能动起来，是作图的这…
2020年小红书校招数据分析笔试题详解
1、如果在小红书商城中某一商户给一产品定价，如果按照全网最低价500元定价，那么客人就一定会选择在此购买；价格每增加1元，客人的流失的可能性就会增加1%。那么该商户给客人报出最优价格为（） A、520 B、535 …
01_python数据分析基础介绍
数据分析基础对数据分析进行初步认识为什么要学习数据分析什么是数据分析环境安装认识 jupyter notebook对数据分析进行初步认识
数据分析是你对数据进行剖析，分析规律必不可少的环节。为什么要学习数据分析
数据分析涉及各行各业，这个世界离不开数据。…
如何利用大数据软件进行宠物店的选址要素收集与分析
城市地图顺为互联 如何用大数据进行宠物店选址要素分析
对于宠物主人来说，作为灵魂的寄托和情感的延续，宠物主人绝不能让自己的宠物遭受一点委屈，而且许多养宠物的人宠物都比较名贵，在宠物身上的花费也不小。现在开个宠物店是个不…
python 数据透视表_使用Python数据透视表探索幸福数据
python 数据透视表One of the biggest challenges when facing a new data set is knowing where to start and what to focus on. Being able to quickly summarize hundreds of rows and columns can save you a lot of time and frustration. A simple tool you can use to …
多模态数据、多源数据
多来源数据（multi-source data）
数据并非来自同一信息源，而是来自不同的来源，并被收集在一个数据集中，这种类型的数据称为多源数据。总体来说多来源数据就是取自多个端口的数据集合。（包括但不限于传感器、…
按照五个实验分数计算期末成绩分数
从五个实验分数出发,计算出最终的实验分数
目前设置:
有1,2个优秀的为优
有2,3个中的为中
其余为良0 45
1 14
2 13
4 5
3 3
5 1
优>=2的为优,且签到次数=2
----
0 60
2 7
5 6
1 4
4 2
3 2
Name: 中, dtype: int64
中>=2的为…
医院节能管理系统减少能耗
最近我国经济发展呈现良好的发展态势，医院的建设也紧跟时代的步伐。但是能耗情况复杂、用量高，是能耗最大的公共建筑之一。医院的日常运营中电力消耗最大，其次是燃气、汽油等，消耗量巨大，如何实现节能减排、绿色用能十…
echarts奇葩的个性化需求（一）真心想打人（建议收藏，避免采坑) 实现 echarts 插件中 柱状图label中显示每个柱状图的值占总值（所有柱状图值）的百分比
如何实现如上图的echarts图表，代码如下：
echarts option对象中series[]中设置label的数据展示格式，利用formatter自定义一个数据处理函数，首先通过遍历option.series[0].data也就是我们的y轴上显示的数据，计算出所有的…
一图知道电子商务所用到的知识
一图知道电子商务所用到的知识： ⒈产品；⒉运营；⒊客服；⒋营销；⒌消费者心理学；⒍技术；⒎仓库；⒏公关；⒐管理；⒑物流；⒒推广；⒓用户体验…
Pandas数据分析教程-数据清洗-扩展数据类型
pandas-02-数据清洗&预处理 扩展数据类型1. 传统数据类型缺点2. 扩展的数据类型3. 如何转换类型文中用S代指Series，用Df代指DataFrame 数据清洗是处理大型复杂情况数据必不可少的步骤，这里总结一些数据清洗的常用方法：包括缺失值、重复值、异常值处理，数据类型统计，分…
构建Python pandas基于SSH远程MySQL和PostgreSQL的数据分析
如果您无法从外部环境直接访问数据库，则可能需要SSH隧道来查询它。 在这篇文章中，我将向您展示如何通过SSH连接并查询MySQL数据库到Pandas数据框。 可以将相同的代码应用于连接到其他数据库，例如PostgreSQL。
假设您的数据库托管在52.xx.xx.…
玉米社：如何做好企业SEM竞价推广？数据分析不能少
如何做好企业SEM竞价推广？数据分析不能少!需要做哪些数据分析呢？下面总结以下几点，供大家参考。
一、关键词分析 账户搭建第一步很多人觉得是创建计划，建立单元，实际上，在这之前，有个关键的步骤…
数据分析方法论：不可不知的分组分析法
分组分析是将总体数据按照某一特征性质划分成不同的部分和类型进行研究，从而深入分析其内在规律。 为什么要分组？
对于大量的数据，如果不进行分组是很难发现其中规律，找到不同组别之间的关系，从而更好地对比࿰…
数据分析方法论2：交叉平均分析法
交叉分析 and 平均分析 平均分析法
平均分析法顾名思义，就是用平均数来反映数据在某一特征下的水平，平均分析通常和对比分析结合在一起，从时间和空间多个角度衡量差异，找到其中的趋势和规律。 01 不得不提的平均数
平均数用来反映…
数据分析方法论3：综合指标分析法
之前提到的对比、平均、分组和交叉的分析思路，都是在单一指标下分析的方法。而综合指标评价法是建立在复杂数据情况下，将多个指标的转化为一个综合指标对某一特征进行总体评价，如人民的幸福程度、人才评价、用户活跃程度等，这种方…
TypeError: Index(...) must be called with a collection of some kind, “ “ was passed
解决方法如下：
1. 如果你的数据只有一列，在指定 column（行） 时，需要加个中括号。
df pd.DataFrame(data,columns[result])
2. 利用列表生成 Series 时，需要给数据加中括号。
s1 pd.Series([1, "…
历经两载磨砺，Greenplum进入6.0时代
获得技术资料内容，请访问Greenplum中文社区网站 今天（2019年3月20日），所有关注开源大数据平台Greenplum的用户和开发人员都会发现：Greenplum的github代码库里面出现了一个新的分支--“6X_STABLE”。这标志着Greenplum大…
【读书笔记-＞统计学】03-01 各种“距”和“差”-极差（全距）、四分位距（数）、百分位数、箱线图概念简介
各种“距”和“差”
上一章中我们学习了平均数，但是它有自己的有限性。为了得到更多的信息，我们开始学习各种“距”和“差”。
情境：现在我们想要招募一名球员，他们的历史得分分别如下： 可以看到，他们的得…
实验八 项目案例-电商数据分析
电商大数据离线计算第1关：统计用户流失情况任务描述相关知识数据文件格式说明用户流失情况编程要求测试说明代码实现第2关：统计所有商品点击量排行任务描述相关知识数据文件格式说明商品点击量排行cleanup()方法编程要求测试说明代码实现第3关࿱…
Python 的 Matplotlib 数值可视化
文章目录1. Matplotlib 介绍2. 绘图基本语法与常用参数2.1 pyplot 基础语法2.1.1 创建画布与创建子图2.1.2 添加画布内容2.1.3 保存与显示图形2.2 设置 pyplot 动态的 rc 参数3. 散点图和折线图3.1 绘制散点图3.2 绘制折线图4.直方图、饼图和箱线图4.1 绘制直方图4.2 绘制饼图4…
【读书笔记-＞统计学】04-02 利用概率理论预测和决策-条件概率、概率树、全概率公式、贝叶斯定理、相关与独立概念简介
条件概率
现在书给我们提供了一个情境：已知下一次小球会停在黑色球位，赌小球会不会停在偶数球位上。
由于我们已经知道小球停在黑色球位，那么小球一定不会停在绿色或红色球位了，但我们求概率的时候，相应的范围也会缩…
pandas层级索引
pandas层级索引
import pandas as pd
import numpy as npser_obj pd.Series(np.random.randn(12),index[[a, a, a, b, b, b, c, c, c, d, d, d],[0, 1, 2, 0, 1, 2, 0, 1, 2, 0, 1, 2]])
print(ser_obj)运行结果： multiindex对象 print(type(ser_obj.index))
pri…
精准决策、提高销售额的秘诀，早写在电商数据分析方案里了
从数据中挖掘信息，帮助电商企业了解市场和用户需求，优化运营和营销策略，提高销售额和客户满意度，早就成为共识。难就难在最终的落地执行上，很大程度上是因为长期以来由于缺乏一套有足够多经验做支撑的标准化电商数据分…
工具推荐：如何通过代码构造Excel测试数据？
项目背景
系统有个Excel导入功能，需要通过Excel来构造测试数据，生成测试数据之后，上传Excel并导入验证。 如果数据验证出错，需要给出错误提示；如果数据校验通过，则执行导入操作。
我们主要通过Alibaba的E…
特征筛选实践-------过滤法
前言
在机器学习项目的数据集中，特征间的高相关、特征与标签的低相关或不相关、特征本身的信息量以及特征数量等因素都会对模型的效果产生影响，特征筛选的目的是保留对预测有贡献的特征，删除冗余或无用特征。特征选择方法分为三大类…
项目总结 | 九种缺失值处理方法总有一种适合你
为什么要处理缺失值
这一段完全是废话了。含有缺失数据的样本，你要么删了，要了就填充上什么值。删了就会损失一部分的样本信息，填充要是填充的不合适，会给样本增加噪音。
所以这就是一个选择的问题：
选择删除还是填…
福建数字化WMS仓储管理系统解决方案，亿发专业库存管理系统分析
2023年，信息技术和物流技术的飞速发展，仓储管理从一开始的人工仓储、机械仓储逐渐发展为自动化和智能仓储。新消费模式下，用户对物流时效的需求催生了仓储整体运营效率的要求。在这个时刻，仓储管理解决方案将仓库自动化和信息化&a…
空值让数据分析头疼?Pandas空值处理全攻略来了!
在进行数据分析和建模时，空值的存在会给结果带来很大影响，甚至导致错误。所以在预处理数据时，我们必须对空值进行妥善处理。
在Pandas中，常见的空值表示有：
NaN：表示数值型的空值None：表示对象…
B域，M域，O域具体是指什么
O域（运营域）、B域（业务域）、M域（管理域）特指电信行业大数据领域的三大数据域。 B域（业务域） business support system的数据域，
O域（运营域） ope…
Python实现PDF文件的一些操作_学习笔记
python中实现对PDF的操作
原文链接：https://zhuanlan.zhihu.com/p/55823723
python作为一种具有相对简单语法的高级解释语言，即使对于那些没有编程经验的人来说，Python也是简单易操作的。强大的Python库让你事半功倍。
在处理文本信息时&a…
【读书笔记-＞统计学】07-03 离散型概率分布-泊松分布概念简介
泊松分布
假设一个情境：下星期电影院有一个大型促销，影院经理希望一切都完美无缺。爆米花机每一周的平均故障次数为3.4，或者说爆米花机的故障率为3.4。
求爆米花机下一周不发生故障的概率有多大？（如果预计故障太多次…
numpy快速入门教程2
NumPy中的基本数据类型取值范围
名称描述bool用一个Bit存储的布尔类型（True或False）inti由所在平台决定其大小的整数（一般为int32或int64）int8一个字节大小，-128 至 127int16整数，-32768 至 32767int32整数…
2020.8.25丨微生物基因组重测序流程梳理
微生物基因组重测序流程产品概述基本概念产品优势研究内容分析流程图数据产出及处理测序质量报告标准信息分析初级组装及评价比较基因组分析SNPCalling计算统计SNV的等位基因频率在全基因组上的分布分析对象包括全新预测的SNP，indel，large deletion, 以及…
Apache Druid 0.18.1使用准确值去重方式
简述
Apache druid 中的 COUNT(DISTINCT expr) 默认是使用 近似值算法HyperLogLog. 原来介绍过druid本身是为了海量数据分析而设计，所以在大数据量的情况下，使用近似值算法，速度更快。但有的需求，数据量本身较小，对数…
Pandas2.0它来了，这些新功能你知道多少？
前言 本文是该专栏的第29篇，后面会持续分享python的数据分析知识，记得关注。
做过数据分析的同学，都知道pandas是开源数据分析工具，广泛用于数据清洗，数据处理，数据分析等相关领域。而随着现在行业的数据量越来越多，pandas的部分局限性也开始凸显，特别是在处理大数据业…
Excel 中 时间戳 转为日期格式
简述
目录
简述
使用TEXT函数
效果 使用TEXT函数
excel 中提供text函数，通过计算将时间戳转为日期格式。
TEXT((A2/10008*3600)/8640070*36519,"yyyy-mm-dd hh:mm:ss")
其中的A2是时间戳的单元格。
效果
设置公式时，直接拖拽即可全部…
程序开发经验分享总结：计算机毕业设计吊炸天Python+Spark地铁客流数据分析与预测系统 地铁大数据 地铁流量预测 地铁爬虫 地铁客流量分析 大数据毕业设计 大数据毕设
开发技术
Spark Hadoop Python爬虫 Vue.js SpringBoot 机器学习/深度学习 人工智能
创新点
Spark大屏可视化 爬虫 预测算法
功能
1、登录注册界面，用户登录注册，修改信息
2、管理员用户： （1）查看用户信息&#x…
利用python中的pandas和matplotlib进行电影数据分析
项目案例
数据集介绍
电影数据集百度云链接 提取码: 4anq 这是一份好莱坞电影数据，有28个特征，五千多个样本，特征有电影时长、导演、票房、语言、评分等，样本中有缺失值，需要进行处理。 项目任务
查看票房收入统计 …
新一代图像编辑器、虚拟偶像、AR，第29期「 Mix+人工智能」
新一代图像编辑器虚拟偶像ARKnowledge/ def mix( ):本期收录新增25节选/ NO.29#案例# #内容识别# #图像分割# #工具#新一代图像编辑器facet.ai#新闻推荐# #个性化推荐# #ACL# #2020# #数据集#微软亚洲研究院联合微软新闻产品团队在 ACL 2020上发布了一个大规模的英文新闻推荐数…
什么是见解、如何实现算法见解？| Mixlab智能可视化系列
人群迁徙的可视化，图自google智能可视化是最近我最近查阅了许多微软亚洲研究院的文章和论文后，个人蛮喜欢的一个方向。用户向机器下达指令，机器根据分析场景和上下文推测人类分析的目的，自动理解、智能分析并主动用可视化的方式呈…
数据可视、语义分割、T_Youtube、智能调酒 | Mixlab人工智能合集
Knowledge/ def mix( ):本期收录新增28NO.33 #篮球##数据可视化##体育#https://public.tableau.com/zh-cn/gallery/mapping-nba-shot-locations?tabviz-of-the-day&typeviz-of-the-day#浏览器##语义分割#监测、描绘Search by interest用TensorFlow.js在浏览器中进行实时语…
我们都是视觉动物？影视作品数据可视化
数据可视化？视觉是我们所有感官中最快的，比触觉、嗅觉都要快很多，每天至少有80%以上的信息从各种渠道被眼睛感知。以简洁精美的图像展现复杂、抽象或分散的数据，通过将不同的数据组合，展现其中的联系和规律。30《乘风破…
设计遇上智能，开启无界之旅 | 第34期 Mix+AI
Mixlab成员周谷越博士作为导师的创业Demo：方仔照相馆 Knowledge/ def mix( ):本期收录新增19NO.34#一阶运动模型# #opencv# #开源项目# 实时人脸控制只需一张照片，即可模拟各种动作，表情。The Project is real time application in opencv us…
【Python】pandas获取全省人口数据并作可视化分析
前言
今天我们看看自己所在的省份的人口人数，使用pandas并作可视化分析。
环境使用
python 3.9pycharm
模块使用
pandasPandas 是基于NumPy的一种工具，该工具是为解决数据分析任务而创建的。Pandas 纳入了大量库和一些标准的数据模型，提供…
如果虾米APP是一枚流浪的虾球 | 跨模态感知专栏
上一期：哼！你凭什么说这是梵高？这一期我们一起来了解：音乐圈，正在上演着的一场逃离计划 —— 虾米APP关停。（给大家拜个早年呀！欢迎加入文末读者专栏，跟我联系）大家一定已…
智能设计#工具-课程-人才#ICTD 2021 Technology and Design
感谢浙大邀请，明天和大家交流新学科的教育实践~~~shadow大家好~~临时发个通知，明天我将在 ICTD2021 分享一个主题：《智能设计：工具、课程、人才》Intelligent Design: Tools, Courses, Talents从当前的学科发展、技术和设计趋…
Oracle笔记 之 分析函数over
over()分析函数
聚合函数（count，sum、max，min，avg等）可以计算基于分组的某种聚合值，但聚合函数对于某个分组只能返回一行记录。若想对于某组返回多行记录，则需要使用分析函数。
over()分析函数…
“神算子”上线！EasyDL时序预测模型零门槛轻松上手
写在篇首：百度飞桨 EasyDL 零门槛 AI 开发平台在机器学习方向推出了自动时序预测的功能，极大程度降低了构建模型的难度与门槛。可广泛应用于零售、金融、交通及天气预测等场景。时序预测是根据历史统计数据的时间序列，对未来的变化趋势进行预…
产品升级｜10月产品捷报频传，解锁更多新成就！
10月，捷报频频，百度 AI 专利申请量连续四年包揽第一；百度智能云成为首批获得国际 ISO 27040 认证企业。这些成绩与我们持续的产品发布与更新迭代密不可分。10月份有哪些产品和解决方案发布和升级呢？让我们一睹为快！# 重…
数字人行业爆发在即，市场格局几何？
近日，IDC 发布《中国 AI 数字人市场现状与机会分析，2022》报告。报告显示：中国 AI 数字人市场规模呈现高速增长趋势，预计到2026年将达102.4亿元人民币。当前 AI 数字人市场可分为2-3个梯队，百度智能云凭借领先的 AI 能…
蔬菜大棚变身智能工厂！百度智能云助力山东寿光打造智慧农业新标杆
水肥一体机、自动卷帘机、5G 摄像头、小型气象监测站、智能雾化机、智能补光灯、多功能植保机，山东寿光60万亩蔬菜大棚摇身一变，成为了一座座现代化的农业工厂。百度智能云联合全国农业农村信息示范基地、潍坊市农业产业化重点龙头企业山东物泽生态农业科…
掌握未来-核音智言助力智慧矿山高速发展
随着全球数字化浪潮到来和全球经济一体化进程加快，信息技术愈来愈广泛应用于社会经济各个领域，信息化、网络化、数字化已成为当今社会发展重要而基础的手段。如今，物联网、云计算、大数据、人工智能、自动控制、工业互联网、机器化装备等技术…
pandas.loc详解？
loc是Pandas中用于标签基于定位的索引方法，主要用于选择DataFrame或Series中的行和列。 loc除了逐行指定元素的位置外，还能一次选择多行（列），同时指定多种条件。 具体用法如下： 1. 选择列：df.lo…
双维度第一！百度智能云领衔中国“AI+工业互联网”市场领导者阵营
10月29日，国内权威咨询机构赛迪顾问发布《AI工业互联网报告简报》显示：百度智能云在2020年中国 AI工业互联网市场竞争格局中位居领导者象限，并在市场地位和发展能力双维度上均列第一。赛迪报告分别从市场地位和发展能力两个维度对中国 AI工业…
智能大数据专场，百度智能云带来智能大数据产品架构全景图
9月28日，百度智能云2021“云智技术论坛”智能大数据专场在上海成功举办。本次会议以“云智一体，让大数据发挥大价值”为主题，百度副总裁谢广军携百度多位资深技术专家与行业伙伴出席会议，共同探讨了大数据发展新形势下，…
通过这些操作，让你的网站日访问量过万！
文章目录1.外部链接的定义和意义定义意义1.增强页面相关性2.提高权重及信任度3.提高收录数2.外链的分类3.外链的查询方法：利用搜索引擎查询：第三方工具查询：4.Google 炸弹5.链接分析技术1.外部链接的定义和意义
定义
外链又叫反向链接或导入…
百度智能云×北大图书馆丨管理精细服务精准，数字化图书馆新体验
作为中国最早的现代新型图书馆之一，北京大学图书馆（以下简称“北大图书馆”）已经被国务院批准为首批国家重点古籍保护单位，并且逐渐发展成为资源丰富、现代化、综合性、开放式的研究型图书馆。经过几十年的信息化建设，…
边学边赚，未来是否存在一份边学习边赚钱的工作？构建一个诞生未来职业的“种植果园”...
Poetical Science 诗意科学，技术与艺术交融未来学科与职业的诞生，有哪些新可能？“学习“本身，会成为终身学习者的主业吗？MixlabiBrand Talk 是孵化自 iBrand Up x Mixlab 的跨界话题精选专栏。本专栏将持续为大家进行M…
教程：如何成为日入斗金NFT数字艺术创作家
大家好，我是亚米～，分享设计前沿的设计师。NFT是什么，不用多说大家应该都认识了今天就教大家，我是成为NFT艺术家（卖画赚钱）的。PS，文尾有福利哦～01—低情商：画…
产品经理知识体系：5.如何做好产品数据分析？
数据分析 思考 笔记 数据分析 思路 基于用户路径：用户的活动路径，操作流程等行为数据。 基于产品节点：转化率、占比 分析类型 先定性：先抛出问题、提出假设 再定量：数据验证问题、验证假设 先定性、再定量、最后得…
什么是鸟撞？该如何设计防鸟撞的建筑？#可持续设计
听说过，过飞鸟撞击建筑身亡的事件吗？#在我们教学楼附近遇到过好多次，猛得一声 “巨响” ，一只小鸟就撞到窗户上坠地了。有没有办法通过设计解决这个问题？#有一份全国范围内的鸟撞调查报告，也许可以帮助我们…
元宇宙的气味体验有哪些可能？#共创招募
元宇宙除了视觉体验方式，还有哪些待开发的感官体验？#前期推文有一篇介绍了元宇宙巴士，综合了视觉、听觉与嗅觉的多模态体验。元宇宙中如何体验嗅觉？#在元宇宙体验系统中增加 “香薰” 产品等嗅觉增强装置？我觉得可以发…
Fluent16.0学习笔记（二）————边界条件
边界条件定义边界条件1、什么是边界条件2、流体域如何设置边界条件边界的性质编辑边界选项的信息Velocity inlet设置方法：pressure inlet设置方法：Mass-Flow inlet设置方法：Pressure outset 设置方法：Wall设置方法其他选项设置ope…
闲鱼商品理解和选品，究竟是怎么做的？
背景闲鱼在这几年的高速发展中，积累了几亿件在线商品，而这些商品稂莠不齐，可能会带来买家不好的购物体验。因此，我们希望引入闲鱼商品理解的能力，选取优质商品，进而提升闲鱼的购物体验。痛点现有的闲鱼商品…
jupyter notebook安装插件
#jupyter notebook安装插件
#step_01：
pip install jupyter_contrib_nbextensions
#step_02
jupyter contrib nbextensions install --user
Seaborn数据可视化（四）
目录 1.绘制箱线图
2.绘制小提琴图
3.绘制多面板图
4.绘制等高线图
5.绘制热力图 1.绘制箱线图
import seaborn as sns
import matplotlib.pyplot as plt
# 加载示例数据（例如，使用seaborn自带的数据集）
tips sns.load_dataset("t…
一文教你快速学习搭建属于自己的数据指标体系
【与数据同行】已开通综合、数据仓库、数据分析、产品经理、数据治理及机器学习六大专业群，加微信号frank61822702 为好友后入群。新开招聘交流群，请关注【与数据同行】公众号，后台回复“招聘”后获得入群方法。正文开始做数据分析之前&#…
收藏！一文掌握数据分析知识体系
【与数据同行】已开通综合、数据仓库、数据分析、产品经理、数据治理及机器学习六大专业群，加微信号frank61822702 为好友后入群。新开招聘微信群，请关注【与数据同行】公众号，后台回复“招聘”后获得入群方法。正文开始阿里妹导读࿱…
百度智能云 x 国寿财险 | 打造NPS+AI新一代客户体验管理模式
如果你是国寿财险的客户，你会在投保完成、理赔、增值服务等业务场景即时收到 NPS（Net Promoter Score，净推荐值）系统推送的调研问卷。看似简单的一张调研问卷，对于国寿财险来说并不简单。从问卷投放、回收、后续分析&a…
科技振兴更精准！陕西汉中以“云”贯穿脱贫“攻坚战”
“伟大的时代造就伟大的事业，伟大的事业造就伟大的人。”3月27日，来北京参加“百度智能云2021云智技术论坛”的汉中市扶贫信息中心副主任刘乐，在活动现场分享过去一年“脱贫攻坚战”的创新经验时发出如此感慨。“1120个驻村工作队”、“产业扶…
开发商刷榜，VC揭露趁机压价？
看到红杉资本的合伙人计越发微博，称某些开发者在AppStore利用刷榜的方式进入前100名，并利用微博大号的转发来忽悠投资人，打着创新的旗号，竟然还真有投资人因此上钩的。这条微博瞬间被狂转发近千次。 移动应用在AppStore刷榜已经是…
TalkingData1.4正式发布，引入全新宏观数据指标“用户生命周期”
时隔两个月，TalkingData1.4正式发布，新版主推三大全新功能，在移动应用的数据分析挖掘领域更进一步。此次更新的三项功能，覆盖从宏观到微观，再到使用体验三个方向，让用户可以解析更多数据真相。 本次更新中&…
用微信小程序收集工单，随时了解处理进展| ONES 小技巧
「ONES 小技巧」是 ONES 推出的轻量级使用教程，专注于挖掘 ONES 中那些高效实用的隐藏小功能，带你深度玩转 ONES 系统，开启研发管理的进阶之旅。自定义报表组件在 ONES 的项目报表组件中，用户不仅可以选择系统推荐的多场景报表&…
计算机毕业设计之全网独家Spark租房爬虫数据分析与推荐系统 租房大数据 租房app 租房数据分析 租房爬虫 房源推荐系统 房源数据分析 房源可视化
一、网站
登录与注册、注销
短信验证码修改密码
我的信息：身份证实名认证
租房业务流程 （预约看房支付完成评价）、进度步骤条展示
支付宝沙箱支付
房屋浏览、中介信息查看
房屋推荐（基于mahout协同过滤算法…
数据挖掘在CRM中的运用
数据挖掘在CRM中的运用 来自：中国计算机 作者：江华 日期：2002年05月23日 浏览次数：1758 在客户关系管理（CRM）理论中有一个经典的2/8原则，即80%利润来自20%客户。那么，这20%的客户都…
速卖通数据分析怎么看？速卖通数据分析工具有哪些？—站斧浏览器
速卖通数据分析怎么看？
1、关注销售指标：在进行速卖通数据分析时，卖家应特别关注销售指标，如销售额、订单量、转化率等。通过对这些指标的分析，卖家可以了解到自己店铺的销售状况以及变化趋势，进而采取相应…
数据挖掘的价值：寿险行业数据挖掘应用分析
数据挖掘的价值：寿险行业数据挖掘应用分析北京理工大学 刘勇 张丽平2003-12-9 14:47:04 寿险是保险行业的一个重要分支，具有巨大的市场发展空间，因此，随着寿险市场的开放、外资公司的介入，竞争逐步升级，群雄…
Chrome为首 11个玩家必备的炫酷应用
随着智能手机等移动设备的普及，用户关注的方向发生了转移。比起硬件配置，现在用户似乎更关注应用软件的配套。为什么这么说呢，其实不少Android手机在配置上是超越了iPhone，但是果粉的数量有增无减，这就说明了用户也很看…
移动应用和网页应用对于用户分群分析的差异
编者按：本文作者Leo_Cui，雷锋网特约撰稿人，曾就职Oracle，现为北京腾云天下科技（TalkingData）CEO，对数据感兴趣想与作者交流的读者可在微博Leo_Cui。 最近基于用户细分的分析方法开始获得移动应用…
数据挖掘基础知识储备——Pandas
Python之所以对处理数据非常方便，不得不说Numpy与Pdndas功不可没～ 本篇博客将总结所有关于数据挖掘中常用到的pandas的使用方法，阅读好的代码往往有利于代码的书写和方便他人阅读，这是一个很好的习惯呀～ 推荐Pandas中文…
Mixpanel获Andreessen Horowitz投资 为Viddy及Path提供分析服务
Mixpanel是由Y Combinator所孵化的创业公司，提供实时Web数据分析服务，近日宣布获得1025万美元A轮融资，由Andreessen Horowitz 领投，作为交易一部分，Andreessen Horowitz的Peter Levine将会加入Mixpanel董事会。之前公司…
美医学博士: 互联网并未实质性地改变医疗行业
每一个人都有唯一的健康故事。作为一个医生，我的职责是帮助人们编辑故事并针对每一个独特的故事进行治疗来确保你的健康。当数字医疗模式开始席卷全球，我们的任务就是把编辑变得更有效，更精确，而对象是全球80亿人健康故事。
我自…
星期日：发布移动应用的最佳时间
据移动数据分析公司Mobilewalla的一项最新研究显示：星期日是发布移动应用的最佳时间，但目前最受开发者欢迎的发布时间是星期三。 该公司调查了从5月16日至9月8日长达17周的时间内在iTunes App Store和Android Market中发布的所有应用，调查发现…
python数据分析和数据挖掘之pandas模块
一、pandas模块
pandas（Python Data Analysis Library）是基于numpy的数据分析模块，提供了大量标准数据模型和高效操作大型数据集所需要的工具，可以说pandas是使得Python能够成为高效且强大的数据分析环境的重要因素之一。它最主要…
数据可视化是什么？有什么工具？
一、什么是数据可视化？
数据可视化是一种通过图表、图形、地图和其他视觉元素将数据呈现给用户的方式。它是将复杂的数据转化为易于理解和解释的视觉形式的过程。数据可视化旨在帮助用户发现数据中的模式、趋势和关联，并从中获得洞察力。
数据可视化的…
使用pands.rolling方法实现移动窗口的聚合计算
一个问题举例
假设有一个5天的收益数据，需要每3天求出一次平均值来达成某个需求：
daterevenue2023-05-01102023-05-02202023-05-03302023-05-04402023-05-0550
1号、2号和3号的数据求一次平均值，2号、3号和4号的数据求一次平均值ÿ…
数据分析案例-汽车客户信息数据可视化分析（文末送书）
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
使用指定字符对数组中每个字符串中的每个字符进行连接numpy.char.join()
【小白从小学Python、C、Java】 【计算机等考500强证书考研】 【Python-数据分析】 使用指定字符对数组中 每个字符串中的每个字符进行连接 numpy.char.join()
[太阳]选择题
下列代码最后输出的结果是？ import numpy as np s np.array([cat1, 123, 12.3]) print(…
一行代码生成Tableau可视化图表
今天给大家介绍一个十分好用的Python模块，用来给数据集做一个初步的探索性数据分析(EDA)，有着类似Tableau的可视化界面，我们通过对于字段的拖拽就可以实现想要的可视化图表，使用起来十分的简单且容易上手，学习成本低&a…
从“将男朋友转化为老公”的评价体系谈数据分析
【提醒：公众号推送规则变了，如果您想及时收到推送，麻烦右下角点个在看，或者把本号置顶】正文开始虽然女孩子找老公是非常感性的事情，但还是有策略可以遵循，比如科学家经过计算发现，假如妹子此生…
SPSS-多重响应分析
多重相应分析一般用于多选题的分析。多选题一般有三种：
一道多选题，每个选项用一列表示，0表示未选，1表示已选；一道排序题，存在选项先后次序，每个选项用一列表示，列值对应选项的次序…
【核磁共振成像】方格化重建
目录 一、缩放比例二、方格化变换的基础三、重建时间四、方格化核 一、缩放比例 对于笛卡尔K空间直线轨迹数据可直接用FFT重建，而如果K空间轨迹的任何部分都是非均匀取样的 可用DFT直接重建，有时称为共轭相位重建，但此法太慢不实用。把数据再…
数据挖掘中所需的概率论与数理统计知识、上
转载:http://blog.csdn.net/v_july_v/article/details/8308762 数据挖掘中所需的概率论与数理统计知识、上 （
关键词：微积分、概率分布、期望、方差、协方差、数理统计简史、大数定律、中心极限定理、正态分布
） 导言：本文从微积分…
云计算在大数据分析中的应用与优势
文章目录 云计算在大数据分析中的应用云计算在大数据分析中的优势云计算在大数据分析中的示例未来发展和拓展结论 🎉欢迎来到AIGC人工智能专栏~云计算在大数据分析中的应用与优势 ☆* o(≧▽≦)o *☆嗨~我是IT陈寒🍹✨博客主页：IT陈寒的博客&…
如何运用大数据？我们如何利用大数据？
在互联网时代，依靠大数据是未来的发展趋势。大数据分析现在非常流行，但是我们需要知道的是，大数据的价值体现在有效而正确的分析中。只有通过正确有效的分析工具和分析方法来解释现有的大数据，大数据才能为我们带来有价值的结果。…
T检验用历史数据判断实验指标的置信度
用历史list 判断 一个value
from scipy import statshistory [0.05, 0, 0, 0.07, 0.01]
new_score 0.01result stats.ttest_1samp(history, new_score)print(result)print结果： TtestResult(statistic1.114772822866588, pvalue0.32740571539283314, df4)
用历…
计算机毕业设计之SpringBoot+Vue.js+WebMagic电商数据分析 电商大数据 电商数据采集系统 电商大屏 大数据毕业设计 电商知识图谱
需求
近5年电商企业社会责任数据，数据可视化
（1） 社会责任数据
（2） 电商企业：（30家左右的数据即可）
1-10名：阿里巴巴、美团点评、拼多多、京东、小米集团、滴滴、贝壳…
量化交易全流程（五）
本节目录
策略回测
多因子模型
本节主要讨论回测相关的内容，包括两种不同的回测机制，即向量化回测和事件驱动回测；如何灵活使用开源工具来编写自己的回测程序；不同实现方式的优劣对比等。 在我们研究策略的时候，需要…
Python数据分析：scikit-learn基础（二）
Python数据分析：scikit-learn基础（二）
使用scikit-learn流程 准备数据集
数据处理 数据集格式二维数组，形状（n_samples,n_features)使用np.reshape()转换数据集形状 特征工程 特征提取特征归一化(normalization)………
2023上半年京东奶粉行业品牌销售排行榜（京东数据分析平台）
近年来，受新生儿人口数量下降的影响，婴幼儿奶粉市场的需求量萎缩，市场由增量竞争转为存量竞争。根据鲸参谋电商数据分析平台的数据显示，今年上半年，京东婴幼儿奶粉市场的销量将近4400万，环比下降约19%&…
亿发专业商品管理信息化解决方案，助力连锁门店轻松应对经营难点
前后方协作困难
销售业务效率低
财务对账易“疏漏”
管理决策不清晰等
这些都是连锁门店在经营管理中经常遇到的难题。为了解决这些难题，连锁门店需要借助先进的商品销售管理系统。 挑战一：前后方协作困难
连锁门店往往存在前台销售和后台供应链之间…
vapordn数据可视化
1、分析
电子烟行业是最近几年新起的行业，发展前景还是客观。为此爬取了一些网站的日常销售数据进行分析。
2.分析思路 3.可视化
3.1 总体情况
先来看下竞争对手的9月21到11月24的销售情况。
两个月左右的时间、总销售额达到了165万、销售了近11.5W的产品。
某…
传统线下连锁店数据分析Python结合Tableau
1 分析背景：
这是kaggle上的一份巴西传统线下汽车服务类连锁店的实际销售数据，大小约3.43G，包含了从2017年3月31日到2020年4月1日大约2600万多的销售数据。分析该数据集可以探究该连锁店的销售情况，产品的分布，可以对…
淘宝母婴商品分析-Tableau1
项目背景： 近年来母婴产品的消费逐渐增加，这是一份关于淘宝天猫的一份母婴产品（2012年/7月到2015年/2月）的销售数据。分析该数据集有利于了解目前市场的销售情况，便于做出运营决策，提高销售额。 数据集来自…
30 数据分析（上）（业务略写可跳）|jupyter|matplotlib
文章目录 数据科学领域概述数据如何驱动运营给企业带来价值岗位关键词说明业务的商业模式 数据指标数据指标定义及常用数据指标如何选取指标分析角度计数流量导向的工具内容导向的工具用户导向的工具业务导向的工具 数据分析方法对比分析多维分析漏斗分析留存分析总结 用户画像…
抖音商品详情数据接口，抖音商品详情API接口
抖音商品详情API接口获取数据，接口对接可获取到商品标题，商品价格，商品优惠价，优惠券信息，店铺昵称，sku信息，sku主图，视频链接，详情主图，库存，数量…
5G 数字乡村数字农业农村大数据中心项目农业大数据建设方案PPT
导读：原文《5G 数字乡村数字农业农村大数据中心项目农业大数据建设方案PPT》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。以下是部分内容， 喜…
甘特图是什么？甘特图是用来干什么的？
甘特图（Gantt chart）也称为横道图，条状图（Bar chart）。以作者亨利甘特先生的名字命名。甘特图的内部思想很简单，即任何特定项目的活动顺序和持续时间都可以通过活动列表和时间刻度以图形方式直观地表示出来…
Matplotlib数据可视化（六）
目录 1.绘制概率图
2.绘制雷达图
3.绘制流向图
4.绘制极坐标图
5.绘制词云图 1.绘制概率图
from scipy.stats import norm
fig,ax plt.subplots()
plt.rcParams[font.family] [SimHei]
np.random.seed()
mu 100
sigma 15
x musigma*np.random.randn(437)
num_bins …
联合火力分配方案数学建模
2023年数学建模竞赛
联合火力分配方案数学建模 不仅在人们的生产实践中，在多目标规划中经常会遇到如何利用现有资源来安排，以取得最大经济效益的问题。此类问题构成了运筹学的一个重要分支—数学规划，而线性规划则是数学规划的一个重要分支。…
MES生产执行解决方案提供商，可定制工厂MES精益制造管理系统-亿发
亿发智能制造MES系统：驱动制造业创新，实现数字化生产和管理 MES管理系统以实时协同思想为核心，着重于精益生产计划的实施和车间实时调度。对生产现场和业务经营的数据进行全面的系统化管理，以数据分析的结果为基础，协助…
20个有用的Excel数据分析函数(教程含案例)
Microsoft Excel 是一种简单而强大的数据分析工具。Excel 是当今行业中广泛使用的软件应用程序，用于生成报告和业务洞察。Excel 包含超过 450 个函数，并且每年都会添加更多函数。在这里，我们介绍了那些主要用于数据分析的功能。
MAX/MIN
MAX和MIN函数顾名思义。MAX将找到范…
python类库详解
Python类库是开发者可以使用的众多工具之一，他们是由其他开发者编写、共享和维护的代码集合。借助这些代码库，我们可以省去大量的时间和精力，更专注于应用程序的实现。Python类库是Python语言被广泛使用的一个原因之一。
在本文中࿰…
常见反爬虫方法以及怎样突破
大家可能不知道，互联网中超过一半的流量是网络爬虫贡献的，若是网站不设置反爬虫机制，可能根本没法运营，于是都设置了各种各样的反爬虫机制，即使如此，网络爬虫还是有办法去突破。今天小编为大家介绍一些常见…
HTTP代理IP使爬虫轻松面对反爬虫
在数据信息变的越发重要的时候，咱们可以从许多场所去取得数据源，不过要控制好数据抓取的方式，今天介绍一下数据抓取怎么样可以避免出现IP封停问题。 先说一下爬虫的分类，爬虫一般分为三类：
1、传统爬虫：从…
Python 关键字global全局变量详解
变量作用域
一般在函数体外定义的变量成为全局变量，在函数内部定义的变量称为局部变量。
全局变量所有作用域都可用，局部变量只能在本函数可用，变量的使用顺序是，局部变量 > 全局变量, 也就是说：优先使用局部变量…
实操演示：产研团队如何高效构建需求工作流？
需求是软件研发的前提和基础。上一讲，我们为大家介绍了「如何在 ONES 中完成需求收集和拆分」。今天，我们将带你深入了解如何高效管理收集到的需求，并在 ONES 中配置需求工作流。如何进行需求分析？需求分析的目的是为了达成开发者…
pandas dataframe 删除列中 有空值的行
目标df
df pd.DataFrame({“name”: [‘A’,‘B’,‘C’,np.nan], “age”: [np.nan,22,25,np.nan], “gender”: [‘male’,‘female’,‘male’,‘female’], })
删除name、age列中,【任意一列】的值为空的行；
df.dropna(subset[‘name’, ‘age’], axis0, #…
功能更新 | 科学管理工时，提高进度风险管控
近期，ONES 进行了以下几点功能的更新，帮助企业更高效地管理项目，提高风险管控和应对能力：新增「成员工时」，工时管理更科学「项目计划」升级，更快发现项目进度风险新增「归档」功能，保障项目数据…
更新 | ONES Performance 研发效能管理
在软件研发过程中，「研发效能」体现了团队快速持续交付产品的能力。科学合理的「研发效能管理」不仅能度量团队效能，助力研发过程改进，还能帮助团队统一目标，激发团队潜能。然而，企业在实践研发效能管理的过程中&#…
【读书笔记-＞统计学】06-01 排列、组合与概率-排位数目、圆形排位数目、按种类排位、排列、组合概念简介
排列、组合与概率
老样子，先给一个情境：马赛是一项体育赛事，也是一个赌博机会。你可以对比赛结果下注，如果能押中每场比赛的前三名，大把钞票就到手了。
假设今天是开幕赛，马匹都是新马，前期没…
SQL关于日期的计算合集
前言
在SQL Server中，时间和日期是常见的数据类型，也是数据处理中重要的一部分。SQL Server提供了许多内置函数，用于处理时间和日期数据类型。这些函数可以帮助我们执行各种常见的任务，例如从日期中提取特定的部分，计…
Python数据分析案例28——西雅图交通事故预测（不平衡样本处理）
本次案例适合机器学习数据科学方向的同学。 引言(废话集)
交通事故是一个严重的公共安全问题，在全球范围内每年都有成千上万的人死于交通事故。随着交通运输的发展和城市化进程的加速，交通事故已成为制约城市发展和人民幸福的主要因素之一。因此&#x…
Matplotlib 安装介绍
文章目录 安装步骤 Matplotlib 不止是一个数学绘图库，它也是可视化和分析工具中最流行之一。我们可用其制作简单的图表，如折线图和散点图。 安装步骤
先进入：python官网
跳转到界面： 录入并搜索
下载之前，看一下自…
数据清洗与规范化详解
数据处理流程，也称数据处理管道，是将原始数据转化为有意义的信息和知识的一系列操作步骤。它包括数据采集、清洗、转换、分析和可视化等环节，旨在提供有用的见解和决策支持。在数据可视化中数据处理是可视化展示前非常重要的一步，…
Python数据分析实战-将dataframe某列的值分成不同区间并计算每个区间的频数（附源码和实现效果）
实现功能
将dataframe某列的值分成不同区间并计算每个区间的频数
实现代码 import pandas as pd# 创建dataframe
data {Name:[Tom1, Jack1, Steve1, Ricky1, Tom2, Jack2, Steve2, Ricky2],Score:[78,60,59,42,88,34,69,142]}
df pd.DataFrame(data)
print(df)# 定义区间和…
python的pandas模块使用总结
python的pandas模块 内容目录python的pandas模块一、创建二、基础属性信息三、数值信息四、数据过滤五、数据计算六、数据分析七、数据输出八、注意事项九、补充说明pandas是一个提供了数据操作和数据分析工具的模块。它支持两种主要数据结构：Series和DataFrame。 S…
假设检验中错误的类型
I类错误
I类错误是指在无效假设是真的时候，结果是显著的，第一类错误的可能性经常用a表示，并且该值的数据分析前就确定，在质量控制中，第一类错误被叫作生产者风险，因为你在一个产品符合规范要求的情况拒绝了…
兴趣标签体系告诉我，闲鱼的95后是这样的...
背景与挑战— — "水果糖小椿 M39 暂挂" — — "列表科幻？" 不知大家能否读懂上面的对话，但在闲鱼，这样的对话每天都在发生。数据显示，闲鱼约30%的用户年龄不满25岁。了解这些95后的兴趣偏好，对闲…
经验 // 通用又好用的思维工具
有很多管理或思维小工具，非常通用，各行各业都用的到，工作用的到，生活也用的到。掌握这些工具，让你在工作上很专业，在生活上很认真。
1-【MECE原则】
MECE法则，是麦肯锡公司的巴巴拉明托&#…
2020年国赛高教杯数学建模C题中小微企业的信贷决策解题全过程文档及程序
2020年国赛高教杯数学建模
C题 中小微企业的信贷决策
原题再现 在实际中，由于中小微企业规模相对较小，也缺少抵押资产，因此银行通常是依据信贷政策、企业的交易票据信息和上下游企业的影响力，向实力强、供求关系稳定的企业提供贷…
做电商数据分析报表做到废？BI平台试过了？
层出不穷的临时分析需求、大量的重复性操作、眨眼流失的时间，那是电商数据分析人员才都懂的感受。每日一问，今天你做电商数据分析报表做到废了吗？怎么改变这种情况？或许BI大数据分析平台可以一试。
BI大数据分析平台：…
np.argmin()函数
np.argmin函数 函数调用方法示例1示例2示例3示例4 函数调用方法
import numpy as npnp.argmin(a, axisNone, outNone, *, keepdims<no value>)各个参数意义： a：输入数组。 axis：可选参数，默认的是去展平数组，此…
【第十一届泰迪杯B题】最终版：问题一的实现（含源代码）
1. 导包
import numpy as np
import pandas as pd
import pyecharts
import matplotlib
import matplotlib.pyplot as plt
import pyecharts.options as opts
import seaborn as sns
import statsmodels.api as sm
import statsmodels.formula
python干饭神器---今天吃什么？python告诉你
文章目录一、前言二、准备工作三、编写代码2.1 导入所需的库2.2 创建GUI界面2.3 设置窗口居中显示2.4 设置切换按钮和当前食物的label 以及图片展示 切换方法2.5 完整代码四、打包exe运行程序，方便在其他windows电脑上使用4.1 安装pyinstaller打包程序4.2 执行打包4…
使用pandas和seaborn绘图
使用pandas和seaborn绘图 matplotlib实际上是一种比较低级的工具。要绘制一张图表，你组装一些基本组件就行：数据展示 （即图表类型：线型图、柱状图、盒形图、散布图、等值线图等）、图例、标题、刻度标签以及其他注解型信…
机器学习基本模型与算法在线实验闯关
机器学习基本模型与算法在线实验闯关 文章目录 机器学习基本模型与算法在线实验闯关一、缺失值填充二、数据标准化三、支持向量机分类模型及其应用四、逻辑回归模型及其应用五、神经网络分类模型及其应用六、线性回归模型及其应用七、神经网络回归模型及其应用八、支持向量机回…
Steam游戏的爬取与分析
Steam游戏的爬取与分析
本文爬取了steam冒险类游戏中热销产品中的7500个游戏进行统计分析
1、首先要先知道网页链接的组成形式： 2、其次查看我们想要爬取的信息区域： 3、开始分析： （1）、url的分析： 我们…
Microsoft Power Automate部署方案
目录
前言
一、Microsoft Power Automate是什么？
二、Microsoft Power Automate的介绍
2.1 Microsoft Power Automate的概述
2020全国职业技能大赛嘉兴市“网络空间安全赛项”赛题及赛题解析（超详细）
2021年中职组“网络空间安全”赛项 一.嘉兴市竞赛任务书二.任务书解析三.任务书答案四.不懂的可以私信博主！一.嘉兴市竞赛任务书
一、竞赛时间 8：00—11：00 共计180分钟 二、竞赛阶段 竞赛阶段 任务阶段 竞赛任务 竞赛时间 分值 第①阶段 单兵模式系统渗透测试 任务一： Ap…
百数客户关系管理能力展示——客户关系维护
企业使用crm客户关系管理系统除了进行客户数据的管理以外，客户关系的维护也是非常重要的部分。日常的维护能够让客户对产品有稳定的信任与了解，从而降低客户营销的成本，带来正面的口碑效应。 企业不同的业务类型，意味着面向不同的…
5行Python代码采集3000+上市公司信息，很爽
嗨害大家好鸭！我是爱摸鱼的芝士❤
毕业季也到了找工作的季节了， 很多小伙伴都会一家一家的公司去看， 这得多浪费时间啊。
今天用Python教大家怎么采集公司的信息， 相信大家会很喜欢这个教程的，nice！ pyth…
Python数据分析实战-使用replace方法模糊匹配替换某列的值（附源码和实现效果）
实现功能
Python数据分析实战-使用replace方法模糊匹配替换某列的值
实现代码
import pandas as pd
import re# 创建一个示例DataFrame
data {A: [apple, banana, pineapple, orange, grape]}
df pd.DataFrame(data)# 打印替换前的DataFrame
print("替换前的DataFram…
大数据是把双刃剑 机遇和风险并存
【编者按】本文作者Steve Durbin，信息安全论坛的全球副总裁，他所关注的主要领域包括新兴的安全威胁环境，网络安全，消费化以及外包云安全，先前曾是咨询公司Gartner的高级副总裁。对于大多数企业来说，大数据已…
python学习之 Matplotlib基础绘图
Matplotlib基础绘图 因为某些不可抗力原因哈，被迫的要去学下python的基本绘图功能，将一份文件读取完毕后进行一系列的操作变成一张漂亮的二维图，当然也可以设置时间来进行动态的一个展示。 要是在学习这个之前呢，我们还得先学习pa…
Python并发编程之深入理解yield from语法
当你看到这一篇的时候，请确保你对生成器的知识，有一定的了解。当然不了解，也没有关系，你只要花个几分钟的时间，来看下我上一篇文章，就能够让你认识生成器，入门协程了。 再次提醒： 本…
4.4 使用分组聚合进行组内计算
4.4 使用分组聚合进行组内计算 4.4.1 使用groupby方法拆分数据groupby方法的参数及其说明：groupby对象常用的描述性统计方法如下： 4.4.2 使用agg方法聚合数据agg函数和aggregate函数的参数说明1、使用agg求出当前数据对应的统计量2、使用agg分别求字段的…
Python数据分析script必备知识(二)
Python数据分析script必备知识(二)
1.二分钟快速给项目添加日志信息
"""
给项目添加日志信息
"""
# 导Python内置包
import logging
import time # 方便用日期命名日志# 创建一个日志器logger
logger = logging.getLogger(__name__)# 给日志…
探究物联网技术的核心知识点：传感器、嵌入式系统和数据分析
文章目录 🌟 物联网技术🍊 传感器🍊 嵌入式系统🍊 数据分析🍊 总结 📕我是廖志伟，一名Java开发工程师、Java领域优质创作者、CSDN博客专家、51CTO专家博主、阿里云专家博主、清华大学出版社签约…
三维数据可视化软件，可视化地图是用什么做的？
可视化地图是用什么做的？数据可视化地图是一种利用空间数据来表现地理信息的方式，能够为人们提供关于地理信息的准确、直观的可视化图形，以便更好地理解相关信息。数据地图可以最直观的表达出数据之间的空间关系，因此在很多数据分…
大数据培训课程分享：Python数据分析与挖掘实战课程介绍
《Python数据分析与挖掘实战》课程内容以Python数据分析与挖掘的常用技术与真实案例相结合的方式，深入浅出地介绍Python数据分析与挖掘的重要内容，共分为基础篇（第1~5章）和实战篇（第6~11章）。 基础篇内容包…
多源环境（QGIS\PostgreSQL\ARCGIS\MAXENT\R语言）支持下的SolVES 模型生态系统服务功能社会价值评估
生态系统服务是人类从自然界中获得的直接或间接惠益，可分为供给服务、文化服务、调节服务和支持服务4类，对提升人类福祉具有重大意义，且被视为连接社会与生态系统的桥梁。自从启动千年生态系统评估项目（Millennium Ecosystem Asse…
一位脑残的Pandas个人总结
博客原文链接 http://localhost:4000/posts/2b36786b/ 前言:Pandas向Excel表的东西，我们可以通过Pandas来迅速完成数据的处理操作 Series对象
Series像一个加强版字典，一样我们可以通过的索引来访问值，但是Series比字典要强很多，…
两步实现Pandas合并相同索引行的秘籍
在Pandas处理数据的过程中，我们常常会遇到需要对相同索引行进行汇总和统计的情况。那么如何高效地实现DataFrame相同索引行的合并呢?
在Pandas中，可以使用.groupby()和.agg()方法合并相同索引行。 例如，有这样一张DataFrame： da…
Python+Pandas数据清洗的步骤
一、导语二、常见步骤1. 导入 Pandas：2. 加载数据：3. 观察数据：4. 处理缺失值：5. 处理重复值：6. 数据类型转换：7. 处理异常值：8. 数据重塑：9. 数据归一化/标准化：10. 保存…
当涉及到API接口数据分析时，主要可以从以下几个方面展开
当涉及到API接口数据分析时，主要可以从以下几个方面展开：
请求分析：可以统计每个API接口的请求次数、请求成功率、失败率等基础指标。这些指标可以帮助你了解API接口的使用情况，比如哪个API接口被调用的次数最多，哪个…
【读后感】知乎最高赞回答！零代码基础，把报表做出科技感是什么体验？
平台：CSDN
分类：数据处理
知识点：软件介绍
原文地址：https://blog.csdn.net/yuanziok/article/details/106993610?utm_mediumdistribute.pc_feed.none-task-blog-alirecmd-2.nonecase&depth_1-utm_sourcedistribute.pc_fe…
如何使用查看器筛选、搜索功能进行数据定位？
前言
我们曾探讨过观测云如何通过将内置视图与查看器相联结，实现更全面的数据关联分析。（参见《内置视图联动查看器，实现数据关联分析》）这里提到的查看器，实际是一个功能全面且强大的数据查看分析工具。其提供多种搜…
python中的range函数|python中的range函数|range()函数详解|Python中range(len())的用法
本期目录 一、range（）传递不同的参数1、传递一个参数时2、传递两个参数时3、传递三个参数时 二、使用 range() 构建 for 循环三、遍历列表时使用 range(len()) 的用法3.1 直接使用for循环遍历列表 四、利用 range() 生成固定长度的等差数列五、利用 rang…
新一代数据分析及实时数仓平台Greenplum，助力企业数字化转型
9月28日，《Greenplum走进深圳》大会顺利举行，会议提供了线上、线下双渠道的参与方式，精彩的演讲内容获得了与会人员的一致好评。今天为大家推送的内容整理自Greenplum资深平台架构师牛云飞演讲的《新一代数据分析及实时数仓平台Greenplum介绍…
条形码技术在供应链管理中的作用
一次完整商务过程包括由生产厂家将产品生产出来,通过运输、仓储、加工、配送到用户、消费者的物流全过程。其中分为以下几个方面:生产厂家将生产 的单个产品进行包装,并将多个产品集中在大的包装箱内;然后,经过运输、批发等环节,在这一环节中通常需要更大的包装;最后,产品通过零…
数据分析面试题（2023.09.08）
数据分析流程
总体分为四层：需求层、数据层、分析层和结论层 一、统计学问题
1、贝叶斯公式复述并解释应用场景
公式：P(A|B) P(B|A)*P(A) / P(B)应用场景：如搜索query纠错，设A为正确的词，B为输入的词，那…
仪表板展示 | X-lab开放实验室GitHub开源项目洞察大屏
背景介绍
X-lab开放实验室是一个开源软件产业开放式创新的共同体，由来自国内外著名高校、创业公司、部分互联网与IT企业的专家学者与工程师所构成，目前已在包括开源治理标准制定、开源社区行为度量与分析、开源社区流程自动化、开源全域数据治理与洞察等…
R语言 | 进阶字符串的处理
目录
一、语句的分割 二、修改字符串的大小写 三、unique()函数的使用 四、字符串的连接
4.1 使用paste()函数常见的失败案例1
4.2 使用paste()函数常见的失败案例2
4.3 字符串的成功连接与collapse参数
4.4 再谈paste()函数
4.5 扑克牌向量有趣的应用
五、字符串数据的…
整理了几个100%提高Python代码质量的技巧，直呼过瘾
B站|公众号：啥都会一点的研究生
相关阅读 整理了几个100%会踩的Python细节坑，提前防止脑血栓 整理了十个100%提高效率的Python编程技巧，更上一层楼 Python-列表，从基础到进阶用法大总结，进来查漏补缺 Python-元组&…
R语言ggplot2可视化：使用ggpubr包的ggmaplot函数可视化MA图（MA-plot）、top参数配置图中显示的头部基因标签的个数
R语言ggplot2可视化：使用ggpubr包的ggmaplot函数可视化MA图（MA-plot）、top参数配置图中显示的头部基因标签的个数 目录
python-简单数据分析csv
我们可以使用Python中的一些常见数据分析和机器学习库，比如pandas，matplotlib和scikit-learn等，来对数据进行探索性分析、可视化分析和机器学习建模。
以下是一些代码片段，通过这些代码片段，您可以开始分析这个CSV文件…
让Python可视化事半功倍！
分享一款不错的Matplotlib可视化查询手册，让Python Matplotlib事半功倍！ 当可视化时，记不清楚图形Marker名称、colormap名称、坐标轴刻度设置、图例设置等等时，稍微扫描一眼该手册，直接YYDS。 下面简单介绍一下这个手册：
0、图中各位置设置
这张图能帮助更好的了解matp…
2022全年度休闲食品（零食）十大热门品牌销量榜单
随着经济的发展及人们消费水平的提高，休闲食品作为居家出游的快消品，逐渐成为了人们生活中必不可少的一部分，同时，消费者对于休闲食品的数量和品质的需求也正不断增长。并且，在休闲食品的消费群体中，年轻群…
python数据处理----数据对象常用的属性、方法
读取CSV文件为DataFrame对象 使用read_csv()方法读取csv数据成为DataFrame对象： import pandas as pd
# pd.read_csv(路径)读取csv文件
data pd.read_csv(../data/nobel_prizes.csv)
# 打印数据
print(data)
# DataFrame的head()方法 获取前5条数据
data.head()发现…
【SPSS】频数分析和基本描述统计量详细操作教程（附实战案例）
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
Oracle笔记 之 使用over函数进行数据环比同比分析
本文演示如何使用Oracle数据库的over分析函数满足业务提出的数据分析需求（查询按机构，分类查询指定月份的环比，同比数据）。 over函数的具体使用方法请参考博文
概念分析
进行数据分析的第一步一定是弄明白业务人员的意图&#x…
数据分析与SAS学习笔记5
DATALINES语句：
相当于CARS语句；
该语句必须是数据步的最后一条语句；
MISSOVER处理； DATA TEMP;
INFILE DATALINES MISSOVER;
INPUT X Y Z;
DATALINES;
1 10 100
2 20
3 30 300
;
PROC PRINT;
RUN; 代码说明：
1&am…
【Python学习笔记】第二十二节 Python XML 解析
一、什么是XMLXML即ExtentsibleMarkup Language(可扩展标记语言)，是用来定义其它语言的一种元语言。XML 被设计用来传输和存储数据。XML 是一套定义语义标记的规则，它没有标签集(tagset)，也没有语法规则(grammatical rule)。任何XML文档对任何…
Class 03 - R语言的 Vectors（向量） 与 lists（列表）
Class 03 - R语言的 Vector与 列表 list R语言语法脚本文件的创建、保存、和修改名称第一个函数使用帮助功能查看函数详细说明语法问题变量与赋值定义变量名称格式调用变量 R中的数据结构Vectors (向量)创建向量查看向量的性质查看数据类型 typeof()查看数据长度 length()检查…
思迈特软件Smartbi荣登“2023未来银行科技服务商100强”
近日，中国科学院《互联网周刊》、eNet研究院联合发布了“2023未来银行科技服务商100强”企业榜单。思迈特软件以“商业智能BI产品”凭借在金融科技创新的独特优势及在银行数字化转型实践中的卓越成就荣耀上榜。 据了解，“未来银行科技服务商100强”榜单&…
【竞品分析】如何撰写竞品分析？竞品分析的基本结构？以及优秀的竞品分析案例
文章目录一、撰写竞品分析的意义二、撰写的节点三、竞品分析内容的基本结构四、总结本文对视频
如何撰写竞品分析（demo）进行了总结。一、撰写竞品分析的意义
竞品分析是指对现有的或潜在的竞争产品的优势和劣势进行评价。现在被广泛应用于互联网产品的…
Python数据分析案例22——财经新闻可信度分析(线性回归，主成分回归，随机森林回归)
本次案例还是适合人文社科领域，金融或者新闻专业。本科生做线性回归和主成分回归就够了，研究生还可以加随机森林回归，其方法足够人文社科领域的硕士毕业论文了。 案例背景
有八个自变量，[微博平台可信度,专业性,可信赖性,转发量,…
Python并发编程理论篇
前言 其实关于Python的并发编程是比较难写的一章，因为涉及到的知识很复杂并且理论偏多，所以在这里我尽量的用一些非常简明的语言来尽可能的将它描述清楚，在学习之前首先要记住一个点：并发编程永远的宗旨就是提高程序的运行效率&am…
天猫2月咖啡行业数据分析（咖啡品牌销量排行）
随着人们消费水平的提高以及休闲、办公等场景化的需要，咖啡已成为越来越多人日常生活中的必需品，咖啡行业的市场规模也在不断扩大。并且，随着咖啡品牌不断发力线上赛道，咖啡的电商化之路也越来越成熟，而与此同时&#…
数字化转型导师坚鹏：银行如何建设行业领先的人才培训管理体系
数字化转型浪潮下银行如何建设行业领先的人才培训管理体系
——以推动银行战略落地为核心，实现知行果合一课程背景：
很多银行都在开展银行人才培训工作，目前存在以下问题急需解决：
缺少针对性的银行人才培训体系
不清楚如何建立…
2023年2月京东手机品牌销量数据查询（京东电商数据平台）
2023年开年，手机中端机市场便已经卷的热火朝天。今年2月份，一加品牌发布新机，把价格从旗舰机的三四千元起步，下降至2799元起，直指中端机市场。以一加品牌的此次行动拉开帷幕，此后，其他厂商也都有…
亿信ABI为什么好用？这些场景都能派上大用场
数据分析有多重要，你知我知大家知。
如果能掌握BI分析工具使用，在做报表、做分析性图表时，能比excel效率高上不少，再也不用被VBA和复杂公式折磨。
如果能学上一点可视化技巧，懂得如何恰当地使用一些高级的可视化图表…
AI时代来临，如何把握住文档处理及数据分析的机遇
AI时代来临，如何把握住文档处理及数据分析的机遇前言一、生成式人工智能与元宇宙二、面向图像文档的复杂结构建模研究三、大型语言模型的关键技术和实现ChatGPT 介绍ChatGPT的三个关键技术四、ChatGPT与文档处理未来总结前言
在3月18日，由中国图象图形协…
【数据分析实战】基于python对Airbnb房源进行数据分析
文章目录📚引言📖数据加载以及基本观察📃缺失值观察及处理🔖缺失值观察以及可视化🔖缺失值处理📃异常值观察及处理📖数据探索💡哪个区域的房源最受欢迎？💡哪种…
数据分析的作用和意义？
数据分析的作用和意义？在当下数字化转型发展的大环境中，数据也成为企业商业成功与否的重要基础，如何利用好数据分析问题预测未来也成为更多企业面临的首要问题。而随时大数据的不断渗透，数据量和数据类型也越来越多，数…
GIS在城市规划中的作用与应用
山海鲸可视化-GIS影像
简介
GIS（地理信息系统）是一种用于捕获、存储、管理、分析和显示地理空间数据的技术和工具。GIS可以用于各种领域，包括城市规划、土地管理、自然资源管理、公共安全、环境保护、气象预报、交通运输、农业、地质勘探、…
google play store的app数据分析
google play store app数据源 提取码: 38jk
google play store的app数据分析
1. 加载数据
加载数据分析使用的库加载数据前，先用文本编辑器简单浏览一下数据加载好数据之后，第一步先分别使用shape、head、count、describe和info方法看下数据
import …
阿里巴巴股票行情分析
友情提示：投资有风险，入股需谨慎
阿里巴巴股票数据集 提取码: spyv
简单分析
上代码
import numpy as np
from dateutil.parser import parse
# 指定打开的文件名
# 不需要的行需要skip掉
# 默认没有分隔符，所以需要指定delimiter
# 不加…
面经|兴盛优选数据分析二面
一面面的稀碎，一面面完一周之后hr联系说重新做了人才盘点，希望继续推进后续面试。 这次是hr面，问题比较常规。 1.自我介绍 2.离职原因 3.收到offer情况 期间有收到但拒绝掉了，最近也在推动其他 4.看机会比较看重的三个方面 岗位匹…
电商平台商品数据爬虫分析（test阶段可对接测试）
1.简单说明
京东，淘宝，天猫，，淘特，拼多多，阿里巴巴，1688，抖音，苏宁，亚马逊中国 ，lazada，速卖通等全球50多个知名平台抓取数据&#x…
R语言混合效应（多水平/层次/嵌套）模型及贝叶斯实现技术应用
回归分析是科学研究中十分重要的数据分析工具。随着现代统计技术发展，回归分析方法得到了极大改进。混合效应模型（Mixed effect model），即多水平模（Multilevel model）/分层模型(Hierarchical Model)/嵌套模…
银行数字化转型导师坚鹏：商业银行数字化风控（2天）
商业银行数字化风控 课程背景：
数字化背景下，很多银行存在以下问题：
不清楚商业银行数字化风控发展现状？
不清楚对公业务数字化风控工作如何开展？
不知道零售业务数字化风控工作如何开展？
课程特色…
【2021年2月新书推荐】Python Data Analysis
各位好，此账号的目的在于为各位想努力提升自己的程序员分享一些全球最新的技术类图书信息，今天带来的是2021年2月由Packt出版社最新出版的一本关于数据分析的书，涉及的语言位python。
Python Data Analysis 作者：Avinash Navlani…
PyPackage01---Pandas16_apply返回多个值时的索引问题
Intro pandas使用apply函数或者groupby函数返回多个值时，会出现返回多个索引的问题，介绍下解决方法
复现
import pandas as pd
import numpy as npdf pd.DataFrame({"name": [a, b, c],"sex": [男, 女, 男],"age": [10…
Python 数据存储 ----＞方式
我的个人博客主页：如果’真能转义1️⃣说1️⃣的博客主页 关于Python基本语法学习---->可以参考我的这篇博客：《我在VScode学Python》 数据存储是指在数据加工处理过程中将产生的临时文件或加工结果以某种格式保存。
常用的数据存储格式包括 TXT、Exc…
2023年京东618预售数据：传统滋补成预售黑马，预售额超27亿
这一期主要分享一下此次京东618预售期间的一个黑马行业——传统滋补。不管是从预售量和预售额来看，传统滋补品类的成绩都是此次大促中的佼佼者。 究其原因，近几年养生滋补也掀起了一股“国潮风”。在小红书、抖音等社交平台上，关于“健康养生…
![“正大杯”第十三届市场调查与分析大赛[省一]经验总结+复盘](https://img-blog.csdnimg.cn/77ea6237489444e685d7ca69bdfca28a.jpeg)
“正大杯”第十三届市场调查与分析大赛[省一]经验总结+复盘
目录
1 前期组队
2 队员组成
队长-成员1
应用统计学专业
成员2
化学实验专业
成员3-本人
物联网工程专业 成员4
金融ACCA专业
成员5
应用物理学
总结
3 比赛进度
3月中旬
部分图表的制作
问卷设计与制作 稍微改动主题 问卷相关总结 前期调查部分论文框架 3月…
数据可视化之雷达图（Radar Chart）
什么是雷达图?
雷达图（Radar Chart）也称为蜘蛛图、网络图或极坐标图，是一种用于可视化多变量数据的图表。该图表由一系列从中心点向外辐射的辐条组成，每个辐条代表一个不同的变量。数据使用线或区域绘制在每个辐条上，…
大数据好找工作么？前景如何
大数据好不好找工作不是一概而论的，要根据你个人的学历情况，掌握技能程度，所在城市招聘需求，甚至是你的面试能力和简历是否突出优势有关。
但是毋庸置疑的是，大数据目前的发展前景还是相当优秀的。
我们知道…
银行数字化转型导师坚鹏：金融大数据分析与应用能力提升实战
金融大数据分析与应用能力提升实战课程背景：
数字化背景下，很多机构存在以下问题：
不清楚大数据思维如何建立？
不清楚金融大数据分析方法？
不了解大数据应用成功案例？
课程特色：
有实战案例…
软件评测师-算法分析设计
一、算法基础知识
算法是对特定问题求解步骤的一种描述，它是指令的有限序列，其中每一条指令表示一个或多个操作。算法的五个重要特性如下: (1）有穷性。一个算法必须总是（对任何合法的输入值〉在执行有穷步之后结束，且…
大学计算机专业 学习Python学习路线图（最新版）
这是我刚开始学习python时的一套学习路线，从入门到上手。（不敢说精通，哈哈~）
希望对大家有帮助哈~
大家需要高清得完整python学习路线可以
一、Python入门、环境搭建、变量、数据类型 二、数据库编程 三、Linux系统 四、网页编…
python数据分析学习笔记之matplotlib、numpy、pandas
为了学习机器学习，在此先学习以下数据分析的matplotlib，numpy，pandas，主要是为自己的学习做个记录，如有不会的可以随时查阅。希望大家可以一起学习共同进步，我们最终都可以说：功不唐捐ÿ…
Python精美图快速上手
seaborn是一个基于Python的数据可视化库，它建立在Matplotlib之上，提供了一种更简单、更美观的方式来创建统计图形。seaborn旨在帮助用户轻松地生成有吸引力和信息丰富的可视化结果。
以下是seaborn库的一些主要特点： 美观的默认样式…
读书笔记--数据治理之术
继延续上一篇文章，对数据治理之术进行学习思考，这部分内容是本书整体内容的核心细节，内容比较多比较杂，通读了好长时间才动手总结整理，因此更新的慢了一些。数据治理之术是操作层面的技术或方法，数据治理相…
Selenium + Chrome 网络爬虫学习笔记（从环境搭建开始，适合新手）
在实际的网络数据抓取过程中，经常会发现一些网页内容在网页源代码中查找不到的情况，因为这些内容都是通过JavaScript动态生成的，此时，使用普通的requests库无法直接获取相关内容。这时候就需要借助于Selenium模拟人操作浏览器&…
描述统计 | 学习笔记 (全)
一.导论
统计学是通过收集，整理，分析，描述数据等手段，以达到推断所测对象的本质，甚至预测对象未来的一门综合性科学。其目的是探索数据的内在数量规律性，以达到对客观事物的科学认识
统计的本业是消化数据…
读书笔记//来自公众号（1）
——【9大数据分析方法】——
总结1：多部分方法用于定位问题，相关分析法与指标拆解法可以解释问题。 总结2：抓住两个关键因素：维度（类别）、指标
一、周期性分析
1.常见的周期包括2种：自然周期…
python迅速绘制好看的极线图
python迅速绘制好看的极线图 文章目录python迅速绘制好看的极线图前言一、引入matplotlib库二、完整代码1.代码如下2.分析代码数据总结前言
今天我们用python来绘制一下实用性比较强的极线图。 一、引入matplotlib库 二、完整代码
1.代码如下
代码如下（示例&…
数据分析方法08用户画像
用户画像
1、 概念
用户画像是指用户信息标签化，通过收集用户多维度的信息数据（如人口统计属性，社会属性，行为偏好，消费习惯等），对其进行统计，分析，从而抽象出用户信息…
数据采集方式有哪些，都有什么特点？
随着中国社会的进一步发展，各行各业都得到了一定程度的进步。进入21世纪以来，大数据、人工智能等行业的飞速发展，极大的带动全社会进步。但是，在一些传统行业内部，还存在这落后的东西，例如数据采集还是沿用…
python怎么绘制macd
首先，你需要准备数据。这通常包括股票的收盘价格数据。然后，你可以使用 Python 的 talib 库来计算 MACD 指标。这个库提供了一个名为 MACD 的函数，可以计算移动平均指数平滑异同平均值 (MACD) 以及其信号线。接下来，你可以使用 Py…
encoders.kryo_category_encoders中的BaseN编码和网格搜索
encoders.kryoIn the past I’ve posted about the various categorical encoding methods one can use for machine learning tasks, like one-hot encoding, ordinal or binary. In my OSS package, category_encodings, I’ve added a single scikit-learn compatible enco…
源码分享 计算机毕业设计Python+Spark游戏推荐系统 游戏可视化 游戏爬虫 游戏用户画像系统 游戏大屏可视化 游戏数据分析 游戏情感分析 神经网络混合CF推荐算法 大数据毕业设计 大数据毕设
开发技术
前端：vue.js、websocket、echarts、element-ui
后端：springbootmybatis-plus
数据库：mysql
大数据实时计算框架：hadoop、spark
爬虫：Pythonrequests
机器学习：协同过滤算法（基于…
小散量化炒股记｜基于多任务爬虫技术， 实现A股实时行情Level1采样
前言股票行情数据对量化交易者来说非常重要，无论是短线交易者还是中长线交易着。对于短线交易者来说，获取实时行情数据的方案涉及到盘中分析和买卖点监测的时效性。对于中长线交易中来说，盘后更新全市场数据也要求下载尽可能快。如果用第三方…
搞定这些问题，一个插件就够了！—UWA GOT 功能全剖析
原文链接：https://blog.uwa4d.com/archives/1885.html 继UWA GOT推出后，我们接到了大量的反馈，其中不乏一些令我们感动的评价和建议，在此首先感谢大家的关注和支持： 感谢如此走心的评价，鼓励亦是动力&…
欧奈尔RPS指标选股！本地数据源快速遍历全市场！股票量化分析工具QTYX-V2.3.1...
前言对于RPS技术指标大家一定不会陌生。它是股价相对强度指标，根据一段时间内个股涨幅在全部股票涨幅排名中的位次值，选取出市场中的强势股。以大家熟知的“马太效应”和“二八法则”来解释的话就是市场始终遵循着“强者恒强”的定律。欧奈尔研究了40年&…
5分钟看懂：如何构建一个数据仓库？
实用干货来了！有朋友私信我，说希望了解数仓的整体建设中的细节及模板。那有啥说的，上干货！数仓全景图镇楼 00 建设过程 数仓建模的过程分为业务建模、领域建模、逻辑建模和物理建模，但是这 些步骤比较抽象。为了便于…
Python3数据分析与挖掘建模（8）检验
1. 假设检验
1.1 概述
假设检验是一种统计推断方法，用于对一个或多个总体参数提出关于其取值的假设，并根据样本数据对这些假设进行检验。假设检验的目的是根据样本数据提供统计上的证据，以便对总体参数的假设进行接受或拒绝。
在假设检验中…
认识PV、UV、UV价值
PV(访问量)：即Page View, 具体是指网站的是页面浏览量或者点击量。 UV(独立访客)：即Unique Visitor,访问您网站的一台电脑客户端为一个访客。根据IP地址来区分访客数，在一段时间内重复访问，也算是一个UV。 UV价值 销售额 / 访客…
用Python绘制六种可视化图表，简直太好用了
前言
嗨喽~大家好呀，这里是魔王呐 ❤ ~! python资料、源码、教程: 点击此处跳转文末名片获取 可视化图表，有相当多种，但常见的也就下面几种，其他比较复杂一点，大都也是基于如下几种进行组合，变换出来的。 …
变量相关性的探索与 数据处理
1.依赖相关性 y依赖于x的弱相关性，对于变量y来说，在其广泛的值域范围内，变量x在很大范围内的变化只是引起y的很小变化，我们说y依赖于x成弱相关性。反过来说，对于变量x,在变量y广泛的值域范围内，变量y在很小…
你的报表和别人家报表的区别
【与数据同行】已开通综合、数据仓库、数据分析、产品经理、数据治理及机器学习六大专业群，加微信号frank61822701 为好友后入群。新开招聘交流群，请关注【与数据同行】公众号，后台回复“招聘”后获得入群方法。正文开始前两天在微博吐槽了一…
【干货】建议收藏！！全网最完整的Python操作Excel数据封装函数
【干货】建议收藏！！全网最完整的Python操作Excel数据封装函数1. 写在前面2. 前期准备2.1. 初识Excel2.2. 格式区别2.3. 库的使用2.4. 整体思路3. 代码展示3.1. xls格式3.1.1. 读取xls格式文件3.1.2. 写入xls格式文件3.1.3. 追加写入xls格式文件3.2. xlsx…
自如房源爬取及简单分析——python语言实现
背景及任务简介 自如作为在长租公寓行业的头部公司，目前已覆盖国内一线城市和部分新一线城市，因其在租房间种类丰富，装修美观，有大量的“管家”形成了线上线下闭环，且租户具有极高粘性。本次任务通过python抓取符合要求…
R语言：集卡活动概率测算模拟
背景：以支付宝集五福活动为代表的集卡类营销活动背后，每张卡出现的概率测算是非常重要的，假设我们可以预估有多少人参与活动以及大致每人能抽多少次，且限定一共有多少人能够集齐，在这些限定条件下，每张卡出…
2020年小红书校招数据分析笔试题
星标可乐的数据分析之路一起进步学习哈喽，大家好，我是可乐今天给大家带来2020年小红书校招的数据分析笔试题的详解1、如果在小红书商城中某一商户给一产品定价，如果按照全网最低价500元定价，那么客人就一定会选择在此购买…
【Python数据分析】文本情感分析——电影评论分析（二）
接上一篇《【Python数据分析】文本情感分析——电影评论分析（一）》。 目录文本向量化词袋模型TF-IDF建立模型构建训练集与测试集特征选择方差分析逻辑回归朴素贝叶斯总结与改进方向总结改进文本向量化 文本要进行模型训练，进而判断文本是积极…
python学习笔记（2）：变量
变量，从名称就可以理解，变化的量，与之相对的是常量，就是不会改变的量。 1.变量
变量有两个要素，变量名和值，变量一般这样表示：变量名 值，我们把变量名叫做标识符，变量名…
初学数据挖掘——数据探索（六）：数据特征分析之相关性分析
相关性分析即分析连续变量之间线性相关程度的强弱，并用合适的统计量或统计图表示出来的过程。
如现在想要分析得到不同菜品之间的相关关系，则可以通过分析这些菜品日销售量之间的相关性来得到。
代码如下：
#导入相关包
from __future__ im…
数值分析笔记——迭代法+代码实现
数值分析笔记——迭代法代码实现
问题：在可以使用直接法求出精确解的情况下，为什么还要使用迭代法求他的近似解呢？
因为我们求解的问题通常需要通过计算机设计算法来解决，当未知数非常多，问题规模非常大的时候&#…
动态图表交互揭秘：制作选择器的奥秘
这一节内容介绍不同的选择器，具体怎么实现选择器和图表之间的连接，下节内容再放送。或可回顾前一篇系列文章，查看整体动态效果《这样用Excel动态交互图表，还要什么前端》。选择器可以由窗体控件、数据有效性、切片器制作ÿ…
对比Excel学习SQL（4）：计算字段
今天这篇文章是对比Excel学习SQL系列的第4篇文章，之前3篇的传送门在这里：《对行和列的操作》、《库/表/记录的增查删改》、《写给小白的SQL学习文章》。计算字段的意思是通过原有字段的运算创建新的字段，本文主要从算术运算符计算字段、函数计…
RFM分析-用户价值细分的精准运营方法
对用户群体进行价值细分，哪些是重要用户，哪些是要重点挽留的用户，对不同价值区的用户制定不同的营销方案，从而进行精准运营，这是进行RFM分析的意义。今天来聊一聊用Excel进行RFM分析的方法。一、RFM分析的定义01 定义R…
![[图表]pyecharts模块-日历图](https://img-blog.csdnimg.cn/ebf7e5b242b44bce97b4f06b6afd53dd.png#pic_center)
[图表]pyecharts模块-日历图
[图表]pyecharts模块-日历图
先来看代码：
import random
import datetimeimport pyecharts.options as opts
from pyecharts.charts import Calendarbegin datetime.date(2017, 1, 1)
end datetime.date(2017, 12, 31)
data [[str(begin datetime.timedelta(d…
t检验，单因素方差和相似非参数检验-IBM SPSS 第六版第9章译文
本部分译文目的是尽量避免在使用SPSS时，知其然不知其所以然，或者甚至是不尽知其然的情况，在分析时经常会被问到该用什么哪种检验，就自行翻译一下这本书的第9章。
声明：此翻译非正式翻译，仅为个人翻译供大家…
网易数据分析实战营12.21-12.23
为什么要学数据分析？ 数据分析是什么？ 数据分析流程业务理解数据收集数据处理数据分析图表制作报表绘制 数据分析重在对业务的理解，这种理解其实是思维逻辑能力的体现，而数据分析工具是为了将对业务的理解以更加高效的方式呈现、…
数据可视化 - 派可数据商业智能BI可视化分析平台
有一点可能很多人没有想到，实际上商业智能BI的相关概念已经有了数十年的发展历史。在这段发展过程中，商业智能BI形成了一套成熟的理论和产品体系，并且在现代的信息化、数字化加成下，成为了各行各业企业的成熟产品。
一、商业智能…
数据分析与展示matlabplot库复习
Matplotlib库由各种可视化类构成 matplotlib.pyplot是绘制各类可视化图形的命令子库 引用： import matplotlib.pyplot as plt plt.plot()只有一个输入列表或数组时，参数被当作Y轴， X轴以索引自动生成
import matplotlib.pyplot as plt
plt.p…
Pandas 基本语法(二)
Pandas 目录 1、Pandas 基本语法(一) 2、Pandas 基本语法(二) 3、持续更新中…
Pandas 的基本语法(二)
导入导出 read_excel(io[, sheetname, header, …]) 读取excel格式的数据 read_csv(filepath_or_buffer[, sep, …
Python数据分析：数据可视化Seaborn
Python数据分析：数据可视化Seaborn
seaborn
Python中的一个制图工具库，可以制作出吸引人的、信息量大的统计图在matplotlib上构建，支持numpy和pandas的数据结构可视化，甚至是SciPy和statsmodels的统计模型可视化
特点
多个内置…
用python处理时间序列数据，检验平稳性跟纯随机性
用python处理时间序列数据，检验平稳性跟纯随机性
from statsmodels.tsa.stattools import adfuller as adf
from statsmodels.graphics.tsaplots import plot_acf, plot_pacf
import pandas as pd
import numpy as np!pip install statsmodelsRequirement already …
揭开大数据解决方案实现的底层逻辑
1.为何需要大数据解决方案：
随着各个业务系统的不断增加，以及各业务系统数据量不断激增，IT数据支撑方的工作变得越来越复杂。主要问题如下： 数据来自多个不同的系统，存在需要跨数据源分析，需要对接各种不同…
数据分析项目-环境准备（jupyter notebook）
开发语言：Python
工具：anaconda
开头先介绍一下anaconda自带的一款工具jupyter notebook
用途：将代码、文档、可视化内容全都集中到一个文档中。常用于数据分析、机器学习领域。
支持的语言:python、Java、c、c、c#、go等。
使用&#x…
一个软件，解决全能电子地图制作
在数据可视化中，地图可视化是高频应用的一种。我们在一些新闻报道和商业杂志上，会经常看到运用地图来分析展示商业现象。 数据地图可以最直观的表达出数据之间的空间关系，因此在很多数据分析场景中被广泛应用。当然数据地图也是多种多样的&am…
带你掌握最常用的数据分析图表
使用数据分析图表的场合很多，但是图表类型那么多，常见的有柱状图、饼状图、折线图等等，有时候不小心用错了可就闹笑话了。所以今天就跟大家详细说说最常用的数据分析图表。 柱状图： 数据分析图表中柱形图用途广泛，擅长…
一个公式让你真正理解什么是商业智能
商业智能（BI）是Gartner与1996年提出的，他描述了一些了的概念和方法，通过应用基于事实的支持系统来辅助商业决策的制定。无数历史经验表明，充分利用现有的新知识、新技术，需要耗费几十年甚至一代人的时间。所…
“大数据分析”和“数据分析”的区别与联系
大数据分析和数据分析是有区别和联系的。这里重点关注两者的是技术要求、使用场景、业务范围等方面的区别和联系。重点要区分理论研究和实际应用两方面区别和联系。 什么是数据分析？
数据分析是指用适当的统计分析方法对收集来的大量数据进行分析，未提取…
面经|快手数据分析一面
1.自我介绍 面试官提示主要谈下简历里面没有的内容，过往、兴趣爱好之类的 2.搭建指标体系自己去创建的还是从上到下要求看哪些指标 回答：一类是定方向，拆指标；二类是KPI，从上到下要求，需加一些维度、对比拆…
Pandas数据处理（一）
Pandas 是非常著名的开源数据处理库，我们可以通过它完成对数据集进行快速读取、转换、过滤、分析等一系列操作。除此之外，Pandas 拥有强大的缺失数据处理与数据透视功能，可谓是数据预处理中的必备利器。 特有的数据结构是 Pandas 的优势和核心…
数据报表配上这些可视化，领导不赞都难！
小编又搞来一批新鲜出炉的可视化，与上一次不同，这次多数是更贴合实际应用的高级图表，都是由我们的开发者开发应用于FineReport的。 桑基图——能源、材料成分、金融等数据的可视化分析利器
桑基图是一种能量分流图，常用用于能源、…
数据分析与展示数据特征复习
基本统计（含排序）
pandas库排序.sort_index()方法在指定轴上根据索引进行排序，默认升序 .sort_index(axis0, ascendingTrue) .sort_values()方法在指定轴上根据数值进行排序，默认升序 Series.sort_values(axis0, ascendingTrue) …
面向数据科学的DigitalOcean和Docker
创建基于云的数据科学环境以进行更快的分析 (Creating a cloud-based data science environment for faster analysis) There are times when working on data science problems with your local machine just doesn’t cut it anymore. Maybe your computer is old, and can’…
python中常用统计、作图函数
1、基本统计函数
函数功能所属库sum()总和（按列计算）Pandasmean()算术平均数var()方差std()标准差corr()相关系数cov()协方差矩阵skew()偏度（三阶矩）kurt()峰度（四阶矩）describe()基本描述（基本…
数据分析之定量数据的描述统计
从集中趋势和离中趋势两个方面进行分析：
1、集中趋势度量
（1）均值
主要问题时对极端值比较敏感，因此可以使用截断均值来度量。
算术平均数：mean()
几何平均数：exp(mean(log()))
计算数据样本的指定阶…
如何快速高效地学习数据分析
一.技能
1.理论：数学知识，包括统计学、概率论、线性代数等；
2.工具：
1）excel等常用办公软件
2）SQL等数据库 3）python等常用分析语言二.该怎么学 1.理论：1）统计学&…
非技术岗需要的“数据能力”
1.所谓的“数据能力”具体指什么？1）数据思维能力数据思维能力要求公司人保持对数据的敏感。比如在看微信时平台每天产生的数据时，他们需要将当天的阅读量跟上个月、往年的数据做对比，判断数据是否属于正常范围或出现异常。在一个时…
如何打造具有商业可行性的AI产品？AI时代的产品思维 | Mixlab智能产品架构师
如今越来越多的产品经理也在考虑为自己的产品添加AI功能，但是事实上并没有那么容易。作为产品经理我经常能收集到各种AI产品的Idea，有些甚至过于科幻，每当我们迫不及待的去实施的时候，结果总是状况百出。该如何选择更好的技术方案…
百度智能云 x 湖南电力丨电网一张图 成就泛在电力物联网
一场暴雨可能引发什么？交通堵塞、道路积水、排水系统瘫痪……？实际上，我们生活工作中最基础的能源——电力，受恶劣天气的影响却是巨大的。遇到暴雨、狂风、冰雹等恶劣天气，电力抢修人员往往需要全员待命，“…
如何给Apache Pig自定义UDF函数？
近日由于工作所需，需要使用到Pig来分析线上的搜索日志数据，散仙本打算使用hive来分析的，但由于种种原因，没有用成，而Pig（pig0.12-cdh）散仙一直没有接触过，所以只能临阵磨枪了&#x…
课程推荐|芯动力-硬件加速设计方法
本文主要推介西南交通大学邸志雄老师的开放课程。“芯动力-硬件加速设计方法”MOOC课程第三轮将于9月1日开课！“芯动力——硬件加速设计方法”是目前MOOC课程中少有的几门讲授工业界主流ASIC、SOC设计技术的课程，于2019年12月在“中国大学MOOC”平台上线…
pyspark中自定义函数的用法
pyspark中自定义函数比python中多了一部注册，整体流程是“定义-注册-调用”，其中注册和调用两步在sparksql和DSL中又有所区别，具体如下：
from pyspark.sql import SparkSession
第一步定义一个函数： def squared_fu…
2022年Work-Life Balance能实现吗？
点击上方“果汁简历”，选择“置顶公众号”互联网人的春天要来了。据悉，北京市人社局发布《关于进一步做好工时和休息休假权益维护工作的通知》，在3月15日至5月15日期间，在全市组织开展工时和休息休假权益维护集中排查整治…
2021 全球程序员收入报告出炉，看完我真的拖后腿了。。
出品 | 程序人生 （ID：coder _life） 来源：https://blog.csdn.net/m0_55452176/article/details/122217762近日，美国科技公司数据收集网站Levels.fyi发布了2021年全球程序员收入报告，在该报告中，L…
可视化数据大屏选择简报
因项目需要，需采购可视化数据大屏，以满足时间紧、要求多的业务需求。现对几家云服务商的可视化数据大屏产品做以对比，选择合适工具并应用。 数据对比时间为2021年二月中旬。 最后选择了百度云的Sugar产品，使用起来还是比较顺手的…
百度开放云联手可视化分析领导者Qlik，推动国内商业智能发展
7月15日，百度开放云和全球知名可视化分析公司Qlik签署合作协议，Qlik正式成为百度开放云在中国市场的数据分析合作伙伴。双方将在战略层面上进行合作，百度开放云的云服务结合Qlik优秀的可视化分析技术，为中国企业提供更完美的数据分…
重磅！大数据知识总结和调参技巧开放下载了
大数据被誉为“新石油”，如何管理并洞悉数据的价值，是企业未来发展的核心竞争力。进入大数据时代，数据规模与日俱增。另一方面，数据仓库的市场份额被其他技术蚕食，比如大数据、机器学习和人工智能。这种趋势给我们造成…
28岁python程序员，被迫成为大厂卷王，看到他的经验总结，网友直呼：这就是普通程序员和牛b程序员的区别
作为一名程序员，最关键的两次跨越是什么？
从普通程序员进阶为熟练开发者；
从熟练开发者跃升到技术专家或架构师。
完成第一次跨越，你会成为具有一技之长的开发者，月薪可能翻上几番，可能从 5000 变成 3…
PythonPa取正义数据
获取API数据，分享给更多的遵纪守法的我们一、python爬取请求1.分析API2.py爬虫二、Fetch获取json文件1.跨域解决一、python爬取请求
1.分析API
先看下响应的数据，风险地区 请求的参数，也就要计算最后两个（签名与发送时间戳&…
origin拟合曲线方法
origin拟合曲线方法线性拟合分段线性拟合非线性拟合两种常用非线性拟合类别逐段拟合（Piecewise）多项式拟合（Polynomial）其他拟合类别软件为origin9.1文中所有拟合均可以在拟合完成后点击图上的绿锁选择Change Parameters进行参数的…
【微视频】基于Greenplum+Kafka的实时数据处理
在追求数据时效性的今天，如何高效处理低延时的流数据，逐渐成为大家越来越关注的问题。流数据处理能力已成为衡量大数据平台计算实力的一个重要指标。Greenplum研发团队在开源Greenplum的基础上，提供了新的高速流数据引擎GPKafka，从…
和鲸新人赛——员工满意度预测经验分享
和鲸新人赛——员工满意度预测经验分享导入包及数据定义数据处理函数数据处理这里准备采用随机森林的回归算法拟合赛题提供的test数据集，并保存结果大家好，我是一名数据分析的爱好者，和鲸这个平台适合机器学习的入门（kaggle磕英文…
Excel如何分组排序
之前有同学发了一个这个问题，如下图所示，左边是原始数据表，标有底色的B/G/H列是要按照右表中的要求进行公式计算的。如要求所示，B列排名是按照某片区下某等级之间的5月业绩环比分组排名，G列“是否各片区等级前两名”要…
一图看懂《对比Excel，轻松学习Python数据分析》
（非广告，只是单纯的读后感，以后都会有技能类书籍读后感/知识图谱总结这类的文章，帮大家排坑。）《对比Excel，轻松学习Python数据分析》这本书很适合小白阅读，总阅读时长加书中代码练习大概在10个…
写给小白的SQL学习文章
有好多小伙伴留言说想看SQL的学习文章，虽然Excel越写越多，但我还是觉得得开始着手写SQL了。想了很久SQL的文章应该从什么角度来切入，最后决定通过对比Excel，来学习SQL，所以这是写给小白的SQL学习文章。01什么是SQLSQL&…
Excel预测工作表
目录：名词解释时间序列使用场景一、移动平均法二、用Excel进行时间序列分析——移动平均三、指数平滑法四、用Excel进行时间序列分析——指数平滑五、预测工作表名词解释时间序列：按时间顺序排列的一组数据序列。时间序列分析：发现这组数据的…
用Excel做排列图
排列图，又叫帕累托图、主次图，是按照发生频率大小顺序绘制的直方图，是QC中不可获取的工具。这里详细介绍一下用Excel做规范的排列图的方法。案例中用的是Excel2016. 比较规范的排列图应该是这样子，也是我们的目标。注意几个点&…
淘宝母婴商品分析-Python
1.项目背景： 今年来母婴的消费逐渐增加，这是一份关于淘宝天猫的一份母婴的销售数据。分析该数据集有利于了解目前市场的销售情况，便于做出运营决策，提高销售额。 数据集来自天池：https://tianchi.aliyun.com/dataset/d…
淘宝母婴商品分析-Excel
1.项目背景： 今年来母婴的消费逐渐增加，这是一份关于淘宝天猫的一份母婴的销售数据。分析该数据集有利于了解目前市场的销售情况，便于做出运营决策，提高销售额。该数据集包含了： user_id:用户ID auction_id: cat_id:类…
商城数据分析—mysql实现
1.导入Excel的数据省略。 2.查看表结构
select * from order_sc;3.查询年销售额汇总
select year1,
round(sum(amount),0) as total_amount
from orders_sc
group by year1;运行结果： 4.月度销售额汇总
select year1,
month1,
round(sum(amount),0) as total_am…
组织管理体系推广经验之八－关于量化管理
度量的目的主要是实现精细化的管理、有效地对项目进行控制，对度量数据的分析用于辅助决策、经验积累、有效评估等。但是度量本身就是双刃剑，一方面度量对于精细化管理是必要的前提，另一方面度量体系、度量的执行需要花费大量的人力成本&#…
python网页爬虫+简单的数据分析
python网页爬虫简单的数据分析 文章目录python网页爬虫简单的数据分析一、数据爬取二、数据分析1.我们今天爬取的目标网站是：http://pm25.in/2.需要爬取的目标数据是：该网站所有城市的空气质量数据（主要包括AQI、PM2.5/1h、PM10/1h、CO/1h、N…
Python 随机数与随机数种子
文章目录1 Python随机数种子2 以时间为种子传入1 Python随机数种子 随机数本就是伪随机，通过设置随机数种子可以控制随机数生成的概率分布，来生成同一批随机数 设置random.seed(aseed)之后，生成的随机数均以此为参考，直到下一次指…
数据包络分析法（DEA） R实现
概念 数据包络分析（Data envelopment analysis，DEA）是运筹学中用于测量决策部门生产效率的一种方法，它是基于相对效率发展的崭新的效率评估方法。 详细来说，通过使用数学规划模型，计算决策单元相对效率&…
深圳二手房房源市场研究(下)
PartⅡ：数据可视化前言数据可视化深圳各区二手房情况房子朝向分布户型与总价的关系楼层与总价的关系结论房价分布情况总结参考文献前言
根据上一篇文章，利用Python对房天下网站中深圳十个区的二手房房源信息进行了爬取，并保存到了本地。然后…
python 列表 list.append()函数
文章目录1 作用：向list中添加元素2 奇怪的事情3 解释原因1 作用：向list中添加元素
append()方法，向列表末尾追加元素。
fruits [apple, banana, cherry]
fruits.append("orange")
print(fruits)>>>[apple, banana, che…
Pandas库的DataFrame.shift()方法
文章目录1 函数作用2 函数原型3 举例①1 函数作用
把数据移动指定的位数
2 函数原型
DataFrame.shift(periods1, freqNone, axis0)假设现在有一个DataFrame类型的数据df，调用函数就是df.shift()periods： 类型为int，表示移动的步幅…
深圳二手房房源市场研究(上)
PartⅠ：数据获取和数据清洗写在前面研究背景数据获取数据清洗写在前面
很早就有写博客的想法，一直对自己不自信所以没敢尝试，每次看CSDN博客都很羡慕和崇拜，希望自己在未来的某一天也能给其他人给予一些力所能及的帮助。目前的我…
微精：推荐+订阅=个性化智能体验
个性化是趋势，国内相关的推荐及阅读应用也层出不穷，比如雷锋网曾报道过的鲜果联播、酷云阅读、指阅等等，而由北京祺瑞乾坤科技开发的微精走的是相对更为细分化的市场，以当前最火的社会化媒体新浪微博为切入，通过机器学…
Android应用的收入仅为相同数量iOS应用的24%
近日，Google董事长Eric Schmidt在Le Web大会上放言称“Android已经超越iPhone”。如果仅就日使用量来说的话，确实是这样的。据最新统计，每日使用Android和苹果iOS系统的移动设备数分别为550,000和450,000。但既然Android的用户群已超过iOS&am…
移动游戏开发者的收入从哪来？
目前，移动游戏产业正在如雪球一样越滚越大。据报道，Android和iOS平台游戏产生的收入已经超过了任天堂和索尼便携式游戏收入的总和；另外，游戏已成为美国最受欢迎的移动应用类别。 据《纽约时报》报道，到2015年ÿ…
在Pyppeteer中实现反爬虫策略和数据保护
爬虫是我们获取互联网数据的神奇工具，但是面对越来越严格的反爬虫措施，我们需要一些我们获取数据的利器来克服这些障碍。本文将带您一起探索如何使用Pyppeteer库来应对这些挑战。 Pyppeteer是一个基于Python的无头浏览器控制库，它提供了与Chr…
数学建模的常用模型和方法
常用模型 l 规划&优化（lingo）：0-1规划、线性规划、整数规划、非线性规划、动态规划、单目标、多目标、l 图论：最短路径、hamilton圈、旅行商TSP问题 、最小生成树、网络最大流、最小费用流、l 插值拟合 ：插值、…
Android应用免费推广策略之普遍推广策略
引言每一个应用都很重视两个要点：用户与内容，但在数量日益剧增的应用市场中找到属于自己的地位最需要的是：有效的推广。我经常光顾一家服务和质量都非常好的小吃店，发现很多时候店铺人流量没有想象中好，甚至我从来没有…
PyCon2012US视频土豆版本
PyCon2012US的视频放在youtube上，不翻墙上不去，我找了个服务把视频搬家到土豆。 土豆有api支持，所以比较容易用脚本实现。其它的国内视频网站这方面都是渣啊。 ——————————————————- Parsing Horrible Things with Python h…
【海量数据挖掘/数据分析】 之 贝叶斯分类算法（朴素贝叶斯分类、贝叶斯分类计算流程、拉普拉斯修正、贝叶斯分类实例计算）
【海量数据挖掘/数据分析】 之 贝叶斯分类算法（朴素贝叶斯分类、贝叶斯分类计算流程、拉普拉斯修正、贝叶斯分类实例计算） 目录
【海量数据挖掘/数据分析】 之 贝叶斯分类算法（朴素贝叶斯分类、贝叶斯分类计算流程、拉普拉斯修正、贝叶斯分类…
IP代理软件哪个比较好
对于我们来说，网络IP软件并不陌生，因为我们每天都使用网络，无论是工作还是生活，互联网的魔力使我们已经无法完全离开它。平常我们的工作可能也要用到各种类型的换IP软件。 代理IP的用途有哪些？
1、爬虫采集
Python爬…
反爬虫爬取网易云歌单
一、主题式网络爬虫设计方案 1.主题式网络爬虫名称：爬取网易云音乐歌单
2.主题式网络爬虫爬取的内容与数据特征分析
爬取网易云音乐歌单前十页歌单，轻音乐类型的歌单名称、歌单播放量、歌单链接、用户名称。分析歌单播放量和歌单标题关键词3.主题式网络…
京东数据平台：2023年8月京东白酒行业品牌销售排行榜
鲸参谋监测的京东平台8月份白酒市场销售数据已出炉！
根据鲸参谋平台的数据显示，今年8月份，白酒市场的销量为198万，环比下滑约6%，同比下滑不足1%；销售额为15亿，环比下滑约18%，同比则…
亲戚朋友问：车子？工作？对象？Python 教你优雅解决年关三大难题
车票？工作？对象？Python 教你优雅解决年关三大难题 作者 | 数据不吹牛
最近，很多朋友都已经连续多日沉浸在即将（已经）放假的快感之中，化身渔夫，兢兢业业地摸鱼。
但是！你…
Python爬虫在抓取信息时会出现什么问题【芝麻http】
随着网络技术飞速发展，大数据正在开启一次重大的时代转型，全面改变人们的生活、工作、商业模式。在大数据如此火爆的今天，我们对数据利用率却不到7%，可见数据的抓取使用迫在眉睫。 Python爬虫 是时下最流行的 网络爬虫 语言&#…
Python将txt数据转换为xls（表格）文件，方便后面做数据分析
Python我们做数据分析的时候有时候获得数据是txt文件，这时候我们该怎么办呢？下面我给大家教一下这时候应该怎么做？ 1.读取txt数据查看：我们就可以看到使用逗号隔开的数据。
"""
读取数据，查看数据
&qu…
京东数据分析平台：2023年8月京东奶粉行业品牌销售排行榜
鲸参谋监测的京东平台8月份奶粉市场销售数据已出炉！
鲸参谋数据显示，8月份京东平台上奶粉的销售量将近700万件，环比增长约15%，同比则下滑约19%；销售额将近23亿元，环比增长约4%，同比则下滑约3%。…
基于Echarts的数据可视化大屏
本项目学习于b站up主（视频链接）
up主分享的资料，gitee仓库： 其中有笔记，笔记链接 项目总结
项目主要分为前端页面的布局和Echarts图表的嵌入，页面主要就是css较为繁琐，图表毕竟官网有模板&…
亚马逊云科技最新分享：人、流程、工具全链路数据安全合规
数据已经是现代发明和创新之源。 企业需要人—流程—工具全链路的数据安全合规。 出品 | CSDN 云计算 端到端、全栈，是近两年我们听到云巨头亚马逊云科技提到最多的架构思路。现在，已经成为生产要素的数据，重要性被提到的非常高的高度&#x…
三、Linux的目录结构和命令基础入门
1、区别
window系统中，路径之间的关系，用：/表示
Linux系统中，路径之间的关系，用：\表示
并且，Linux系统，只有一个根目录/，所有文件都在它的下面
描述Linux系统中的某一…
excel之数学函数、excel中的通配符
学习excel前需要明确的是事： 在学习excel函数之前，大家需要明确一件事，excel现在设计到了一些新函数，这些新函数只能存在于office365、office2019及更 新版本之中，所以建议大家在学习时安装较新的版本，…
仪表板展示 | DataEase看中国：2023年中国电影市场分析
背景介绍
随着《消失的她》、《变形金刚：超能勇士崛起》、《蜘蛛侠：纵横宇宙》、《我爱你》等国内外影片的上映，2023年上半年的电影市场也接近尾声。据国家电影专资办初步统计，上半年全国城市院线票房达262亿元，已经超…
【数据分析入门】Matplotlib
目录 零、图形解析与工作流0.1 图形解析0.2 工作流 一、准备数据1.1 一维数据1.2 二维数据或图片 二、绘制图形2.1 画布2.2 坐标轴 三、绘图例程3.1 一维数据3.2 向量场3.3 数据分布3.4 二维数据或图片 四、自定义图形4.1 颜色、色条与色彩表4.2 标记4.3 线型4.4 文本与标注4.5…
基于”Python+”多技术融合在蒸散发与植被总初级生产力估算中的应用
熟悉蒸散发ET及其组分（植被蒸腾Ec、土壤蒸发Es、冠层截留Ei）、植被总初级生产力GPP的概念和碳水耦合的基本原理；掌握利用Python与ArcGIS工具进行课程相关的操作；熟练掌握国际上流行的Penman-Monteith模型，并能够应用该…
财务数据分析用什么软件好？奥威BI自带方案
做财务数据分析，光有软件还不够，还需要有标准化的智能财务数据分析方案。奥威BI数据可视化工具就是这样一款自带智能财务数据分析方案的软件。
”BI方案“，一站式做财务数据分析
奥威BI数据可视化工具和智能财务分析方案结合，可…
电商数据采集和数据分析
不管是做渠道价格的治理，还是做窜货、假货的打击，都需要品牌对线上数据尽数掌握，准确的数据是驱动服务的关键，所以做好电商数据的采集和分析非常重要。 当线上链接较多，品牌又需要监测线上数据时，单靠人工肯…
信息可视化和数据可视化的异同和其他比较，到底怎么区分呢？
什么是数据可视化?
根据维塔利弗里德曼的说法：
“数据可视化的主要目标是通过图形方式清晰有效地传达数据。”
数据可视化是将数据转化为图表、图形、地图等视觉元素的过程，以便人们更容易理解数据的趋势、关系和模式。它通常强调的是对数据的视觉呈…
Apache Spark 的基本概念和在大数据分析中的应用 103.219.31.8
Apache Spark是一款基于内存的通用大数据处理框架，旨在加速数据处理速度。它包含了大规模数据处理，机器学习，图计算等组件。以下是几个 Apache Spark 的基本概念： Resilient Distributed Datasets (RDDs)：RDDs是一个分…
Pandas数据预处理Pandas合并数据集在线闯关_头歌实践教学平台
这里写目录标题 第1关 Concat与Append操作第2关 合并与连接第3关 案例：美国各州的统计数据 第1关 Concat与Append操作
任务描述 本关任务：使用read_csv()读取两个csv文件中的数据，将两个数据集合并，将索引设为Ladder列࿰…
江苏某陶瓷生产企业配电房改造-智慧动态无功补偿
安科瑞 崔丽洁
摘要：低压配电系统的无功补偿是电能质量治理的重要环节。在传统无功补偿中，响应速度较慢，补偿电流呈阶梯式，存在过补或欠补的现象，有时未必能到达理想的效果。为了解决这一问题，人们提出了一…
SpeedBI数据可视化工具：丰富图表，提高报表易读性
数据可视化工具一大作用就是能把复杂数据可视化、直观化，更容易看懂，也就更容易实现以数据驱动业务管理升级，因此一般的数据可视化工具都会提供大量图形化的数据可视化图表，以提高报表的易懂性，更好地服务企业运营决策…
2.文章复现《热电联产系统在区域综合能源系统中的定容选址研究》（附matlab程序）
0.代码链接 1.简述 光热发电是大规模利用太阳能的新兴方式，其储热系 统能够调节光热电站的出力特性，进而缓解光热电站并网带来的火电机组调峰问题。合理配置光热电站储热容量，能够 有效降低火电机组调峰成本。该文提出一种光热电站储热容 量配…
软件测试及数据分析处理实训室建设方案
一 、系统概述 软件测试及数据分析处理是软件开发过程中的一项重要测试活动，旨在验证不同软件模块或组件之间的集成与交互是否正常。综合测试确保各个模块按照设计要求正确地协同工作，以实现整个软件系统的功能和性能。以下是软件测试及数据分析处理的一…
783页19万字行政服务中心一网通办政务服务应用平台建设方案
导读：原文《783页19万字行政服务中心一网通办政务服务应用平台建设方案》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。以下是部分内容，
第三…
数据分析作业四-基于用户及物品数据进行内容推荐
## 导入支持库
import pandas as pd
import matplotlib.pyplot as plt
import sklearn.metrics as metrics
import numpy as np
from sklearn.neighbors import NearestNeighbors
from scipy.spatial.distance import correlation
from sklearn.metrics.pairwise import pairwi…
108页石油石化5G智慧炼化厂整体方案PPT
导读：原文《108页石油石化5G智慧炼化厂整体方案PPT》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。以下是部分内容， P P
T 喜欢文章…
机器学习和数据挖掘03-模型性能评估指标
Accuracy（准确率）
概念：模型正确预测的样本数量与总样本数量的比例。 公式：Accuracy (TP TN) / (TP TN FP FN)
TP (True Positives)：正确预测为正例的样本数。即模型正确地将正例判定为正例。
TN (True Negati…
听人劝吃饱饭，这款数据可视化工具定要试试
在数据量激增，数据分析精细化的当下，拥有一款趁手的BI数据可视化工具不仅可以提高报表易读性，还可以提高数据分析效率，对公司、个人的职业发展都起到重要的辅助作用。接下来要介绍的奥威BI数据可视化工具是一款零编程BI工具&#…
Beepmo：在LinkedIn上结交新人如同在Foursquare中签到一样简单
你是否常常因为工作上的事情去寻找别的公司相关负责人却抓破头皮也找不到联系方式，Beepmo就是那么一种应用，将社交发现与职业社交网络进行整合，让你在LinkedIn上结交新人如同在Foursquare中签到一样简单。 应用介绍 应用专门为东南亚…
Pandas+Matplotlib 数据分析
利用可视化探索图表
一、数据可视化与探索图
数据可视化是指用图形或表格的方式来呈现数据。图表能够清楚地呈现数据性质， 以及数据间或属性间的关系，可以轻易地让人看图释义。用户通过探索图（Exploratory Graph）可以了解数据的…
数据可视化大屏模板 | 保姆级使用教程
近来很多朋友私信咨询怎么下载使用数据可视化大屏模板，在这里就给大家做一个相对简单的教程总结。有需要的朋友记得先收藏保存，以便不时之需。
数据可视化大屏制作软件：奥威BI系统
数据可视化报表模板板块：模板秀
主要操作&…
Pandas数据操作_Python数据分析与可视化
Pandas数据操作 排序操作对索引进行排序按行排序按值排序 删除操作算数运算去重duplicated()drop_duplicates() 数据重塑层次化索引索引方式内层选取数据重塑 排序操作
对索引进行排序
Series 用 sort_index() 按索引排序，sort_values() 按值排序； Dat…
Minitab Express for Mac(数据分析软件)附破解补丁 v1.5.0 支持M1
Minitab Express是一款专为Mac用户设计的数据分析和统计软件。它提供了一套全面的工具和功能，用于分析数据、执行统计计算和生成可视化。
下载：Minitab Express for Mac(数据分析软件)附破解补丁 以下是 Minitab Express for Mac 的一些主要功能&#x…
使用Pandas进行时间重采样，充分挖掘数据价值
大家好，时间序列数据蕴含着很大价值，通过重采样技术可以提升原始数据的表现形式。本文将介绍数据重采样方法和工具，提升数据可视化技巧。
在进行时间数据可视化时，数据重采样是至关重要且非常有用的，它支持控制数据的…
python数据分析（数据挖掘）的基本函数库简介
学完了基本的python语法后，我们对python语法有了较为深刻的理解。现在我将更新利用python进行数据分袖和数据挖掘的知识。关于python基础语法，请查看本人专栏python语言。下面我将介绍利用python进行数据分析和数据挖掘所需要的框架： 1、nump…
BI测试（知识总结）
目录
前言
BI测试：
测试策略：
1、测试准备工作：
2、报表测试点
3、测试步骤（流程）
🎁更多干货 前言
由于之前做过一段时间大数据测试，故整理BI测试知识点以供学习。
BI测试：…
可视化大屏报表的设计与制作 | 附成果图
大屏可视化报表是一种以大屏幕为展示媒介，通过图形、图表、文字等多种方式将数据信息呈现出来的报表形式。它具有视觉冲击力强、信息量大、交互性高等特点，能够帮助企业快速获取数据背后的价值和洞见，提高决策效率。因此近年来，大…
看懂这5幅图，研发效能分析和改进就容易了
摘要：当你看懂这5幅图，研发效能分析和改进就容易了。作为 CTO 或企业管理者，我们如何去了解和衡量研发团队的研发效能呢？作为 PMO 和效能负责人，我们该从哪几个维度来回答关于研发效能的问题呢？如何通过效能…
MIT 更新最大自然灾害图像数据集，囊括 19 种灾害事件
By 超神经内容提要：麻省理工学院在最近 ECCV 2020 上提交的一篇论文中，发布了一套自然灾害图像数据集。这是迄今为止规模最大、质量最高的自然灾害卫星图像数据集。关键词：自然灾害 数据集2020 年，多灾多难的一年。年初爆发的疫情…
京东数据接口：京东数据分析怎么做？
电商运营中数据分析的重要性不言而喻，而想要做数据分析，就要先找到数据，利用数据接口我们能够更轻松的获得比较全面的数据。因此，目前不少品牌商家都选择使用一些数据接口来获取相关电商数据、以更好地做好数据分析。
鲸参谋电商…
4. Pandas行列操作
4.1 新增列
4.1.1 assign
Pandas中的assign（）函数不仅可以实现不改变原数据情况下新增列，而且可以同时新增多列，还可以配合链式操作使用一行代码完成多个新增列创建，使得代码非常整洁。
（1）函…
Python数据挖掘入门进阶与实用案例：自动售货机销售数据分析与应用
文章目录 写在前面01 案例背景02 分析目标03 分析过程04 数据预处理1. 清洗数据2.属性选择3.属性规约 05 销售数据可视化分析1.销售额和自动售货机数量的关系2.订单数量和自动售货机数量的关系3.畅销和滞销商品4.自动售货机的销售情况5.订单支付方式占比6.各消费时段的订单用户…
GPT4 Advanced data analysis Code Interpreter 做行业数据分析、可视化处理图像、视频、音频等
1. 跨境电商如何用ChatGPT选品
ChatGPT Jungle scout
案例：跨境电商如何用ChatGFT选品 ChatGPTJungle scout
素材和资料来自： Jungle ScoutEM, Michael Soltis 和 文韬武韬AIGC
1.1 从Jungle scout上下载数据 Date Range > Last 90 days Downlo…
数据分析在游戏行业的应用
数据分析在游戏行业中扮演着至关重要的角色，它可以用于以下方面： 1、玩家行为分析
了解玩家在游戏中的行为，包括游戏时长、最喜欢的游戏模式、关卡通过率等，从而为游戏设计和运营提供参考。
2、留存率
监控玩家在游戏中的持续参…
生成指定范围内的指定个数的随机整数numpy.random.randint()
【小白从小学Python、C、Java】 【计算机等级考试500强双证书】 【Python-数据分析】 生成指定范围内的 指定个数的随机整数 numpy.random.randint() [太阳]选择题 以下哪个选项正确地描述了上述代码的功能？ import numpy as np arr np.random.randint(1, 10, 5) p…
2022年亚太杯APMCM数学建模大赛E题有多少核弹可以摧毁地球求解全过程文档及程序
2022年亚太杯APMCM数学建模大赛
E题 有多少核弹可以摧毁地球
原题再现 1945年8月6日，第二次世界大战即将结束。为了尽快结束战争，美国在日本广岛投下了下一颗名为“小男孩”的原子弹。这样一颗原子弹在广岛炸死了20万人，广岛的所有建筑物都…
2023简单好用的信息化管理平台，赋能中小生产企业信息化转型升级-亿发
随着信息技术的快速进步和产业互联网的兴起，传统企业正面临着日益迫切的信息化转型升级需求。数字化转型是指企业利用信息技术和互联网思维，对其业务模式、组织结构和运营流程进行改造，以提高生产效率和加强市场竞争力。在本文中，…
数据分析技能点-数据挖掘及入门
在数字化的世界里，数据像是一种新的货币。它不仅推动了科技创新，还在塑造着我们的生活、工作和思维方式。但数据本身并不是目的，真正的价值在于如何从海量的数据中提炼有用的信息和知识。这正是数据挖掘发挥作用的地方。 文章目录 数据挖掘概览数据挖掘的方法和应用数据挖掘…
京东数据分析：2023年9月京东白酒行业品牌销售排行榜
鲸参谋监测的京东平台9月份白酒市场销售数据已出炉！ 9月白酒市场的整体热度较高，贵州茅台先是与瑞幸联名推出酱香拿铁，后又宣布与德芙推出联名产品酒心巧克力，引起了诸多消费者的关注。在这一热度的加持下，从销售上看&…
数字经济的大航海时代
编辑 | 阿冒 设计 | 沐由公元15世纪的大航海时代，至今令人神往：世界范围内涌现出的一批航海家，引领着人类从内陆正式走向海洋，东方的郑和与西方的哥伦布就是其中的杰出代表。自此，经济全球化的序幕徐徐开启…
2017年亚太杯APMCM数学建模大赛A题睡眠对人体的影响求解全过程文档及程序
2017年亚太杯APMCM数学建模大赛
A题 睡眠对人体的影响
原题再现 自2001年以来，世界睡眠医学协会将每年的3月21日定为世界睡眠日，以引起人们对睡眠的重要性和质量的关注。 一整天的精神状态取决于昨晚的睡眠质量，高睡眠质量自然保证了人们精…
用Python做数据分析之数据处理及数据提取
1、数据预处理 第四部分是数据的预处理，对清洗完的数据进行整理以便后期的统计和分析工作。主要包括数据表的合并，排序，数值分列，数据分组及标记等工作。
1）数据表合并 首先是对不同的数据表进行合并，我们…
Numpy数值计算Numpy初体验在线闯关_头歌实践教学平台
Numpy数值计算初体验 第1关 Numpy创建数组第2关 Numpy数组的基本运算第3关 Numpy数组的切片与索引第4关 Numpy数组的堆叠第5关 Numpy的拆分 第1关 Numpy创建数组
任务描述 本关的小目标是，使用 Numpy 创建一个多维数组。 测试说明 本关的测试过程如下: 平台运行ste…
1688商品详情数据接口（1688.item_get）
1688商品详情数据接口是一种程序化的接口，通过这个接口，商家或开发者可以使用自己的编程技能，对1688平台上的商品信息进行查询、获取和更新。这个接口允许商家根据自身的需求，获取商品的详细信息，例如价格、库存、描述…
AIGC ChatGPT 4 将数据接口文件使用Python进行入库Mysql
数据分析，数据处理的过程，往往将采集到的数据，或者从生产库过来的接口文件，我们都需要进行入库操作。
如下图数据： 将这样的数据接口文件，进行入库，插入到Mysql数据库中。
用Python代码来完成。
ChatGPT4来完成代码输入。 ChatGPT4完整内容如下：
这个任务可以使用`…
数据分析基础之《jupyter notebook工具》
一、安装库
1、linux库 yum install python3-devel
2、python库 pip3 install -U matplotlib pip3 install -U numpy pip3 install -U pandas pip3 install -U TA-Lib pip3 install -U tables pip3 install -U notebook
3、如果TA-Lib安装不上，先手动安装依赖库 …
电力行业的智能调度：数字孪生技术
随着科技的发展，数字孪生技术正逐渐渗透到各个行业领域，其中包括电力行业。数字孪生技术为电力行业带来了前所未有的机遇，使得电力系统的运行更加高效、安全和可持续。本文借用山海鲸可视化软件几个电力行业数字孪生案例探讨数字孪生技术在电…
R数据分析：集成学习方法之随机生存森林的原理和做法，实例解析
很久很久以前给大家写过决策树，非常简单明了的算法。今天给大家写随机（生存）森林，随机森林是集成了很多个决策数的集成模型。像随机森林这样将很多个基本学习器集合起来形成一个更加强大的学习器的这么一种集成思想还是非常好的。…
易点易动设备管理系统：提升企业备件管理和维修效率的智能解决方案
在当今竞争激烈的商业环境中，大型生产制造企业面临着日益复杂的设备管理挑战。为了提高生产效率和降低成本，企业需要一种高效的设备管理系统。易点易动设备管理系统是一款智能化的解决方案，旨在帮助企业提升备件管理和维修效率。本文将详细介…
Pandas进阶：文本处理
引言
文本的主要两个类型是string和object。如果不特殊指定类型为string，文本类型一般为object。
文本的操作主要是通过访问器str 来实现的，功能十分强大，但使用前需要注意以下几点。 访问器只能对Series数据结构使用。 除了常规列变量df.c…
良好生产跟踪系统的特点
上文中我们已经概述了为什么生产跟踪很重要，让我们深入了解哪些品质可以使生产数据更有价值。
由于生产跟踪既是制造检查点，也是衡量低效率的系统，因此决定良好跟踪系统的是数据为决策过程提供信息的准确性。
让我们来看看生成高质量数据的…
案例研究｜北京交通大学基于DataEase开展多场景校园数据分析与展示
北京交通大学是教育部直属，教育部、交通运输部、北京市人民政府和中国国家铁路集团有限公司共建的全国重点大学，是国家“211工程”“985工程优势学科创新平台”“双一流”建设高校。
多年来，北京交通大学积极发挥信息技术赋能学校人才培养、…
京东数据分析：2023年9月京东洗地机行业品牌销售排行榜
鲸参谋监测的京东平台9月份洗地机市场销售数据已出炉！ 9月份，洗地机市场的销售额增长。根据鲸参谋电商数据分析平台的相关数据显示，9月京东平台上洗地机的销量为9.2万，销售额将近2.2亿，同比增长约9%。从价格上看&#…
Numpy数组的创建（第1讲）
Numpy数组的创建 （第1讲） 🍹博主 侯小啾 感谢您的支持与信赖。☀️ 🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ…
什么是ARFF文件，以.arff结尾
关于arff,主要涉及三个输入类：概念、实例和属性。 1.概念简单而言就是需要被处理的东西， 2. 实例这个词有些陌生，但是可以大致认为其为样本， 3. 属性就是数据表中的一列。 为什么要用arff？（arff介绍&#x…
【Redis 速通】Redis 在 Linux 上的单机服务快速搭建与部署（附完整流程步骤及命令代码）
Redis 单机版安装与部署
Written By: Xinyao Tian
概述
本文档主要描述了 Redis 的生产环境安装及配置方法。
主要步骤
编译及安装
进入 root 用户并上传 Redis 源码安装包
查看 Redis 源码安装包的上传情况:
[rootcentos-host redis]# pwd
/opt/redis
[root centos-ho…
lazada商品评论API接口(评论内容|日期|买家昵称|追评内容|评论图片|评论视频..）
Lazada商品评论API接口是Lazada开放平台提供的一种API接口，可以帮助开发者获取Lazada平台上的商品评论数据。
通过该接口，开发者可以获取到用户对商品的评论信息，包括评论内容、评价等级、评论时间等，从而了解用户对商品的反馈和…
山东专业商品信息管理系统解决方案，智能管理多门店，可定制-亿发
众所周知，现如今商品种类繁多、品牌众多、商品信息量庞大，同时商品销售价格经常变动，还需管理商品批次，避免库存积压和过期，这给山东地区的传统企业在商品管理上带来了极大的挑战。 随着数字化时代的来临，山…
解析python爬取Ebay数据的方式
前言
Ebay是全球著名的电子商务平台之一，每天都有海量的商品信息涌入其中，在电商行业获取这些数据试试非常有价值的，为了更好地了解市场动态，掌握更多的电商行情。Python爬虫成为了必不可少的工具，本文将通过使用Http…
数据分析师的就业前景看好
IT行业哪个方向比较好就业?
目前IT行业的发展速度非常的快，很多领域都已经开始和IT技术进行紧密的结合，这也带来了很多岗位的空缺。那么就一起来说说，IT行业里，哪些方向会更好就业。 大数据时代，呼唤数据分析师。 …
京东数据分析：2023年9月京东打印机行业品牌销售排行榜
鲸参谋监测的京东平台9月份打印机市场销售数据已出炉！ 鲸参谋数据显示，今年9月，京东平台打印机的销量为60万，环比增长约32%，同比下滑约25%；销售额为5亿，环比增长约35%，同比下滑约29%…
时间序列预测中的数据分析-＞周期性、相关性、滞后性、趋势性、离群值等特性的分析方法
本文介绍
本篇文章给大家介绍的是，当我们在进行有关时间序列相关的工作或者实验时，需要对数据进行的一些数据分析操作(包括周期性、相关性、滞后性、趋势性、离群值等等分析)的方法。在本篇文章中会以实战的形式进行讲解，同时提供运行代码和…
京东数据分析（京东销量）：2023年9月京东投影机行业品牌销售排行榜
鲸参谋监测的京东平台9月份投影机市场销售数据已出炉！ 根据鲸参谋电商数据分析平台的相关数据数据显示，9月份，京东平台投影机的销量为13万，环比下滑约17%，同比下滑约25%；销售额将近2.6亿，环比下…
创建多层级行索引,创建多层级行索引的DataFrameMultiIndex.from_product()
【小白从小学Python、C、Java】 【计算机等考500强证书考研】 【Python-数据分析】 创建多层级行索引, 创建多层级行索引的DataFrame MultiIndex.from_product()
[太阳]选择题 使用pd.MultiIndex.from_product()，下列输出正确的是： import pandas as pd…
数据可视化建设是企业战略决策之刚需
企业的信息化建设从规划、改造、建设、运维、创新，是一条艰难而充满挑战的路。伴随着大数据和互联网的涌起，数据被推上风口，众多企业也逐渐意识到信息化建设的提升和数据充分利用的重要性。 如何将众多单一项目改造成信息化网?如何利用BI实现…
王者荣耀KPL秋季赛总决赛预测（AG VS DYG）
原文连接：https://zhuanlan.zhihu.com/p/337468137 这个一个很Nice的公众号，推荐给大家：Datawhale
用到的知识：爬虫数据分析
自己在在学了一段时间的爬虫和python数据分析之后，尝试了网上很多一些开源的项目&#x…
ABTest文章合辑
ABTest&统计学
如何理解α、β一类错误和二类错误？_紫昂张的博客-CSDN博客
ABTest基础概念
AB测试可以用来测什么？不能测什么？_紫昂张的博客-CSDN博客
AA实验是什么？_紫昂张的博客-CSDN博客
ABTest&Python
ABTest实…
统计分析__卡方分布
卡方分布
卡方分布是以一种很简单的方式和正态分布产生关联：如果一个随机变量X服从标准正态分布，那么X^2服从卡方分布，其自由度是1，n个独立的标准正态随机变量的平方和有n个自由度 在这里插入图片描述
举例
一个药品制造商接…
数据分析spss应急考试
数据分析spss应急考试
前言 单项选择 15(项)*2（分）30 判断题 10*1 10 计算题 2*10 案例分析题目(考实验内容) 总四十分，分值不等 老师重点强调了回归分析因子分析方差分析参数、非参数检验 2独立样本的非参数检验应该用什么方法多独立样本…
【读书笔记-＞统计学】08-02 连续型概率分布与正态分布-正态分布概念简介
正态分布
另一个情境：朱莉喜欢穿高跟鞋，她坚持自己的男伴在她穿最高的高跟鞋时也比她高，目前她身边没有合适的人。她想知道这些约会对象中有几个比她高，以及约会者身高够得上她的标准的概率是多少？这一次我们该怎么计…
如何完美实现数据可视化？
为什么要可视化数据?
在工作中，无论你在哪个场景，你都会接触到数据，需要表达出来。数据可视化的作用是通过结合图表和数据来更好地传达业务信息。目前，大多数公司正在逐步从传统的流程管理过渡到基于数据的管理。数据可视化可以…
最简单的数据地图制作，只要6步就搞定！
之前给大家介绍了一些数据地图，基本涵盖了常用的数据地图类型和场景。也答应了给大家写一篇实操，我来赴约拉。
在这里我选取其中的热力地图来一步步教大家怎么制作数据地图。 用这个方法的好处是：
1）简单，快…
OpenTSDB 向下采样说明
文章目录DownsamplingCalendar BoundariesFill PoliciesDownsampling 原文地址：http://opentsdb.net/docs/build/html/user_guide/query/downsampling.html 向下采样（或在信号处理中，抽取）是降低数据采样率或分辨率的过程。 例如&…
表格的自然语言列转换成数字列
当使用loadtxt函数导入数据集时，假设数据类型dtype为浮点型，但是很明显有些列的数据类型并不是浮点型。
因此我们要通过loadtxt()函数中的converters参数将这些列通过转换函数映射成浮点类型的数据。
写出一个转换函数： def iris_type(s): …
线性回归、logit回归、probit回归
回归 文章目录回归线性回归古典线性回归模型的假定:OLS的推导与性质notation系数求解标准误小样本性质对应检验拟合优度检验T 检验F检验从似然比角度看F统计量大样本情况假定:性质:Probit&Logisticmodel公式边际效应(marginal effect)对logit模型:几率比(odds ratio)检验拟…
Oracle笔记 之 使用Oracle建立简单的数据分析数据库服务器
本文将介绍使用Oracle搭建简单的数据分析平台数据库。
设计思路
1，保障源数据库安全
数据分析平台数据库必须是独立的。
数据分析平台数据库与业务数据库之间通过 Databaselink 连接。
Databaselink 使用的用户必须是新建的专门用户且仅有connect权限。
通过D…
【Python爬虫与数据分析】文件读写
目录
一、概述
二、txt文件读写
三、csv文件读写
四、Json文件读写 一、概述
读写模式：
r：读数据w：覆盖写入a：追加写入rb：以二进制形式读出wb：以二进制形式写入ab：以二进制形式追加r、w、…
云原生不谈大湾区，YAML 工程师也枉然
据中国信通院发布的国内首个《中国云原生用户调研报告（2020年）》指出，2019年我国云原生产业市场规模已达350.2亿元。全球知名市场调研机构Gartner曾预测，到2022年全球将有75%的企业会选择云原生。这终将是属于云原生的时代。以容器…
42 pandas统计分析基础--描述分析DataFrame数据及转换与处理时间序列数据
数值型数据的描述性统计主要包括了计算数值型数据的完整情况、最小值、均值、中位数、最 大值、四分位数、极差、标准差、方差、协方差和变异系数等。pandas库基于NumPy，自然也可以用一些统计函数对DataFrame进行描述性统计。 pandas还提供了一个方法叫作describe&…
pandas数据分析（一）
一般而言,数据分析工作的目标非常明确,即从特定的角度对数据进行分析,提取有用
信息,分析的结果可作为后期决策的参考。
扩展库pandas是基于扩展库numpy和matplotlib的数据分析模块,是一个开源项目,提
供了大量标准数据模型,具有高效操作大型数据集所需要的功能,可以说pandas是…
39 pandas统计分析基础--DataFrame
创建：创建DataFrame的方法有很多，最常用的一种是直接传入一个由等长列表或Numpy数组组成的字典：
import pandas as pddata {state: [Ohio, Ohio, Ohio, Nevada, Nevada, Nevada],year: [2000, 2001, 2002, 2001, 2002, 2003],pop: [1.5, 1.…
python爬虫实践--晋江小说书籍分析
系列文章目录
python爬虫实践–晋江小说书籍分析 python爬虫实践-腾讯视频弹幕分析 python爬虫实践-B站弹幕分析 文章目录系列文章目录目录爬取晋江排行榜爬取文案其它想法结语## 前言 寒假在家看小说，看着看着想自己写，然后申了几次没过，打…
互联网创业公司，你需要做竞争对手分析吗？
很多人问我，竞争对手如何分析？我的回答就一个，“先想想你真的需要吗？” 对于互联网创业公司来讲，既然你都成立公司了，肯定是怀揣创意，提供了一种目前市场上没有的服务，即使它比…
报表分析工具有哪些？常见开源报表工具和商用报表工具介绍
常规报表工具一般都会提供报告分析功能。 Excel和BI Report都可以执行报告分析，但是Excel中分析的强度和维度可能相对简单，而BI Report的报告则更深入地分析了维度和复杂性。那么，我们目前常见的报表分析工具有哪些？小编来总结一…
读书笔记--数据治理之法
继续延续上一篇文章，对数据治理之法进行学习。数据治理之法是战术层面的方法，是一套涵盖8项举措的数据治理实施方法论，包括梳理现状与确定目标、能力成熟度评估、治理路线图规划、保障体系建设、技术体系建设、治理策略执行与监控、绩效考核与…
python数据分析：人口普查可视化，看看哪个地区人口最多
前言
大家早好、午好、晚好吖 ❤ ~欢迎光临本文章 今天案例难度指数: ☆☆☆
准备 环境使用：
在开始写我们的代码之前，我们要准备好运行代码的程序 Anaconda (python3.9) –> 识别我们写的代码
开发工具： jupyter notebook –> 代…
数据分析、大数据分析和人工智能之间的区别
数据分析、大数据分析和人工智能近年来十分热门，三者之间看起来有相似之处，也有不同之处。今天就来谈谈三者间的区别。
数据分析 数据分析是指对数据进行分析，从中提取有价值的信息，以支持企业或组织的决策制定。数据分析可以针对…
Twitter-Pandas，第一版
Thanks to some great help from contributors, we’ve just pushed the first release of twitter pandas, v0.0.1. 多亏了贡献者的大力帮助，我们才推出了Twitter熊猫v0.0.1的第一版。 The first release is aimed at replicating the data-providing (no create/…
【Python实战】数据预处理（数据清理、集成、变换、归纳）
【Python实战】数据预处理前言数据预处理概述数据清理异常数据处理1、异常数据分析2、异常数据处理方法缺失值处理噪声数据处理数据集成前言
因疫情原因，距上次写博客已过许久
这次回看以前的书籍，发现数据预处理这块在业务中极其重要
业务中…
Wilcoxon符合秩和检验
在非正态分布的数据中，我们不应该使用单样本t检验（尽管这个检验对于偏离正态性相当稳健），相反，我们必须使用均值的非参数检验方法。我们可以进行Wilcoxon符号秩和检验。注意和单样本t检验不同，该检验检查是…
数据分析面试指南，知道以下几点成功率提升50%
目前，数据分析行业大火，相信很多小伙伴都想去这一行业试试水。想要成功进入数据分析行业，就必须得通过数据分析面试，面试应该准备什么，怎么准备，各位小伙伴都知道吗?
简历
大家都知道面试一定要带简历&a…
数据科学工具_学习哪种工具可以改善数据科学职业
数据科学工具翻译自: https://www.pybloggers.com/2016/05/which-tool-to-learn-for-a-better-data-science-career/数据科学工具
Python字符串类型的使用
文章目录 Python中的字符串类型一、字符串的常用操作二、字符串的常用函数 Python中的字符串类型 注意：字符串为不可修改类型 python中没有单独的字符类型，字符就是长度为1的字符串。 通常创建字符串的方式：一般用单引号（’ &am…
图书馆书目推荐数据分析与可视化
目 录 摘 要 I ABSTRACT II 目 录 II 第1章 绪论 1 1.1背景及意义 1 1.2 国内外研究概况 1 1.3 研究的内容 1 第2章 相关技术 3 2.1 nodejs简介 4 2.2 express框架介绍 6 2.4 MySQL数据库 4 第3章 系统分析 5 3.1 需求分析 5 3.2 系统可行性分析 5 3.2.1技术可行性：…
Python中Pandas中pd.DataFrame().loc()方法的使用
Pandas中pd.DataFrame().loc()方法的使用
pd.DataFrame().loc[] 是pandas中用于基于标签选择数据的方法。这个方法接受一个单一的标签，或者一个标签列表、切片对象、布尔型数组等作为输入，并返回一个符合条件的新DataFrame。
下面是一个简单的例子&…
基于EEGLAB的脑电数据预处理
关于EEGLAB这个脑电处理工具包，对于大多是需要处理脑电数据的人来说都不会很陌生，这里放一个EEGLAB官网的链接；
https://sccn.ucsd.edu/eeglab/index.php
前言：EEGLAB的优势
具有便于操作的GUI界面，特别适合初学者学…
60_Pandas中是否包含判断缺失值NaN并统计个数
60_Pandas中是否包含判断缺失值NaN并统计个数
下面介绍如何判断pandas.DataFrame、Series是否包含缺失值NaN以及如何统计缺失值NaN的个数。
使用 isnull()、isna() 确定每个元素的缺失值判断每一行/列的所有元素是否缺失值判断每一行/列是否至少包含一个缺失值计算每行/列的缺…
西门子S7-1200内部存储区和掉电数据保持设置
S7-1200内部存储区分类
S7-1200的内部存储区分为工作存储区、装载存储区和保持性存储区三种。
装载存储区 是非易失性存储区。用于存储用户项目文件（用户程序、数据和组态）。 如果不使用存储卡，用户使用TIA PORTAL软件下载项目即下载到CPU内…
京东秋招数据分析对现有testfile文件内容求和
不定项选择题
例题：现有testfile文件内容如下所示 12 12 213 5434 3123 123 34 对所有数字求和，以下做法正确的是:
A. awk BEGIN{sum}{sum$1}END{print sum} testfile
B. awk BEGIN{sum 0}{sum$1}END{print sum} testfile
C. awk {sum$1}END{print s…
数据分析系列 之python中数据探索与预处理
1 概述 1.1 数据探索 检查数据错误，了解数据分布特征和内在规律 1.2 数据预处理 数据清洗 Data cleaning 数据集成 Data integration 数据变换 Data transformation 数据规约 Data reduction
2 数据清洗 2.1 缺失值处理 删除 填充：固定值、均值、中位数…
HANA:计算视图-图形化Aggregation组件-踩坑小记（注意事项）
今天遇到在做HANA视图开发的时候，遇到一个事，一直以为是个BUG，可把我气坏了，具体逻辑是这样的，是勇图形化处理的，ACDOCA innerjoin 一个时间维度表，就这么简单，完全按照ACDOCA的主键…
Python数据分析技术入门
Python数据分析技术入门 数据分析入门指南一、前言二、Python基础知识1. Python环境配置2. Python基础语法3. Python常用库的导入和安装 三、数据处理基础1. 数据类型及数据结构2. 数据读取与写入3. 数据清洗4. 数据预处理 四、数据分析基础1. 统计分析基础2. 可视化基础3. 数据…
Python版-LeetCode 学习：1518. 换酒问题
小区便利店正在促销，用 numExchange 个空酒瓶可以兑换一瓶新酒。你购入了 numBottles 瓶酒。 如果喝掉了酒瓶中的酒，那么酒瓶就会变成空的。 请你计算 最多 能喝到多少瓶酒。 来源：力扣（LeetCode） 链接：htt…
2017年五一杯数学建模C题宜居城市问题值解题全过程文档及程序
2017年五一杯数学建模
C题 宜居城市问题
原题再现 城市宜居性是当前城市科学研究领域的热点议题之一，也是政府和城市居民密切关注的焦点。建设宜居城市已成为现阶段我国城市发展的重要目标,对提升城市居民生活质量、完善城市功能和提高城市运行效率具有重要意义。…
Jupyter Notebook的下载安装与使用教程_Python数据分析与可视化
Jupyter Notebook的下载安装与使用 Jupyter简介下载与安装启动与创建NotebookJupyter基本操作 在计算机编程领域，有一个很强大的工具叫做Jupyter。它不仅是一个集成的开发环境，还是一个交互式文档平台。对于初学者来说，Jupyter提供了友好的界…
Python概率-电网-线性和非线性方程和数据分析工程应用(2023.1.4更新)
目录
Python(有限差分法和杜普特假设)数值解非承压畜水层和堰底和板桩下稳定渗流Python(普赖斯曼方法解偏微分方程和运动波方程-圣维南流动方程)求棱形流道表面流体Python电网静态和准静态分析及自动化优化Python蒙特卡洛算法光学数据模型非弹性散射模拟Python分析绘图蒙特卡洛…
Pandas 常用操作整理（持续更新）
Pandas 常用操作整理
1、数据定义
import pandas as pd
import numpy as np#定义dataframe
# 数据是元组，索引是list
df pd.DataFrame({no:[1,2,3,4,5],score:[66,85,88,95,75]},index[a,b,c,d,e])df.index.nameindex
print(df)#通过元组定义dataframe
dic {ke…
Seaborn.load_dataset()加载数据集失败最佳解决方法
load_dataset() 是 Seaborn 库中提供的一个函数，用于加载一些原始数据集。这些数据集包含了许多经典的数据集，比如鸢尾花数据集、小费数据集等，这些数据集在数据可视化和机器学习中非常常见。
使用 load_dataset() 函数可以方便地获取这些数…
财务数据分析用什么软件好？财务数据分析的几个重要数据是什么？
财务的数据分析也分很多种的，就拿最粗略的划分来说，也可以分为3大领域——
财务数据处理类工具财务数据挖掘类工具财务数据可视化工具
01 数据处理类
在财务数据处理这一块儿，不用说，当然是以excel为主力的数据处理类工具—— …
openEuler Linux 部署 FineReport
openEuler Linux 部署 FineReport
部署环境
环境版本openEuler Linux22.03MySQL8.0.33FineReport11.0
环境准备
升级系统内核和软件
yum -y updatereboot安装常用工具软件
yum -y install vim tar net-tools 安装MySQL8
将 MySQL Yum 存储库添加到系统的存储库列表中
s…
100篇原创文章，可乐de数据分析之路
↑ 点击上方 “可乐的数据分析之路” 关注 星标 ~ 大概率每天早8点25更新 哈喽，大家好，我是可乐今天整理了一下一年多来写的这100篇原创文章，内容涵盖Excel、SQL、Python、统计学、数据分析思维方法、读书笔记、笔试面试等内容，…
python学习——pandas统计分析基础
目录 pandas统计分析基础1. Series数据2.文件读取csv文件Excel文件 3.DataFrame连接数据库读取数据库存入数据库DataFrame的属性访问DataFrame中的数据【实例1】info详细信息和describe描述统计分析【实例2】 排序【实例3】 布尔索引，条件索引【案例】修改数据 3.描…
如何使用商品详情API接口获取商品数据：一篇详尽的论述
一、引言
商品详情API接口是一种用于获取商品详细信息的应用程序接口。通过调用该接口，我们可以获取商品的名称、价格、描述、图片以及其他相关属性。对于电商平台、价格比较网站、数据分析等应用场景来说，商品详情API接口提供了便捷的数据获取方式。本…
Python数据分析实战-判断一组序列（列表）的变化趋势（附源码和实现效果）
实现功能
判断一组序列（列表）的变化趋势
实现代码
from sklearn.linear_model import LinearRegression
import numpy as np
# 计算相邻两个数之间的差值的均值，并判断变化趋势。
def trend(lst):diff [lst[i1] - lst[i] for i in range(…
python高端实现各国GDP动态轮换图
python高端实现各国GDP动态轮换图 文章目录python高端实现各国GDP动态轮换图前言效果一、准备数据等文件二、完整代码1.准备showGDP.py2.准备PlotUtil.py总结效果展示前言效果
今天我们来试一下用python实现世界各国从1960-2018年的各国的GDP展示效果！也许大家会觉…
京东销量（销额）数据分析：2023年9月京东奶粉行业品牌销售排行榜
鲸参谋监测的京东平台9月份奶粉市场销售数据已出炉！ 根据鲸参谋平台的数据显示，今年9月份，京东平台奶粉（包括婴幼儿奶粉、孕妈奶粉、婴幼儿液态奶）市场的销量约730万，环比降低约6%，同比降低约19…
Python pandas 读取csv/txt数据文件 python读取csv/txt文件
导读 主要利用pandas.read_csv接口对csv格式文件或txt文件进行读取，由于CSV格式文件使用非常频繁，功能强大，参数众多，因此在这里专门做详细介绍 使用示例 # 基础用法
import pandas as pd
pd.read_csv(path)ts_code symbol name…
pandas读取Excel文档数据
演示视频
python读取Excel表格数据pandas读取表格read_excel函数使用_哔哩哔哩_bilibili
read_excel函数 实现功能
调用python多个Excel表格数据处理引擎，读入后返回pandas.Dataframe对象，是目前数据处理中比较主流的一种方式，需要先安装p…
电影票房之数据分析(Hive)--第5关
电影票房之数据分析（Hive）
第5关：统计2020年元旦节与国庆节放假后7天的观影人数
本关任务
基于EduCoder平台提供的初始数据集，统计 2020 年元旦节与国庆节放假后 7 天的观影人数。
编程要求
本实验环境已开启Hadoop服务
在 …
数据爬取分析的基本概念
数据爬取分析是一种通过网络爬虫技术获取网站数据并进行分析的方法。在当今信息化时代，数据分析已经成为了企业和个人获取商业价值和个人价值的重要手段之一。本文将介绍数据爬取分析的基本概念、技术原理、应用场景以及相关的法律法规。
一、数据爬取分析的基本概…
元宵大师的Python股票量化分析工具QTYX-版本更新说明
点击:QTYX最新版本使用指南[文字版]
点击:QTYX最新版本使用指南[视频版]
点击: QTYX历史版本更新说明
部分功能更新说明: 基于收益与波动的多股票组合分析——升级股票量化分析工具V2.1.1
有对比才有好坏！行情走势叠加分析！股票量化分析工具V2.1.2】…
数据挖掘-3.Pandas基础
文章目录Pandas基础学习目标1Pandas介绍学习目标1 Pandas介绍2 为什么使用Pandas3 小结2 Pandas数据结构学习目标1.Series1.1 Series的创建1.2 Series的属性2.DataFrame2.1 DataFrame的创建2.2 DataFrame的属性2.3 DatatFrame索引的设置2.3.1 修改行列索引值2.3.2 重设索引2.3.…
天猫数据分析：2023年速食品（方便面）市场数据分析
我国的方便面市场是一个比较活跃的市场，其市场规模也比较庞大。近年来，随着中国经济的发展，消费者对方便面的需求量和要求也在不断变化，因此，我国方便面市场的规模和消费者的需求环境也正在不断改变。 根据鲸参谋电商数…
SPSS读取数据文件（一）
1.读取Excel数据文件
（1）选择“文件”-“打开”-“数据”,在弹出的“打开数据”对话框下选择Excel文件，如图所示 （2）选择要打开的Excel文件，点击“打开”，如图所示 （3）可…
NFTScan：怎么使用 NFT API 开发一个 NFT 数据分析平台？
对很多开发者来说，在 NFT 数据海洋中需要对每个 NFT 进行索引和筛选是十分困难且繁琐的，NFT 数据获取仍是一大问题。而数据平台提供的 API 使得开发者可以通过接口获取区块链上 NFT 的详细信息，并对其进行分析、处理、统计和可视化。在本篇文…
pandas选择数据
import pandas as pd
import numpy as npdates pd.date_range(20130101, periods6)
df pd.DataFrame(np.random.randn(6, 4), indexdates, columns[A, B, C, D])
print(df)
# 获取列数据
print(df[A])
print(df.A)
# 选择跨越多行或多列:
print(df[0:3]) # 多行（…
Python+ChatGPT实战之进行游戏运营数据分析
文章目录一、数据二、目标三、解决方案1. DAU2. 用户等级分布3. 付费率4. 收入情况5. 付费用户的ARPU最近ChatGPT蛮火的，今天试着让ta写了一篇数据分析实战案例，大家来评价一下！一、数据
您的团队已经为您提供了一些游戏数据，包括…
分享Python7个爬虫小案例（附源码）
本次的7个python爬虫小案例涉及到了re正则、xpath、beautiful soup、selenium等知识点，非常适合刚入门python爬虫的小伙伴参考学习。注：若涉及到版权或隐私问题，请及时联系我删除即可。
1.使用正则表达式和文件操作爬取并保存“某吧”某帖子…
A.机器学习入门算法（四）: 基于支持向量机的分类预测
机器学习算法（四）: 基于支持向量机的分类预测
本项目链接：https://www.heywhale.com/home/column/64141d6b1c8c8b518ba97dcc
1.相关流程
支持向量机（Support Vector Machine，SVM）是一个非常优雅的算法&a…
python：遥感时间序列处理——Mann-Kendall（MK）突变检测（突变次数）
本文记录了使用python语言读取数据和逐像素求MK突变次数的方法和代码。
并以2001年到2022年的NDVI时间序列数据为例，展示了研究区内NDVI发生突变的次数。
众所周知，MK趋势分析中能够检测到的突变次数是多个（红圈代表MK突变检测中的突变点）。如下图所示： 突变次数如下图所…
QMS-云质-质量软件-How to Handle Customer Complaints in Manufacturing Industry
-云质QMS原创文章，转载请注明来源- Why Customer Complains? No matter how great your products, you can’t please everyone. Customer complaints are a normal part of any business.
Customer complaints are inevitable, no matter how streamlined your b…
Python Pandas4个好用的可视化数据分析EDA工具
拿到数据后，了解列数、行数、取值分布、缺失值、列之间的相关关系等等，这个过程叫做 EDA（Exploratory Data Analysis，探索性数据分析），用EDA工具可以方便地用来查看变量统计特征，快速总结数据特…
python数据分析-matplotlib散点图-条形图的绘制以及完整方法归纳02
matplotlib的基本使用02一.散点图的绘制二.散点图绘图步骤及案例解析1.导入模块2.设置散点图所有字符的字体样式3.编写主体代码4.主题代码解析5.图形展示三.条形图的绘制四.条形图案例展示1.导入模块五.绘制条形图完整代码六.条形图展示七.多个条形图展示1.结果展示八.总结一.散…
3分钟教你如何快速成为数据分析师
近些年，互联网公司对数据分析师岗位的需求越来越多，这不是偶然。
过去十多年，中国互联网行业靠着人口红利和流量红利野蛮生长；而随着流量**成本不断提高、运营效率的不断下降，这种粗放的经营模式已经不再可行。互联网…
R语言地理空间分析、可视化及模型预测
随着地理信息系统（GIS）和大尺度研究的发展，空间数据的管理、统计与制图变得越来越重要。R语言在数据分析、挖掘和可视化中发挥着重要的作用，其中在空间分析方面扮演着重要角色，与空间相关的包的数量也达到130多个。在本…
15种工商数据的采集方法
目录 15种工商数据的采集方法
1、目前常用的15种数据网站
2.如何写Python爬虫：
（1）爬虫的流程描述：
（2）爬虫需要解决问题：
（3）写爬虫需要安装的环境和工具ÿ…
数据利器：营销人员的智能助手，助力精准营销，实现业务增长
在如今竞争激烈的市场环境中，营销人员面临着巨大的挑战。为了制定有效的营销策略，他们需要获取大量关键信息，了解目标客户的需求和偏好。然而，这些信息通常分散在各个网站和平台上，让营销人员花费大量时间和精力去搜集…
通过API接口获取下来的数据需要怎样才能应用
获取到API接口下来的数据之后，为了能够在自己的项目或应用中进行应用开发，需要进行一些必要的数据处理和解析，主要包括以下几个方面：
数据格式解析：数据获取下来通常是以JSON或XML等格式进行返回的，需要对…
无需代码！新人可操作！分享20个可视化大屏(内附下载）
做前端开发的各位，大都知晓老板钟爱的可视化大屏—清晰、便捷、撑排面，轻轻松松打破数据孤岛等一系列问题。我真的深有体会，前些天，老板去人家公司开会，回来就把这大屏安排上了。之前就认为大屏也不过是面子工程&#…
Python基础合集 练习24 (程序调试)
assert expression[,arguments]
expression条件表达式语句,如果表达式的值为真,则程序会继续执行下去,如果值为假则程序抛出Assertionerror错误,并输出指定的参数内容
arguments可选参数
if not expression:
raise AssertionError(argument)
def num_ca(): book int(inpu…
猫头虎博主：Python数据分析，你掌握了吗？
🌷🍁 博主猫头虎 带您 Go to New World.✨🍁 🦄 博客首页——猫头虎的博客🎐 🐳《面试题大全专栏》 文章图文并茂🦕生动形象🦖简单易学！欢迎大家来踩踩~🌺 &a…
R语言ggplot2可视化：可视化条形图（bar plot）、添加主标题、副标题、题注信息（caption）、自定义轴标签文本的角度
R语言ggplot2可视化：可视化条形图（bar plot）、添加主标题、副标题、题注信息（caption）、自定义轴标签文本的角度 目录
数据分析可视化之模型介绍
一 前言
“数据分析可视化”这条术语实现了成熟的科学可视化领域与较年轻的信息可视化领域的统一。 数据分析可视化：是指将大型数据集中的数据以图形图像形式表示，并利用数据分析和开发工具发现其中未知信息的处理过程。 数据可视化已经提出了许多方法&…
数据分析与展示Pandas库复习
常用方法
官网： https://pandas.pydata.org/pandasdocs/stable/reference/api/pandas.DataFrame.to_excel.html
基础概念
引用：import pandas as pd Pandas基于NumPy实现，常与NumPy和Matplotlib一同使用
与numpy区别
Numpy关注数据结构表…
如何撰写数据分析报告？
Step1：目标确定
这一步在工作中通常是由你的客户/上级/其他部门同事/合作方提出来的
第一次的数据报告需要自己来提出并确定目标，选择目标时，需要注意的点：
选择一个比较熟悉，或者比较感兴趣的领域/行业
选择一个范…
太酷了，用Python实现一个动态条形图！
大家好，我是小F～说起动态条形图，小F之前推荐过两个Python库，比如「Bar Chart Race」、「Pandas_Alive」，都可以实现。今天就给大家再介绍一个新的Python库「pynimate」，一样可以制作动态条形图，…
我是如何转岗成为数据分析师？
Datawhale干货 作者：孟禹，数据分析师，Datawhale邀约作者笔者背景介绍：工作5年半，前4年在K12在线教育负责教研和用户转化，21年双减之后跳槽到一家新消费品牌公司做数据分析师，跨了行转了岗。现在…
电商数据查询平台：母婴行业妈妈用品全网热销，头部品牌格局初现
以往，奶粉、纸尿裤这类产品基本就代表了整体母婴市场中的消费品。而如今，随着母婴行业的高速发展和消费升级，母婴商品的种类日益丰富，需求也不断深入。 在京东平台，母婴大品类中除了包含婴童相关的食品（奶粉…
DataGear 4.5.0 发布，数据可视化分析平台
DataGear 4.5.0 发布，带来数据集计算属性新功能，具体更新内容如下：
新增：数据集属性新增计算表达式功能，可对原始数据进行二次计算处理；新增：HTTP接口数据集新增文本、XML请求体类型支持&#…
金融风控训练营task1学习笔记
学习目标：
TASK1: 赛题理解
by GXWgdut 学习时间：2021.4.21 学习产出及学习内容： 学习知识点概要 赛题概况： 主题：金融风控-贷款违约预测 目标：利用给定的数据集，建立模型，来预测…
【数据分析】2019北京积分落户数据分析
目录一、北京积分落户总体情况二、北京积分落户人员集中的单位1.积分落户人员集中TOP20单位2.积分落户人员集中TOP50单位三、北京积分落户人员分数分布四、北京积分落户人员年龄分布五、分析落户人数TOP1单位1.北京华为数字技术有限公司积分落户各分数分布2.北京华为数字技术有…
新书推荐之《Python数据分析实战》（手把手教你学Python系列视频配套教材）
书名：Python数据分析实战
ISBN：978-7-302-57235-0
作者：朱文强 钟元生 主编 高成珍 周璐喆 徐军 副主编
出版社：清华大学出版社
出版日期：2021年3月第1版
清华大学出版社官网链接
当当网、京东商城等均有售
本书…
数据可视化小笔记(持续更新)
数据分析小笔记SeriesDataFrameNumpyPandas利用pandas绘制折线图从Pandas对象绘制条形图matplotlib利用matplotlib绘制折线图从matplotlib创建条形图利用matplotlib绘制饼图自定义线条样式利用matplotlib绘制散点图利用matplotlib绘制箱型图Seaborn直方图线性回归关系散点图矩阵…
初学数据挖掘——数据探索（四）：数据特征分析之统计量分析
用统计指标对定量数据进行统计分析，常从集中趋势和离中趋势两个方面分析。
一、集中趋势度量
1、均值：所有数的平均数
2、中位数：将一组数据从小到大排序，位于中间的那个数 3、众数：数据集中出现最频繁的值
二、离…
初学数据挖掘——数据探索（一）：数据质量分析：缺失值分析、异常值分析（简单统计量、箱型图、）、一致性分析
数据质量分析是数据挖掘中数据准备过程很重要的一个阶段，是数据预处理的前提。
数据质量分析的主要任务是检查原数据中是否存在脏数据。
脏数据： 一般是指不符合要求的以及不能直接进行相应分析的数据。常见的脏数据：缺失值、异常值、不一致…
如何应对近期企业离职旺季？一场数据分析给你答案!
最近的你，有没有感受到公司人员流动较大，往昔朝夕辉映、共同谋事的许多同事却逐渐悄无声息地离开了公司呢？
金三银四季，让各家企业不得不直面人员流失的问题，往日投入大量的人力和物力培养出来的员工最终流失。
以员…
使用采集工具，轻松获取目标受众的数据，让您的市场营销更加精准
【数据采集神器】使用采集工具，轻松获取目标受众的数据，让您的市场营销更加精准！
在当前这个信息化社会中，数据已经成为了企业发展和市场营销的必要手段。企业需要通过数据来了解市场的需求，了解自己产品的竞争优势&a…
Python 3中的Itertools，例如
It has been called a “gem” and “pretty much the coolest thing ever,” and if you have not heard of it, then you are missing out on one of the greatest corners of the Python 3 standard library: itertools. 它被称为“宝石”和“几乎是迄今为止最酷的东西” &a…
pandas绘图显示值标签_使用Pandas向绘图添加轴标签
pandas绘图显示值标签Pandas plotting methods provide an easy way to plot pandas objects. Often though, you’d like to add axis labels, which involves understanding the intricacies of Matplotlib syntax. Thankfully, there’s a way to do this entirely using pa…
数据分析系列 之pandas用例分析2
1 前言 本专题参考学习视频和网上其他大神的资料，推出pandas用例分析2，需要分析的主题是男女生电影评分差异分析。
2 原理 2.1 python pandas 中 loc & iloc 用法区别 loc：基于行标签和列标签（x_label、y_label）进…
数据分析系列 之python中数据统计与分析
1 概述 数据探索：检查数据错误，了解数据特征和分布规律 数据特征分析：分布分析、统计量分析、相关分析
2 分布分析 2.1 定量分析：数量分布 可利用直方图
from sklearn import datasets
import pandas as pd
import matplotlib.p…
数据分析系列 之python中集合内容介绍
1 概述： 集合：一个无序不重复的组合，包括可变集合（set）和不可变集合（frozenset）； 集合中包含常见的集合运算，可以使用运算符，也可以使用函数的形式。
2 举例…
使用Python和BeautifulSoup进行网页爬取
To source data for data science projects, you’ll often rely on SQL and NoSQL databases, APIs, or ready-made CSV data sets. 为了为数据科学项目提供数据，您通常将依赖于SQL和NoSQL数据库， API或现成的CSV数据集。 The problem is that you can…
数据分析系列 之python中遍历列表的几种方法
1 引入： 接触过C、java和python，目前经常使用的是java，C和python也忘的差不多啦哈哈…但是呢python现在经常使用，写脚本做数据处理等如果现查资料，感觉也挺不方便的。干脆就几个常用的用途复习一下吧…
2 正式开始&am…
ChatGPT 和爬虫有什么区别?
ChatGPT是一种基于人工智能的对话模型，它通过训练大量的文本数据来生成自然语言回复。它可以用于实现智能对话系统，能够理解用户的输入并生成相应的回复。ChatGPT的目标是模拟人类对话，使得对话更加流畅和自然。
而爬虫是一种用于自动化地从…
数据驱动的数字化转型：从流程驱动到数据驱动
【提醒：公众号推送规则变了，如果您想及时收到推送，麻烦右下角点个在看，或者把本号置顶】数字化时代已经到来1996年的时候《Being Digital》的作者Negroponte就提出数字化生活的概念，而20年以后的今天，我们已…
有赞BI平台实现原理
【提醒：公众号推送规则变了，如果您想及时收到推送，麻烦右下角点个在看，或者把本号置顶】正文开始一、概述1.1 背景有赞是一家SaaS公司，更是一家大数据公司。如何从海量数据中高效地挖掘数据的价值，并对…
干货分享 | 如何在业余时间学习数据分析？
从社会学背景的数分小白到独揽公司市场部的数据分析，和大家简单分享我的数据分析升级打怪之路。
简单说就是两点【培养数据分析思维】【提升数据分析技能】 思维的培养主要靠书籍和课程 以下是一些对我影响较大的书籍，按照【入门、进阶、高阶】简单做了…
世纪互联Teams部署方案
目录
一、前言
二、基础架构
三、部署步骤
四、部署前提
五、总结 一、前言
在现代数码化的办公环境中，团队协作软件已经变得不可或缺。而微软的Teams作为一款强大而又全面的协作工具，越来越受到企业的
【ElasticSearch】HTTP调用API
文章目录 数据格式HTTP操作索引操作映射操作文档操作(添加数据)高级查询定义数据查询所有文档匹配查询多字段匹配查询关键字精确查询多关键字精确查询指定查询字段过滤字段组合查询范围查询模糊查询*单字段排序多字段排序高亮查询分页查询聚合查询对某个字段取最大值 max对某个…
关于统计学假设检验___自由度
自由度
**自由度（DOF）**的概念在力学领域中似乎是非常清楚的，但是在统计应用中却很难掌握
在我们学过的力学中，在一个平面上运动的粒子有“2个自由度”：在每一个时间点，两个参数（x,y坐标&…
2023年5月深圳数据分析师需要哪些证书？当然CPDA
CPDA数据分析师认证是大数据方面的认证，助力数据分析人员打下扎实的数据分析基础知识功底，为入门数据分析保驾护航。 帮助数据分析人员掌握系统化的数据分析思维和方法论，提升工作效率和决策能力，遇到问题能够举一反三，…
全球范围内的数字化时代，挑战和价值有哪些？
近年来，数字经济的发展趋势越来越明显，尤其是随着疫情的影响，加速了传统产业向数字化、网络化和智能化产业的转型和升级。全球数字经济规模不断扩大，体量连年增长，根据中国信息通信研究院报告显示，2019年全…
对于无效的数据，该如何处理
一、无效数据的来源：
在进行数据管理时，无效数据是非常常见的问题。
无效数据可能来自于数据采集、输入错误、数据处理或存储错误等方面。
这些无效数据会对结果造成严重的影响，因此需要及时发现和处理。
二、处理无效数据：
…
眼动数据分析基础_02
1.眼动指标的具体使用以及解释（Metrics & Interpretation）
在我们论文的研究中，需要使用下面一些关于眼睛数据的指标
扫视（Saccade）次数：反映了眼球在需要目标总的搜查时间的长短扫视（Sac…
利用大数据分析，提升app广告变现的方法
在当今信息化时代，越来越多的APP开始将大数据技术应用于广告变现。通过利用大数据分析用户数据和行为，我们可以更好地了解用户的需求和兴趣，从而实现广告投放的精准化和高效性。
本文将从大数据驱动下APP广告变现的角度出发，深…
00后职场人，怎么做到刚来就涨薪5k? 原因竟是学会了这个宝藏工具
经常有粉丝问我有“有哪些适合绝大多数普通职场人的制作大屏的工具？”
确实，在这个内卷的时代，大家想要的是更加炫酷的汇报效果。要满足大多数职场人的大屏工具首先一定要满足以下三点：
（1）简单易上手&am…
京东国际销售数据查询（京东国际行业/品牌数据分析）
根据京东平台官方数据显示，今年京东国际的贡献力度也高于以往。 京东618开门红5分钟，京东国际成交额已突破去年开门红前两小时的成交额，跨境酒水、跨境手机通讯、跨境箱包皮具等3个品类成交额同比增长超100%。，开门5分钟ÿ…
大学室友用python，一个月挣了我一学期的生活费，是什么感觉？
人在学校，身不由己。
刚入大学的日子，除了兴奋就是兴奋。
高中时老师讲的“现在高考吃点苦到了大学就轻松了”试问在座小伙伴，还有谁没听过这一老师的经典名言！没听过的你现在知道了。
谁知道呢，真实的大学是回复不…
学点Python吧，别再这么累了
“我真的好累，真的好想辞职啊，可是……”
转眼间，疫情都快一周岁了。看似一切都在好转，可实际上好多朋友都留言道，被刚刚恢复运转没多久的公司压榨地喘不过气来，每天都忙着同样的事情，却没有任…
财务人员7天入门转行学数据分析、学Python靠谱吗？
在网上刷到过很多这样的视频，一个老员工天天做数据分析加班累成狗，还被老板嫌弃叫到办公室里面一顿骂。然后老员工闷闷不乐出来，看到一位新人小姐姐在笔记本上啪啪啪敲了几下回车搞定，下班了。老员工就问你怎么这么快就搞完了呢&a…
如何从数据分析，实现真正的数据驱动？终于有人讲清楚了
导言
在当今数字化时代，数据已经成为企业发展和决策的重要资源。然而，仅仅拥有大量的数据并不足以推动企业取得成功。真正实现数据驱动需要更多的步骤和关注点。本文将深入探讨数据分析的核心要素，帮助读者理解如何从数据分析中实现真正的数…
Python数据分析课程笔记·嵩天
Python数据分析课程笔记MatplotlibNumpyPandasMatplotlib
import matplotlib.pyplot as plt
plt.savefig(‘test’, dpi500) 存储图片默认为PNG格式 plt.plot([1,2,3]) plt.plot([1,2,3],[3,5,7]) plt.ylable(“Grade”) plt.axis([-1,10,0,6])横纵坐标尺度 plt.show()展示图…
FREQ 显示频率分布
PROC FREQ DATASASHELP.CLASS;/* 对sex进行频数统计 */TABLES Sex //* 包含缺失值 */MISSING/* 不输出:累积频数 */NOCUM;/* 以sex和age的维度进行频数统计 */TABLES Sex*Age //* 不输出百分比 */NOPERCENT/* 不输出:列百分比 (行百分比 NOROW 频数 NOFREQ) */NOCOL;/* 单变量分…
中科院计算所包云岗：从多场硕博答辩中，我看到了国内人才培养
通知：“2020未来杯大赛”赛事时间安排已在官网更新，请各位选手及时查看！ 国内的计算机科学领域，是否可以称得上引领方向了呢？近年来，我们在很多计算机科学，特别是人工智能顶会看到越来越多的华人…
数据分析路线总结——工具（1）
（1）概率论和统计基础
关于基础是每个新手小白的必修课，高中和大学（理工科）应该大部分都有学过，如果以前没有学过的可以花时间系统的学习一下（看个人时间安排，时间太紧的话可以针对性…
OpenTSDB HTTP API 概述
文章目录HTTP APIOverviewVersion 1.X to 2.xSerializersAuthentication/PermissionsResponse CodesErrorsExample Error ResultVerbsAPI VersioningQuery String Vs. Body ContentCompressed RequestsCORSDocumentationDeprecated APIAPI EndpointsHTTP API 原文地址 …
适合上班族的量化炒股场景——来自量化机器人的实时行情盯盘服务
前言不少上班族的股友在和我交流时提到，因为平时上班的原因总是错过最佳的买卖点，十分无奈！其实量化交易可以完美解决这个问题。于是我们提供了一个适合上班族盯盘的应用场景：让远程的量化机器人帮助我们盯盘，当实盘行…
数据标准化-Normalization
数据处理之 数据归一化 数据标准化（归一化）-Normalization
来自百度百科的解释： 数据标准化处理主要包括数据同趋化处理和无量纲化处理两个方面。数据同趋化处理主要解决不同性质数据问题，对不同性质指标直接加总不能正确反映不同…
词频统计（字符串，列表）
统计字符串中每个字母出现的次数 1.利用Counter函数
from collections import Counter
c Counter("loonbalxballpoon")
print(c)建立空字典，遍历
str1"loonbalxballpoon"
gg{}
for i in str1:gg[i]0
for i in str1:gg[i]1
print(gg)结果&…
大数据分析BI工具有哪些？BI工具推荐
随着大数据的迅速发展，时下许多企业面临着最重要的现实问题是如何对大数据进行分析。只有通过大数据分析才能获取到更智能的，深入的，有价值的信息。越来越多的应用涉及到大数据，这些大数据的属性，包括其数量、速度、多…
商业智能BI和数据分析的区别与联系
要想弄清楚商业智能BI与数据分析的区别和联系，我们首先来看下什么是商业智能BI，什么是数据分析。
什么是商业智能BI
商业智能BI是一套完整的解决方案，用来将企业中现有的数据进行有效的整合，快速准确地提供报表并提出决策依据&a…
python处理实验数据（物理实验）
处理这些实验数据，并画图表示关系
from matplotlib import pyplot
import numpy
import math
emath.e # loge那个e
# x[-6.0,-4.0,-2.0,0.26,1.17,2.84,3.18,3.32,3.56,3.71,3.82,3.93,4.02,4.11,4.19]
# y[-3.5,-1.4,-0.7,0.22,1.02,4.0,7.0,10,20,30,40,50,6…
SPSS-描述统计与图示分析
1. 描述统计
1.1 连续性变量
统计指标需要反映的是数据以下几方面的特征：
SPSS描述统计中有多项可以展示最大值、最小值等，这里重点介绍频率：
点击统计之后出现：
（后验分布可以认为是分布特征指标）…
pandas合并concat
import pandas as pd
import numpy as np# 定义资源集合
df1 pd.DataFrame(np.ones((3, 4)) * 0, columns[a, b, c, d])
df2 pd.DataFrame(np.ones((3, 4)) * 1, columns[a, b, c, d])
df3 pd.DataFrame(np.ones((3, 4)) * 2, columns[a, b, c, d])
# pandas处理多组数据的时…
什么是大数据？它存在的意义和用途是什么？
大数据这个词现在我们经常会听到，但是具体大数据是什么？为什么要有大数据？以及大数据它用途是什么？估计大部分人都不是很清楚。想了解大数据，那就得先从它的起源开始说起。
大数据概述（大数据是什么意思&a…
Python数据分析：K-Means算法
Python数据分析：K-Means算法 k-means属于无监督学习算法 数据挖掘十大经典算法之一 算法接收参数k，然后将样本点划分为k个类别，同一类别的样本相似度较高，不同类别的样本相似度较小 算法思想： 随机选取空间中k个样本…
Kibana分组聚合数据之Data Table篇
1 操作步骤 1.1 登录Kibana http://xxx.xxx.com/app/kibana
1.2 选择Visualize
1.3 create new visualization
1.4 选择Data Table
1.5 选择索引
1.6 配置搜索时间&日志级别&应用
1.7 配置分组&排序 1.7.1 示例图片
右侧即需要的数据。
1.7.2 metri…
numpy修改数组维度和连接数组
numpy修改数组维度和连接数组
函数描述broadcast产生模仿广播的对象broadcast_to将数组广播到新形状expand_dims扩展数组的形状squeeze从数组的形状中删除一维条目
numpy.broadcast 用于模仿广播的对象，返回一个对象，该对象封装了将一个数组广播到另一个…
数据分析的5层解读，报表仍是有效的落地实践！
浙江天正电气股份有限公司（下文简称浙江天正），是中国工业电器行业规模最大的企业之一，是中国低压电器行业的领军企业。旗下有四处电气工业园：温州、嘉兴、上海、南京，低压电器行业业务以配电与工业控制为主…
利用Excel学习Python：变量
写在前面为什么要学Python基础知识？为什么不能一上来就导入数据、分析数据？对于目的性明确的人来说，完全可以一上手就从导入数据开始学起，并不妨碍分析数据，但这不利于交流以及后续的学习。所以系统地学习是很有必要的…
库/表/记录的增查删改
接下来，将以对比Excel里的一些操作的方法来学习SQL，本小节主要介绍对数据库和表的创建、查询、删除和修改的操作。一、数据库的创建、查看和删除01 数据库的创建上一节内容也提到过，我们可以把一个Excel工作簿理解为一个数据库，工…
电商数据分析与数据化运营
目录
一.业务必知
1.服装电商的发展历史及特征 2.部门组织架构与工作职能
2.1组织架构
2.2工作职能
3.电商的零售特征 3.1电商的本质是零售 3.2一个公式，三个指标
4.电商渠道属性
4.1天猫
4.2京东
4.3唯品会
5.渠道的活动运营节奏
5.1认识服装行业的周期…
有了报表FineReport，为什么还要上FineBI？
故事前言
前些日子和一位企业信息部门负责人交流，他们用报表工具有5、6个年头了，先后做了财务报表，营收分析、月营收报表，细分到200多家门店以及2000多名员工的财务数据汇总，为财务开发了多维度的查询创建窗口&#x…
实效性与准确性的背后：多系统数据聚合展示
背景大家在平时的业务开发中，会不会遇到这么一种问题：一个新的需求展示的某种业务数据，数据来源横跨多个不相关的业务系统，时间跨度长且需要及时反映实时的数据变化，数据查询的QPS较高且要求rt较小。遇到这类问题应该怎…
Bamboo基础概念
1、project1)提供报告、展板、连接|——2、plan1)指定默认代码仓库(同一个仓库)2)构建触发条件的配置3)构建结果的发送与通知4)可配置该plan的权限管理|——3、stage1)并行的处理job(用多个agent)2)只有所有的job成功，才会进入下一个stage3)可能会产生artifact&…
比照顾爹妈还周全：智能狗圈让你进一步变狗奴
富士通正在研究一款智能狗圈和云端监控系统，它可以让你更加了解宠物的健康状况。这个轻巧的狗圈的电池续航能力是24小时，它可帮助用户监视自己的小狗一天走了多少步，抖动多少次，周围的温度是什么样。用户可以通过NFC技术把狗圈记录…
数据分析系列 之python中字典内容补充
1 生成字典的两种方式： 问题：已知pList[(‘ABC’,‘DEF’,‘123’),(‘HIJ’,‘KWL’,‘456’)]，将元素的第一个和第三个位置内容构成字典的map对。
#方法1：
pList[(ABC,DEF,123),(HIJ,KWL,456)]
aList []
bList []
for i in r…
办公软件系列 之excel应用3
这个小专题讲解一下Excel中averageif函数的使用方法：
1 背景问题： 在excel中可能会遇到这样的问题，如下面的数据：
IDsSubIDsNumsAA110AA215BB112CC110CC220CC330
需要按照第一列中的大类ID求平均数，对于A中平均数为1…
数据分析系列 之pandas用例分析1
1 pandas介绍： pandas是基于NumPy的一种工具，它是python的一个数据分析包，最初由AQR Capital Management于2008年4月开发，并于2009年底开源出来，目前由专注于Python数据包开发的PyData开发team继续开发和维护ÿ…
【PythonRS】基于GDAL的遥感影像压缩
最近在处理一些高空间分辨率的卫星数据，数据量非常大。一个图幅都几十个G，ENVI表示压力太大了根本跑不动。所以研究了一下影像压缩的方式，在ArcGIS导出的压缩方式有很多限制，而且压缩并不是很明显。 所以我尝试使用GDAL库对影像进…
直接用照片重建，生成文化遗迹数字模型#Siggraph2022 顶会项目推荐
Mixlab社群探索了数字人的自动生成模型、3D重建项目。除了数字人之外，也有不少其他类别的空间模型重建项目，知识库 有通过图片生成建筑类的3D重建项目推荐不？知识库社群数字人 DAO 小组推荐了 Siggraph2022 会议发表的一篇结合隐函数与神经渲…
excel生成动态进度条
背景:想用excel展示实时进度信息 但是用的图标需要开通某壳会员才可以使用
于是就想自己看看能不能做出来一个~
接下来是用到的公式
REPT("▓",(COUNTIF(D2:D21,""))/A21*20)&" "&ROUND((COUNTIF(D2:D21,""))/A21*100,2)&a…
虚构建筑·未来城~GANism艺术家会被人工智能取代吗？
by design-ai-labNiall Patrick Walsh在3D、HD、4K和 CGI 的世界里，电影、电视和游戏行业的建筑表现正变得越来越真实、越来越耀眼……Angie’s List 制作了一系列插画{虚构的建筑}部分节选opus这建筑我喜欢！Alpha101听说AI可以生成类似的？超…
python数据分析与挖掘基础理论篇
一.概述
1.数据挖掘：
就是从数据中”淘金“，从大量数据（包含文本）中挖掘出隐含的、未知的、对决策有潜在价值的关系、模式和趋势，并用这些知识和规则建立用于决策支持的模型，提供预测性支持决策的方法、工…
元宇宙·设计科学·趋势
by 田心知识库罗永浩透露下一个创业项目：元宇宙公司此前，老罗在微博表示，明年春天将重返科技行业，还完债就会回归。最近，老罗在微博表示：我们的下一个创业项目是一家所谓的"元宇宙公司"。大量创业…
每日一篇机器学习公众号D2-Bamboolib 做数据分析
一、复习 1、昨天看了基础的ANN、RNN、LSTM 2、有一张阐述深度学习和机器学习随着数据量变化，学习效果不同的图可以用 3、神经元配图很好 4、LSTM有三个门，之后需要的时候仔细看看。可以解决长期记忆和梯度消失的问题。 二、How neural networks work–视…
41 pandas统计分析基础--DataFrame的常用操作
DataFrame是最常用的pandas对象，类似表格。完成数据读取后，数据就以DataFrame数据结构存储在内存中。 但此时并不能直接开始统计分析工作，需要使用DataFrame的属性和方法堆数据的大小、分布等基本数据状况有一个了解。 只有对数据基本状况有了…
hive查询语句中的常见错误
1、case when --else end 语句中忘记写end，或者忘记把整个字句用as起别名，因为一个字段如果用case when条件语句计算后就是已经生成新的字段了，不能再用以前的字段名称。例如：
原来的字段是age，他的值是连续的int&…
老生常谈！Python还有发展前景吗？现在该怎么去学习？
从2008年开始Python就突然火了起来，腾讯最近组织了一个大型Python技术交流峰会，由此可见Python现在已经到了我们不能想象的境界，一切的步伐都要跟着大公司走，腾讯这样级别的公司都这样重视Python技术，可见Python的发展…
土木转行程序员一个月的感想
此刻正坐在重庆观音桥步行街的椅子上等女朋友，想着没事干，正好说下这一个月转行成为程序员后的一些经历，希望对有转行想法的朋友，看到这篇文章会有所帮助，特别是和我当初一样不慎掉进巨坑的广大土木学子们。 首先简单介…
分享我的python学习经验，月薪4K到1万的艰辛之路
今天有感而发，忽然想起，给大家分享了这么多有趣有用的文章都还没有介绍过自己，今天有粉丝问我是从什么时候开始自学Python的，原因是什么，这一路是怎么走过来的，那我就给你们说说我的心路历程。 我是一个普通…
只有努力，方能成功！学习Python如何做到月薪3w，看完必通系列
学python编程开始前，本人纯小白，1年半行政打杂经验，和编程不搭边，偶然的机会接触到python，于是开始利用空闲时间学起了python。自学过2年python，有一些学习心得和避坑经验和大家分享，希望对已经…
python入门，手把手教你写爬虫，一文了解简单的数据抓取
最近经常有人问我，明明看着教程写个爬虫很简单，但是自己上手的时候就麻爪了。。。那么今天就给刚开始学习爬虫的同学，分享一下怎么一步一步写爬虫，直至抓到数据的过程。 准备工具
首先是工具的准备：python3.6、pychar…
数据分析师需要知道的数据可视化工具
科多大数据为大家介绍数据分析师需要知道的数据可视化工具。
所谓数据可视化是对大型数据库或数据仓库中的数据的可视化，它是可视化技术在非空间数据领域的应用，使人们不再局限于通过关系数据表来观察和分析数据信息，还能以更直观的方式看到…
数据分析工具该怎么选？可以从这四个方面考虑
一年又过半了，不知各位小伙伴的年中总结有没有准备好？例如老板要求的财务报表，发票报告，销售业绩等报告。数据量太大，报告类别太多，使得加班成为常态。面对海量数据，无法解决。实际上࿰…
BI是什么意思？在企业应用中有哪些好处？
百度百科中的BI是指业务智能或智能业务（Business Intelligence的缩写），其用途是指使用现代数据仓库技术，在线分析处理技术，数据挖掘和数据展示技术进行数据分析以实现业务价值。老实说，解释很专业ÿ…
SPSS是什么？SPSS软件的功能有哪些？
SPSS是SPSS总部于1984年推出的统计分析软件。其意义是开拓SPSS微型计算机系列产品的发展方向，极大地扩展其应用范围，并使其能够迅速应用于自然科学，技术科学和社会科学等领域。随着SPSS产品服务领域的扩大和服务深度的增加，英文名…
数据会说谎的真实例子有哪些
哈喽大家好，我是可乐
周日参加了知乎的一个线下活动——快闪课堂 主题：数据会说谎吗？ 主讲人：程毅南 为了避免遗忘，所以将内容整理并附带我自己的理解，和大家分享。
主要分享了如何收集到真实的用户数据…
关于学习时间的一点小感悟
hello大家好，我可乐又回来了！刚肝完一篇文章，今年要做一个不拖稿的可乐！首先非常感谢给我安慰鼓励和支持的你们，上一篇有点丧的文章发出后收到了很多小伙伴的爱心慰问，突然发现这两年的公众号没白写~~~其次…
基于DNS数据分析的恶意域名检测
本文主要参考的是Zhauniarovich Y, et al[1]的工作，发表在Acm Computer Surveys上的一篇较为系统地阐述了基于DNS数据分析来进行恶意域名检测的研究背景，研究过程和研究建议等内容的综述。目录1 研究背景1.1 DNS的背景知识1.1.1 DNS是什么1.1.2 域名的结…
Python Pandas 处理Excel数据 制图
目录
1、饼状图
2、条形统计图 1、饼状图
import pandas as pd
import matplotlib.pyplot as plt
import numpy as np
#from matplotlib.ticker import MaxNLocator
# 解决中文乱码
plt.rcParams[font.sans-serif][SimHei]
plt.rcParams[font.sans-serif]Microsoft YaHei …
python打印变量类型_Python | 声明不同类型的变量，打印其值，类型和ID
python打印变量类型Declare different types of variables; print their types, ids and variables in Python. 声明不同类型的变量； 在Python中打印其类型，id和变量。 There are two inbuilt functions are using in the program: 程序中使用了两个内置…
机器学习之有监督学习实例_01 —— 鸢尾花数据集的分类
Iris 数据集简介 ：
Iris Data Set（鸢尾属植物数据集）首次出现在著名的英国统计学家和生物学家Ronald Fisher 1936年的论文《The use of multiple measurements in taxonomic problems》中，被用来介绍线性判别式分析。该数据集种包…
手机银行体验性测试：如何获取用户真实感受
线上化、移动化的银行金融服务方兴未艾、持续深化，一个显著的标志就是手机银行成为银行领域金融科技发力的重点。整体页面文字的易读性、页面跳转的合理性、操作的便利性、功能响应的敏捷性、页面色彩和排版的美观性等，都是使用过程中用户视角下手机银行…
Origin: 散点图+拟合置信区间
本期目标：
1，打开软件后，可通过点击F11快捷键，调出学习中心（图1），打开绘图示例，找到适合的类型图后，双击即可打开该图形的简介，源数据及对应图形。本次数据…
机器学习-机器学习概论
1.【单选题】以下有关机器学习理解不正确的是 ( )。
A、查询大量的操作数据去发现新的信息
B、从大量的业务数据中分析有兴趣的新颖知识辅助决策的过程
C、机器学习的结果不一定能辅助决策
D、需要借助统计学或机器学习的一些算法
解：A
机器学习并不是查询大量…
学习Python可以做哪些副业，你是不是感觉自己错过了一个亿？
近年来，Python凭借其简洁易入门的特点受到越来越多人群的青睐。
当然这不仅仅是针对程序员来说，对于一些学生、职场人士也是如此。
Python为什么会大受欢迎呢？因为Python还被大家称为“胶水语言”，它适用于网站、桌面应用开发、…
pandas由入门到精通-数据清洗-分类数据
pandas-02-数据清洗&预处理 E. 分类数据1. 适用情况2. Categorical 扩展数据类型2.1 通过astype将一个Series转化为Categorical类2.2 通过pd.Categorical 生成Categorical类2.3 通过pd.Categorical.from_codes 将标签列表和整数列表转化为Categorical类2.4 Categorical类的…
Python爬虫怎么挣钱？6个Python爬虫赚钱方式，搞搞副业不是问题
1.最典型的就是找爬虫外包活儿
网络爬虫最通常的的挣钱方式通过外包网站，做中小规模的爬虫项目，向甲方提供数据抓取，数据结构化，数据清洗等服务。新入行的程序员大多都会先尝试这个方向，直接靠技术手段挣钱࿰…
Excel+Python，简直法力无边
我们来介绍如何使用xlwings将Python和Excel两大数据工具进行集成，更便捷地处理日常工作。 说起Excel，那绝对是数据处理领域王者般的存在，尽管已经诞生三十多年了，现在全球仍有7.5亿忠实用户，而作为网红语言的Python&am…
超全Python 量化金融库汇总，必看
本文汇总了定量金融的大量三方库，按功能进行分类，覆盖数值运算，衍生品定价，回溯检验，风险管理，数据爬取，可视化等多个子领域，供每个Python程序员参考。
不要重复造轮子，…
电商数据分析方法和指标整理
对于电商行业来说，数据分析的核心公式是：销售额 流量*转化率*客单价。因此，分析可以从流量、转化率和客单价这三个维度进行：
1、流量
流量分析，可以从中发现用户访问网站的规律，并根据这些规律改进网站设…
数据在金融行业的应用有哪些
在当今的数字化时代，数据已经成为金融行业不可或缺的一部分。从风险管理、投资决策、客户关系管理到监管合规，数据在金融领域的各个方面都发挥着重要作用。
那么，大数据在金融行业有哪些应用呢？
一、数据在金融行业中的应用 1…
抖音预约服务小程序开发：前端与后端技术的完美融合
开发抖音预约服务小程序成为了一种有趣而又实用的尝试。本篇文章，小编会与大家共同探讨抖音预约服务小程序开发的前端与后端技术融合的关键要点。
一、前端技术选择与设计
1.小程序框架
开发抖音预约服务小程序的前端，首先需要选择一个适用的小程序框…
Python数据分析（3）：pandas
文章目录二. pandas入门2.1 数据结构2.1.1 Series对象2.1.2 DataFrame对象2.2 读取数据2.2.1 读取Excel：read_excel()1. 读取特定工作簿：sheet_name2. 指定列标签：header3. 指定行标签：index_col4. 读取指定列：usecols…
数据导入与预处理-拓展-pandas可视化
数据导入与预处理-拓展-pandas可视化1. 折线图1.1 导入数据1.2 绘制单列折线图1.3 绘制多列折线图1.4 绘制折线图-双y轴2. 条形图2.1 单行垂直/水平条形图2.2 多行条形图3. 直方图3.1 生成数据3.2 透明度/刻度/堆叠直方图3.3 拆分子图4. 散点图4.1生成数据4.2 绘制大小不一的散…
数据分析 | Pandas 200道练习题，每日10道题，学完必成大神（6）
文章目录前期准备1. 使用绝对路径读取本地Excel数据2. 查看数据前三行3. 查看每一列数据缺失值情况4. 提取日期列含有空值的行5. 输出每列缺失值具体行的情况6. 删除所有缺失值的行7. 绘制收盘价的折线图8. 同时绘制开盘价与收盘价9. 绘制涨跌的直方图10. 让直方图给更细致本章…
基于LDA主题分析的《老友记》情景喜剧数据集的建模分析（文末送书）
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
【nlp】1.3 文本数据分析（标签数量分布、句子长度分布、词频统计与关键词词云）
文本数据分析 1 文本数据分析介绍2 数据集说明3 获取标签数量分布4 获取句子长度分布5 获取正负样本长度散点分布6 获取不同词汇总数统计7 获取训练集高频形容词词云8 获取验证集形容词词云1 文本数据分析介绍
文本数据分析的作用:
文本数据分析能够有效帮助我们理解数据语料…
python数据分析与展示--Pandas库入门
一.Pandas库的引用 Pandas是python第三方库，通过了高性能易用的数据类型和分析工具;Pandas库包含了Series，DataFrame两个数据类型，基于这两个数据类型可以实现基本，运算，特征类，关联类操作 导入：…
NineData慢查询分析：数据库性能优化的专家
在日常的数据库运维中，慢查询是一个常见的问题，它可能由复杂的查询语句、不充分的索引设计、大量数据的处理、硬件资源不足等多种因素引起。这些慢查询会消耗大量的数据库服务器资源，甚至可能导致数据库死机，无法响应业务请求。因…
数据科学家赚多少？数据全分析与可视化 ⛵
💡 作者：韩信子ShowMeAI 📘 数据分析实战系列：https://www.showmeai.tech/tutorials/40 📘 AI 岗位&攻略系列：https://www.showmeai.tech/tutorials/47 📘 本文地址：https://www…
聊聊电商API对接，项目启动前该调研点啥？
笔者曾经从0到1独立负责过一个与国内一线OTA平台之间的API对接，踩过不少坑，也有不少收获。 今天跟大家分享一下电商API对接的需求调研。 分享之前，为了照顾没有做过API对接项目的小伙伴，先来扫个盲，啥是API对接&#x…
python时间变化与字符串替换技术及读JSON文件等实践笔记
1. 需求描述
根据预测出结果发出指令的秒级时间，使用时间戳，也就是设定时间（字符串）转为数字时间戳。时间计算转换过程中，出现单个整数（例如8点），按字符串格式补齐两位“08”。字符…
虾皮插件能做数据分析的-知虾数据分析插件Shopee大数据分析平台
在如今的电商行业中，数据分析已经成为了一项至关重要的任务。通过对大量数据的收集和分析，企业可以更好地了解市场趋势、了解竞争对手、优化产品和店铺运营等。然而，要想做好数据分析，一个好用的工具是必不可少的。 虾皮插件——知…
SPASS-ARIMA模型
基本概念 在预测中，对于平稳的时间序列，可用自回归移动平均（AutoRegres- sive Moving Average, ARMA）模型及特殊情况的自回归（AutoRegressive, AR）模型、移动平均（Moving Average, MA）模型等来拟合，预测该时间序列的未来值，但在实际的经济预测中，随机数据序列往往…
即刻报名，企业服务与新经济论坛亮点提前揭秘！
峰会官网已上线，最新议程请关注：doris-summit.org.cn
即刻报名 Doris Summit 是 Apache Doris 社区一年一度的技术盛会，由飞轮科技联合 Apache Doris 社区的众多开发者、企业用户和合作伙伴共同发起，专注于传播推广开源 OLAP 与实…
判断序列值是否单调递增 PandasSeries中的方法：is_monotonic_increasing
【小白从小学Python、C、Java】 【计算机等考500强证书考研】 【Python-数据分析】 判断序列值是否单调递增 PandasSeries中的方法： is_monotonic_increasing
选择题 请问下列程序运行的的结果是： import pandas as pd s1 pd.Series([1, 2, 5]) prin…
Python数据挖掘项目实战——自动售货机销售数据可视化分析及销售额预测
👨🎓博主简介 🏅云计算领域优质创作者 🏅华为云开发者社区专家博主 🏅阿里云开发者社区专家博主 💊交流社区：运维交流社区 欢迎大家的加入！ 🐋 希望大家多多支…
pandas 读取Excel 批量转换时间戳
一、安装 pip install pandas 如果出报错，不能运行，可以安装 pip install xlrd 二、 代码如下 import pandas as pd
import time,datetimefile_path rC:\Users\Administrator\Desktop\携号转网测试\admin_log.xls
df pd.read_excel(file_path, sheet_n…
游戏数据分析必知必会
游戏的分类
按端分类：端游（steam），页游（4399），手游（手机，pad）按盈利模式分类：付费游戏（一次买断，后续购买其它剧情或者包…
AIGC ChatGPT4 读取接口文件并进行可视化分析
数据分析的过程中，对数据文件进行可视化分析是每个数据分析师必备的技能。如下图数据源。 现在需要对各地区的销量进行汇总，使用Python来进行分析。
但是又不想写代码，或者不会Python代码，可以用ChatGPT4来帮我们完成代码的编写。 完整的Python代码：
import pandas as p…
Leo赠书活动-11期 【利用Python进行数据分析】文末送书
✅作者简介：大家好，我是Leo，热爱Java后端开发者，一个想要与大家共同进步的男人😉😉 🍎个人主页：Leo的博客 💞当前专栏： 赠书活动专栏 ✨特色专栏：…
数据分析—将txt文件转为csv文件；将csv文件转为xls文件
txt文件转为csv文件转化代码：
import csv# 输入txt文件路径
txt_file rC:\Users\ZARD\Desktop\daily-min-temperatures.txt# 输出csv文件路径
csv_file rC:\Users\ZARD\Desktop\daily-min-temperatures.csv# 打开txt文件以读取数据
with open(txt_file, r) as tx…
pyecharts 绘制轮播效果图例子
pyecharts 绘制轮播效果图例子 例子1例子2例子3代码解析例子1
from pyecharts.charts import Timeline,Bar
timeline=Timeline()
data=[{"name":"2025","value"
实验2：Python数据预处理
实验2：Python数据预处理 文章目录实验2：Python数据预处理一、实验目的与要求二、实验任务及答案一、实验目的与要求
1、目的：
掌握数据预处理和分析的常用库Pandas的基本用法，学生能应用Pandas库实现对数据的有效查询、统计分析…
Python读取本地文件OSM文件中的路网数据结合CSV数据处理
编写一个Python程序，使它能读取本地文件OSM文件中的路网数据，并将csv文件中的时间速度和公交车设备号根据公交站点信息或者经纬度信息赋值到OSM路网数据中对应的路段上， 如果有些路段处于两个经纬度之间，赋值的时间则取前后经纬度…
怎么更新BI报表数据？问我就对了
BI大数据分析工具上有大量的BI报表模板，这些模板都是一个个完整的BI报表，只需将数据源更换，立即就能用来分析我们自己的数据。那，BI报表的数据怎么更新？接下来就来说说这事。
目的：更新BI报表数据
工具&a…
中成药行业主数据管理解决方案
主数据在中成药行业销售渠道管理中的应用已经成为推动企业数字化转型的核心要素之一。 随着营销市场的下沉，以及客户数量的迅速增加，医药企业迫切的期望通过主数据管理来优化销售渠道管理、促进首营交换业务和实现电子签章业务。 本文，我们将…
判断数组中每个元素是否为负数 numpy.signbit()
【小白从小学Python、C、Java】 【计算机等级考试500强双证书】 【Python-数据分析】 判断数组中每个元素是否为负数 numpy.signbit() [太阳]选择题 请问以下代码中最后输出结果是？ import numpy as np a np.array([-1, 0, 1]) print("【显示】a ",a) pr…
智能化质量控制，三坐标尺寸SPC管理系统引领制造新潮流！
在制造业的浪潮中，提升产品质量一直是企业不懈追求的目标。为了更好地适应市场需求、提高生产效益，我们自豪地介绍全新的三坐标尺寸SPC（统计过程控制）管理系统，为您的企业带来智能、高效的质量管理体验，助力…
【数据分析 | Numpy】Numpy模块系列指南（一），从设计架构说起
🤵♂️ 个人主页: AI_magician 📡主页地址： 作者简介：CSDN内容合伙人，全栈领域优质创作者。 👨💻景愿：旨在于能和更多的热爱计算机的伙伴一起成长！！&…
数据分析基础之《matplotlib（2）—折线图》
一、折线图绘制与保存图片
1、matplotlib.pyplot模块 matplotlib.pyplot包含了一系列类似于matlab的画图函数。它的函数作用于当前图形（figure）的当前坐标系（axes）
import matplotlib.pyplot as plt
2、折线图绘制与显示 展示城…
pandas汇总和描述性统计
本文介绍pandas中汇总和描述性统计中的基本内容，仅供参考。
目录
1描述和汇总统计
1.1sum方法
1.2idxmin和idxmax方法
1.3describe方法
1.4描述和汇总统计的常用方法
2相关系数和协方差
3唯一值、值计数以及成员资格
3.1唯一值
3.2值计数
3.3成员资格
1…
Matplotlib自定义坐标刻度_Python数据分析与可视化
自定义坐标刻度 主次要刻度隐藏刻度与标签花哨的刻度格式格式生成器与定位器 虽然matplotlib默认的坐标轴定位器与格式生成器可以满足大部分需求，但是并非对每一幅图都合适。
主次要刻度
学习前最好有对matplotlib图形的对象层级较为了解，例如查看前面…
鱼哥赠书活动第④期：从0到1Python进阶《利用Python进行数据分析》让你学完成为Python大神！！！
鱼哥赠书活动第④期： 《利用Python进行数据分析》、作译者简介：主要变动：购书链接： 适合阅读对象：赠书抽奖规则:往期赠书福利： 《利用Python进行数据分析》、
Python 语言极具吸引力。自从 1991 年诞生以来…
坚鹏：数字金融——金融行业的数字科技和智能化转型培训圆满结束
中国邮政储蓄银行拥有优良的资产质量和显著的成长潜力，是中国领先的大型零售银行。2016年9月在香港联交所挂牌上市，2019年12月在上交所挂牌上市。中国邮政储蓄银行拥有近4万个营业网点，服务个人客户超6.5亿户。2022年，在《银行家》…
坚鹏：贵州银行西南财经大学零售业务数字化转型与场景营销策略
中国银保监会2022年1月正式发布了中国银保监会发布《关于银行业保险业数字化转型的指导意见》，这标准着中国银行业从局部的数字化转型向全面的数字化转型转变，进一步加速了银行数字化转型高潮的到来。
《关于银行业保险业数字化转型的指导意见》提出明确…
京东数据运营-京东数据开放平台-鲸参谋10月粮油调味市场品牌店铺销售数据分析
鲸参谋监测的京东平台10月份料油调味市场销售数据已出炉！ 根据鲸参谋数据显示，今年10月份，京东平台粮油调味市场的销量将近4600万，环比增长约10%，同比降低约20%；销售额将近19亿，环比增长约4%&am…
UData+StarRocks在京东物流的实践 | 京东物流技术团队
1 背景
数据服务与数据分析场景是数据团队在数据应用上两个大的方向，行业内大家有可能会遇到下面的问题：
1.1 数据服务
烟囱式开发模式：每来一个需求开发一个数据服务，数据服务无法复用，难以平台化，技术…
京东大数据（京东运营数据采集）：2023年10月京东牛奶乳品行业品牌销售排行榜
鲸参谋监测的京东平台10月份牛奶乳品市场销售数据已出炉！ 10月份，牛奶乳品整体销售上涨。鲸参谋数据显示，今年10月，京东平台上牛奶乳品的销量将近1700万，同比增长1%；销售额将近17亿，同比增长约5…
2023年第十二届数学建模国际赛小美赛B题工业表面缺陷检测求解分析
2023年第十二届数学建模国际赛小美赛
B题 工业表面缺陷检测
原题再现： 金属或塑料制品的表面缺陷不仅影响产品的外观，还可能对产品的性能或耐久性造成严重损害。自动表面异常检测已经成为一个有趣而有前景的研究领域，对视觉检测的应用领域有…
数据宝库：深入探讨数据隐私与安全的要义
写在开头
随着数字时代的蓬勃发展，数据已成为当今社会的新型燃料。然而，正如能源需要保护和管理一样，我们的数据同样需要被妥善对待。本文将深入讨论数据隐私和安全的不可忽视的重要性，并为您提供一些实用的基本措施和方法&#…
【011】pandas处理数据的作用_#py
pandas操作 1. 导入数据库2. 修改行列名2.1 修改列名2.2 修改行名 3. 按条件筛选3.1 根据条件筛选，提取所有信息3.2 根据条件筛选，提取某列或者某几列 4. 按某行某列提取信息4.1 获取信息4.2 更改具体的值 5. 合并5.1 单列并入大数据中（方法一…
做数据分析为何要学统计学（6）——什么问题适合使用方差分析？
方差分析（ANOVA，也称变异数分析）是英国统计学家Fisher（1890.2.17－1962.7.29）提出的对两个或以上样本总体均值进行差异显著性检验的方法。
它的基本思想是将测量数据的总变异（即总方差ÿ…
数据分享 I 全国各市城镇化率，shapeflie格式，附数据可视化
基本信息.
数据名称: 城镇化率
数据格式: shapeflie
数据时间: 2006-2020年
数据几何类型: 面
数据坐标系: WGS84坐标系
数据来源：网络公开数据 数据可视化. 安徽省各市2015年城镇化率 广东省各市2015年城镇化率 江西省各市2015年城镇化率
数据可视化|jupyter notebook运行pyecharts，无法正常显示“可视化图形”，怎么解决？
前言 本文是该专栏的第39篇，后面会持续分享python数据分析的干货知识，记得关注。
相信有些同学在本地使用jupyter notebook运行pyecharts的时候，在代码没有任何异常的情况下，无论是html还是notebook区域，都无法显示“可视化图形”，界面区域只有空白一片。遇到这种情况，…
人工智能与数据分析：新时代的趋势和机会
目录 写在开头1. 融合AI和数据分析的趋势1.1 趋势变化1.2 数据驱动目标转换2 对数据分析行业的影响2.1 技能需求2.2 工作流程和角色的变化2.3 创新和业务驱动的数据分析3.场景变化3.1 场景1：智能决策支持系统3.1.1 智能决策支持系统的架构设计3.1.2 Python代码演示3.2 个性化用…
python-数据分析2csv
首先，我们需要导入数据并计算一些统计指标。请按照以下步骤操作：
使用pandas库的read_csv()函数导入CSV文件。 使用head()函数查看前五行。 使用info()函数查看数据类型和缺失值。 使用describe()函数查看数据统计指标。 以下是用于导入CSV文件并计算统…
10个 Python 脚本来自动化你的日常任务
在这个自动化时代，我们有很多重复无聊的工作要做。想想这些你不再需要一次又一次地做的无聊的事情，让它自动化，让你的生活更轻松。
那么在本文中，我将向您介绍 10 个 Python 自动化脚本，以使你的工作更加自动化&#…
【python pandas】合并文件并剔除重复数据
1.背景 工作中需要处理多个文件，每个文件里面有重复的数据，剔除重复数据，保留最新的数据
2.代码：
import pandas as pd
import osdl []
#person_list是文件路径
for i in range(person_list_len):#把文件df全部集合进列表dldl.a…
ChatGPT4 Excel 高级组合函数用法index+match完成实际需求
在Excel 函数用法中有一对组合函数使用是非常多的，那就是Index+match组合函数。 接下来我们用一个实际的需求让ChatGPT来帮我们实现一下。 我们给ChatGPT4发送一个prompt:有一个表格A2至A14为业务员B列至H列为1月至7月的销售额，请根据J2单元格的业务员与K2单元格的月份查找出…
【数据分析之Numpy】Numpy中位数函数numpy.median()的使用方法
一、简介 numpy.median() 是 Numpy 库中的一个函数，用于计算给定数据集或数组的中位数。
二、基本语法 numpy.median(a, axisNone, outNone, overwrite_inputFalse, keepdimsFalse) 参数： a：输入数组。 axis：沿着哪个轴计算中位数…
Apache Doris 在奇富科技的统一 OLAP 场景探索实践
导读：随着消费信贷规模快速增长，个人信贷市场呈现场景化、体验感强的特征，精准营销、精细化风险管理以及用户使用体验的优化愈发重要。作为中国卓越的由人工智能驱动的信贷科技服务平台，奇富科技选择将 Apache Doris 作为整体 OLA…
数据智慧：如何利用可视化提升效率
数据可视化是一项强大的工具，能够显著提高工作效率和决策的准确性。下面我就以可视化从业者的角度，简单谈谈数据可视化是如何助力效率提升的。 直观理解复杂数据
数据可视化将抽象的数据转化为图表、图形或仪表盘，使数据更易于理解。这种直观…
ubuntu 在线安装 python3 pip
ubuntu 在线安装 python3 pip 安装 python3 pip sudo apt -y install python3 python3-pip升级 pip python3 -m pip install --upgrade pip
36个顶级数据分析方法与模型，学会任意1种，都能让你超越95%的人
好的数据分析师不仅熟练地掌握了分析工具，还掌握了大量的数据分析方法和模型。
这样得出的结论不仅具备条理性和逻辑性，而且还更具备结构化和体系化，并保证分析结果的有效性和准确性。今天老李我将从以下6个维度32种分析模型和方法逐个简略介…
峰会实录 | 镜舟科技CEO孙文现：基于StarRocks打造企业级极速统一数据分析产品
作者：镜舟科技CEO 孙文现（本文为作者在StarRocks Summit Asia 2022的分享）
非常荣幸能借着峰会的契机跟大家做分享和交流。在我至今的职业生涯里，创立过两家公司，一个做 IoT PaaS，另一个做 OLAP 数仓。两个…
Python数据分析案例12——网飞影视剧数据分析及其可视化
背景介绍
Netflix是最受欢迎的媒体和视频流平台之一。他们的平台上有超过 8000 部电影或电视节目。截至 2021 年年中，他们在全球拥有超过 2 亿订阅者。
博主看美剧也较为多，像《怪奇物语》、《性爱自修室》等高分美剧都是网飞的。
对于网飞的影视剧&a…
2021年地级市能量消耗量，286条数据，shp和excel文件
随着社会经济的快速发展，能源消耗量不断增加，对于地级市来说，能量消耗量数据成为了衡量当地经济发展和城市管理的重要指标之一。
本文将分享2021年地级市能量消耗量数据，以下为该数据的基本信息和字段说明。 基本信息
数据名称:…
R语言使用rpart包拟合随机森林回归模型：使用predict函数和训练好的模型进行预测推理、计算回归模型的评估指标MAE、MSE、RMSE
R语言使用rpart包拟合随机森林回归模型：使用predict函数和训练好的模型进行预测推理、计算回归模型的评估指标MAE、MSE、RMSE 目录
【五六七人口普查】我国省市两级家庭户住房状况
人口数据是我们在各项研究中最常使用的数据！之前我们分享过第七次人口普查（简称七普）的数据！很多小伙伴拿到数据后都反馈数据非常好用，同时很多小伙伴咨询有没有前面几次人口普查的数据，这样方便做人口变化…
Part 4 描述性统计分析（占比 10%）——上
文章目录【后续会持续更新CDA Level I&II备考相关内容，敬请期待】【考试大纲】【考试内容】【备考资料】1、统计基本概念1.1、统计学的含义及应用1.1.1、统计学的含义1.2.1、统计学的应用1.2、统计学的基本概念1.2.1、数据及数据的分类1.2.2、总体和样本1.2.3、…
【Python语言基础】——Python NumPy 入门
Python语言基础——Python NumPy 入门 文章目录Python语言基础——Python NumPy 入门一、Python NumPy 入门一、Python NumPy 入门
安装 NumPy 如果您已经在系统上安装了 Python 和 PIP，那么安装 NumPy 非常容易。 请使用这条命令安装它： C:\Users\Your…
excel图表技巧：如何美化图表让主题更突显
很多职场白领特别在意图表的美化，努力将图表做得漂亮，但是忽视了最重要的东西——那就是主题述求。我们做图表的根本目的是按需要的主题把数据形象地表达出来，在这里形象必须服从主题。如果一个图表做不到主题鲜明，那么这个图表就…
第四章 - 基础查询语句（select，distinct，limit）
基础查询语句，select，distinct，limit查询单列数据查询多列数据查询所有数据去重查询（distinct）限制查询结果（limit）查询单列数据
在列名和函数没有冲突的时候可以不用加前后的比如有时候时间的…
2023年 MCM美赛 C题 Wordle预测问题 求解！
目录2023年 MCM美赛 C题 Wordle预测问题 求解！问题一读取数据数据预处理数据分析数据变化趋势数据分布数据统计—— 均值、方差、极大极小值....数据相关性回归预测模型——XGBoost评价指标XGBoost 框架使用划分数据集，80% 训练数据和 20% 测试数据使用训…
数据分析应该怎么做？
一、常见的数据分析报告类型
数据分析报告通常可以分为三类：日常分析报告、专题型分析报告和综合性分析报告。前两者是以数据结论建议的格式去撰写，综合性分析报告则是：行业环境调研（竞品类产品数据分析）自身产品数据…
猫的平均寿命约为15年，全球最长寿的猫在英国，活了38年
猫是家庭宠物中最受欢迎的动物之一，它们不仅可爱、温顺，还拥有多种优秀的特征和能力。以下是一些有趣的猫的数据，咱通过数据图表一一分享： 全球猫的数量：全球有超过5亿只宠物猫，它是很受人们欢迎的动物。其…
复杂的HANASQL 多行并入一行
点击蓝字 关注我们 一 前言 基于HANA的内存数据库的强大性能, SAP建议把业务逻辑下沉到HANA中计算.以便减去应用服务器的负担,让程序性能更好一些. SAP本身的一些复杂的业务逻辑比如MRP运算(MD01)也有了新的事务 MD01N (MRP LIVE) 报表类的数据分析程序尤其适用. 动态报表强化了…
银行数字化转型导师坚鹏：数字化时代BLM银行网点转型解决方案
数字化时代BLM银行网点转型实战解决方案
——以BLM模型为核心，实现知行果合一
课程背景：
很多银行存在以下问题：
不知道银行如何进行网点转型？
不清楚其它银行网点战略是如何制定的？
不知道其它银行网点转型是如何取…
零售数据可视化|人、货、场、供、财报表分享
有没有零售数据可视化的例子，让大家看看BI零售数据可视化的效果？有，奥威BI零售标准方案提供了数十张BI数据可视化报表，覆盖人、货、场、供、财等核心业务，既可以让大家一次性体验零售数据可视化报表效果，也…
Python3，超大文件数据读取困难？那看完这一篇，保证完美解决你的痛点。
多种方式读取超大文件数据 1、引言2、代码实战2.1 with open2.2 mmap2.3 Dask2.4 Pandas2.5 Hadoop2.6 PySpark 3、总结 1、引言
小屌丝：鱼哥，求助，求助！ 小鱼：别慌…稳住… 小屌丝：老板让我打开一个超大的…
全景天窗式科普数据仓库
数据仓库是一个面向主题的、集成的、随时间变化但信息本身相对稳定的数据集合，用于支持管理决策过程。其本质就是完成从面向业务过程数据的组织管理到面向业务分析数据的组织和管理的转变过程，也是商业智能BI中数据仓库的主要作用。 数据仓库 - 派可数据…
【Python】Python中使用Matplotlib绘制折线图、散点图、饼形图、柱形图和箱线图
【Python】使用Matplotlib绘制折线图、散点图、饼形图、柱形图和箱线图 python数据可视化课程，实验二 Matplotlib 中文API：API 概览 | Matplotlib 一、实验任务的数据背景
提供的源数据（数据文件employee.csv）共拥有4个特征&…
银行数字化转型导师坚鹏：银行数字化转型痛点、路径与对策
银行数字化转型痛点、路径与对策课程背景：
很多银行存在以下问题：
不知道银行数字化转型？
不清楚数字化转型对银行发展有什么影响？
不知道数字化转型对银行有什么机遇？
学员收获:
学习银行数字化转型的发展现状与成…
python入门项目：数据清洗
文章目录前言一、数据清洗是什么？二、重复值处理三 缺失值处理四、数据类型转换前言
本文是对数据清洗的简单学习。 本文使用的数据来源为：博雅读书社所提供的数据 一、数据清洗是什么？
数据清洗是指在数据分析或挖掘之前进行的࿰…
数据分析之Numpy
文章目录 1. Anaconda安装2. juypter3. numpy简介4. numpy数组4.1 ndarray对象4.2 array创建数组4.3 arange区间数组4.4 linspace等差数列4.5 logspace等比数列4.6 numpy.empty4.7 numpy.zeros4.8 numpy.ones4.9 numpy.zeros_like4.10 numpy.ones_like4.11 numpy.asarray4.12 n…
银行数字化转型导师坚鹏：金融科技在银行数字化转型中的创新案例
金融科技在银行数字化转型中的创新与应用案例（偏重对公业务） 课程背景：
数字化背景下，很多银行存在以下问题：
不清楚5G如何赋能银行数字化转型？
不清楚最新金融科技创新与应用案例？
不了…
分组双轴图：揭示数据中的关联性和趋势变化
简介
分组双轴图是一种数据可视化图表，指有多个（≥2）Y轴的数据图表，多为分组柱状图折线图的结合，图表显示更为直观，可以很好地展示不同指标之间的关系，帮助用户更好地理解数据，做出…
数据可视化开源工具软件
数据可视化工具用于通过图形、图表、表格、地图和其他详细的视觉对象来表示信息。
它们通常将数据呈现和分析结合起来，以帮助专业人员在数据驱动领域(如工程、数据科学和业务分析)做出更明智的决策。
选择正确的数据可视化工具将帮助您减少数据错误，并…
Python 3 实现给定的DNA 序列转换为其蛋白质等价物
DNA ⇒ RNA ⇒ 蛋白质
生命取决于细胞存储、检索和翻译遗传指令的能力。这些指令是制造和维持活生物体所必需的。很长一段时间，都不清楚哪些分子能够复制和传递遗传信息。我们现在知道，该信息由所有生物体内的脱氧核糖核酸或 DNA 携带。 脱氧核糖核酸：DNA 是一种离散代码，…
这十套练习，教你如何用Pandas做数据分析（02）
练习2-数据过滤与排序
探索2012欧洲杯数据 步骤1 - 导入必要的库
运行以下代码
import pandas as pd 步骤2 - 从以下地址导入数据集
运行以下代码
path2 “…/input/pandas_exercise/exercise_data/Euro2012_stats.csv” # Euro2012_stats.csv 步骤3 - 将数据集命名为eu…
Python 列表元素类型转换总结
Python列表通常可以包含整型，字符串，浮点型数据，甚至还可以包含另一个列表，本文主要使用Python函数，实例展示其中整型，字符串的转换。
列表中字符串变为整型（浮点型）
整型
a [1,…
二十二、SQL 数据分析实战（案例1~案例10）
文章目录 案例1：用户信息表 stu_table案例2：员工绩效表 score_table案例3：销售冠军信息表 month_table案例4：月销售额记录表 sale_table案例5：每季度员工绩效得分表 score_info_table案例6：员工信息表 stu_…
数字化转型导师坚鹏：数字化转型背景下的企业人力资源管理
企业数字化转型背景下的企业人力资源管理 课程背景：
很多企业存在以下问题：
不清楚企业数字化转型目前的发展阶段与重要应用？
不知道企业数字化转型给企业人力资源管理带来哪些机遇与挑战？
不知道企业数字化转型背景下如何…
为什么要进行数据决策？数据决策对企业而言有何重要意义？
“大数据”几乎已成为时下最时髦的词汇，不夸张地说，当今各行各业无不对大数据充满了向往，希望自己在新一轮的大数据营销中抢占先机。同时，从大数据中引申出的数据挖掘、数据分析、数据安全等数据运用技术也成为人们热捧的焦点。
…
基于Hadoop的电商数据分析系统设计与实现
基于Hadoop的电商数据分析系统设计与实现 Design and Implementation of E-commerce Data Analysis System based on Hadoop 目录 目录 2 摘要 3 关键词 3 第一章 绪论 4 1.1 研究背景 4 1.2 研究目的与意义 5 1.3 现有研究综述 6 第二章 Hadoop技术介绍 8 2.1 Hadoop概述 8 2.…
电视剧《狂飙》数据分析，正片有效播放市场占有率达65.7%
哈喽大家好，春节已经过去了，朋友们也都陆陆续续开工了，小编在这里祝大家开工大吉！春节期间，一大批电视剧和网剧上映播出，其中电视剧《狂飙》以不可阻挡之势成功成为“开年剧王”。这里小编整理了一些《狂飙…
用Python做数据分析有哪些优势？
众所周知，可以用作数据分析的语言有很多，包含Python、R语言等，而且Python被誉为数据分析的一大利器，更是该领域的首选语言，那么用Python做数据分析有哪些优势呢?跟着蛋糕往下看。
第一、Python语言自身的优势
Pytho…
Boosting三巨头：XGBoost、LightGBM和CatBoost（发展、原理、区别和联系，附代码和案例）
❤️觉得内容不错的话，欢迎点赞收藏加关注😊😊😊，后续会继续输入更多优质内容❤️👉有问题欢迎大家加关注私戳或者评论（包括但不限于NLP算法相关，linux学习相关，读研读博…
一、向量及其线性运算
🙌作者简介：数学与计算机科学学院出身、在职高校高等数学专任教师，分享学习经验、生活、 努力成为像代码一样有逻辑的人！ 🌙个人主页：阿芒的主页 ⭐ 高等数学专栏介绍：本专栏系统地梳理高等数学…
《数据分析-JiMuReport03》JiMuReport报表设计入门介绍-新建报表
报表设计
1 新建报表
1.1 创建新的数据报表
以数据报表为例，简单介绍创建报表的过程 1.2 进入报表设计页面
如下图可见，主要分为四个模块： 模块一(左) 数据集管理报表信息数据字典 模块二(右) 这部分是对数据报表的进一步优化 模块三(上…
学数据分析要掌握哪些基本概念？
学数据分析要掌握哪些基本概念？ 美国明尼苏达州一家Target百货被客户投诉，这名客户指控Target将婴儿产品优惠券寄给他的女儿，而他女儿还是一名高中生。但没多久这名客户就来电道歉，因为女儿经他逼问后坦承自己真的怀孕了。
Targe…
pytdx 安装 初步使用
pytdx 用户文档
Introduction pytdx
pytdx 的安装
MacBook-Air:~ xxx$ pip3 install pytdx
Collecting pytdx Downloading pytdx-1.72.tar.gz (80 kB) ━━━━━━━━━━━━━━━ 80.4/80.4 kB 215.0 kB/s eta 0:00:00 Preparing metadata (setup.py) ... done
Co…
分群思维（五）特殊的分群思维-同期群分析
分群思维（五）特殊的分群思维-同期群分析 小P：小H，用户留存率降了，增长也缓慢了，这是什么原因啊，会不会是新用户出了问题啊，还是说老用户不满意了？ 小H：可以尝…
基于spss的多元统计分析 之 单/双因素方差分析 多元回归分析（1/8）
实验目的： 1．掌握单样本t检验、两样本t检验、配对样本t检验、单因素方差分析、多元回归分析的基本原理； 2．熟悉掌握SPSS软件或者R软件关于单因素、多因素方差分析、多元回归分析的基本操作； 3．利用实验指导…
教学实训模块升级，助力应用型数据科学人才培养｜ModelWhale 版本更新
初夏梅雨季，ModelWhale 迎来新一轮版本更新，多角度优化各领域用户的使用体验。
本次更新中，ModelWhale 主要进行了以下功能迭代：
• 优化 课程作业布置（团队版✓ ）
• 新增 课程作业关联至课件ÿ…
生成式 AI 将如何颠覆数据分析？
生成式 AI 对数据分析的颠覆式变革 想象这样一个场景，您能够像与人交谈一样和计算机进行交流。在这个场景中，您不需要学习复杂的技术，通过自然语言就能够整理数据、分析复杂的数据集、并生成报告。几年前，这可能还是科幻小说中的画…
银行数字化转型导师坚鹏：金融科技助力普惠金融新成效
金融科技助力普惠金融新成效
课程背景：
数字化背景下，很多银行存在以下问题：
不清楚金融科技如何赋能普惠金融？
不清楚最新金融科技创新与应用案例？
不了解银行普惠金融数字化成功案例？
课程特色&#x…
Struggle to 搞懂统计学——点估计 区间估计 置信区间
文章目录点估计区间估计置信区间理解操作（重中之重）总体方差已知总体方差未知假设检验在统计学的应用过程中，总有那么几个重要的基础概念似懂非懂，就像雾里看花，你对它有一个总体的印象，但说道具体细节又似…
Tableau 和 Qlikview哪个更好用？
Tableau 和 Qlikview 是市场上用于分析数据的两种重要的 BI 工具，并配备了广泛的可视化效果。本文将全面概述每个工具，以及基于业务、技术和可视化三个主要类别的基本差异。每个公司都希望用最好的BI工具来处理大量数据。在这篇文章中，我们将…
Python程序员，你必须知道的面试题
Python越来越火之后，把python作为自己的终生事业来做的话，是很多的终极目标，可是要做到知己知彼，百战不殆，那么你需要了解面试官出什么题，
这些面试问题大致可以分为四类：什么（what…
51单片机学习笔记（清翔版）（24）——实时时钟DS1302
这是纽扣电池座，焊接后，放上纽扣电池，可作为备用电源，当主电源断点，DS1302会继续走时，继续工作，如果没有，那么断点后，就不会继续走时，会停止。 静态RAM&#…
客流统计分析系统增强售楼处、4S店飞单管理能力
客流统计分析系统可以为售楼处和4S店提供有效的飞单管理能力，使其能够更好地管理客户信息和提高销售效率。首先，客流统计分析系统可以对售楼处和4S店的客流进行实时监控和分析。通过使用摄像头、人脸识别等技术，可以对进店的客户进行统计和分…
【数据预处理】Python数据预处理常见操作
文章总结了拿到原始数据后，用Python做数据预处理的常见操作。后续会根据总结不断更新。 目录一、数据查看二、数据转换三、数据清洗1.异常值2.重复值3.缺失值四、数据获取五、数据合并1.join，基于index连接DataFrame的列2.merge，基于column连…
【数据分析框架】AARRR模型的数据指标体系
AARRR模型是运营里面一个非常有名的用户分析模型，也是一个典型的漏斗模型，前段时间工作上写的分析材料里面也提到了这个模型，这个模型也可以作为数据分析的框架，这里结合了网上的一些参考资料，总结了模型中可能涉及到各…
df.apply之后，dropna() got an unexpected keyword argument ‘subset‘
在使用df进行:
df.dropna(subset[keyword])
df.drop_duplicates(subset[keyword])报错：
subset not working for drop_duplicates pandas dataframe
或者 dropna() got an unexpected keyword argument subset
是因为 在此之前df经过了apply函数操作，…
使用R语言进行方差分析（ANOVA、ANCOVA）（一）
方差分析（一） 1. ANOVA模型拟合1.1 aov()函数1.2 表达式中各项的顺序 2. 单因素方差分析（One-Way ANOVA）2.1 绘制各组均值及其置信区间的图形2.2 多重比较-TukeyHSD2.2.1 成对比较图2.2.2 多重均值比较-TukeyHSD（更易理…
LWN: stable kernel 争论的核心问题！
关注了就能看到更多这么棒的文章哦～The core of the -stable debateBy Jonathan CorbetJuly 22, 2021DeepL assisted translationhttps://lwn.net/Articles/863505/关于哪些补丁应该进入 stable update，一直有争议存在，争议还不少。因此&…
python数据可视化开发(5)：webAPI百度地图轻量驾车路线规划距离与直线距离计算
webAPI百度地图轻量驾车路线规划规划 一、驾车路线规划说明1.接口说明API服务地址请求参数返回参数 二、python核心代码1.轻量路线规划代码封装2.批量读取起始点信息 三、直线距离计算 轻量级路线规划服务（又名DirectionLite API ）是一套REST风格的Web服…
基于MATLAB的无人机遥感数据预处理与农林植被性状估算
在新一轮互联网信息技术大发展的现今，无人机、大数据、人工智能、物联网等新兴技术在各行各业都处于大爆发的前夜。为了将人工智能方法引入农业生产领域。首先在种植、养护等生产作业环节，逐步摆脱人力依赖；在施肥灌溉环节构建智慧节能系统&a…
IBM 创新方案+SNP数据转型助一汽大众实现数据平稳、高效迁移
近日，IBM 采用基于SNP Bluefield技术迁移的IBM Rapid Move创新数据迁移方案, 成功为一汽-大众实施了企业运营数据系统从 ECC 到 S/4 的升级项目。该项目系统切换耗时仅三天，不仅助客户高效、平稳迁移了系统数据，升级了数据底座，还…
Python 机器学习，数据的标准化
数据的标准化方式
有两种常见的方法可以让所有的属性有相同的量度：线性函数归一化（Min-Max scaling）和标准化（standardization）。
方式 1：StandardScaler()
from sklearn.preprocessing import Standard…
Class 06 - 良好的编码习惯（保持代码的可读性）
Class 06 - 良好的编码习惯（保持代码的可读性） 保持代码的可读性编码风格命名的注意事项文件名对象名称 语法运算符逗号中括号和小括号大括号代码缩进代码的长度赋值注释 调试报错 保持代码的可读性
在编写 R语言（或任何其他编程语言&#x…
Python 操作符
Python提供了各种操作符用于执行不同类型的操作，例如算术操作、比较操作、逻辑操作等。下面是Python中常见的操作符：
1. 算术操作符： - ：加法 - -：减法 - *：乘法 - /：除法 - %&…
无效数据处理攻略： 如何从源头开始预防无效数据带来的风险
数据处理在现代社会中变得越来越重要，而对于数据的可靠性和准确性，我们始终非常关注。然而，即使在对数据进行了精心管理的情况下，无效数据依然可能存在，并可能对数据分析和决策带来不良影响。因此，处理无效…
【重新定义matlab强大系列八】利用matlab求局部值（函数islocalmax求局部最大值+函数islocalmin求局部最小值）
🔗 运行环境：Matlab 🚩 撰写作者：左手の明天 🥇 精选专栏：《python》 🔥 推荐专栏：《算法研究》 #### 防伪水印——左手の明天 #### 💗 大家好🤗ᾑ…
Class 09 - Data Frame和查看数据
Class 09 - Data Frame和查看数据 DataFrametibbleshead()str()colnames()mutate()创建 Dataframe DataFrame
在我们开始做数据清洗或者检查数据是否存在偏差之前，我们需要先将我们的数据转换成合适的格式方便我们做后续的处理。
这就要说到DataFrame了。因为他很…
天猫订单之数据分析与挖掘——数据预处理和频繁模式
天猫订单之数据分析与挖掘——数据预处理和频繁模式 文章目录 天猫订单之数据分析与挖掘——数据预处理和频繁模式0. 写在前面1. 数据预处理1.1 多余字符的处理1.2 日期属性值的处理1.3 重复值处理1.4 缺失值处理2. 频繁模式2.1 亲和性分析2.2 Apriori算法0. 写在前面 Windows：…
中国智造数据分析，预计2025年中国智能制造市场规模将达5.3万亿元
中国智造是制造强国建设主攻方向，也是中国制造公司可以提升核心竞争力的主要研究路径。智能制造成熟度水平能很好的衡量一个地区智能制造的发展水平。
分析全国成熟度二级及以上的企业数量分布，从图分析可以很直观的看出成熟度二级以上的企业数量主要分…
生态系统服务（InVEST模型）土壤保持、水源涵养、氮磷输出、生态保护、生物多样性、碳固
白老师（研究员）：长期从事生态系统结构-格局-过程-功能-服务的变化与响应关系等研究工作；重点围绕生物多样性、生态系统服务与价值等，构建生物地球化学模型和评价指标体系，为城市、区域和自然保护区的可持续…
Python3数据分析与挖掘建模（9）相关系数与线性回归
1. 相关系数
1.1 概述
相关系数是衡量两个变量之间线性相关程度的统计量。它的取值范围在-1到1之间，表示变量之间的相关性强度和方向。
1.2 Pearson相关系数
常用的相关系数有皮尔逊相关系数（Pearson correlation coefficient）࿰…
付费课程：路径规划、机器学习、运筹优化算法以及数据分析领域
目录
授课形式
学习内容可包含
附加内容
教学价格 授课形式 线上课程，一对一教学
学习内容可包含 python从入门到精通 matlab入门及保姆级程序调试方法 cplex入门到精通 运筹学方面 最优化理论-单纯形法、分支定界法、列生成法、切平面法 机器学习方面 机器学习…
R语言 tidyverse系列学习笔记（持续更新）
tidyverse 译 “洁净的宇宙” > “极乐净土”
以 iris 鸢尾花数据集为例 ** 查看数据集** ** 查看维度dimention** dim(iris)iris 数据集有150个对象（observation），5列 ( Sepal.Length , Sepal.Width , Petal.Length , Petal.Width , Spe…
科技数据分析，2022年授权通过的专利数高达近80万项
哈喽大家好，中国科技发展在近年来取得了巨大进步，相关部门也积极推动科技创新，加大科技投入，鼓励企业加强研发，加速科技成果转化落地。此外，中国还在国际科技合作方面取得了积极进展，与各国合作…
核心领域的数字基建梳理
数字基建：新基建的核心
数字基建是数字经济发展的重要底座，《“十四五”数字经济发展规划》的首要重要任务就是“优化升级数字基础设施”，并提出要建设高速泛在、天地一体、云网融合、智能敏捷、绿色低碳、安全可控的智能化综合性数字信息基…
【Python学习笔记】第二十七节 Python 多线程
一、进程和线程进程：是程序的一次执行，每个进程都有自己的地址空间、内存、数据栈及其他记录运行轨迹的辅助数据。线程：所有的线程都运行在同一个进程当中，共享相同的运行环境。线程有开始、顺序执行和结束三个部分， …
python与数据分析
python与数据分析
学过高等数学，线性代数，概率论，离散数学等等，那么问题来了，怎么用python与这些学科结合，进行应用呢？
矩阵
构造矩阵mat
a1 np.mat([[1, 2]]) # [[1 2]] 注意有两个[
a2 …
SPSS-数据的检核与整备
下图源于聂卉老师课件3-2：
1. 数据核查与清理
确保数据输入过程的正确无误，是侦错的过程。经过这一过程的数据为Computerized raw data, 其数据格式，内容与排列方式，均与文本资料完全一致，并符合编码系统的编码原则…
基于AIC评价指标的逐步回归Python语言实现
常用评价指标简介 当前统计学以计算机科学作为支撑，机器于人工的优势是计算速度，但机器无法自行判断运算何时退出，因此需要定量指标作为运算退出的标志。对于预测类的统计模型来说，常见的指标有赤池信息准则（AIC&#…
数据基础设施成趋势，华为战略布局的深意
石油被认为是定义了二十世纪的一种商品，能源、交通、贸易、材料等多个行业都跟石油有着紧密的联系，石油几乎代表着一切。当时间进入到21世纪，数字化时代到来，数据成为最有价值的商品，整个数字世界的构建都离不开数据。…
北京积分落户数据分析
数据来源：链接：https://pan.baidu.com/s/18Z3WTf1_Y5ze_ALzBAZJfg 提取码：0thc
北京积分落户数据分析
import pandas as pd
import numpy as np
import csv
import matplotlib.pyplot as plt #导入数据
luohu_data pd.read_csv(./bj_luohu…
SQLZOO答案之【The JOIN operation】
1. 第一個例子列出球員姓氏為’Bender’的入球數據。 * 表示列出表格的全部欄位，簡化了寫matchid, teamid, player, gtime語句。修改此SQL以列出 賽事編號matchid 和球員名 player ,該球員代表德國隊Germany入球的。要找出德國隊球員，要檢查: teamid ‘…
（pandas进阶） 两个表格对比，通过身份证和姓名，把新表的个人数据在旧表中进行标记
最近学习数据处理进阶。对pandas特别喜欢。所以一边学一边找小项目做。刚好姐姐单位有表格要处理。要求是把新调查的已经参加身体筛查的人名，在原始表格里面标记。但是原始表格好几千人，而新调查的表格几百人，表格只有名字和身份证是相关的，其他数据格式都不同。但是要从几…
数据分析利器——python中pandas的使用（2）
DataFrame
引入了行标签和列标签
具有更加强大的现实意义
DataFrame(datanp.random.randint(0,10,size(3,5)))输出结果
01234020184167753225455
直接输出了表格
哇哦！
我们在索引的时候还可以定制我们的行索引和列索引
甚至可以直接输出我们的成绩为表格状态…
数据分析利器——python中pandas的使用（1）
第十八讲
pandas的使用
pandas本质上是在numpy基础下进行的二次封装
主要用来解决业务逻辑
pandas主要提供了俩种对象
Series(一维列表)DataFrame（二维列表）
import pandas as pd
import numpy as np
from pandas import Series,DataFrame
Series(…
Pandas-用一个dataframe去更新另一个dateframe
两个dataframe更新，可以用update来进行，update是使用index来匹配的。
>>> dfa pd.DataFrame([(chr(65x),x) for x in range(5)],columns[LETTER,NUMBER]) >>> dfa LETTER NUMBER 0 A 0 1 B 1 2 C …
pandas实战二、字典格式数据转成DataFrame格式（有行名、有列名）
pandas -V 0.25.1
1、需求
在用python识别PDF文件、提取数据的时候，得到一组字典数据，为了更方便的保存，把字典数据转化成DataFrame格式（有行名、有列名）。
数据
dict1 = {报告1: [a, b, c, 13, d, 2018-05-11]
python基础语法第2章变量和数据类型之06输出
大家好，我是阿语，从今天开始每天更新8篇python教程从第一个基础语法开始每天更新一下基础内容，这些会分类出来，保持一天完整的python教程，有的人肯定会问 为什么最后才写爬虫了，阿语在这里声明一下…
Oracle笔记 之 Oracle高级分组函数
高级分组函数
主要讲解 ROLLUP, CUBE, GROUPING SETS的主要用法，这些函数可以理解为GroupBy分组函数封装后的精简用法，相当于多个union all 的组合显示效果，但要比多个union all的效率要高。
ROLLUP（累计累加）
①&a…
为什么都在学python？
自然是因为Python简单易学且应用领域广！
Python近段时间一直涨势迅猛，在各大编程排行榜中崭露头角，得益于它多功能性和简单易上手的特性，让它可以在很多不同的工作中发挥重大作用。
正因如此，目前几乎所有大中型互联…
60岁以上网民增长迅速 善用语音搜索AI学习工具
消除老年人“数字鸿沟”的呼声不减，老年人也直面接入互联网的新需求。近日，智能搜索App夸克发布的“老年用户搜索报告”显示，生活问题、时尚话题均是老年人热搜关注，语音搜索、AI学习工具、智能病症查询，成就了老年人的…
迪赛智慧数——饼图（环形饼图）：2022年618期间各品类销售额分布
效果图 2022年“618”全网成交额达6959亿元，较2021年增加了1174.20亿元，同比增长20.30%。“618”网购狂欢节首先是由京东发起的，京东618每年6月是京东的店庆月，2022年京东“618”成交额达3793亿元，较2021年增加了355亿…
2023天猫纸品数据：抽纸销额高达25亿，湿厕纸为重点增长类目
如今，纸巾早已成为人们日常生活的必需品。作为刚需物品，纸巾的产品形态呈现多元化、细分化趋势，其市场规模也比较庞大。 根据鲸参谋电商数据分析平台的相关数据显示，今年1月至4月，天猫平台上纸巾行业大盘的销量超过1.6…
计算机毕业设计之Python大数据招聘爬虫可视化 招聘推荐系统 职位薪资预测算法 大数据招聘数据分析 大数据毕业设计 职位可视化(机器学习：预测+推荐+爬虫+可视化)
创新点
预测算法、招聘推荐、薪资预测、数据爬虫、可视化
技术
requestsflaskmysql
适合方向
招聘类计算机毕业设计、大数据毕业设计、数据分析类毕业设计，含有丰富的算法，一定是适合你的哦！
说明
爬虫模块是最新的，实时维…
分享思路：Python+Spark招聘爬虫可视化系统 招聘数据分析 Hadoop职位可视化 大数据毕业设计 51job数据分析(可选加推荐算法)
开发技术
Hadoop、HDFS、Spark、SpringBoot、echarts、PySpark、Python、MySQL
创新点
大数据架构、爬虫、数据可视化
啰里啰嗦
适合大数据毕业设计、数据分析、爬虫类计算机毕业设计
可二次开发选加推荐算法(协同过滤算法等或者调用SparkML库)
数据处理流程
本环节主要…
自研数据分析工具——yandas系列二：分析泰坦尼克号沉船事件中的乘客信息表
前言：21年广州荔湾区成了疫情灾区，很多人都没有工作，被居家隔离，感染病毒概率死亡率是0.005%，没有工作死亡率是100%，因此作为普通老百姓，自己开发了一个数据分析工具，叫yandas。
首…
云时代已至，新一代数据分析平台是如何实现的？
2023 年 5 月，由 Stackoverflow 发起的 2023 年度开发者调查数据显示，PostgreSQL 已经超越 MySQL 位居第一，成为开发人员首选。PostgreSQL 在国内的热度也越来越高。6 月 17 日，PostgreSQL 数据库技术峰会在成都顺利召开。本次大会…
案例研究｜小牛电动通过DataEase进行业务数据可视化分析
小牛电动（Niu Technologies）创立于2014年，是全球智能城市出行解决方案提供商。小牛电动的产品线包括电动自行车、电动摩托车、电动滑板车等。小牛电动在销售渠道上采用了线上线下相结合的模式，通过线上电商平台和线下门店销售&…
JupyterNotebook基本操作
目录
Jupyter notebook文件操作
创建文件
修改文件名
复制文件
移动文件
删除文件
上传文件
下载文件
Jupyter notebook单元格操作
内容类型
编辑模式
快捷键
对照表
命令模式
编辑模式
查看快捷键
进入Jupyter Notebook主界面“File”中
VSCode配置Jupyter…
Clickhouse 用户准入控制与权限分配 附主要配置步骤细节及示例 (主要参考 Clickhouse 官方文档)
Clickhouse 准入控制与用户权限管理
Written By: Xinyao Tian (作者: 田昕峣)
摘要
本文档描述了 Clickhouse 集群准入控制与用户权限管理的建设及管理的基本方法。
主要建设步骤
根据 Clickhouse 官方文档中 Managing Users and Roles 的描述，建设 Clickhouse…
迪赛智慧数——柱状图（象形动态图）：高考填报专业考虑的因素
效果图 填报志愿是高考后的一大重要环节，你的职业生涯就在这里起航了。那么，应该怎么填报志愿呢？高考填报专业考虑的因素很多，过半的人会考虑专业就业前景及薪资，其次是个人兴趣和是否为双一流建设学科。
数据源&…
SQL项目实战练习：淘宝用户行为数据分析实战
1、数据的简介：天池淘宝用户数据 2、数据导入和清洗
这次使用的SQL界面工具-SQL workbench
2.1 导入数据
create table userbehavior(
userID int,
itemID int,
categoryID int,
bahaviortype text,
timestamp int
);load data infile "C:/ProgramData/MySQ…
初学数据挖掘——数据探索（七）：python中主要的数据探索函数之拓展统计特征函数
pandas库中累积计算统计特征函数：
1、cumsum()
依次给出前1，2，…，n个数的和
2、cumprod()
依次给出前1，2，…，n个数的积
3、cummax()
依次给出前1，2，…，…
初学数据挖掘——数据探索（七）：python中主要的数据探索函数之常用统计特征函数
前面已经提过：python中主要用于数据探索的库是pandas（数据分析）和matplotlib（数据可视化）。
了解详情可见：Python中的数据可视化工具与方法——常用的数据分析包numpy、pandas、statistics的理解实现和可视…
Python笔记 之 利用余弦相似性进行文本选择
使用Python语言利用余弦相似度进行文本选择
余弦相似性简介
余弦相似性相关知识请参考：百度百科(余弦相似度)
二维余弦相似度计算公式：cos(θ)cos(\theta)cos(θ)x1x2y1y2x12y12∗x22y22{x_1x_2y_1y_2}\over{\sqrt {x_1^2y_1^2}*\sqrt {x_2^2y_2^2}}x…
数据分析-基于pandas（从将一个目录中的数据查找到另一个表中的对应的的func_name）
从将一个目录中的数据查找到另一个表中的对应的的func_name
主要是利用pandas读取速度快，本问主要是利用pandas将1000万个数据去重后再另一个文件中查找到对应的数据
import os
import sys
import time
import csv
import pandas as pdt1 time.time()
tracer_lin…
个性化教学体系（PSI）对课程成绩的影响 考察个性化教学是否对学生成绩产生影响。表1给出了某课程（分两学期授课记为ⅠⅡ）实施个性化教学的相关数据。表中，TUCE表示讲授Ⅱ前为测试学生Ⅰ的知识而进行的
定性选择模型
问题描述：
个性化教学体系（PSI）对课程成绩的影响 考察个性化教学是否对学生成绩产生影响。表1给出了某课程（分两学期授课记为ⅠⅡ）实施个性化教学的相关数据。表中，TUCE表示讲授Ⅱ前为测试学…
pandas读取大csv报错：TypeError: ufunc ‘isnan‘ not supported for the input types, and the inputs could not
使用pandas读取csv：
BPIC_2017_df pd.read_csv(./datasets_csv/BPI_Challenge_2017.csv, index_col0)
但是由于csv数据集太大了，读取报错：
---------------------------------------------------------------------------
TypeError …
RNA-seq Review：RNA-seq数据分析
文献：RNA-seq数据分析最佳实践调查本次阅读Genome Biology杂志2016年Online的RNA-seq数据分析方法的Review论文，题目为：A survey of best practices for RNA-seq data analysis本文翻译来自该文章。RNA是基因组和蛋白组的中间体，因…
Python数据分析：scikit-learn基础（一）
Python数据分析：scikit-learn基础（一）
基本步骤： 加载示例数据集 digits 在训练集上训练模型 SVM模型LR模型.fit() 训练模型 在测试集上测试模型 .predict() 进行预测 保存模型 pickle.dumps() 加载模型预测
加载示例数据集…
Python vs R：头对头数据分析
哪个更适合数据分析？ (Which is better for data analysis?) There have been dozens of articles written comparing Python and R from a subjective standpoint. We’ll add our own views at some point, but this article aims to look at the languages more…
如何在Python中四舍五入数字
It’s the era of big data, and every day more and more business are trying to leverage their data to make informed decisions. Many businesses are turning to Python’s powerful data science ecosystem to analyze their data, as evidenced by Python’s rising p…
Python数据分析：pandas时间序列处理及操作
Python数据分析：pandas时间序列处理及操作 基本类型，以时间戳为索引的series–>datatimeindex 创建方法： 指定index为datatime的list from datetime import datetime
import pandas as pd
import numpy as np# 指定index为datetime的list…
python统计分布和概率_Python基本统计信息：概率
python统计分布和概率When studying statistics, you will inevitably have to learn about probability. It is easy lose yourself in the formulas and theory behind probability, but it has essential uses in both working and daily life. We’ve previously discussed…
读写csv文件python_用Python读写CSV文件
读写csv文件pythonLet’s face it: you need to get information into and out of your programs through more than just the keyboard and console. Exchanging information through text files is a common way to share info between programs. One of the most popular fo…
pandas 数据清洗教程_使用Pandas进行数据操作：简要教程
pandas 数据清洗教程Learn three data manipulation techniques with Pandas in this guest post by Harish Garg, a software developer and data analyst, and the author of Mastering Exploratory Analysis with pandas. 在软件开发人员和数据分析师，《 熊猫探索…
还在为海量时序数据处理难题头痛不已？来 TDengine 用户案例专场直播找解决思路...
“我们用 MySQL 存储抄表数据，数据量达到 1500 万条时就出现较长的查询时延甚至卡死” “我们发现随着数据量增大，HBase 单表会触发自动分区，导致写入性能下降” “HBase 不支持聚合查询，大跨度时间范围查询数据量太大，…
数据分析的软件最全场景盘点
市面上数据分析的软件到底有多少，随便一百度就可以看到从Excel、sql、spss、python、tableau、powerbi、finebi、R、Hadoop、spark……光是看着一串的名字就该头大了。数据分析的软件这么多，究竟用哪个才是好的。
其实每个数据分析的软件都有其侧重的功…
阿里数据总监教你数据分析：做好这三点，企业数据分析手到擒来
百度搜索大数据，就会发现这是一个日均搜索达到4000K的热词，在头条上也是如此，只增不降。 这说明什么呢？说明它很重要，有很多人关注，虽然热度不及某当红小鲜肉....
数据分析或者大数据的热度开始起来&#…
使用Statsmodels在Python中进行重复测量方差分析
In this brief Python data analysis tutorial we will learn how to carry out a repeated measures ANOVA using Statsmodels. More specifically, we will learn how to use the AnovaRM class from statsmodels anova module. 在这个简短的Python数据分析教程中，…
python bokeh_使用Bokeh在Python中进行交互式数据可视化
python bokehBokeh prides itself on being a library for interactive data visualization. Bokeh以成为交互式数据可视化的库而自豪。 Unlike popular counterparts in the Python visualization space, like Matplotlib and Seaborn, Bokeh renders its graphics using HT…
pandas数据相关性分析_使用Pandas，SciPy和Seaborn进行探索性数据分析
pandas数据相关性分析In this post we are going to learn to explore data using Python, Pandas, and Seaborn. The data we are going to explore is data from a Wikipedia article. In this post we are actually going to learn how to parse data from a URL, exploring…
开发101时的市场：早期的想法和工具
It is usually useful to try to see the whole picture. In the field of internet startups thinking about development without planning market fit, might not be a great idea. 尝试查看整个图片通常很有用。 在互联网初创企业领域中，没有规划市场适应性而考…
python 方差分析_使用Python的重复测量方差分析
python 方差分析A common method in experimental psychology is within-subjects designs. One way to analysis the data collected using within-subjects designs are using repeated measures ANOVA. I recently wrote a post on how to conduct a repeated measures ANOV…
基于Hadoop的豆瓣电影的数据抓取、数据清洗、大数据分析（hdfs、flume、hive、mysql等）、大屏可视化
目录 项目介绍研究背景国内外研究现状分析研究目的研究意义研究总体设计数据获取网络爬虫介绍豆瓣电影数据的采集 数据预处理数据导入及环境配置Flume介绍Hive介绍MySQL介绍Pyecharts介绍环境配置及数据加载 大数据分析及可视化豆瓣影评结构化分析豆瓣电影类型占比分析豆瓣电影…
如何准备机器学习数据集_机器学习演练第一部分：准备数据
如何准备机器学习数据集Cleaning and preparing data is a critical first step in any machine learning project. In this blog post, Dataquest student Daniel Osei’s takes us through examining a dataset, selecting columns for features, exploring the data visuall…
Python数据分析与展示 第一章 Numpy库入门
数据的维度
维度：一组数据的组织形式 一维数据
一维数据由对等关系的有序或无序数据构成，采用线性方式组织
3.1413, 3.1398, 3.1404, 3.1401, 3.1349, 3.1376
对应 列表、数组 和 集合 等概念。
列表和数组
列表：数据类型可以不同数组&…
Python学习 Day70 numpy数组操作 02
numpy数组操作
一、修改数组形状
1.reshape()方法
原型：reshape(shape, orderC) 作用：不改变数据的条件下修改形状
参数说明shape形状order‘C’ – 按行，‘F’ – 按列，‘A’ – 原顺序，‘k’ – 元素在内存中的出…
一款优秀的BI软件应该具备哪些功能
现在市面上有众多的BI软件，功能也五花八门，用户在选择BI软件的时候不知道该如何去评判。下面笔者就简单谈一谈一款优秀的BI软件应该具备哪些功能。 1、数据处理分析一体化
在进行分析前的数据处理阶段，你是不是还需要数据工厂或者数据仓库工…
BI商业智能与大数据的区别
商业智能（Business Intelligence，简称：BI），又称商业智慧或商务智能，它是一套完整的解决方案，用来处理企业中现有数据，并将其转换成知识、分析和结论，辅助业务或者决策者做…
python机器学习——聚类评估方法 K-Means聚类 神经网络模型基础
目录 聚类模型的评价方法（1）轮廓系数：（2）评价分类模型 【聚类】K-Means聚类模型（1）聚类步骤：（2）sklearn参数解析（3）k-means算法特点 神…
如何做客户分析？客户分析的内容有哪些？
客户是企业生存和发展的基石。只有充分了解客户，企业才能制定相应的营销策略，提高转化率并达到客户满意度。
客户对产品的反应能力可以用来指导公司的销售策略；他们的意见和建议可以为公司改善产品和服务提供支持。分析现有客户不仅可以挖掘…
大数据如何改变商业？浅谈大数据给商业（企业）带来的影响
在20世纪，价值已经从有形基础设施变成了无形财产，从土地和工厂变成了品牌和产权。而现在进入21世纪，新的变革正在进行中，也就是说，计算机存储和数据分析方法已经取代计算机硬件成为一种新的价值来源。数据已成为宝贵的…
Python做出来的数据可视化真香！！
本文数据为博主自己爬取
最新 Python3 爬取前程无忧招聘网 mysql和excel 保存数据 学完可视化，准备自行爬取数据，自行分析。在实践中获得书上没有的知识，源于书本，高于书本。 最新可视化分析前程无忧招聘网1、数据预处理2、进行数…
Pandas 基本语法（一）
Pandas 目录 1、Pandas 基本语法(一) 2、Pandas 基本语法(二) 3、持续更新中…
Pandas 的基本语法(一)
pandas是一种Python数据分析的利器，是一个开源的数据分析包，最初是应用于金融数据分析工具…
单/多因素重复测量方差分析
重复测量方差分析
普通的方差是对于独立的单样本进行一次测量，比如我们在对一个班的前20名测量身高，然后再对后20名同学测量身高，这样我们就是对这个班的同学进行单次测量
重复测量就是每隔一周对两个组的同学的身高进行测量，这…
Python编程试卷（一）
一、选择题：每小题 2 分，共 20 题，共40分。
1、以下关键词不会用于模块导入的是（ ）。 A、import B、from C、as D、with
2、下列选项中，…
Mixlab的羊毛怎么薅？
ace这是Mixlab第一款T恤，属于创作者的、用代码设计的T恤，我们总共只准备了100件。这款T恤放出来的时候，我们收到了一些有意思的反馈，比如：“ 我其实关注好久了，但一直没注意到有社群，今天看…
手把手教你学Python之常见标准库（数学库、随机数库、日期库、集合扩展库）
目录
1、 Python中模块的导入
2、数学库-math
3、时间库-time
4、随机数库-random
5、集合扩展库-collections Python中的模块其实就是一个python文件，该文件中可以定义多个类、函数、变量等。模块名称就是不包含后缀的文件名。通常同一文件内的代码具有高内聚…
单/多因素协方差分析
（1）单因素协方差分析
当我们的数据不是很独立，难以避免的有一些相关关系，所以得用到协方差分析 R语言有一份自带的数据集，叫litter 这个数据是研究不同的药物剂量对于老鼠体重的影响，这里面的dose是剂量的…
手把手教你学Python之集合set
目录
集合的创建
集合的常见方法
集合运算
集合推导式 集合是无序可变容器，集合中元素放在一对大括号“{}”中，并用逗号分隔，元素类型可以相同也可以不同，但必须是不可变类型，如整型、字符串、元组等，集…
程序性能分析工具gprof介绍
性能分析工具gprof介绍 Ver：1.0 目录 1. GPROF介绍 4 2. 使用步骤 4 3. 使用举例 4 3.1 测试环境 4 3.2 测试代码 4 3.3 数据分析 5 3.3.1 flat profile模式 6 3.3.2 call graph模式 7 4. 链接库中的函数 …
【python】猫眼爬虫Top100电影信息
最近做了猫眼爬虫和数据分析，收获很多，记录在此。爬虫和数据分析是两个模块，可以参考目录：
目录
一、猫眼爬虫
1. 猫眼爬虫第一步——找到我们需要的数据
2. 猫眼爬虫第二步——获取数据
3. 猫眼爬虫第三步——解析数据
4. …
OpenTSDB 聚合
文章目录AggregationAggregationInterpolationDownsamplingAvailable AggregatorsAvgCountDevEstimated PercentilesFirst & LastMaxMimMinMimMaxMinNonePercentilesSumZimSumListing AggregatorsAggregation 原文地址：http://opentsdb.net/docs/build/html/use…
手把手教你学Python之字符串
目录
10.1 字符串的创建
10.2 字符串的常见方法
10.3 字符串应用举例
10.4 字符串格式化 字符串是由字符组成的一个不可变序列，和元组作用类似，也支持索引、切片、重复、合并等操作。Python中统一了“字符”和“字符串”的概念，字符串的内…
手把手教你学Python之元组
目录
元组的创建
元组和列表的联系与区别
生成器推导式 元组是Python中内置的有序不可变序列，元组的所有元素放在一对圆括号“()”中，并使用逗号隔开，元组中元素的类型可以相同也可以不同。
元组的创建 创建元组的两种方式： 注…
to_categorical函数介绍
to_categorical就是将类别标签向量转换为二进制（只有0和1）的矩阵类型表示。每一个标签用矩阵的对应的行向量来表示。
np_utils.to_categorical(数据的类别标签, 总类别数)
例如类别的标签为0、1、2、3、4，将数据分为这5类，则经过…
手把手教你学Python之基本数据类型
目录
整型-int
浮点型-float
布尔类型-bool
字符串类型-str Python中，每种对象都有一种类型，就跟我们生活中，对各种物品进行分类一样，不同类型的物品的功能不一样，例如同样是容器，玻璃容器、塑料容器、…
手把手教你学Python之Numpy学习（一文掌握科学计算库-Numpy）
目录
多维数组对象-ndarray
ndarray对象的创建
ndarray对象的主要属性
ndarray对象的主要方法
索引和切片
Numpy中的通用函数
Numpy中的数学函数
Numpy生成随机数
Numpy中的统计方法
Numpy中其他常用方法
Numpy中的数组运算
Numpy的广播机制
数组间的集合运算
…
Python数据分析：scikit-image
Python数据分析：scikit-image
scikit-image
Python中用来进行图像处理的常用包之一图像数据通过numpy中的ndarray表示通常和numpy、SciPy共同使用进行图像数据的处理
skimage的图像数据
skimage中的图像数据是由numpy的多维数组表示由skimage加载的图像数据可以…
Python数据分析：时序模型-ARIMA
Python数据分析：时序模型-ARIMA
AR(Autoregressive)模型 自回归模型描述的是当前值与历史值之间的关系 滞后p阶的AR模型 AR(p):ytμ∑i1pγiyt−iϵt\mathrm{AR}(\mathrm{p}) : y_{t}\mu\sum_{i1}^{p} \gamma_{i} y_{t-i}\epsilon_{t} AR(p):ytμi1∑pγiyt…
Python数据分析：逻辑回归(logistic regression)
Python数据分析：逻辑回归(logistic regression)
逻辑回归（Logistic Regression），简称LR，能够将特征输入集合转化为0和1这两类的概率。
优点：计算代价不高，易于理解和实现缺点：容易…
【数据挖掘与分析】python网络爬虫学习及实践记录 | part 05 爬虫进阶
数据说好的996！少一天都不行，赶完杂活儿，就来更第五部分了。 1-多线程概念和threading模块介绍
老师先介绍了多线程爬虫，通过资源使用效率提高系统效率。类比火车车厢，进程为火车，离开车厢的火车无法跑动。…
基于hadoop架构的企业数字化转型方案
引言
大型传统企业，通常都面临业务系统数据孤岛、各板块专业化程度高、多流程衔接交叉、数据不统一不完整不开放等问题。在搭建好物理层面hadoop数据平台的基础上，如何以业务流程为导向梳理数据走向，达成数据价值转化输出？
这个…
python熊猫图案_熊猫备忘单–适用于数据科学的Python
python熊猫图案Pandas is arguably the most important Python package for data science. Not only does it give you lots of methods and functions that make working with data easier, but it has been optimized for speed which gives you a significant advantage com…
Python中scipy库的pearsonr(x, y)的使用
函数：pearsonr(x,y)
功能：
计算特征与目标变量之间的相关度参数说明：
输入：x为特征，y为目标变量.输出：r： 相关系数 [-1，1]之间，p-value: p值。 注： p值越小…
想提升数据分析效率？快来试试BI工具吧
商业智能（BI）工具经过几十年的不断发展，已成为大型企业进行商业决策不可缺少的工具。在BI工具问世之前，由于制作报表的时间、人力成本较高，企业数据分析一直处于被忽视的状态。商业智能BI工具的出现极大地提高了企业数…
做数据分析有Excel了，还需要BI软件吗？
Excel应该是被用得最多的数据统计和数据分析软件了，它具备了很多强大的功能，像数据记录整理、数据加工计算、数据透视表、数据可视化等。作为一个数据分析入门工具，Excel具有十分突出的优势，就算是初学者，通过简单的学…
多元线性回归之基本假定的验证和处理办法
前言
多元线性回归模型统计推断结果的可靠性，建立在一些统计假设的基础上，只有在假设条件满足时，模型输出结果才成立，本文将展开讨论多元线性回归有哪些基本假设、如何检验假设是否成立、以及当基本假设不满足时的处理方案。同时…
机器学习项目之数据清洗
前言
数据清洗是机器学习项目中最为琐碎而又繁重的工作之一，下面总结一些经常用到的数据清洗方法与Python实现，以探索能否用更加自动化的手段来简化数据清洗工作。
包括：
1.缺失值处理
2.格式内容清洗
3.重复值处理
4.不一致数据处理
…
【读书笔记-＞数据分析】01 BDA数据分析导论
数据分析导论
介绍 章节内容 数据的概念、分类、价值以及数据分析的方法、步骤与工具等方面 考试内容 数据及其分类 （1） 数据的基本概念 （2） 数据的分类数据的价值与获取 （1） 样本数据的价值与获取 &#…
【读书笔记-＞数据分析】BDA教材《数据分析》书籍介绍
BDA教材《数据分析》书籍介绍
BDA
BDA数据分析职业技能等级。
旨在培养基于数据分析理论、计算机技术以及行业案例应用“三维一体”的大数据分析人才。培养数据管理、数据分析、数据挖掘、数据洞察方面的复合型和应用型专业人才。
BDA数据分析师证书分为员级、初级、中级和…
【读书笔记-＞统计学】05-02 “概率”的整体影响-随机变量的线性变换、独立观测值概念简介
线性变换
书中给了一个新的情境：在原来的基础上，老虎机的奖励翻5倍，但是拉一次杆的赌本从1美元变成了2美元。
下面是新的概率分布：
y-223487398P(Yy)0.9770.0080.0080.0060.001
之前的收益分布的期望和方差分别是“-0.77”和“…
数据分析_03_numpy
numpy 生成数组，得到ndarray np.array([1,2,3]) np.array(range(10))np.arange(10) np.arange(4,10,2,dtype(指定数据类型)float或"float64"…) #4,6,8 存放的数据的类型 a.dtype 调整数据类型 t6 t5.astype(“int8”) 修改小数位数 np.round(a,2) #a…
BI就是数据分析吗？
BI就是数据分析吗？
很多刚接触BI的人可能会有这个疑问，各大BI厂商在介绍BI的时候，也都会说BI是数据分析工具，其实，BI与数据分析并不能划等号。
数据分析是指用适当的统计分析方法对收集来的大量数据进行分析…
先知ppt_用先知预测时间序列数据–第2部分
先知pptIn Forecasting Time-Series data with Prophet – Part 1, I introduced Facebook’s Prophet library for time-series forecasting. In this article, I wanted to take some time to share how I work with the data after the forecasts. Specifically, I wanted…
数据分析 | Pandas 200道练习题 进阶篇（3）
文章目录DA21 大佬用户成就值比例DA22 牛客网用户最高的正确率DA23 统计牛客网用户的名字长度DA24 去掉信息不全的用户DA25 修补缺失的用户数据DA26 解决牛客网用户重复的数据总结：❤️ 作者简介：大家好我是小鱼干儿♛是一个热爱编程、热爱算法的大三学生…
数据分析 | Pandas 200道练习题 进阶篇（2）
❤️ 作者简介：大家好我是小鱼干儿♛是一个热爱编程、热爱算法的大三学生，蓝桥杯国赛二等奖获得者🐟 个人主页 ：https://blog.csdn.net/qq_52007481⭐ 个人社区：【小鱼干爱编程】💯 刷题网站：数…
盘点7款常用的数据分析工具
随着大数据信息化时代的到来，数据分析是各行各业都绕不开的一个话题，企业在发展过程中积累了大量的数据，对这些数据进行专业的分析，能够促进企业更好更精准的发展，能够有效防范企业拍脑袋决策的经营风险。通过数据分析…
什么是数据可视化？有什么作用？
什么是数据可视化？
关于数据可视化的定义有很多，像百度百科的定义是：数据可视化，是关于数据视觉表现形式的科学技术研究。其中，这种数据的视觉表现形式被定义为，一种以某种概要形式抽提出来的信息…
组织管理体系推广经验之一－为什么需要PMO？
PMO（Project Management Office）一般称为项目管理办公室、项目管理中心或者项目管理部。PMO是提高组织管理成熟度的核心部门，它根据业界最佳实践和公认的项目管理知识体系，并结合企业自身的业务和行业特点，结合企业的商…
Python统计模型探索性数据分析(EDA)系统(单变量-双变量-相关性-缺失值)
单变量分析
单变量分析旨在更深入地了解单个列。 它创建该列的各种统计数据和可视化。 例如，要深入了解 特征 year_built，要计算year_built 的最小值、最大值、不同计数、中值、方差，并创建一个箱线图来检查异常值，一个正常的 Q-…
人类，你怕不怕？AI 用户研究专家
Mixlab无界社区 - 跨学科 - AI眼动追踪UI 设计师改稿有啥参考方法？#A/B测试、眼动热力图分析、用户访谈、大数据分析......好麻烦啊，等你们研究测试完，用户不知道流失多少了......#研究测试还是必要的，但可以借助 AI的力量提升效率…
如何生成杂志级的可视化图表?
opus可视化工具很多，该如何选择？知识库最近发现了一款数据可视化生成工具 Datawrapper，只要在网页上提交数据，经过几步配置，就能生成杂志级出版级的可视化图表。不需要注册就能免费使用。Mixlab按需选择工具。若是偏杂…
人工智能：一种解决问题的方法 | Mixlab 独家专访出书成员
薛志荣-ML01最近发现，“成功” 这个词并不代表着终点，它不是永恒的胜利，只是暂时性的。设计也一样，只要它在一个阶段内给产品和用户创造价值，它就是好的设计；当它创造的价值越来越少甚至是负值时࿰…
设计定义专业，什么定义设计的专业 | 阿里云设计年鉴
设计 200 款云产品很难么？Xconsole 和其他设计系统有什么不同？十余年云产品设计中打磨而来的云产品体验设计实践，这些设计解决方案经过「设计」与「实践」的反复迭代，在上百万付费用户验证后才形成通用的范式。以及 Xbuild 等设计…
机器学习的维度诅咒 | MixLab人工智能
对于机器学习的理解，我相信很多人还无法做到简单、易懂的将其思想描述出来，比如这里提到的一个基本概念：数据的维度，以及算法应用中为何升维和降维。对于初学者来说，这些都是难以理解的，在前期可能只能套用…
agg函数加入进度条
在panda之中，我们经常需要使用到agg函数来将pandas之中的某几列聚合起来
from tqdm import tqdm
import pandas as pd
import numpy as np
df pd.DataFrame({"A":[1.0, 2.0, 3.0, 1.0, 2.0, 3.0, 1.0, 2.0, 3.0], "B":[1.0, 1.0, 1.0, 2.0, 2…
数据预处理之中心化和归一化
目录
1.背景
2.目的
3.原理
4.意义
5.标准化(归一化)优点及其方法
6.归一化方法使用场景
参考文献 在机器学习中为了解决分类和回归问题，通常需要对原始数据进行中心化与标准化处理。
1.背景
在数据挖掘和数据处理过程中，不同评价指标往往具有不…
《花木兰》得分太低？如何预测一部电影的IMDb评分？ | Mixlab跨学科课程
刘亦菲版的《花木兰》被指太烂，甚至有外国网友认为，这是迪斯尼拍的世界级烂片 。在国外最权威的评分机构IMDb中有88%的人打了1 分。那么问题来了，IMDb是什么？互联网电影数据库Internet Movie Database简称IMDbIMDb创办于1990年&am…
2018年的25个最佳数据可视化
艺术家和设计师每天都在创造奇迹，创造力真的是无穷无尽的！2018年他们又有哪些新奇的创意呢？DataFocus带你一起来欣赏2018年度优秀的数据可视化作品，希望能为您的可视化工作带来灵感。
使数据变得美丽的艺术正在风靡世界。从技术上…
当程序员还是香！2022年全球程序员收入报告出炉，首席工程师最高超700万！
最近，美国数据收集网站Levels.fyi 发布了2022年度程序员薪酬报告。
我们先看一下报告的统计方法，免得大家直接看数据会太激动！
统计数据是：「某个职级」在「某个地区」的「中位数」。我们先来看看职级的划分。
1 五种职级&…
他每天上班玩小游戏，一个月后居然学会Python编程，月薪涨到15K
对于Python编程，有人学习很容易，有的人直接从入门到放弃，为什么？
两个原因：
第一，不实用，从书上学到的Python知识都是基于Python2,版本，可现在都用Python3了。
第二，没…
python入门教程之菜鸟如何系统学习Python？
python入门教程之菜鸟如何系统学习Python？首先，给大家看一下Python具体的应用一张图表示，是酱紫的： 无论是实用性还是易用性，Python 都是学习编程最具性价比的选择。在今年，Python早已超越Java成为第一大编…
python这么火，程序员30岁转python是否值得？
3月的Tiobe编程语言排行榜不出意外，python依然强势霸榜，从90年出生到现在，python从一开始的无人问津到近两年的热度逐年上涨，爆发，令很多其他语言的程序员都有些焦虑，到底要不要转语言学python，…
《python自动化办公》和《数据透视表大全》电子文档，限时下载
内容简介
《Python最强基础学习文档》和《数据透视表大全》是一个专门为数据分析爱好者准备的高质量学习文档，我的朋友黄同学 原创写的。这两个文档尤其深受广大数据分析爱好者的喜欢， 文档历史下载次数，高达几千次。 《Python最强基础学习文…
还在用ppt数据分析图表制作吗，不试一下bi？
数据分析图表制作的时候大家一般都怎么做呢，是不是用excelppt数据分析图表制作： EXCEL虽然提供了强大的数据处理功能，但是需要对数据进行汇报时，又需要借助大量的文字进行描述； PPT虽然可以添加部分数据表格ÿ…
excel不行怎么办，大数据可视化分析还是这个行
大数据可视化分析怎么做。那肯定要用大数据可视化分析工具了。在大数据可视化分析中好用的工具有很多，譬如BI、R或者Python。
其中R和Python需要有一定的代码基础，因而不适合大多数人使用在此就不过多赘述。
同时还有人寻求excel的帮助：EXC…
数据可视化的最佳实践
许多DataFocus的用户都提到一件事，就是开发可视化作品变得更简单了，但是效果难以评估。本文翻译自toptal的博文，让我们来看看优秀的可视化实践是如何实现的吧。
“杂乱无章和令人困惑不是数据的属性 - 它们是设计的缺点。” - Edward Tufte …
10亿数据秒级展示，FineBI5.0的大数据支撑有个“幕后BOSS”！
随着各个业务系统的不断增加，以及各业务系统数据量不断激增，业务用户的分析诉求越来越多且变化很快，IT数据支撑方的工作变得越来越复杂。
1、数据来自多个不同的系统，存在需要跨数据源分析，需要对接各种不同数据源等问…
手把手教你用FineBI做数据可视化
前些日子公司引进了帆软商业智能FineBI，在接受了简单的培训后，发现这款商业智能软件用作可视分析只用一个词形容的话，那就是“轻盈灵动”！界面简洁、操作流畅，几个步骤就可以创建分析,获得想要的效果。此番学习也算让我…
莫斯科获全球“最贵城市”三连冠
新华社7月24日专电 美国美世咨询公司23日公布2008年度全球城市生活成本排名，俄罗斯莫斯科市第三次登上榜首。北京、上海分列第20位和第24位。根据美世咨询公司所列的指数，莫斯科市今年的生活成本指数为142.4,连续第三年被评为全球“最贵城市”。日本东京…
关于大规模实时数仓搭建，我有几条心得...
现状闲鱼作为一款闲置交易APP，在二手交易市场中是当之无愧的佼佼者。闲鱼从2014年诞生到现在七整年间持续增长，在这高速增长的背后带来的是每天近百亿的曝光点击浏览等数据，在这些数据规模如此庞大的背后也会带来诸多关于实时性的问题&#x…
闲鱼是如何实践一套完整的埋点自动化验证方案的？
背景作为一款国民级二手交易App，闲鱼每天都有成千上万的二手闲置商品发布，精准的个性化的商品推荐是促进闲鱼用户快速成交的秘诀。搜索推荐算法的精准和埋点数据的准确性息息相关。一旦埋点数据出现问题，用户侧就会出现推荐商品不准确、过度推…
消息质量平台系列文章|全链路排查篇
背景闲鱼每天流转的消息量级过亿，触达一半的用户，由于二手商品的性质，闲鱼用户需要通过聊天进一步了解宝贝成色，进行商品价格协商等，消息作为闲鱼的基础功能，在促进商品成交中起到很大的作用。同时在闲鱼&a…
最优秀的数据可视化案例欣赏
优秀的可视化案例欣赏美国运通漏斗图能量预测Bullseye雷达预算图城市统计数据可视化实时游戏数据能量监测自定义分析电力图表如何可视化您的数据？数据是新的生产资料，如果您无法以直观的方式显示数据，那么它基本上是无用的。没有人会在看到一…
在用seaborn做回归分析的时候遇到的一个问题，求大佬过来看看
直奔主题，我在做一个回归分析前面都没问题，直到用了seaborn。 我是把csv文件转换成df作为数据集输入到seaborn里的，前面的程序都没问题我就不列了，直接从导入csv这里开始。 开始我以为是我数据的问题，于是又做了个简单…
【中秋福利】大数据告诉你：今年中秋礼品这样选
引言
“礼品”一词由“礼”和“品”两个字组成。“礼”指的是仪式、礼节以及诸如忠孝等道德理念；“品”指的是物质的东西。从词源上讲，这个词暗示了礼物不只是物质的礼品，它还承载着礼节和仪式。
一、中秋礼品送给谁？
如何借…
【大数据报告】2022年空调产品研究报告
近日以来，全国多地持续不断的高温让我们亲眼见证了鄱阳湖、洞庭湖在一个月内“缩水”近70%；动物园里的黑熊、猴子只能舔冰消暑；因为高温，热射病例频频发生……“空调，WiFi，西瓜”俨然成为了居家生活的标配&…
大数据分析——暑期黑马《延禧攻略》到底有多火！
上周的文章一发果然引来了小伙伴们的积极留言，纷纷要求小编做个分析，小编也是为难呀，几经思量，终于选了个《延禧攻略》出来。纵观今年暑假的爆款剧不再是湖南卫视的什么金鹰独播剧了，虽然有着《流星花园》，…
正确理解scipy中的coo_matrix函数
正确理解scipy中的coo_matrix函数1. 构造一个空矩阵2. 使用ijv（triplet）格式构造一个矩阵3. 用重复的索引构造矩阵1. 构造一个空矩阵
这种用法比较简单，直接生成一个给定维度的矩阵，并且可以指定元素类型。 如下指定生成一个(3,4…
第2关：Pandas创建透视表和交叉表
任务描述 本关任务：使用Pandas加载tip.csv文件中的数据集，分别用透视表和交叉表统计顾客在每种用餐时间、每个星期下的小费总和情况。
相关知识 透视表 透视表是各种电子表格程序和其他数据分析软件中一种常见的数据汇总工具。它根据一个或多个键对数据…
使用 scikit-learn 构建模型
文章目录1. sklearn 介绍2. sklearn 转换器处理数据2.1 加载数据集2.2 划分数据集2.3 数据预处理与降维3. 聚类模型3.1 构建聚类模型3.2 评价聚类模型4. 分类模型4.1 构建分类模型4.2 评价分类模型5. 回归模型5.1 构建回归模型5.2 评价回归模型1. sklearn 介绍 scikit-learn&am…
指标又双叒下降了，我到底该怎么给老板分析？
面试中比较被常问到的业务类问题就是XX指标下降/上升，要怎么分析？
今天，我们也来说说这种指标变化类的问题，应该如何解答
比如： 次日用户留存率下降了 5%该怎么分析？ 界定问题
首先要界定问题࿰…
使用 pandas 进行数据预处理
文章目录1. 合并数据1.1 堆叠合并1.1.1 横向堆叠1.1.2 纵向堆叠1.2 主键合并1.3 重叠合并2. 清洗数据2.1 重复值2.1.1 记录重复2.1.2 特征重复2.2 缺失值2.2.1 删除法2.2.2 替换法2.2.3 插值法2.3 异常值2.3.1 3σ 原则2.3.2 箱线图分析3. 标准化数据3.1 离差标准化3.2 标准差标…
Python 的 Pandas 统计分析基础
文章目录1. pandas 介绍2. 读写不同数据源数据2.1 读写数据库数据2.1.1 读取2.1.2 存储2.2 读写文本文件2.2.1 读取2.2.2 存储2.3 读写 Excel 文件2.3.1 读取2.3.2 存储3. DataFrame 的常用操作3.1 常用属性3.2 增删改查3.2.1 查看（1）基本查看方式&#…
Python 的 Numpy 数值计算
文章目录1. Numpy 介绍2. Numpy 数组2.1 数组属性2.2 创建数组2.3 生成随机数2.4 访问数组元素2.5 变换数组的形态3. Numpy 矩阵和通用函数3.1 矩阵属性3.2 创建矩阵3.3 ufunc 函数3.3.1 常用 ufunc 函数运算3.3.2 ufunc 函数的广播机制4. 利用 Numpy 进行统计分析4.1 读/写文件…
《用图表说话》读后感
《用图表说话：麦肯锡商务沟通完全工具箱（珍藏版）》在我的必读清单里，推荐过很多次，也是之前送书活动中的书目，今天就来总结一下这本书到底讲了个啥。（知识图谱在文末，想要高清图片可…
数据分析Lambda架构详解
大家好，今天我们来介绍一个用于亿级实时数据分析架构Lambda架构。 Lambda架构
Lambda架构（Lambda Architecture）是由Twitter工程师南森马茨（Nathan Marz）提出的大数据处理架构。这一架构的提出基于马茨在BackType和Tw…
如何利用Python进行数据分析
今天我们主要的目标是：给大家介绍在所有的编程语言里，为什么Python能被广泛使用，甚至排名第一，给那些做数据分析相关工作和转行的小伙伴介绍数据分析行业里如何使用Python。 首先介绍一下什么是编程语言。 编程语言是一个计算机的…
YUI CSS Min –第2部分
The first part is here. It was more about building the YUICompressor, writing and running test cases. Now lets see what the compressor does exactly to your CSS. 第一部分在这里。 它更多地是关于构建YUICompressor，编写和运行测试用例。 现在࿰…
让机械故障的检查更为快速和精准 MSR数据记录仪记录多种类振动事件-并于PC端进行数据综合分析
现如今，各式各样的生产机器、机床、运输器械都运用了十分复杂的驱动技术，为了确保能够在三轴上面实现精确的线性运动或实现高效的旋转运动。在此情况下，可通过使用伴随机械运转时同时出现的振动特性或者振动模型的机械/电气参数来监测和优化驱…
【图解DSA数字签名算法】DSA签名算法的Python实现 | 物联网安全 | 信息安全
系列索引：【图解安全加密算法】加密算法系列索引 Python保姆级实现教程 | 物联网安全 | 信息安全 DSA数字签名算法基于SHA1哈希算法，关于SHA1的实现看另一篇文章。 文章目录一、什么是DSA二、DSA签名算法流程（1）DSA 签名过程&…
Python3 字符串转ASCII码、字符串转16进制
字符串与ASCII码转换
#ascii转字符串
a_ascii 97
b chr(a_ascii)
print(b)
>a#字符串转ascii
abc a
x ord(abc)
print(x)
>97对于一个长的字符串使用如下：
import numpy as npstr hello worldascii np.fromstring(str, dtypenp.uint8)print(ascii)
&g…
利用Python进行数据分析——函数部分
文章目录1 基础知识1.1 命名空间1.2 返回多个值1.3 函数也是对象2 一些重要函数2.1 map() 函数2.2 匿名函数（lambda）2.3 list() 函数2.4 set() 函数2.5 sort() 方法1 基础知识
函数使用 def 关键字声明，用 return 关键字返回值。
def my_fu…
程序员：Python学不学？完全没必要纠结
随着云计算、大数据、人工智能的大量应用，Python这毛头小子，成了当红炸子鸡，香飘四溢，撒播到互联网的每个角落里。
1
几家欢喜几家愁，欢喜的人，早就用上了，国外的Twitter、Google、Yahoo&…
Pandas与GUI界面的超强结合，爆赞
行文思路
有位粉丝提到了一个牛逼的库，它巧妙的将Pandas与GUI界面结合起来，使得我们可以借助GUI界面来分析DATaFrame数据框。
基于此，我觉得有必要写一篇文章，再为大家做一个学习分享。 pandasgui安装与简单使用
根据作者的介绍…
亚马逊入驻商用户画像分析
什么是入驻商用户画像体系
像淘宝，京东，天猫，亚马逊，拼多多的叫平台方，在平台里面的阿迪达斯，耐克，鸿星尔克，卡尔米等叫入驻商。 用户的基本属性：性别、年龄、受教育程度…
Matplotlib绘制常见的图表
Matplotlib绘图
导入包
import matplotlib.pyplot as plt主要思路：
创建一个画布（Figure）创建一个或者多个绘图（plotting）区域（坐标系，坐标轴，axis）在plotting区域上描…
33岁工地水泥工，跨行自学python终于拿到5位数，手把数教你如何“收割”时代的红利
上个月申请的专业薪水补给终于给批下来了，一个月3k，毕业三年我的工资终于迈向了五位数。让我不得不相信那句老话，付出总会有收获。 在学习之前，我还是要给大家澄清一个误区，就是网上普遍都在传的“python简单”&#…
大数据分析，在中国，找个身高1米7年入20万的老公，到底有多难？
点击上方“果汁简历”，选择“置顶公众号”在中国，女性想找到适龄男性，把标准“降低”到年收入20万，身高170厘米，就已经几乎是“百里挑一”的水平了。01 身高1米7，标准真的不低2020年底，国新办发…
Greenplum + PostGIS 在地理空间大数据分析的应用
引 言 随着大数据技术的发展，急剧增长的地理空间大数据已经成为海量数据处理的重要部分。Greenplum 作为成熟、稳定的大数据平台，支持包括 PostGIS 在内的众多工具，使应用场景更加广泛。 本文全面的分析了地理空间大数据在电信行业的非实…
tableau-小栗子-让你的图表背景变透明
具体步骤如下： 1
创建图表 打开 Tableau，添加数据源表，选择超市-订单的数据源表。然后，将销售额拖至列、将类别拖至行，再将类别拖至颜色，生成如下的条形图表。 2
插入背景图片 点击新增仪表板按钮&#x…
tableau-咖啡行业销售数据看板
Step 1，设计思路 Step 2，准备所需数据 Step 3，连接到Tableau Desktop Step 4，思路可视化
Sheet1：当日销售额及环比（数据看板）
Sheet2：当日订单量及环比（数据看板&#…
tableau-在线职业教育经营分析
Step 1，设计思路 Step 2，准备所需数据
Step 3，连接到Tableau Desktop Step 4，思路可视化 Sheet1：成交量数据 Sheet2：新增试听用户数 Sheet3：新增用户数 Sheet4：本月业绩目标达成&am…
Greenplum助医疗大数据从“奢侈品”走向常态化
增加医疗大数据平台的便捷功能服务，推动医疗大数据的常态化应用。 近年来，大数据产业发展如火如荼。不过，在医疗领域，医疗大数据平台在不少医院心目中还是曲高和寡的“奢侈品”。 2019年5月，中国医院协会信息专业委员会…
Greenplum问题定位及性能调优
《Greenplum走进济南》技术研讨会于7月3日成功举办，我们已经为大家整理了两篇演讲内容（《基于fdw的跨Greenplum集群数据库查询实现》，《基于Greenplum构建下一代数据分析平台》），今天，第三篇演讲内容是由Gr…
python入门基础知识（七）：循环语句
python入门基础知识（七）：循环语句1. 概述2. for循环语句（1）基本的for循环语句（2）通过遍历方式实现循环（3）for…else循环语句（4）嵌套for循环语句3.…
【亚洲峰会】Greenplum高级功能和案例，带你回顾六大话题
了解更多Greenplum相关内容，欢迎访问Greenplum中文社区网站 Greenplum 中国技术峰会是决策者、数据科学家、分析师、DBA 和开发人员聚会的地方，在这里一起共同讨论，共享和塑造高端数据技术的未来。今年由于疫情原因，我们将峰会搬到…
Matplotlib基础使用
Matplotlib 的使用
matplotlib更多的图形样式
图形样式
一、基础绘图01
from matplotlib import pyplot as pltx range(2, 26, 2)
y [15, 13, 14.5, 17, 20, 25, 26, 26, 24, 22, 18, 15]# 设置图片大小
fig plt.figure(figsize(15, 8), dpi80)# 绘图
plt.plot(x, y, li…
数据分析_01_intro
Data Analysis-intro
https://www.bilibili.com/video/BV1hx411d7jb
主要学matplotlib、numpy、pandas
流程：提出问题、准备数据、分析数据、获得结论、成果可视化
打开jupyter 打开anaconda prompt或可视化页面 输入 (base) C:\Users\74672>jupyter notebo…
python量化投资（六）——从mysql数据库读取数据
在前几部分介绍了如何从tushare中获取数据存入mysql数据库，已经将所需的交易股票数据以及指数数据顺利存入数据库。为了进行数据分析，我们需要将存储的数据重新读取为pandas.DataFrame数据类型，从而使用pandas进行科学计算。本例以股票代码为…
数据分析--pandas 处理结构化数据
pandas 处理结构化数据基本数据结构SeriesDataFrameDataFrame对象的访问基于pandas的index对象访问操作pandas的index对象索引的不同访问方式调用方式调用方式间的区别特殊参数类型数学统计和计算工具统计函数，协方差、相关系数、排序窗口函数数学聚合和分组运算agg…
数据分析--数据预处理
数据预处理数据分类定量数据定性数据数据质量数据清洗特征工程特征选择特征构建特征提取数据分类
定量数据
离散变量连续变量
定性数据
定序变量名义变量 集中趋势 主要测度是均值，中位数，和众数 离散程度 考虑变量的离散程度，主要考虑变…
数据分析--数据分析相关库
-数据分析相关库NumPypandasMatplotlibscikit-learnScrapySciPyNLTKstatsmodelsJupyterNumPy
是一个基础的科学计算库，是众多数据库的基础
提供了多维数组对象的数据结构，可以用于数据量较大情况下的数组与矩阵的储存和
计算，除此之外还提供…
数据分析（1）Matplotlib基础内容
文章目录一. Matplotlib基础知识（一）底层容器层1. 画布Figure（1）plt.subplot()（2）plt.subplots()（3）fig.add_subplot()2. 图表Axes（二）辅助显示层1. 标题Titl…
电商交易数据分析-Tableau
1.这是一份关于某电脑平台2016年的交易数据，通过分析这份数据，我们可以知道这一整年的销售情况。 数据解读： id:ID order_id:订单ID user_id:用户ID productId:产品ID cityId:城市的ID price:价格 payMoney:支付金额 channelId:渠道ID device…
房产|1-11月份全国房地产开发投资下降9.8%
2022年1—11月份，全国房地产开发投资123863亿元，同比下降9.8%；其中，住宅投资94016亿元，下降9.2%。 2022年1—11月份，房地产开发企业房屋施工面积896857万平方米，同比下降6.5%。其中，…
机器学习的大门开了.......
import numpy as np
import pandas as pd
import pylab
from pandas import DataFrame,Series
from matplotlib import pyplot as plt
%matplotlib inline初识机器学习：研究沿海城市距离跟其温度湿度之间的关系案例
导入数据，发现各城市有多张表且无关系，所以考虑级联
fer…
数据分析三剑客：Numpy、Pandas、Matplotlib（你想看的这里都有，超详细版本）
写在前面的话：一直以来，笔者都非常想尝试将所学的知识体系化从而搭建出一名数据分析师应该具备的知识框架与数据处理能力，三剑客将是这条路的起点，本文为笔者原创，耗费近一周左右的私人时间，原创不易，希望读者盆友们多多指正，时间有限，文中出现的错误也希望大家指正，…
【新消息】更快、更强的Pivotal Greenplum 6和企业级应用Postgres来啦！
获得技术资料内容，请访问Greenplum中文社区网站 2019年3月19日，领先的云原生平台提供商Pivotal Software, Inc.（纽约证券交易所代码：PVTL）在美国旧金山的Greenplum峰会上宣布，推出针对Pivotal Greenplum的第…
Pandas深入浅出
4.Pandas新增数据列 文章目录4.Pandas新增数据列前言一、直接赋值二、df.apply方法三、df.assign方法四、按条件选择分组分别进行赋值总结前言
不知道怎么搞的，我放在CSDN上免费下载的资源，平台竟然给附加了积分的要求。我用百度网盘分享一下࿱…
用时72天，Greenplum 内核升级到 PostgreSQL 9.2
获得技术资料内容，请访问Greenplum中文社区网站 8月2号，Greenplum数据库中合并进了PostgreSQL 9.2的代码，整个改动大概引入了32万行新代码，并减少了约6万行代码，牵涉到2261个文件。整个PostgreSQL 9.2合并工作前后大概…
深度学习解决过拟合——数据增广
Data Augmentation
前言：在现实生活中，带有标签的数据往往不好找到，因此我们对于数据量少的分类任务，使得在训练神经网络的过程中，常常会出现过拟合的现象。 因此数据增强对于解决过拟合问题是最重要的途径。
展示即…
【新书推荐】Cleaning Data for Effective Data Science
各位好，此账号的目的在于为各位想努力提升自己的程序员分享一些全球最新的技术类图书信息，今天带来的是2021年3月由Packt出版社最新出版的一本关于大数据的书，涉及的语言为Python和R语言。
Cleaning Data for Effective Data Science 作者&a…
数据分析python实验课系列
chapter1
1.定义字符串，完成字符串索引/切片/find/replace/split/遍历/连接/输入输出/重复连接等操作； 2.定义一个函数，参数为一列表，实现对列表中奇数项求和，偶数项求差，并返回和与差
# 1.定义字符串&am…
Python+练习题目
练习平台
https://www.python123.io Python123平台https://pintia.cn 程序设计类实验辅导教学平台https://www.patest.cn 计算机程序设计能力考试
习题
1、工整打印九九乘法表
2、绘制同切圆
3、依次输入三个爱好，一起输出
4、输入名字，随机生成幸…
有哪些你看了以后大呼过瘾的数据分析书？
书不在多，而在于精。 数据分析类的书有很多，可以按数据分析的流程分类，每个流程应该看哪些书籍。
也可以按照通识类和工具类进行分类，通识类可以理解为入门读物类，工具类就是针对不同的工具必读的书籍了。
还可以按照…
电商数据分析Excel案例
一、了解电商行业 了解电商 第一代电商：以供货为主，纯卖货，没技术 第二代电商：以推广流量为中心，刷单、直通车、报活动，不算利润，亏钱赚吆喝 第三代电商：以消费者为中心，…
数据分析实战：母婴商品分析
本文来自读者投稿，作者：Dake项目背景 近年来母婴产品的消费逐渐增加，这是一份关于淘宝天猫的一份母婴产品（2012年/7月到2015年/2月）的销售数据。分析该数据集有利于了解目前市场的销售情况，便于做出运营决策…
Excel函数（1）统计函数这4个够用了！
本节内容介绍Excel的几个统计函数怎么用知识点：countif 函数count 函数sumif 函数sum 函数一、countif作用：按条件统计个数模板：countif(区域，条件)实例：我想要知道L列姓名出现了几次，可以用countif函数。R…
Excel可视化（2）：13个变种图使用技巧
上周写了5个基本图的使用指南，其实图表的使用不难，主要在于你想要表达什么样的信息，而不是你拥有什么样的数据。这一小节给大家介绍13个基于基本图的变种图的使用。阅读提示：阅读对象：想要了解基本图有哪些变种图表以及…
用Excel做直方图（1）：随机数发生器
在介绍用Excel做直方图前，先来介绍用Excel生成随机数的功能，在我看来，这两个功能还是很息息相关的，放在一起学习可以更深入的理解统计学里各种分布的概念。 本节知识点： 数据分析工具库：随机数发生器 离散…
商务智能(BI)的四大关键技术
商务智能的支撑技术主要包括ETL(数据的提取、转换与加载)技术和数据仓库与数据集市技术、OLAP技术、数据挖掘技术与数据的发布与表示技术。 1.数据仓库技术 实施BI首先要从企业内部和企业外部不同的数据源，如客户关系管理(CRM)、供应链管理(SCM)、企业资源规划(ER…
国内电商数据分析实战全流程第一章：用户行为分析（小白也能学会，手把手教系列，思维晋级，独家分享）
本专栏将会从用户行为分析，用户价值分析，用户画像，商品画像，销售预测，基于用户推荐，用户购买力预测入手，手把手带你入门电商数据分析。 数据分析的流程是什么？ 明确目标获取数据数据探索和预处理分析数据得出结论验证结论结果展现什么是用户行为？
用户行为就是用户在…
电商数据分析常见的指标汇总
总体运营指标：从流量、订单、总体销售业绩、整体指标进行把控，起码对运营的电商平台有个大致了解，到底运营的怎么样，是亏是赚。 网站流量指标：即对访问你网站的访客进行分析，基于这些数据可以对网页进行改进…
电商数据分析——基于hive数仓，实现大数据分析
1. 需求
以电商数据为基础，结合hive数仓，实现大数据分析。
数据源可通过日志取得，数据清洗转换导入数据仓库，通过数仓中数据分析得到数据总结，用于企业决策。本项目基于以下表类进行电商数仓分析，分用户信…
购物篮分析与产品定位分析
什么是产品关联度分析
关联分析是发现交易数据库中不同商品（项）之间的联系，主要应用于电商网站 推荐、线下零售门店商品摆放等场景中。 关联规则：
支持度（support）：数据集中包含某几个特定项的…
Ubuntu20.04系统Cuckoo sandbox所需环境搭建及安装(超详细图文)
请勿叫我大神，我只是互联网的搬运工~前言
由于这几天老大让我搭个cuckoo服务器方便做一些恶意样本分析的工作，但目前搜到的清一色都是ubuntu18、16的安装教程，可是我搭的系统是Ubuntu20 …(真的是愁死我了) 本教程以Ubuntu20桌面版作为示范&…
数据分析中常用的pandas操作
数据预清洗
缺失值查找与处理
python – None（缺失对象）
numpy – nan(not a number,缺失数值)
float类型，可以数学计算，但返回nan值
pandas – NaT（缺失时间）
基于numpy开发的，有n…
Hiptype：分析电子书阅读习惯和读者群体
一家名为Hiptype的创业公司想要将已经在Web形成标准的数据分析功能带到电子书领域。Hiptype联合创始人James Levy和Sohail Prasad将它比喻为“电子书版的Google Analytics”。 Hiptype正收集大量的电子书数据，当用户在电子书商城寻找想要的电子书时，Hipt…
互联网电商订单数据订单的一般思路
互联网电商订单数据订单的一般思路V1
找出问题通过数值计算，分布规律，可视化方法来了解数据的基本情况分析问题通过线性回归，逻辑回归找到自变量，因变量解决问题撰写数据报告，决策性分析
1.Python对数据集进行预处理 …
tableau-小栗子-教你制作有趣的bump chart
比如在下面这个Viz作品中，Bump chart用来连接每种汽车颜色在不同年份的排名状况，以此知道消费者对于汽车颜色偏好的变化。 “这个汽车颜色的Viz能告诉我们什么？” 关注本微信公众号，并在首页直接输入“汽车颜色”，查阅…
机器学习项目清单（3）
机器学习项目清单（3） … … 研究数据以获取灵感 … … 对数据的研究不需要额外再进行讨论，按照流水线般的数据研究工作就可以。大致包含部分：数据之前准备工作、数据探索准备工作、常用的几个分析方法、数据总结。然后这个工作需要…
python机器学习——主成分分析PCA实现
主成分分析PCA实现一、数据降维二、应用“手写体数字图像”数据进行PCA操作参考文献：一、数据降维
降维/压缩问题是选取具有代表性的特征，在保持数据多样性（ Variance ）的基础上，规避掉大量的特征冗余和噪声ÿ…
python机器学习——主成分分析理论简介
主成分分析理论简介一、特征降维1.1什么是特征降维？1.2为什么要进行特征降维？1.3特征选择和特征抽取二、主成分分析(PCA)理论2.1 算法描述2.2 PCA 在图像识别的应用2.3、主成分分析法优缺点参考一、特征降维
1.1什么是特征降维？
采用低维度…
基于Greenplum+Kafka的实时数据处理
了解更多Greenplum技术干货，欢迎访问Greenplum中文社区网站 在追求数据时效性的今天，如何高效处理低延时的流数据，逐渐成为大家越来越关注的问题。流数据处理能力已成为衡量大数据平台计算实力的一个重要指标。Greenplum研发团队在开源Greenp…
【案例】海信采用Greenplum搭建大数据平台
近几年来 “智能制造”、“新制造” 等理念层出不穷 让很多制造业企业为之振奋 在智能化的时代 要如何有效的走向制造智能化转型？ 从家喻户晓的海信电视 到享誉全球的海信集团 海信引入分布式数据库Greenplum 无缝集成EDW、Hadoop、ETL工具、调度工具搭建混合式数据…
pandas读取tsv大文件(GB)方法
TSV文件和CSV的文件的区别是：前者使用\t作为分隔符，后者使用,作为分隔符。
使用pandas读取tsv文件的代码如下：
trainpd.read_csv(test.tsv, sep\t)如果已有表头，则可使用header参数：
trainpd.read_csv(test.tsv, se…
python pandas将分类变量转化为虚拟变量（哑变量）
pandas将分类变量转化为虚拟变量（哑变量）
import pandas as pd
import numpy as np
data pd.read_csv(train.csv)
data.DepartmentDepartment 代表员工所在部门，Sales销售部，Research & Development研发部，Human…
为什么要写统计学这个系列的文章？
为什么要写统计学这个系列的文章？
先介绍一下自己吧，我是应用统计学专业的学生，之前在立信会计学院应用统计专业学习，目前在上海师范大学读硕士。我接触统计学已经4年多了，在学校里确实学习了很多东西，感觉…
微博专员职业探秘：入职门槛不高 能力要求全面
近两年许多企业看重微博传播性强、影响范围广的特点，开始借助微博进行营销和品牌推广，企业微博运营人员也应运而生，继而出现了微博运营专员这种新职位。业内人士指出，现在这个岗位的门槛还比较低，但要做得出色则需要具…
[转帖]有限元计算结果的知识化研究
０ 引言
通常，有限元分析软件在后处理上只是将计算结果以图形或表格的方式显示在屏幕上，并没有对计算结果进行系统的整理和提炼。在基于有限元计算结果的反复设计过程中，设计人员往往通过计算结果图或表来了解设计上的缺陷和不恰…
大数据处理三大瓶颈：大容量、多格式和速度
越来越多的大企业的数据集以及创建需要的一切技术，包括存储、网络、分析、归档和检索等，这些被认为是海量数据。这些大量信息直接推动了存储、服务器以及安全的发展。同时也是给IT部门带来了一系列必须解决的问题。
信息技术研究和分析的公司Gartner认为…
Pandas合并DataFrame数据写入Excels
concat对比merge
1.要想实现sql中的join，需要使用merge方法，能指定列key。 2.pandas中的join方法，相比merge，只是个弟弟，使用场景有限，相当于concat中的方向为1的合并。 3.concat实现的只是将两个或多个df…
技术文章 | 机器学习分析工具将如何驱动物联网
本文来源于阿里云-云栖社区，原文点击这里。 根据ABI Research近期的一份报告，机器学习分析工具将减少IoT的复杂性，并提高IoT的采用。该公司预计，随着机器学习即服务（MLaaS）模型的发展，机器学习数…
数据挖掘技术的来源、历史、研究内容及常用技术
数据挖掘技术的来源、历史、研究内容及常用技术
1 数据挖掘技术的由来
1.1网络之后的下一个技术热点 我们现在已经生活在一个网络化的时代，通信、计算机和网络技术正改变着整个人类和社会。如果用芯片集成度来衡量微电子技术，用CPU处理速度来衡量计…
亿发软件：玩具制造行业批发ERP系统解决方案，赋能传统制造商数字化
我国长期以来被公认为玩具制造大国，受益于其制造基础设施和成本优势。此外，可支配收入的增加和用户生活方式的改变增加了国内外对玩具的需求。然而，行业也面临着挑战和转型。随着数字技术的出现和用户偏好的变化，玩具ERP系统在确保…
铸剑14年，Apache Doris终毕业！百度PALO助力顶级项目持续精进
北京时间2022年6月16日，Apache 软件基金会宣布 Apache Doris 正式毕业，成为 Apache 顶级项目。作为国人主导的新兴数据仓库及数据分析类开源项目，Apache Doris 本次成功毕业是百度长期支持和践行开源理念的一项重要里程碑。目前，A…
百度智能云 × 华泰证券 | 一块屏上跳动的“商业智慧”
企业在发展过程中积累了大量的数据，这些数据就像是“沉睡的金矿”，并没有得到充分的利用。而数据可视化则是可以挖掘“金矿”的利器，通过数据的汇聚、分析和可视化呈现，让业务获得智慧支撑。数据价值对企业的意义不言而喻…
飞桨AI开发平台企业版BML，为人工智能新基建助力
伴随着产业智能化的大潮，AI正成为诸多行业转型升级的通用技术，企业级AI开发平台的作用日益凸显。近日，百度智能云面向广大企业用户，正式发布飞桨AI开发平台企业版BML4.0（后简称BML）。BML的使命是打通数据闭…
大型超市管理中的条码技术应用
大型超市管理中的条码技术应用2003-07-07 15:13 作者：吴 育 （连锁超市导报6月27日报道）条码的应用在现代的大型超市管理中不可或缺。像沃尔玛、易初莲花等世界著名大型超市，从纵向到横向，从商品的流通、供应商的选择…
保险业信息化的两大趋势：数据挖掘＋CRM
保险业信息化的两大趋势：数据挖掘＋CRM 来自：中国商业智能网 作者：xynet 日期：2004年07月02日 浏览次数：98 作为我国金融市场中成长最为迅速的行业，保险公司借助信息化手段提高竞争能力也成为关…
机锋网2012年Q2运营数据分析：用户与开发者对应用的需求存在巨大差异
机锋网刚公布了2012年Q2运营数据，从应用下载量、开发者数量、新增应用数量、应用下载类别等数据分析来看，整个Android市场呈持续增长，但用户与开发者对应用的需求存在着巨大差异。 根据投资公司Needham & Company的分析师Charlie Wolf上周…
数据处理模块（numpy，panads）-案例
数据处理（panads与numpy）模块
#读取数据
import pandas as pd
import numpy as np
file_path open(地址)
file_date pd.read_csv(file_path)
file_date.head()##tail()#数据预处理
file_date.duplicated()#重复值检测
file_date file_date.drop_dupl…
tableau-市场渠道质量评估
假如要定期追踪市场渠道拉新用户的质量，你可以怎么做？
Step 1，设计思路
分渠道拉新用户量； 分渠道拉新用户留存率； 分渠道拉新用户成本； 分渠道拉新用户LTV； 分渠道拉新用户ROI 渠道综合评估分…
tableau-618期间销售情况的仪表盘
Step 1，设计思路
每日销售情况，当日目标完成情况，同比去年增长情况，分品类构成，分单品销量排行这是我的思路Step 2，准备所需数据
2020年618期间截止昨日每日日销售数据； 2020年618期间昨日销售…
基于mysql的电商用户分析
目录
1.项目背景
1.1分析流程
2.使用“人货场”拆解方式建立指标体系
3.确认问题
4.准备工作
4.1数据读取（用户行为数据）
4.2数据预处理 5.指标体系建设
5.1用户指标体系（UV/PV/留存率）RFM模型分析
5.1.1 基础指标
5.1.…
Kettle数据的导入导出—批量Excel表到数据库
案例目的：如果你有一堆收上来，表结构相同的Excel表格，把他们放在了一个文件夹下，向批量导入到数据库中的一个表中。那么下面的操作将非常适用。
这里用emp表为例子讲解，先进行一些准备工作。
数据库：orac…
这届 AI 预测欧洲杯冠军，通通被打脸
持续了一个月的欧洲杯，终于落下帷幕。 北京时间 7 月 12 日（周一）凌晨，本届欧洲杯决赛中，意大利对阵英格兰。两队在 120 分钟时间里 1-1 战平，意大利在欧洲杯中通过点球大战以 3:2击败英格兰夺冠。 意大利上…
谁说菜鸟不会数据分析大框
目录 第 1 章：确定分析思路 数据方法论 常用的数据分析方法论 第 2 章：数据准备 理解数据 数据来源 第 3 章：数据处理 数据清洗 重复数据的处理 缺失数据处理 检查数据逻辑错误（使用if函数） 数据加工 第 4章ÿ…
pandas 数据处理（python数据分析活用pandas库）
目录 1.数据组合 1.1连接
1.1.1添加行
1.1.2添加列 1.1.3不同索引下的连接操作
1.2合并多个数据集 1.2.1一对一合并 1.2.2多对一合并 1.2.3多对多合并
2.缺失数据
2.1查找和统计缺失数据
2.2清理缺失数据
2.2.1重新编码/替换
2.2.2前值填充 2.2.3后值填充 2.2.4插值
2…
成功解决 SQL查询某列具有最大值的行
问题描述
通过SQL语句查询某列上具有极值（极大值极小值）的行
实际点的例子，假如给我一个成绩单，我想知道：每个同学的哪一门课程分数考得最高。
四种解决思路和办法
准备工作
创建一个表，用来表示成绩单，有三个字段，学生ID，课程分数，课程名
插入几条数据，分别是…
SAS认证与数据挖掘、商业智能职业发展
SAS认证与数据挖掘、商业智能职业发展 何为数据挖掘和商业智能？ 与数据挖掘相关的词汇有例如数据仓库，数据装载(ETL)，数据挖掘(Data Mining)， 客户关系管理(CRM)，SAS，PeopleSoft, SAP等。到上个世纪…
供应商管理库存的信息支撑系统
现代信息技术的飞速发展，电子商务以其崭新的经营理念和实现方式成为企业决胜未来市场的重要砝码，信息系统成为企业管理不可或缺的主要工具。因此，供应商管理库存的实施过程不仅涉及到它的流程，还与其信息支撑系统的实施密不可分。…
大数据应用时代来袭 SaaS走向没落？
【编者按】本文作者Raj De Datta，BloomReach公司的CEO和创办人之一。
随着大量的信息涌入互联网——90%的互联网是过去两年建立起来的——互联网公司正在想方设法去熟悉并利用大数据来推动他们的业务。正如SaaS和云技术一样完全变革了企业的运作方式一样࿰…
即将改变世界的6大革新技术
在过去的五六年时间里，我们见证了智能手机、平板电脑、触摸屏、互联网电视、免费Wi-Fi、Facebook、Twitter等新兴事物的崛起。那未来几年呢，会有哪些具有划时代意义的技术出现？这些技术又将给我们的生活带来什么样的变化？ 正如手机…
浅析代谢组学最常用到的数据分析方法 图形详解pca pls-da opls-da
代谢组学是一门对某一生物或细胞所有低分子质量代谢产物（以相对分子质量<1000的有机和无机的代谢物为研究核心区）进行分析的新兴学科。生物样本通过NMR、GC-MS、LC-MS等高通量仪器分析检测后，能产生大量的数据，这些数据具有高维…
应用推广工具包Appboy获100万美金种子投资
对于应用开发商来说，开发出了很酷的应用，推广做不好也没法挣钱，那么如何推广应用，设计出更佳的用户体验，进而找到更多挣钱的方式？ Appboy是一家为开发商们提供免费移动软件开发工具包的初创公司，…
Python3，pandas自动处理exlce数据及yagmail邮件自动发送
使用pandas来实现excel表中数据统计提取，及邮件发送功能！ 数据文件统计及发送使用pandas处理Excel的数据yagmail实现邮件自动发送使用pandas处理Excel的数据
pandas怎么读取excel，我们已经分享了，不太熟悉的，可以参照…
Python3，Pandas 5行代码实现对excel 读写操作
Pandas 读写excelpandas 写入excel数据pandas 读取excel数据pandas 写入excel数据
在使用pandas之前，需要安装pandas模块, 老方法：
pip install pandas安装完成后，就可以直接使用了， 上代码
# -*- coding:utf-8 -*-
"&quo…
Python 元组的运用
Python 元组的运用 元组创建 格式1：元组名() 格式2：元组名("数据"，) 元组函数作用tuple()把数据转换为元组 访问元组 索引访问 #索引访问
a(1,2,3,4)
print(a[3])
#结果：4#切片访问
t[1,2,3,4,5,6]
btuple(t)
print(b[1…
查询你的手机或者邮箱注册过那些网站
现状：手机号在生活中的作用越来越大了，它不再只是一个电话号码，只是用来打电话、发信息了。网上的很多服务、银行、生活的各种服务都离不开手机号，没有手机号我们无法享受到这样那样的便利服务，所以，我们的…
Python与数据分析--Pandas-1
目录 1.Pandas简介
2.Series的创建
1.通过数组列表来创建
2.通过传入标量创建
3.通过字典类型来创建 4.通过numpy来创建
3.Series的索引和应用
1. 通过index和values信息
2. 通过切片方法获取信息
4.DataFrame的创建
1.直接创建
2.矩阵方式创建
3.字典类型创建
5.…
在Excel中添加数据分析工具
在Excel中添加数据分析工具声明操作步骤流程截图声明
Excel版本为2021
操作步骤
点击文件左下角点击选项左侧点击加载项下方点击转到勾选分析工具库，点击确定
流程截图 Step 1,2 Step 3,4 Step 5
奥威BI数据可视化工具：个性化定制，打造独特大屏
每个人都有自己独特的审美，因此即使是做可视化大屏，也有很多人希望做出不一样的报表，用以缓解审美疲劳的同时提高报表浏览效率。因此这也催生出了数据可视化工具的个性化可视化大屏制作需求。
奥威BI数据可视化工具：个性化定制&a…
Python数据攻略-Pandas与统计数据分析
统计学在数据分析中到底有多重要？在数据分析的世界里，统计学扮演着一角色。想象一下你是《三国志》游戏的数据分析师，任务是找出哪个武将最受玩家欢迎，哪些战役最具挑战性等。
你怎么做呢？这就需要统计学的力量了。 文章目录 基础统计方法描述性统计方差和标准差相关性和…
中小企业进销存软件哪个好？4款进销存商品管理软件推荐-亿发
在现代商业运营中，有效的开单记账系统是中小商户增强管理水平、优化业务流程的重要利器。市面上涌现出众多开单记账软件，如亿发软件、秦丝、智慧记、管家婆等，每款软件都有各自的优势和特点。本文帮助您了解每款软件的特点，为您的…
数据的语言：学习数据可视化的实际应用
数据可视化应该学什么？这是一个在信息时代越来越重要的问题。随着数据不断增长和积累，从社交媒体到企业业务，从科学研究到医疗健康，我们都面临着海量的数据。然而，数据本身往往是冰冷、抽象的数字，对于大多…
数据分析之Pandas从入门到放弃：代码+实战，9分钟带你推开Pandas大门！！！
今天整理了一下Pandas的使用方法； 应该是全网整理最完整，最简洁易读(立整)的一篇文章！！ 嗯…别不信，确实是这样的~ ~
跟着小鱼， 带你9分钟推开Pandas的大门！！ 从此走上数据分析师的…
数学建模及数据分析 || 4. 深度学习应用案例分享
PyTorch 深度学习全连接网络分类 文章目录 PyTorch 深度学习全连接网络分类1. 非线性二分类2. 泰坦尼克号数据分类2.1 数据的准备工作2.2 全连接网络的搭建2.3 结果的可视化 1. 非线性二分类
import sklearn.datasets #数据集
import numpy as np
import matplotlib.pyplot as…
定性数据分布分析（饼图，条形图）
定性数据
对于定性数据，根据变量的类型来分组，绘制饼状图或条形图来描述定性数据的分布
不同菜品在某段时间的销售量分布情况
import pandas as pd
import matplotlib.pyplot as plt
plt.rcParams[font.sans-serif] SimHeidata pd.read_excel("…
数字孪生技术对旅游行业能起到什么作用？
随着疫情对我们生活影响的淡化，旅游行业迎来了新的春天，暑期更是旅游行业的小高潮，那么作为一个钻研数字孪生行业的小白，本文就着旅游的话题以及对旅游的渴望带大家一起探讨一下数字孪生对智慧旅游发展的作用~ 数字孪生作为一种虚…
我的笔记：数据体系规则
1、中台数据体系特征
覆盖全域数据：数据集中建设，覆盖所有业务过程数据； 结构层次清晰：纵向数据分层，横向主题域，业务过程划分，让整个层析结构清晰易理解； 数据准确一致：…
APP营销的渠道与定位
题记：这是一篇讲诉对移动应用如何推广的文章，本文详细介绍了APP的推广营销方式，非常适合新手、有意向进入移动互联网领域的推广朋友学习。 我觉得，在本文开头有必要贴一条免责声明。营销本来就是我的短板，接触APP营销也…
AWS：云里乾坤，有容乃大
作者｜康翔编辑｜阿冒 设计｜沐由每年年底的AWS re:Invent，是每一位云计算从业者梦寐以求的舞台，这样说真的是毫不夸张。每次，当我穿行于拉斯，要在三四天的时间里，从多达数百个论坛里…
【零基础入门学习Python---Python中机器学习和人工智能之快速入门实践】
🚀 零基础入门学习Python🚀 🌲 算法刷题专栏 | 面试必备算法 | 面试高频算法 🍀 🌲 越难的东西,越要努力坚持，因为它具有很高的价值，算法就是这样✨ 🌲 作者简介：硕风和炜…
后疫情时代，智慧城市何去何从？
撰文：康翔编辑：阿由设计：紫菜2001年的诺贝尔经济学奖获得者约瑟夫斯蒂格利茨，曾经坚定不移地认为，中国的城市化必将是深刻影响21世纪人类发展的两大主题之一。事实证明，他是对的。目前，中国城镇…
数据治理，是企业数字化建设的基石
当前，以大数据、物联网、人工智能为核心特征的数字化浪潮正席卷全球，海量的数据在每时每刻不断的产生，当数据数量和规模发展到一定程度时，现有的存储、分析、计算的方案及技术将无法满足现实需求。企业现有的大数据如同一座金矿&a…
暴雨之后，评估与重建可以用这个数据集
从 7 月 18 日到今天，河南出现罕见持续强降水天气过程，其中郑州成为降雨量最大的地级市。全市普降大暴雨、特大暴雨，累积平均降水量449毫米，日降水量和小时降水量，都超过了有气象记录以来极值，让全国人民都…
第十三届服务外包创新创业大赛记录总结（一）
首先介绍一下 第十三届服务外包创新创业大赛东部区域一等奖 国家二等奖，是团队技术主力，选题是A03网络零售平台的价格销量异常识别
我们学校33支队伍参赛，国家二等奖1个，三等奖6个，东部区域三等奖9个。 想记录一下收…
4.3 Hadoop发行版的选择/4.4 大数据产品与互联网产品结合/4.5 大数据应用--数据分析/4.6 数据分析案例
4.3 Hadoop发行版的选择 Apache Hadoop 开源社区版最新的Hadoop版本都是从Apache Hadoop发布的Hadoop Hive Flume 版本不兼容的问题 jar包 spark scala Java->.class->.jar ->JVMCDH: Cloudera Distributed Hadoop Cloudera 在社区版的基础上做了一些修改 http://arch…
刘华：上云后，你的架构设计可以更飞
本篇文章作为弹性便是一切的姊妹篇，以某电商的痛点入手，介绍如何通过迁移到云上解决各种问题，并给出了架构设计的调整思路。某服装电商公司的网站系统是搭建在自建机房里的。这个网站可以让用户通过网页端或手机端建立和管理自己行头…
数据分析之路应该是就此开启了
咱就是说工作以后，就是重新学习的开始啊。 祝自己顺顺利利。 前路漫漫亦灿灿。
数据分析之路，开启吧。 以下是借鉴网上的学习路线。 这个学习路线图主要分为以下几个部分： 基础知识 ：包括数学、统计学和编程语言。这是数据分析的…
Python 数据分析——matplotlib 快速绘图
matplotlib采用面向对象的技术来实现，因此组成图表的各个元素都是对象，在编写较大的应用程序时通过面向对象的方式使用matplotlib将更加有效。但是使用这种面向对象的调用接口进行绘图比较烦琐，因此matplotlib还提供了快速绘图的pyplot模块。…
数据分析基础-数据可视化学习笔记06-交互架构
互动与 可视化
对视觉表⽰进⾏操作 视觉分析的可视化应有助于对视觉表⽰数据的操作 ⼀系列反馈回路 概述 放⼤/缩⼩ 选择 筛选 查找相关信息 促进数据空间的探索。 互动类型 选择和操作 直接处理数据的视觉表⽰。 探索与导航 理解并⾛过视觉呈现的空间。 选择和 操…
阿里资深数据分析师回答那些关于数据分析师的最常见的几个问题
随着数据分析师这个岗位的兴起，越来越多的人想要转行入到这个行业中，但对于一个未知的行业还存在着许多不确定性，今天我们邀请到了阿里资深的数据分析师来为大家回答那些比较大多数人比较想问的常见问题。
你为何选择数据分析师这个职业&…
无套路，财务数据分析-多组织损益表分析分享
在报表众多的财务数据分析中，损益表是老板们最关注的报表，特别是当有多组织时，损益表的分析就变得更加重要了。以前受限于数据分析工具，做损益表分析时很难做到多维度灵活分析，但随着BI数据可视化工具的发展࿰…
视觉化洞察：为什么我们需要数据可视化？
为什么我们需要数据可视化？这个问题在信息时代变得愈发重要。数据，如今已成为生活的一部分，我们每天都在产生大量的数据，从社交媒体到购物记录，从健康数据到工作表现，数据无处不在。然而，数据本…
菜菜的刷题日记 | 蓝桥杯 — 左孩zi右兄弟【第十二届】【省赛】【A组】【Python】
系列索引：菜菜的刷题日记 | 被LeetCode用Python狂虐的那段日子 考前抱佛脚！ 文章目录【题目】【我的代码】【思考】【题目】 题目链接：http://lx.lanqiao.cn/problem.page?gpidT2898
【我的代码】
我的思路是： 前面一段是输入处…
利用python数据分析——Numpy基础：通用函数、利用数组进行数据处理
文章目录1 通用函数2 利用数组进行数据处理2.1 np.meshgrid() 函数2.2 将条件逻辑表述为数组运算2.3 数学和统计方法2.4 用于布尔型数组的方法1 通用函数
通用函数（ufunc）是一种对ndarray 中的数据执行元素级运算的函数。
比如说sqrt和exp：…
利用python数据分析——Numpy基础：数组和矢量计算
文章目录0 写在前面1 ndarray：一种多维数组对象1.1 numpy.random.randn(d0,d1, ...,dn) 函数介绍1.2 numpy.random.seed() 函数介绍1.3 创建 ndarray1.3.1 np.array()1.3.2 np.zeros()和np.ones()1.3.3 np.empty()1.3.4 np.arange()1.3.5 函数总结1.4 ndarray的数据…
如何在 ONES 中实现清晰、规范的需求管理？
需求是产品的基石，科学的需求管理能够帮助研发团队建立清晰的版本规划，提升用户的满意程度。然而，在项目的实施中，企业难免会遇到需求来源复杂、需求变更频繁、需求管理混乱等问题。ONES 能帮助团队提升需求收集、管理的能力与效率…
KMP算法的实现与解析
KMP 算法介绍 KMP是一个解决模式串在文本串是否出现过，如果出现过，最早出现的位置的经典算法Knuth-Morris-Pratt 字符串查找算法，简称为 “KMP算法”，常用于在一个文本串S内查找一个模式串P的出现位置，这个算法由Donal…
淘客商品动态字符商品id转数字id
{"code": 200, "data": {"itemId": "700407841432", "itemName": "安踏花苞短裤女五分裤夏季新款速干冰丝高腰宽松裤子透气工装短裤", "itemVideo": {"itemVideoThumbUrl": "//img.alic…
案例解析：用「度量」提升企业研发效能｜ONES Talk
6月17日，在「精益软件工程大会」上，ONES 研发效能改进咨询顾问董晓红作了题为《研发效能度量场景解读》的演讲。通过两个效能提升场景案例，共同探讨如何通过「度量」帮助企业解决具体的问题，提升研发效能。以下是董晓红当天分享的…
时间序列ARMA和ARIMA
1.简介
1.1 时间序列包括：
AR(自回归模型)，AR ( p) ，p阶的自回归模型 MA(移动平均模型)，MA(q)，q阶的移动平均模型 ARIMA(差分自回归移动平均模型)
1.2 运用对象
这里四种模型都是变量y，针对时间变化而发…
51job开启多线程迅速抓取信息，速度提升十倍！！！
# 51job多线程
import requests
import chardet
from bs4 import BeautifulSoup
import csv
from openpyxl import Workbook
import random
import time
import threading
from selenium import webdriver
import time
计算物品之间的相似度矩阵$$基于物品的协同过滤算法
公式一: 构建数据集
import pandas as pd
import numpy as npuser_score_dict pd.DataFrame({"A": {"a": 3.0, "b": 4.0, "c": 0.0, "d": 3.5, "e": 0.0},"B": {"a": 4.0, "b": …
数据仓库建模与ETL实践技巧
数据仓库建模与ETL实践技巧北京迈思奇科技有限公司 戴子良
专家简历
戴子良，北京迈思奇科技有限公司（www.minesage.com）咨询顾问，微软MCP，ETL专家，在数据仓库，数据清洗，数据整合和…
协同过滤算法的问题及解决方案
1 协同过滤在应用中存在的问题 尽管协同过滤在电子商务推荐系统中的应用获得了较大的成功，但随着站点结构、内容复杂度和用户人数的不断增加，基于协同过滤的推荐系统的发展面临着两个主要挑战： 1) 提高协同过滤算法的可扩展性 协同过滤算法能…
Python与MySQL联动实例一两则
Python 2.7 IDE Pycharm 5.0.3 PyMySQL 0.7.6 MySQL 5.7 MySQL Workbench 6.3 回家有点颓废了，练个小内容，把抓到的数据写到SQL里面，存起来，以后用作数据分析用吧。扫盲
MySQL读法： “My Ess Que Ell”(not “my …
「Python｜Pandas｜场景案例」如何只保留DataFrame数据集的某些列（要保留的列不固定）
本文主要介绍在使用pandas进行数据分析过程中的数据预处理时，如果希望仅保留某些列的数据需要如何操作。同时介绍一些特殊情况，比如列是用变量存储；或者列是一个全集，处理的数据集中不一定包括列出的全部列名。 文章目录 场景说明…
Object365数据集365种类别名称
Object365数据集365种类别名称
此类别名称是2019版数据集的名称，与2020版本不同 1:human 2:sneakers 3:chair 4:hat 5:lamp 6:bottle 7:cabinet/shelf 8:cup 9:car 10:glasses 11:picture/frame 12:desk 13:handbag 14:street lights 15:book 16:plate 17:helmet 1…
数学建模 - 汽车行驶工况构建（2019年中国研究生数学建模竞赛D题）
2022.11.7日更新
为了方便大家，我直接把代码和文章搞进百度网盘，自行获取。
链接失效的话，可以私信或者评论告诉我。 链接：https://pan.baidu.com/s/1X6ZuWSSiH_VwpaVQg8N4ng 提取码：so3z 一、题目要求 题目说了一大…
检验样本是否服从泊松分布
一、数据预处理二、变量分析三、总体分布估计四、结论与分析本文以一个订单数据为例，研究顾客购买次数的分布规律，尝试从中估计总体的分布，以对后续的订单数据进行预测或进行业绩的对比# 环境准备
import numpy as np
import pandas as pd
im…
回顾|Python中的数据结构
列表列表的特点：列表的创建方式基本的列表操作列表方法列表生成式元组字符串格式化字符串宽度、精度和千位分隔符对其和填充字符串编码字符串方法字典创建字典基本的字典操作将字符串格式设置功能用于字典字典方法字典生成式集合创建集合集合方法集合生成式列表变量…
卡方检验及其Python实现
分类数据的拟合优度检验独立性检验分类数据的拟合优度检验前面我已经写了关于几种常见的假设检验内容，而检验主要是测试样本分类数据的分布是否符合预期分布。相信大家如果学过高中生物，都知道孟德尔——遗传学之父，当时他根据颜色和形状把豌…
Pandas绘图功能
柱状图箱线图密度图条形图散点图折线图保存绘图总结可视化是用来探索性数据分析最强大的工具之一。Pandas库包含基本的绘图功能，可以让你创建各种绘图。Pandas中的绘图是在matplotlib之上构建的，如果你很熟悉matplotlib你会惊奇地发现他们的绘图风格是一…
假设检验在数据分析中的应用
前言Z检验T检验独立样本t检验配对样本t检验单样本t检验前言在这篇文章中，我不会具体去推导检验统计量和相应拒绝域的得出，这对于大部分非统计学专业的人士来说是晦涩的，我只想通过一个案例告诉大部分初学者假设检验怎么在数据挖掘中使用。%ma…
疫情期间大学生在线学习效果调查报告
前言新冠疫情期间，为响应教育部的“停课不停学”，各高校学生在疫情期间通过网络在线学习课程。本文对疫情期间的大学生在线学习效果及影响因素进行调查分析，一方面有利于掌握当前疫情背景下在线学习效果情况，为下一步复工复学打好…
Python常用第三方库（计算机二级）
总结了在计算机二级考试中出现的第三方库
pip 简介:常用的第三方库安装方法 常用命令:
①安装第三方库
pip install <第三方库名>
②升级pip版本
pip install -U pip
③ 查看已安装的第三方库
pip list
④卸载第三方库
pip uninstall <第三方库名>
⑤获取帮助信…
Pandas快乐学习之合并
所有数据请参考： https://github.com/datawhalechina/team-learning/tree/master/Pandas%E6%95%99%E7%A8%8B%EF%BC%88%E4%B8%8A%EF%BC%89
import numpy as np
import pandas as pd
df pd.read_csv(data/table.csv)
df.head()一、append与assign
1. append方法
&…
在线教育数据分析实战项目案例
数据分析实战项目案例数据分析概览数据分析经常遇到的问题解决思路常规产品指标在线教育产品指标市场效果广告指标搭建指标系统流程渠道的分类针对搜索引擎，信息流广告如何稳定提高ROI利用MySQL做数据预览步骤1——找出需要的指标（CPM，CPC&am…
举个栗子！Quick BI 技巧（1）：创建趋势折线图
自 2016 年以来，优阅达《举个栗子》内容专栏已陪伴众多企业用户高效工作，解决真实业务场景中的用数问题。
2023 年，全新系列《举个栗子！Quick BI 技巧》出炉啦~
优阅达期待能够持续分享经验，帮助用户发现更多 Quick …
软件测试 | 等价类用例设计方法及演示
常见的用例设计方法包括：等价类、边界值、因果图、判定表、状态迁移、场景分析法、正交实验法。下面是等价类用例设计方法。 1为什么需要使用等价类方法 如果我们输入的数据是一个很大范围数据时，我们测试时会出现以下问题： 1.测试不可能全…
什么是用户感？看看这4个产品经理的感性设计
产品经理该理性还是感性？一场奇葩说辩论可能都没有答案。但不管这个问题的答案如何，实际情况是我们越来越理性了。产生这种情况的原因不是我们的性格变化，而是工作方式的日趋成熟。现在的产品经理是数字时代的工具人，我们用调研报…
TalkingData推正式版，增加自由切片、 多维钻取、交叉对比等分析功能
经过两个多月的Beta版演进，TalkingData迎来首个正式版本（1.3版）。除了提供之前丰富的统计指标外，正式版增加了自由切片、多维钻取、交叉对比等多项分析功能。 1、自定义你的应用概况报告 按照你的需要来自由组织应用概况中的数据图…
O2O分享6：O2O的社会化营销（下）
本文作者上海翼码 业务支撑部 总监 张波。 线上电商为什么比线下零售更有优势？如果现在有人告诉你，没有实体店，没有租金等成本更低，网上信息发布更容易传播。如果是这类的答案，那我告诉你，此人OUT了&#x…
免费WIFI的入口价值
近段时间，有一款名为“畅无线”的应用迅速蹿红。这款号称利用中国移动WIFI管理漏洞，为使用者提供免费的无线上网服务的应用，一度被认为“天堂级”软件，跳过运营商设置的“WLAN用户登录的验证界面”，免输入用户名或密码…
阿里月薪35k的B端产品经理，到底要懂多少业务？
你，为什么想要成为产品经理？是想像乔布斯、张小龙那样改变世界，影响亿万人生活？还是想拿高薪、期权，借公司上市实现财富自由？亦或是想获得一份指点江山、挥斥方遒的工作？抱歉，上述所…
android第三方软件商店已死
【软件商店已死】 1、就商业模式而言，如果商店里的APP不能销售，开发者无法获利，而是通过帮助广告平推广SDK赚钱的话，软件商店沦落为广告平台的销售渠道；2、看一下软件商店的用户构成吧，可以大致分成2类用户…
推出“智能湖仓”，亚马逊云科技加注数据服务
作者｜沐由编辑｜阿冒 设计｜沐由数字化时代，是充满不定挑战的时代，也是蕴藏无限机遇的时代。随着数字化转型步入深水区，数字经济的GDP占比逐年增加，数据已然成为企业最为核心的资产。与此同时&a…
Python3数据科学包系列(三):数据分析实战
Python3中类的高级语法及实战
Python3(基础|高级)语法实战(|多线程|多进程|线程池|进程池技术)|多线程安全问题解决方案
Python3数据科学包系列(一):数据分析实战
Python3数据科学包系列(二):数据分析实战 一: 数据分析与挖掘认知升维 我们知道在数据分析与数据挖掘中,数据…
ZOHO：游刃于快时代的“慢公司”
编辑：阿由设计：紫菜作为一家国际化的软件技术公司，尽管已经贵为全球三大CRM品牌之一，ZOHO的低调与务实在业内有目共睹。与其他同类公司相比，ZOHO不光低调，还以“慢”闻名：当全球奉行“快鱼吃慢鱼…
5.19开发者日：朱成永谈通过数据挖掘找机会
5.19雷锋网开发者日活动第二位分享嘉宾是传媒梦工场的首席工程师朱成永，他分享的主题是数据产品的修炼之道。其分享的3个主要部分分别是：数据化运营，数据产品概况，数据产品经理。 之所以要数据化，是因为在用户数量达到…
社交网络数据挖掘公司乐荐推出“我好想网”：动真格的社交
陌生人交友似乎成了茶余饭后消磨时间之利器，几乎很少人纯洁的用这些产品来认识新朋友，约炮成为不管公关稿还是活跃用户的主要话题。Social Network如果改名为Sex Network会更加贴切，陌生人社交也越来越像陌生人射交。
各位应该还记得我们去年…
从数据上看电商直播的发展现状
电商直播从2016年的兴起到如今的火爆，用时仅仅5年。与一开始电商直播的惨淡相比，如今的电商直播发展状况是如何的呢？我们来看看数据吧。
1、电商直播的用户规模
根据中国互联网络信息中心(CNNIC)给出的数据显示，截至2020年上半年…
2021年江苏省职业院校技能大赛中职 网络信息安全赛项试卷--攻击日志解析
2021年江苏省职业院校技能大赛中职 网络信息安全赛项 attack.pacapng攻击日志分析2021年江苏省攻击日志分析任务书2021年江苏省攻击日志分析任务书解析如果有不懂得地方可以私信博主，欢迎交流！！交流群：603813289（刚建的…
wirehark数据分析与取证B.pcap
什么是wireshark？wiresharekB.pcap数据包数据包下载 请私信博主wiresharek
Wireshark（前称Ethereal）是一个网络封包分析软件。网络封包分析软件的功能是检索取网络封包，并同时显示出最详细的网络封包数据。Wireshark使用WinPCAP作…
从小白到年薪50W，转行做数据分析师，分享一下我的学习心得！
对于大部分想转行的人，首先需要明确的就是转行该从哪里下手，下面我说明一下。
从小白到年薪50W，转行做数据分析师，分享一下我的学习心得！ 基本工具 需要学习：Excel、SQL、Python
Excel、SQL、python是数…
荐书 | 8 本热门 AI 原版好书，趁假期充电！
By 超神经内容一览：汇总过去一年人工智能领域相关的热门英文原版书籍，探讨主题涵盖 AI 应用、隐私保护、AI 伦理等方向，8 本书籍本本经典，看看都有哪些吧！关键词：机器学习 AI 伦理 书籍推荐2020 年&…
分析了 600 多种烘焙配方，机器学习开发出新品
By 超神经内容提要：经过数千年的积累，人类已经开发出了各色美味，但我们的味蕾却永远不知满足。谷歌一位 AI 开发者，为了探索新的可能，用 AI 来开发新的甜点食谱。AI 在菜谱开发这一领域，是否会比人类更有想…
升级 ｜ ONES Wiki 多人实时协作，万物皆可编辑
近日，ONES 完成了对知名文档工具为知笔记的全资收购，为知笔记将多人协同、区块编辑等核心编辑器能力赋予 ONES Wiki，带来新一代的文档协作与知识管理体验。全新升级的 ONES Wiki 帮助研发团队更高效地协作，轻松构建团队知识库&…
ONES X 中农网｜多产品线研发项目管理实践
我国农业产业链数字化水平仍有待提升。艾瑞咨询发布的《2021全球数字贸易白皮书》认为，2019年，全国农业生产数字化水平达23.8%，全国县域农产品网络零售额占农产品交易总额的比重为10.0%，该比例在未来有较大的提升空间。来源&#…
奥威BI系统：做数据可视化大屏，又快又简单
数据可视化大屏的制作难吗？会很花时间精力吗？这就要看用的是什么软件了。如果用的是BI系统，特别是奥威BI系统这类BI商业智能软件，那就是又快又简单。
奥威BI系统介绍：
奥威BI系统是一款高效的数据可视化大屏工具&…
46.利用matlab绘制维安尼曲线（matlab程序）
1.代码 clear close all syms s t k u r; x12*sin(s)*cos(t);y12*sin(s)*sin(t);z12*cos(s); x2-2*cos(k)*cos(k);y22*sin(k)*cos(k);z2u; subplot(1,2,1);ezmeshc(x2,y2,z2,[0,pi,-2,2]); %绘制圆柱面 hold on; ezsurf(x1,y1,z1,[-pi,pi,0,pi]); %绘制球面 title( 球面与圆柱…
数据分析 | 调用Optuna库实现基于TPE的贝叶斯优化 | 以随机森林回归为例
1. Optuna库的优势 对比bayes_opt和hyperoptOptuna不仅可以衔接到PyTorch等深度学习框架上，还可以与sklearn-optimize结合使用，这也是我最喜欢的地方，Optuna因此特性可以被使用于各种各样的优化场景。 2. 导入必要的库及加载数据 用的是sklea…
【校招VIP】产品分析考点之数据指标提高
考点介绍： 校招中考查产品数据指标的分析，频度越来越高，比如说提高用户数，分享率，或者是出现了数据的降低，怎么去解决？大部分的场景需要跟实战结合，具备真实的商用产品理念。
『产品…
Redis(设计与实现):---Sentinel之故障转移（SLAVEOF命令）
故障转移：
在选举产生出领头Sentinel之后，领头Sentinel将对已下线的主服务器执行故障转移操作
该操作包含下面3个步骤： ①在已下线主服务器属下的所有从服务器里面，挑选出一个从服务 器并将其转换为主服务器 ②让已下线主服务器…
基于Python的拉勾网Python工程师招聘信息的爬取和处理分析
目录一、项目简介1、项目完成的功能2、项目完成的特色3、项目采用的技术栈二、项目的需求分析1、项目的功能需求分析2、项目的非功能需求分析系统性能需求系统观感需求（界面需求）三、项目UML图1、项目功能架构图2、项目主要功能流程图四、项目模块1、数据…
数据分析：利用gpt进行归因分析
prompt： 你是某电商平台的一名数据分析师，发现昨日的GMV环比下降了5%，请对这数据变动做出归因。
output： 在电商行业中，GMV（总销售额）是一个非常重要的指标，用于衡量业务的整体健康…
中国核动力研究设计院使用 DolphinDB 替换 MySQL 实时监控仪表
随着仪表测点的大幅增多和采样频率的增加，中国核动力研究设计院仪控团队原本基于 MySQL 搭建的旧系统已经无法满足大量数据并发写入、实时查询和聚合计算的需求。他们在研究 DB-Engines 时序数据库榜单时了解到国内排名第一的 DolphinDB。经过测试，发现其…
破信息壁垒，亿发一站式ERP系统建设，打造五金制造信息管理平台
五金制造拥有明显的行业特征，如体量小、品种繁多、颜色多样、加工工艺不断演进等，呈现出一种独特的管理挑战。大多数五金企业仍然依赖人工管理和经验决策，如今需要寻求更合理和科学的决策方法，以实现生产、销售、仓储、采购和财务…
【数据分析】时间序列
UTC时间：时间戳是以格林威治时间1970年01月01日00时00分00秒为基准计算所经过时间的秒数，是一个浮点数。Python的内置模块time和datetime都可以对时间格式数据进行转换，如时间戳和时间字符串的相互转换。 报错记录：AR has been re…
数据可视化实战：如何给毛*易的歌曲做词云展示？
⭐️⭐️⭐️⭐️⭐️欢迎来到我的博客⭐️⭐️⭐️⭐️⭐️ 🐴作者：秋无之地 🐴简介：CSDN爬虫、后端、大数据领域创作者。目前从事python爬虫、后端和大数据等相关工作，主要擅长领域有：爬虫、后端、大数据开发、数据分析等。 🐴欢迎小伙伴们点赞👍🏻、收藏⭐️、…
一站式数据可视化与分析平台JVS智能BI强大的数据节点功能
在商业智能（BI）中，数据集是数据的集合，用于分析和报告。数据节点是数据集中的一个重要组成部分，它代表数据集中的一个特定数据点或数据元素。通过使用数据节点，可以对数据进行过滤、分组和计算，…
医学案例|Cochran‘s Q检验
一、案例介绍
当前有一名医生拟评价药物A对50名高血压患者的降压效果。在患者服用药物A后的第3天、第5天和第7天时分别进行记录。该医生想知道服用药物A的高血压患者血压是否一直在好转。血压好转赋值为1，血压没变化赋值为0,。部分数据如下： 二、问题分…
Pyecharts教程(七)：使用pyecharts创建堆叠柱状图的示例
Pyecharts教程(七)：使用pyecharts创建堆叠柱状图的示例
作者：安静到无声 个人主页 目录 Pyecharts教程(七)：使用pyecharts创建堆叠柱状图的示例完整代码推荐专栏在数据可视化中，柱状图是一种常见的图表类型，它可以清晰地展示各类别之间的比较关系。然而，如果我们想要在同…
![数字化智能工厂信息化系统集成整合规划建设方案[150页word]](https://img-blog.csdnimg.cn/img_convert/6caf01f49afd4b73b48d40a949facb0d.jpeg)
数字化智能工厂信息化系统集成整合规划建设方案[150页word]
导读：原文《150页6万字数字化智能工厂信息化系统集成整合规划建设方案》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。
数字化智能工厂建设方案
设备智…
基于数据治理的企业数据质量管理与保障解决方案PPT
导读：原文《基于数据治理的企业数据质量管理与保障解决方案PPT》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。
部分内容： 喜欢文章…
【核磁共振成像】并行采集MRI
目录 一、并行成像二、SENSE重建三、SMASH重建四、灵敏度校准五、AUTO-SMASH和VD-AUTO-SMASH六、GRAPPA重建七、SPACE RIP重建算法八、PILS重建算法九、PRUNO重建算法十、UNFOLD算法 一、并行成像 并行MR成像(pMRI):相位阵列接受线圈不但各有自己专用的接受通道，而且…
数据可视化、BI和数字孪生软件：用途和特点对比
在现代企业和科技领域，数据起着至关重要的作用。为了更好地管理和理解数据，不同类型的软件工具应运而生，其中包括数据可视化软件、BI（Business Intelligence）软件和数字孪生软件。虽然它们都涉及数据，但在功…
京东数据分析软件：2023年8月京东护肤行业品牌销售排行榜
鲸参谋监测的京东平台8月份护肤市场销售数据已出炉！
鲸参谋数据显示，8月份护肤市场累计销量为1700万，累计销售额为23亿，整体市场均价约为136元。8月护肤市场中在京东平台活跃的品牌数、店铺数及动销sku数分别为3100、5800和650…
案例研究｜DataEase助力无锡布勒业务数据可视化建设
布勒集团是一家来自瑞士的家族企业，在谷物与食品以及先进材料制造等领域深耕超过160年。布勒大中华区的总部位于江苏无锡。无锡布勒是一家集研发、生产、销售于一体的综合性公司，拥有先进的生产设备及高素质的科技研发人员，以谷物深加工、谷物…
2023年7月京东平板电脑行业品牌销售排行榜（京东销售数据分析）
鲸参谋监测的京东平台7月份平板电脑市场销售数据已出炉！
根据鲸参谋电商数据分析平台的相关数据显示，今年7月份，京东平台上平板电脑的销量为68万，同比增长超过37%；销售额为22亿，同比增长约54%。从价格上看…
伙伴云连续2年入选Gartner《中国分析平台市场指南》，数据分析能力遥遥领先
伙伴云作为中国分析与商业智能平台代表性厂商，因出色的数据分析能力，入选Gartner2023《中国分析平台市场指南》（《Market Guide for Analytics Platforms, China》，以下简称“指南”），成为入选该报告中唯一…
京东运营数据分析：2023年8月京东饮料行业品牌销售排行榜
鲸参谋监测的京东平台8月份饮料市场销售数据已出炉！
8月份，饮料市场整体销售下滑。根据鲸参谋电商数据分析平台的相关数据显示，今年8月，京东平台饮料市场的总销量将近820万，环比下滑约8%，同比下滑约20%&am…
从不同的正态分布中抽取随机数randn()函数
【小白从小学Python、C、Java】 【计算机等考500强证书考研】 【Python-数据分析】 从不同的正态分布中抽取随机数 randn()函数 [太阳]选择题 下列选项对代码最后运行结果描述错误的是？ import numpy as np print("【执行】np.random.randn()") print(np.…
阿里云“玩转云上 StarRocks3.0 湖仓分析”，开启数据分析新范式
简介： 阿里云 EMR OLAP 团队与 StarRocks 社区联合出品，玩转云上 StarRocks3.0 湖仓分析训练营，围绕 StarRocks3.0 系列解读、EMR Serverless StarRocks 存算分离功能与应用场景介绍，开启数据分析新范式！
StarRocks3…
2023亿发智能数字化解决方案供应商，贵州一体化企业信息管理系统
企业数字化服务的解决方案是指运用数字技术对企业运营进行全方位的数字化升级和优化，提供以数字化服务为核 心的全面解决方案，解决企业在数字化转型过程中面临的技术和业务难题。 数字化服务解决方案的功能
在数字化时代的背景下，贵州企业的…
数据分析案例-基于snownlp模型的MatePad11产品用户评论情感分析
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
Pandas教程09：DataFrame数据可视化绘制折线图、柱状图、散点图、直方图等
pandas.plot() 是 pandas 库中的一个非常方便的函数，用于绘制各种图形，例如线图、柱状图、散点图等。以下是一些示例用法： 1.绘制一个简单的线图：
# Author : 小红牛
# 微信公众号：wdPython
import pandas as pd
impo…
计算数组中各元素的平方numpy.square()
【小白从小学Python、C、Java】 【计算机等级考试500强双证书】 【Python-数据分析】 计算数组中各元素的平方 numpy.square()
选择题 请问np.square(a1)的结果是： import numpy as np a1 [1,2,3] print("【显示】a1 ",a1) print("【执行】np.sq…
Java基于API接口爬取淘宝商品数据
随着互联网的普及和电子商务的快速发展，越来越多的商家选择在淘宝等电商平台上销售商品。对于开发者来说，通过API接口获取淘宝商品数据，可以更加便捷地进行数据分析和商业决策。本文将介绍如何使用Java基于淘宝API接口爬取商品数据࿰…
Pandas中的Series（第1讲）
Pandas中的Series（第1讲） 🍹博主 侯小啾 感谢您的支持与信赖。☀️ 🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔…
医疗数据可视化大屏：重构医疗决策的未来
医疗行业一直是信息密集型领域之一，它的复杂性不仅在于患者病历和医疗数据的海量积累，还包括了病情诊断、医疗资源分配、病患治疗等多层次的挑战。随着信息技术的不断发展，医疗数据可视化大屏成为了一种创新性的工具，它为医疗管理…
企业中台如何进行测试（下篇）
《企业中台如何进行测试》包含了主数据治理测试、统一认证测试、业务集成测试、门户建设测试、数据分析测试等内容。由于篇幅较长，将分为上、下两个篇章与大家分享，在上篇主要从主数据治理和统一认证两个方面对企业中台的测试内容进行介绍，下…
数据分析师的工作内容、工作目标、必备工具、能力模型
数据分析师的工作内容 数据分析这份工作存在是为了实现什么目的？
1. 收益分析，利益最大化
在公司当前商业模式下，帮助全面了解业务运行情况，赚取更大的收益，找出制约环节，找到增长点如 : 用户增长、活动评…
2014年亚太杯APMCM数学建模大赛C题公共基础课教师专业化培养方式研究求解全过程文档及程序
2014年亚太杯APMCM数学建模大赛
C题 公共基础课教师专业化培养方式研究
原题再现 近年来，世界基础工业、信息产业、服务业的跨越式发展引发了大量人才需求，导致了职业教育的飞速发展，除原有专科层次高等职业教育院校外，大量普通…
做什么数据表格啊，要做就做数据可视化
是一堆数字更易懂，还是图表更易懂？很明显是图表，特别是数据可视化图表。数据可视化是一种将大量数据转化为视觉形式的过程，通过图形、图表、图像等方式呈现数据，以便更直观地理解和分析。
数据可视化更加生动、形象地…
程序员的新战场：数据分析的崭露头角
当今的职业市场和商业世界正在发生深刻的变革，其中一个明显的趋势是数据分析的广泛应用。数据分析已经成为几乎所有行业的一项必备技能，无论你是从事软件开发、网络安全、金融、医疗、市场营销还是其他职能，都需要考虑学习和掌握数据分析技能…
99% 用户都不知道的 Power BI / Power Query 隐藏功能
Power Query 有一个被糟糕的翻译耽误了的宝藏功能，我估计绝大多数的用户都没发现。 在 Power Query —— 视图 —— 数据预览 下，有几个奇怪的选项 “列分发”、“列配置文件”、“列质量”，从名字根本看不出来是做什么的！
看英文…
如何用机器学习预测订单取消？内附酒店预订需求数据集
如今， 各大 OTA（Online Travel Agency）平台极大地方便了人们的出行，酒店住宿、景点门票等，只需要动动手指就可以轻松完成预订。 国内外酒店民宿预订平台，多达数十种为了吸引更多用户预订，这些平…
31 | 独角兽企业数据分析
独角兽企业：是投资行业尤其是风险投资业的术语，一般指成立时间不超过10年、估值超过10亿美元的未上市创业公司。
项目目的：
1.通过对独角兽企业进行全面地分析（地域，投资方，年份，行业等），便于做商业上的战略决策
项目数据源介绍
1.数据源：本项目采用的数据源是近…
26 | 谷歌应用APP数据分析
基于kaggle公开数据集，对谷歌应用市场的APP情况进行数据探索和分析。
from kaggle: https://www.kaggle.com/lava18/google-play-store-apps
分析思路： 0、数据准备 1、数据概览 2、种类对Rating的影响 3、定价策略 4、因素相关性分析 5、用户评价 6、总结 0、数据准备
（…
期望值、方差、协方差、相关系数，numpy 计算均值、方差、协方差，相关系数
文章目录期望值、方差、协方差、相关系数一、期望值二、方差1. 概念：2. 示例：三、协方差1. 概念：2. 示例：四、协方差矩阵1. 概念：2. 示例：五、协方差的相关系数1. 概念：2. 示例：六、…
财务数据分析之现金流量表模板分享
现金流量表是我们常说的财务数据分析三表之一。它可以呈现一个企业的现金流情况，揭示企业经营管理健康状态，但在实际使用中却有总给人一种用不上、用不好的矛盾感。怎么才能把现金流量表做好？不如借鉴下大神的现金流量表模板。
下面介绍的是…
Matplotlib数据可视化（一）
目录 1.Matplotlib简介
2.Matplotlib绘图基础
2.1 创建画布与子图
2.2 添加画布属性 2.3 绘图的保存与显示 1.Matplotlib简介
Matplotlib是一个用于绘制数据可视化图表的Python库。它提供了广泛的功能和灵活性，可以创建各种类型的图表，包括折线图、…
一文看懂！数据管道和数据流在数据分析中的作用
当我们谈论数据分析时，我们通常会想到一系列的步骤，包括数据收集、数据清洗、数据分析和数据可视化等。然而，在这些步骤中，有两个非常重要的概念：数据管道和数据流。这两个概念在数据分析过程中起着至关重要的作用。本…
【2023钉钉杯复赛】A题 智能手机用户监测数据分析 Python代码分析
【2023钉钉杯复赛】A题 智能手机用户监测数据分析 Python代码分析 1 题目
一、问题背景
近年来，随着智能手机的产生，发展到爆炸式的普及增长，不仅推动了中 国智能手机市场的发展和扩大，还快速的促进手机软件的开发。近年中国智能…
二手车交易价格预测 （数据分析）————task(2)
EDA-数据探索性分析
EDA目标
EDA的价值主要在于熟悉数据集，了解数据集，对数据集进行验证来确定所获得数据集可以用于接下来的机器学习或者深度学习使用。 当了解了数据集之后我们下一步就是要去了解变量间的相互关系以及变量与预测值之间的存在关系。 …
Python数据分析实战-对列表里面的元素绘制词云图（附源码和实现效果）
实现功能
词云也叫文字云，是一种可视化的结果呈现，原理就是统计文本中高频出现的词，将结果生成一张图片，直观的获取数据的重点信息
实现代码
from wordcloud import WordCloud
import matplotlib.pyplot as plt# 假设你的字符串…
【数据分析】缺失值处理
1. 均值填充：对于数值型的特征，采用该特征在已有数据中的平均值或中位数来填充缺失值。 2. 众数填充：对于类别型的特征，采用该特征在已有数据中出现频率最高的类别来填充缺失值。 3. 插值法：通过已有的数据，…
![2023年新型智慧城市顶层设计规划解决方案86页[PPT]](https://img-blog.csdnimg.cn/img_convert/cddd214bc9c75f2a0c58597c8f9a9743.jpeg)
2023年新型智慧城市顶层设计规划解决方案86页[PPT]
导读：原文《2023年新型智慧城市顶层设计规划解决方案86页[PPT]》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。
内容简介
智慧城市顶层设计&整体架…
图片上传返回淘宝链接
简要描述
图片上传
请求URL
http://xxx.xxx.xxx.xxx:xxxx/ali.uploads
请求方式
get
请求Query参数
参数名示例值必选类型说明imghttps://img.alicdn.com/imgextra/i2/2207375088936/O1CN016vjZiH2FsjsI2gx7c_!!2207375088936.jpg是string图片链接tokenadmin.api是strin…
2023年京东方便食品行业数据分析（京东数据报告）
疫情中方便食品的销售一度火爆，但随着当前消费场景的开放，方便食品销售又恢复常态并开始下滑。根据鲸参谋电商数据分析平台的相关数据显示，今年7月份，京东平台方便食品的销量为800万，环比降低约23%，同比降…
![河湖长制综合管理信息平台建设项目总体设计方案[507页Word]](https://img-blog.csdnimg.cn/img_convert/c641e5913afe69b78c320bed32186689.jpeg)
河湖长制综合管理信息平台建设项目总体设计方案[507页Word]
导读：原文《河湖长制综合管理信息平台建设项目总体设计方案[507页Word]》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。
部分内容：
1.1.1.3…
数据艺术：精通数据可视化的关键步骤
数据可视化是将复杂数据转化为易于理解的图表和图形的过程，帮助我们发现趋势、关联和模式。同时数据可视化也是数字孪生的基础，本文小编带大家用最简单的话语为大家讲解怎么制作一个数据可视化大屏，接下来跟随小编的思路走起来~ 1.数据收集和…
C# | DBSCAN聚类算法实现 —— 对直角坐标系中临近点的点进行聚类
C# | DBSCAN聚类算法实现 聚类算法是一种常见的数据分析技术，用于将相似的数据对象归类到同一组或簇中。其中，DBSCAN（Density-Based Spatial Clustering of Applications with Noise）是一种基于密度的聚类算法，能够有效…
R语言对综合社会调查GSS数据进行自举法bootstrap统计推断、假设检验、探索性数据分析可视化|数据分享...
全文链接：https://tecdat.cn/?p33514 综合社会调查（GSS）是由国家舆论研究中心开展的一项观察性研究。自 1972 年以来，GSS 一直通过收集当代社会的数据来监测社会学和态度趋势。其目的是解释态度、行为和属性的趋势和常量。从 197…
65_Pandas显示设置（小数位数、有效数字、最大行/列数等）
65_Pandas显示设置（小数位数、有效数字、最大行/列数等）
本文介绍了使用 print() 函数显示 pandas.DataFrame、pandas.Series 等时如何更改设置（小数点后位数、有效数字、最大行/列数等）。
有关如何检查、更改和重置设置值的详细…
Paimon+StarRocks 湖仓一体数据分析方案
摘要：本文整理自阿里云高级开发工程师曾庆栋（曦乐）在 Streaming Lakehouse Meetup 的分享。内容主要分为四个部分： 传统数据仓库分析实现方案简介PaimonStarRocks 构建湖仓一体数据分析实现方案StarRocks 与 Paimon 结合的使用方式…
Splunk Enterprise for Mac：卓越的数据分析与管理工具
在当今的数字化时代，数据已经成为企业成功的核心驱动力。然而，如何有效地管理和分析这些数据，却常常让企业感到困惑。Splunk Enterprise for Mac 是一款领先的数据分析和管理工具，可以帮助你解决这一难题。
Splunk Enterprise fo…
Pandas 数据分析--数据提取
Pandas Excel 数据导入
Pandas库提供了一组强大的输入/输出（I/O）函数(简称为：I/O API)，用于读取和写入各种数据格式，目前已支持常见的多种外数据格式。
Pandas 常见读取方法如下表：
Pandas数据处理分析系列4-数据如何清洗
Pandas-数据清洗
①缺失值处理
使用fillna()函数将缺失值替换为指定的值或使用插值方法填充缺失值 示例：df.fillna(0) #将缺失值替换为0
import pandas as pddf1=pd.read_excel("销售表.xlsx")
# 检查每列是否缺失
print(df1.isna) 效果如下： import pandas as …
自动售货机销售数据分析与应用
python 01案例背景02分析目标03 分析过程04 数据预处理4.1. 清洗数据4.1.1 合并订单表并处理缺失值4.1.2 增加“市”属性4.1.3 处理订单表中的“商品详情”属性4.1.4 处理“总金额（元）”属性 4.2.属性选择4.3.属性规约 05 销售数据可视化分析5.1.销售额和…
Python爬虫 | 爬取微博和哔哩哔哩数据
目录
一、bill_comment.py
二、bili_comment_pic.py
三、bilibili.py
四、bilihot_pic.py
五、bilisearch_pic.py
六、draw_cloud.py
七、weibo.py
八、weibo_comment.py
九、weibo_comment_pic.py
十、weibo_pic.py
十一、weibo_top.py
十二、weibo_top_pic.py
十…
Pandas数据处理分析系列6-数据特征分析
Pandas 数据特征分析 在前面章节学习了Pandas 两种数据结构Series、DataFrame，及Pandas如何读取Excel数据格式文件，数据预览、数据清洗及数据提取，接下来了解这些数据征分析。在实际工作中，财务、金融、制造业等数据，需从不同维度的指标进行分析，如合计数、最大数、最小数…
Splunk参考手册（命令）下载
Splunk参考手册（命令）下载
前言
大家也知道，这种形式的下载估计很难审核过
迅雷网盘地址：
链接：https://pan.xunlei.com/s/VMzAta77CFc1_JafF13T_fOlA1 提取码：khqj
截图
【Python入门系列】第九篇：Python数据分析和处理
文章目录 前言一、科学计算库1、NumPy库2、Pandas库3、Matplotlib库 二、分析处理实例1、数据清洗和预处2、数据可视化3、 数据分析和统计4、数据合并和拆分5、文本数据处理6、机器学习模型训练和预测7、情感分析8、数据聚合和统计9、图像处理10、自然语言处理11、文本分类12、…
【PowerQuery】Excel 一分钟以内刷新PowerQuery数据
当需要进行刷新的周期如果小于一分钟，采用数据自动刷新就无法实现自动刷新的目标。那就没有办法了吗？当然不是，这里就是使用VBA来实现自动刷新。这里实现VBA刷新的第一步就是将当前的Excel 保存为带有宏的Excel 文件，如果不带宏则无法运行带有宏代码的Excel文件，保存过程如…
PyTorch实战-实现神经网络图像分类基础Tensor最全操作详解(一)
目录
前言
一、PyTorch数据结构-Tensor
1.什么是Tensor
2.数据Tensor使用场景
3.张量形态
标量（0D 张量） 向量（1D 张量）
矩阵(2D张量)
3D 张量与高维张量
二、Tensor的创建
1. 从列表或NumPy数组创建 2. 使用特定的初始…
图扑可视化图表组件之股票数据分析应用
股市是市场经济的必然产物，在一个国家的金融领域之中有着举足轻重的地位。在过去，人们对于市场走势的把握主要依赖于经验和直觉，往往容易受到主观因素的影响，导致决策上出现偏差。如今，通过数据可视化呈现，…
MySQL：表所在库及注释信息查找
一、MySQL查看表所在库
使用数据库过程中，使用到的表太多后，很难记住每张表在哪个库，这时候可以通过以下方式查找表所在位置：
（一）通过表名查找
SELECT * FROM information_schema.TABLES WHERE tabl…
2023年8月京东大家电市场数据分析（京东数据开放平台）
8月份大家电市场整体下滑。根据鲸参谋显示的大盘数据可知，今年8月，京东平台大家电市场的销量为515万，环比下滑约23%，同比下滑约25%；销售额约为120亿，环比下滑约26%，同比下滑约25%。 *数据源于鲸…
深度学习 二：COVID 19 Cases Prediction (Regression)
Deep Learning 1. 回归算法思路2. 代码2.1 基础操作2.2 定义相关函数2.3.1 定义图像绘制函数2.3.2 数据集加载及预处理2.3.3 构造数据加载器2.3.4 构建前馈神经网络（Feedforward Neural Network）模型2.3.5 神经网络的训练过程2.3.6 模型评估2.3.7 模型测…
计算数组中全部元素的乘积 忽略数组中所有的NaN值 numpy.nanprod()
【小白从小学Python、C、Java】 【计算机等级考试500强双证书】 【Python-数据分析】 计算数组中全部元素的乘积 忽略数组中所有的NaN值 numpy.nanprod()
[太阳]选择题 请问代码中最后输出正确的是？ import numpy as np a np.array([2, 3, np.nan, 5]) print(&quo…
PageRank（上）：数据分析 | 数据挖掘 | 十大算法之一
⭐️⭐️⭐️⭐️⭐️欢迎来到我的博客⭐️⭐️⭐️⭐️⭐️ 🐴作者：秋无之地 🐴简介：CSDN爬虫、后端、大数据领域创作者。目前从事python爬虫、后端和大数据等相关工作，主要擅长领域有：爬虫、后端、大数据开发、数据分析等。 🐴欢迎小伙伴们点赞👍🏻、收藏⭐️、…
合并不同门店数据-上下合并
项目背景：线下超市分店，统计产品的销售数量和销售额，并用透视表计算求和
merge()函数可以根据链接键横向连接两张不同表，concat()函数可以上下合并和左右合并2种不同的合并方式。merge()函数只能横向连接两张表，而con…
Python Parser 因子计算性能简单测试
一直以来，Python 都在量化金融领域扮演着至关重要的角色。得益于 Python 强大的库和工具，用户在处理金融数据、进行数学建模和机器学习时变得更加便捷。但作为一种解释性语言，相对较慢的执行速度也限制了 Python 在一些需要即时响应的场景中的…
京东数据报告：2023年儿童面膜行业数据分析
如今，儿童面膜在不少家长群体中受到追捧。有的家长称自家孩子3岁开始敷面膜，而在某电商平台上，一位母婴博主称自己的女儿才2岁，“已经深知护肤的重要性了，每天洗完澡就嚷嚷着要敷面膜”。
而从市场角度看，…
2023P企业管理系统提供商，助力大中型企业一体化管理，免费更新
大中型企业通常业务流程更为复杂，工作数据更庞大，数据迁移的过程中可能会遇到数据不一致、数据丢失等问题。因此大中型企业实施ERP系统是一项复杂的任务，需要企业投入大量的资源和精力，克服各种困难和挑战。 在过往为广西省大中型…
Qt实战 数据统计柱状图显示
前段时间有朋友找我做个问卷调查的软件，我说现在很多在线文档都有这功能，为啥还要使用Qt撸一个，他说要申请软著，我说，欧了。
我们先看看WPS在线问卷的统计中，柱状图统计的效果吧 我认为主要有以下几个关键…
百度向业界分享海量数据处理技术
导语：我们身处海量数据时代。2011年，全球产生的数据量达到1.8ZB（1ZB10亿TB，1TB1000GB）。未来十年，全球大数据还将增加50倍。面对数据的暴增，如何有效的存储、管理、访问这些数据？互联…
python对excel数据表进行数据清洗
当拿到excel表，使用python对excel操作前，第一件事情是对excel表的数据进行数据清洗。
数值是否有空值，是否有重复的数据，把以上2个问题解决完成以后，才是对数据真正操作的开始。
1、使用pandans读取数据 2、判断exce…
python — numpy计算矩阵特征值，特征向量
文章目录python — numpy计算矩阵特征值，特征向量一、数学演算二、numpy实现转载请备注原文出处，谢谢：https://blog.csdn.net/pentiumCM/article/details/105652853
python — numpy计算矩阵特征值，特征向量
一、数学演算 示例&…
186_Power BI Desktop 支持计算组编辑
186_Power BI Desktop 支持计算组编辑
一、背景
今天是2023年10月16日，基本上是 Power BI 每月更新的时间点了。打开看到 Power BI 果然已经更新到了2023年10月版本：2.122.746.0 (23.10) (x64)
这里提一下，我使用的是商店版的 Power BI De…
lazada商品列表数据接口，关键词搜索lazada商品数据接口
在网页抓取方面，可以使用 Python、Java 等编程语言编写程序，通过模拟 HTTP 请求，获取lazada网站上的商品页面。在数据提取方面，可以使用正则表达式、XPath 等方式从 HTML 代码中提取出有用的信息。值得注意的是，lazada…
Python数据分析实战-实现Mann-Whitney U检验（附源码和实现效果）
实现功能
使用scipy.stats模块中的mannwhitneyu函数来实现Mann-Whitney U检验，该检验用于比较两个独立样本的分布是否有显著差异。
实现代码
from scipy.stats import mannwhitneyu# 两个独立样本的数据
group1 [1, 2, 3, 4, 5]
group2 [6, 7, 8, 9, 10]# 执行…
数据分析基础:数据可视化+数据分析报告
数据分析是指通过对大量数据进行收集、整理、处理和分析，以发现其中的模式、趋势和关联，并从中提取有价值的信息和知识。
数据可视化和数据分析报告是数据分析过程中非常重要的两个环节，它们帮助将数据转化为易于理解和传达的形式࿰…
Pandas数据分析Pandas进阶在线闯关_头歌实践教学平台
Pandas数据分析进阶 第1关 Pandas 分组聚合第2关 Pandas 创建透视表和交叉表 第1关 Pandas 分组聚合
任务描述 本关任务：使用 Pandas 加载 drinks.csv 文件中的数据，根据数据信息求每个大洲红酒消耗量的最大值与最小值的差以及啤酒消耗量的和。 编程要求…
【藏经阁一起读】（72）__《Hologres 一站式实时数仓客户案例集》
【藏经阁一起读】（72）
__《Hologres 一站式实时数仓客户案例集》 目录
【藏经阁一起读】（72）
一、实时数仓概念
二、Hologres
三、Hologres 一站式实时数仓客户案例集
3.1、电商
3.1.1、实时数仓 Hologres 首次走进阿里淘特…
电商数据API接口：新服务下电商网站、跨境电商独立站,移动APP的新型拉新武器
互联网的发展改变了我们的生活方式，也改变了企业商家们的营销方式，越来越多的企业商家把产品营销从线下转到线上，选择在线商城、移动APP、微信公众号等互联网工具进行营销活动。而随着营销模式的多元化和电子支付渠道的进一步发展，…
一图读懂「五度情报站」全盘视野，情报智取，先知先行，决策有道！
「五度情报站」是一款集企业情报监测、管理、分析等多功能于一体微信小程序，其依托全体量产业大数据及强大的数据治理能力，收录了商业、市场、竞争、企业、技术、金融等全类别情报信息，构建了面向用户的业务型标签体系，设计了实用…
为什么要做数据可视化
在当今信息爆炸的时代，数据已成为个人和企业最宝贵的资产之一。然而，仅仅拥有大量的数据并不足以支持明智的决策。数据可视化，作为一种将数据转化为图形形式的技术和方法，可以帮助我们更好地理解和分析数据，从而更准确…
Elasticsearch系列组件：Logstash强大的日志管理和数据分析工具
Elasticsearch 是一个开源的、基于 Lucene 的分布式搜索和分析引擎，设计用于云计算环境中，能够实现实时的、可扩展的搜索、分析和探索全文和结构化数据。它具有高度的可扩展性，可以在短时间内搜索和分析大量数据。 Elasticsearch 不仅仅是一个…
出海 SaaS 企业增长修炼手册：聊聊 PLG 的关键指标、技术栈和挑战
产品驱动增长 Product-Led Growth (PLG) 近几年可谓火遍海外 SaaS 圈，但想要真正落地 PLG 还是存在不少挑战的。了解 PLG 背后的增长指标，不仅可以帮助企业跟上发展节奏，更能从纷繁复杂的业务细节中获取有价值洞察。那么，如何高效…
京东店铺商品评论数据采集，京东商品评论数据接口，京东API接口
京东店铺商品评论数据接口可以获取到商品ID，商品标题，商品优惠券，商品到手价，商品价格，商品优惠价，商品sku属性，商品图片，商品视频，商品sku属性图片，商品属性…
通过商品ID查询天猫商品详情数据，可以拿到商品标题，商品价格，商品库存，商品销量，商品sku数据等，天猫API接口
通过商品ID查询天猫商品详情数据可以用淘宝开放平台的淘宝客商品详情查询接口（taobao.tbk.item.info.get）来完成。
首先需要申请一个淘宝开放平台的应用，并获取到App Key和App Secret，然后使用淘宝开放平台的淘宝客商品详情查询接…
数据分析——A/B测试二：优惠券AB测试项目
上文我们讲到A/B测试的简单流程，本次将通过实战来对A/B测试进行详细的讲解。
A/B测试的关键点
目标KPI
A/B测试中我们需要制定目标KPI：指评判AB测试效果优劣的最终指标。例如：提升多少点击率或者提升多少转化率。
策略
为了达到我们制定…
【使用OpenCV进行目标分割与计数的代码实例详解】
文章目录 概要实例一：硬币分割计数实例二：玉米粒分割计数 概要
在当今数字图像处理领域，图像分割技术是一项至关重要的任务。图像分割旨在将图像中的不同目标或区域准确地分开，为计算机视觉、图像识别和机器学习等领域提供了坚实…
将用友U8的数据可视化需要哪些工具？
将金蝶U8的数据可视化需要一个奥威BI数据可视化工具，以及一套专为用友U8打造的标准化BI数据分析方案。
奥威BI SaaS平台：一键链接用友U8，立得报表
别的BI软件围绕用友U8的数据做可视化：1、准备配置环境；2、下载安装配…
中小型企业云存储选型指南：要点与建议
随着信息技术的快速发展，中小型企业越来越依赖于云存储来管理和存储其日益增长的数据。选择适合自己企业的云存储解决方案是确保数据安全、提高工作效率的关键。
选型注意点：
选择适合自己企业的云存储方案 在选择适合自己企业的云存储方案时ÿ…
2022年亚太杯APMCM数学建模大赛D题储能系统中传热翅片的结构优化求解全过程文档及程序
2022年亚太杯APMCM数学建模大赛
D题 储能系统中传热翅片的结构优化
原题再现 高效储能技术是解决可再生能源和余热资源波动性和间歇性的核心技术。相变蓄热以其较高的储能密度和近恒温蓄热放热而得到广泛应用。固-液相变材料具有相变前后相变潜热高、体积变化小等特点&#x…
2022年亚太杯APMCM数学建模大赛B题高速列车的优化设计求解全过程文档及程序
2022年亚太杯APMCM数学建模大赛
B题 高速列车的优化设计
原题再现： 2022年4月12日，中国高铁复兴号CR450动车组在开放线上成功实现单车时速435公里，相对速度870公里，创造了高铁动车组列车穿越开放线和隧道速度的世界纪录。新一代…
京东商品详情API接口(标题|主图|SKU|价格|库存..）
京东商品详情接口的应用场景有很多，以下为您推荐几种：
电商平台集成：如果想要实现商品查询、购买、支付等功能，提高自身平台的电商能力，可以将京东API接口集成到自己的电商网站或应用程序中。第三方开发者插件&#x…
数据分析、数据挖掘常用的数据清洗方法
数据清洗目的：一是为了解决数据质量问题；二是为了使数据更适合模型分析挖掘。
数据的完整性—例如：人的属性中缺少性别
数据的唯一性—例如：不同来源的数据出现重复
数据的权威性—例如：同一个指标出现多个来源的数…
作为决策者，谁能拒绝这样一张数据可视化报表
数据分析是决策的一大助力，因此作为企业的管理决策者都会希望获得一份直观易懂、支持灵活自助分析的数据可视化报表，比如说由奥威BI数据可视化软件制作的这张BI报表。
名称：零售业数据分析驾驶舱
来源：奥威BI零售数据分析方案 …
jupternotebook和jupterLab有什么区别？
目录
1.jupternotebook
2.jupterLab
3.总结 Jupyter Notebook和JupyterLab是两个常用的交互式计算环境，都是基于Jupyter项目开发的。它们具有一些共同的特性，但也存在一些区别。
1.jupternotebook Jupyter Notebook是Jupyter项目的早期版本ÿ…
数据分析思维与模型：多维度拆解分析法
多维度拆解分析法"（Multi-Dimensional Analysis and Decomposition Method）是一种用于深入分析和解决复杂问题的方法论。这种方法侧重于从多个角度或维度来考察问题，以便于更全面地理解和解决它们。它通常包括以下几个步骤： …
2023年京东洗发护发行业增长趋势分析：头皮清洁或成小风口
如今，随着消费观念的转变，越来越多的消费者愈加重视头部的洗护，无论是女性还是男性，都开始积极寻找头部洗护用品，以更好地呵护头发及头皮。在用户需求的推动下，洗发护发行业已经逐渐发展成为成熟行业。 根据…
从Excel数据到数据可视化报表，只需3步
数据可视化真没那么难，当手头有一款强大智能的BI工具，搞定数据可视化只需简单3步。1，导入数据；2，下载BI报表模板；3，替换数据源，由BI系统自动计算分析指标，生成数据可视化…
Pyecharts绘图教程（2）—— 绘制多种折线图（Line）参数说明+代码实战
文章目录 🎯 1 简介🎯 2 图表配置项2.1 导入模块2.2 数据配置项2.3 全局配置项 🎯 3 代码实战3.1 基础折线3.2 平滑曲线（is_smooth）3.3 阶梯折线（is_step）3.4 空值过渡（is_connect_n…
数据分享 I 地级市人口和土地使用面积基本情况
数据地址：
地级市人口和土地使用面积基本情况https://www.xcitybox.com/datamarketview/#/Productpage?id394
基本信息.
数据名称: 地级市人口和土地使用面积基本情况
数据格式: ShpExcel
数据时间: 2021年
数据几何类型: 面
数据坐标系: WGS84坐标系
数据…
数据分享 I 第一至第四批专精特新“小巨人”企业数据
数据地址：
专精特新“小巨人”企业数据https://www.xcitybox.com/datamarketview/#/Productpage?id355
基本信息.
数据名称: 第一至第四批专精特新“小巨人”企业数据
数据格式: Shpxlsx
数据时间: 2022年
数据几何类型: 点
数据坐标系: WGS84坐标系
数据字…
物流Excel报表用python处理并进行数据分析
问题一：配送服务是否存在问题
import os
import pandas as pd
inport numpy as np
import matplotlib.pylot as plt
plt.rcParams[font.sans_serif] SimHei##设置中文显示
数据清洗
data pd.read_excel(,encoding gbk)
data.info()通过info可以看出࿰…
Python Pandas 删除局部数据 （第10讲）
Python Pandas 删除局部数据 （第10讲） 🍹博主 侯小啾 感谢您的支持与信赖。☀️ 🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ�…
零售数据分析模板分享（通用型）
零售数据来源多，数据量大，导致数据的清洗整理工作量大，由于零售的特殊性，其指标计算组合更是多变，进一步导致了零售数据分析工作量激增，往往很难及时分析数据，发现问题。那怎么办？可…
Python Pandas 处理缺失值（第11讲）
Python Pandas 处理缺失值（第11讲） 🍹博主 侯小啾 感谢您的支持与信赖。☀️ 🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔…
火山引擎 LAS Spark 升级：揭秘 Bucket 优化技术
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 文章介绍了 Bucket 优化技术及其在实际业务中的应用，包括 Spark Bucket 的基本原理，重点阐述了火山引擎湖仓一体分析服务 LAS（下…
Python3，区区5行代码，制作期待的图表，这技能值得拥有(一)。
5行代码制作图表（一） 1、引言2、matplotlib介绍2.1 基本功能2.1.1 定义2.1.2 常用方法 2.2 示例2.2.1 安装2.2.2 代码示例-折线图2.2.2 代码示例-柱状图 3、总结 1、引言
小屌丝：鱼哥，干啥嘞？ 小鱼：啥也没…
Python Pandas数据重塑： `stack()`，`unstack()`和`pivot()`操作（第20讲）
Python Pandas数据重塑： stack()，unstack()和pivot()操作（第20讲） 🍹博主 侯小啾 感谢您的支持与信赖。☀️ 🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔…
京东平台数据分析：2023年9月京东扫地机器人行业品牌销售排行榜
鲸参谋监测的京东平台9月份扫地机器人市场销售数据已出炉！ 根据鲸参谋平台的数据显示，9月份，京东平台扫地机器人的销量近14万，环比增长约2%，同比降低约4%；销售额为2.9亿，环比降低约4%࿰…
【100天精通Python】Day72：Python可视化_一文掌握Seaborn库的使用《二》_分类数据可视化，线性模型和参数拟合的可视化，示例+代码
目录
1. 分类数据的可视化
1.1 类别散点图（Categorical Scatter Plot）
1.2 类别分布图（Categorical Distribution Plot）
1.3 类别估计图（Categorical Estimate Plot）
1.4 类别单变量图（Cat…
关键词搜索天猫商品数据接口(标题|主图|SKU|价格|优惠价|掌柜昵称|店铺链接|店铺所在地|天猫商品列表API接口）
关键词搜索天猫商品数据接口可以使用天猫官方的API接口实现。以下是一些可能有用的天猫API接口：
item_search_tmall - 按关键字搜索天猫商品接口：这个接口可以用于通过关键词搜索天猫商品，获取商品列表。可以在接口中使用不同的关键字进行搜…
相关性网络图 | 热图中添加显著性
一边学习，一边总结，一边分享！
本期教程 写在前面
此图是一位同学看到后，想出的一期教程。
最近，自己的事情比较多，会无暇顾及社群和公众号教程。
1 安装和加载相关的R包
library(ggraph)
library(tidy…
纷享销客BI，助力企业激活数据价值，科学企业决策
10月25日上午，国家数据局正式挂牌成立，这标志着我国数字经济发展将进入新的发展阶段，也将有力促进数据要素技术创新、开发利用和有效治理，以数据强国支撑数字中国的建设。伴随数据作为企业新的生产要素的意义不断凸显，…
查询平均提速 700%，奇安信基于 Apache Doris 升级日志安全分析系统
本文导读：
数智时代的到来使网络安全成为了不可忽视的重要领域。奇安信作为一家领先的网络安全解决方案领军者，致力于为企业提供先进全面的网络安全保护，其日志分析系统在网络安全中发挥着关键作用，通过对运行日志数据的深入分析…
数字孪生技术：金融业合规与自动化的未来
在当今数字化时代，金融行业正积极探索数字孪生技术，以实现更高效的运营和更好的客户体验。数字孪生是一种将实体世界的对象、过程和系统数字化为虚拟模型的技术，金融机构正在充分利用它带来的众多优势。
1. 风险管理与模拟
数字孪生模型可用…
数据分析——快递电商
一、任务目标
1、任务
总体目的——对账
本项目解决同时使用多个快递发货，部分隔离区域出现不同程度涨价等情形下，如何快速准确核对账单的问题。
1、在订单表中新增一列【运费差异核对】来表示订单运费实际有多少差异，结果为数值。
2、将…
【兔子王赠书第5期】ChatGPT速学通：文案写作+PPT制作+数据分析+知识学习与变现
文章目录 前言ChatGPT推荐图书作者简介内容简介推荐理由 粉丝福利尾声 前言
程序员如果有一天代码写不动了，还能干什么？
一位 80 后女程序员“兰猫”给出了她的答案——转型 AI 写手。兰猫从事程序员工作十余年，在繁重的工作压力下…
京东商品评论API接口(评论内容|日期|买家昵称|追评内容|评论图片|评论视频..）
京东商品评论API接口是京东开放平台提供的一套API接口，用于获取京东商城商品评论数据。通过该接口，您可以获取到商品评论的详细信息，包括评论内容、评论时间、评论者信息等。
要使用京东商品评论API接口，您需要完成以下步骤&…
独家分享 | BI零售数据分析模板，可视化，更易懂
“人、货、场”是零售数据分析的三大关键，只要能又快又透彻地掌握这三大关键的数据情况，即可为零售运营决策提供关键的数据支持，提高盈利、降低成本、优化采购库存结构等。奥威BI软件这套BI零售数据分析模板套装围绕“人、货、场”预设了数十…
Matlab2022a详细步骤【操作简单】
一、下载
（1）百度网盘下载 提取码07cc （2）夸克网盘下载
二、安装
1.打开安装包 2. 用“资源管理器”打开iso镜像文件
右键点击“setup”，以管理员身份运行 选择高级选项，“我有文件安装密钥” 从安装…
零代码复现-TCGA联合GEO免疫基因结合代谢基因生信套路（一）
经过一段时间的积累，搭建的分析平台已经日渐进入稳定的状态，很多粉丝也在和我们反馈，让我们出一下零代码生信套路课。
小编找了很久，发现某某机构出的TCGA联合GEO 免疫基因代谢基因的生信套路，该套路应用常见相对来说…
SPSS两独立样本的非参数检验
前言： 本专栏参考教材为《SPSS22.0从入门到精通》，由于软件版本原因，部分内容有所改变，为适应软件版本的变化，特此创作此专栏便于大家学习。本专栏使用软件为：SPSS25.0 本专栏所有的数据文件请点击此链接下…
数据分析-Pandas如何轻松处理时间序列数据
Pandas-如何轻松处理时间序列数据
时间序列数据在数据分析建模中很常见，例如天气预报，空气状态监测，股票交易等金融场景。此处选择巴黎、伦敦欧洲城市空气质量监测 N O 2 NO_2 NO2数据作为样例。
python数据分析-数据表读写到pandas
经典…
SPSS两相关样本检验
前言： 本专栏参考教材为《SPSS22.0从入门到精通》，由于软件版本原因，部分内容有所改变，为适应软件版本的变化，特此创作此专栏便于大家学习。本专栏使用软件为：SPSS25.0 本专栏所有的数据文件请点击此链接下…
基因预测软件prodigal的使用
Prodigal是一款常用的基因预测软件，可以用于预测原核生物基因组中的开放阅读框（ORF），并根据不同的编码调用方式（如起始密码子和终止密码子）对其进行注释。
以下是使用Prodigal进行基因预测的步骤ÿ…
时间序列预测模型实战案例(八)(Informer)BestPaper论文模型Informer代码实战讲解
论文地址->Informer论文地址PDF点击即可阅读
代码地址-> 论文官方代码地址点击即可跳转下载GIthub链接 本文介绍
本篇博客带大家看的是Informer模型进行时间序列预测的实战案例，它是在2019年被提出并在ICLR 2020上被评为Best Paper，可以说Inform…
时间序列预测实战(十一)用SCINet实现滚动预测功能(附代码+数据集+原理介绍）
论文地址->SCINet官方论文地址
官方代码地址-> 官方代码下载地址
个人整理的代码地址->免费分享给大家创作不易请大家给文章点点赞
一、本文介绍
这篇文章给大家带来的是关于SCINet实现时间序列滚动预测功能的讲解，SCINet是样本卷积交换网络的缩写(Sam…
Vatee万腾外汇数字化策略：Vatee科技决策力的未来引领
在外汇市场，Vatee万腾通过其前瞻性的外汇数字化策略，正引领着科技决策的未来。这一数字化策略的崭新愿景为投资者提供了更智慧、更高效的外汇投资体验，成为科技决策领域的翘楚。 Vatee万腾的外汇数字化策略是科技决策力未来引领的典范。通过运…
一文讲清生产质量场景的数据分析思路及案例实战
今天，顺着制造业数据分析这个大主题，我们来讲讲质量管理数据分析。 说起质量管理，就是对所生产的产品质量进行管理，其最终目的就是保证客户收到的产品质量，提高客户满意度，减少退货和维修的数量。质量管…
数据分析-Pandas如何重塑数据表
数据分析-Pandas如何重塑数据表
数据表，时间序列数据在数据分析建模中很常见，例如天气预报，空气状态监测，股票交易等金融场景。数据分析过程中重新调整，重塑数据表是很重要的技巧，此处选择Titanic数据&…
如何快速将txt类型的日志文件转换为excel表格并进行数据分析报表统计图（如：饼图、折线图、柱状图）？
打开excel创建空白文档 选择一个txt文件 一动下面箭头↑竖线，可以拖拽左右调整要判断转换为一列的数据宽度 根据情况设置不同列的数据格式（每一列可以点击），设置好后点击【完成】 设置单元格数据格式 手动插入第一行为每列数据的…
python 词云 wordcloud使用paddle模式 庆余年人物分析--不是特别准，可以看着玩一玩
看完之后你也可以生成自己的词云
提供一个过滤人名的英中词性分析对应，更多的可以去我的码云上看看 https://gitee.com/billion_lines_of_code/learn-wordcloud
# 只过滤人名
En2Cn_name {nr: 名词-人名,nr1: 名词-汉语姓氏,nr2: 名词-汉语名字,nrf: 名词-音译人…
连续变量降维：主成分分析和因子分析
主成分分析（Principal Component Analysis，PCA）和因子分析（Factor Analysis）都是用于处理连续变量降维的统计方法，它们在数据分析和特征提取中经常被使用。尽管它们有一些相似之处，但它们的目标…
shopee数据分析软件丨探索Shopee数据分析软件——知虾
随着电子商务的快速发展，越来越多的商家和企业开始关注数据分析的重要性。在这个竞争激烈的市场中，了解消费者行为、市场趋势和竞争对手的策略是取得成功的关键。而Shopee数据分析软件——知虾，成为了许多商家和企业的首选工具。本文将深入探…
SPASS-信度分析
信度分析概述
效度 效度指的是量表是否真正反映了我们希望测量的东西。一般来说，有4种类型的效度：内容效度、标准效度、结构效度和区分效度。内容效度是一种基于概念的评价指标，其他三种效度是基于经验的评价指标。如果一个量表实际上是有效…
飞书智能伙伴之 AI 数智参谋：先进团队，北极星指标也要遥遥领先
11 月 22 日，飞书在 2023 秋季飞书未来无限大会上正式发布了飞书智能伙伴。作为首批生态伙伴，基于 Kyligence 智能一站式指标平台实现的 AI 数智参谋也正式亮相。这是继 11 月 21 日 Kyligence 产品发布会后，Kyligence 在数据驱动决策智能领域…
最重要的BI测试-适用于任何BI和分析平台
为什么 BI 测试是答案
相信你的数据可视化是成功执行商业智能 (BI) 和分析项目的关键因素。我敢肯定，你遇到过以下情况：业务主管或业务用户反馈说他们的分析看起来不对，他们的 KPI 看起来有问题，或者速度太慢而无法使用。要问自己…
坚鹏：广州银行清华大学消费金融发展趋势与创新培训圆满结束
广州银行自1996年9月成立以来，依托中国经济腾飞的大好形势，成为国内具有一定知名度与地方特色的商业银行。截至2022年12月末，已开业机构174家，包括总行1家，分行级机构15家(含信用卡中心)、支行152家、信用卡分中心6家&…
temu货不对板哪里修改图片
在Temu这个跨境电商平台上，如果您需要修改商品图片，通常需要在卖家中心进行操作。下面是一般的步骤，但请注意，不同平台的操作可能略有不同，具体请参考Temu官方的帮助文档或联系客服。 先给大家推荐一款拼多多/temu运营…
时间序列预测实战(二十三)进阶版LSTM多元和单元预测（课程设计毕业设计首选）
一、本文介绍
本篇文章给大家带来的是利用我个人编写的架构进行LSTM模型进行时间序列建模（专门为了时间序列领域新人编写的架构，简单且不同于市面上大家用GPT写的代码），包括结果可视化、支持单元预测、多元预测、模型拟合效果检测…
【Wireshark工具使用】Wireshark无法抓取TwinCAT的EtherCAT包（已解决）
写在前面
因项目需要，近期在在深入研究EtherCAT协议，之后会将协议做一个系统的总结，分享在这个分栏。在研究EtherCAT协议帧时，使用了一个网络数据分析工具Wireshark，本文是关于EtherCAT数据帧分析工具使用中遇到的一个…
科学化决策数据分析，先从量化开始
在当今信息爆炸的时代，数据已经成为我们生活和工作中不可或缺的一部分。在各行各业，人们越来越依赖数据来指导决策和优化业务。在这个背景下，量化成为了一种重要的方法论，通过收集、分析和解读数据，为我们提供了更准确…
2023第二届全国大学生数据分析大赛A题思路
某电商平台用户行为分析与挖掘 背景：电商是当今用户最大的交易市场之一，电商行业也逐渐成熟， 所有市场中可售卖的商品全都在平台中存在，并且在网络和疫情的影 响下，在线上的消费行为满足全年龄段用户。 用户的交易行为…
描述性统计：分析数据的分布情况：中位数和平均数
1、数学定义和业务含义
中位数和平均数是用于对一组数据进行描述的统计量。
中位数是指将一组数据按照大小顺序排列后，中间位置上的数值，即一半数据大于它，一半数据小于它。如果数据的个数是偶数，则中位数是中间两个数的平均数。…
利用 Python 进行数据分析实验（四)
一、实验目的
使用Python解决简单问题
二、实验要求
自主编写并运行代码，按照模板要求撰写实验报告
三、实验步骤
本次实验共有4题：
汉诺塔问题：有3根柱子，第一根有N个盘子，从上往下越来越大。要求把第一根柱子的…
从数据可视化到场景渲染：山海鲸的创新与实践
作为山海鲸的开发者，我们深知可视化模型场景渲染在数据分析和决策支持中的重要作用。因此在保证山海鲸可视化软件免费编辑、分享、部署的同时也在场景渲染方面不断优化，本文将介绍山海鲸在可视化模型场景渲染方面的技术革新与实践探索。
首先࿰…
生信数据分析高效Python代码
1. Pandas glob获取指定目录下的文件列表
import pandas as pd
import globdata_dir "/public/data/"
# 获取文件后缀为.txt的文件列表
df_all pd.concat([pd.read_csv(f, sep\t) for f in glob.glob(data_dir *.txt)])
print(df_all)2. 使用 enumerate 函数获取…
让植被管理更精准：数据可视化的新利器
【小编整理了300可视化大屏源文件，需要可后台私~！】 在当今时代，数据可视化技术已经成为了一个非常重要的技术。对于植被管理来说，数据可视化也有着非常重要的作用。通过将植被管理数据可视化，我们可以更加清晰地了解植…
银行数据分析指标篇：最全银行数据指标体系打包送给你！
前两天分享了银行业数据分析的案例，今天呢，老李把金融行业的指标体系和典型分析场景完整分享给大家！做地通俗易懂，条理清晰，很快就能上手。
银行指标体系
“指标”作为业务和数据的结合，它使得业务目标可…
Seaborn可视化图形绘制_Python数据分析与可视化
Seaborn可视化图形绘制 频次直方图、KDE和密度图矩阵图分面频次直方图条形图折线图 Seaborn的主要思想是用高级命令为统计数据探索和统计模型拟合创建各种图形，下面将介绍一些Seaborn中的数据集和图形类型。 虽然所有这些图形都可以用Matplotlib命令实现（…
数据分析基础之《matplotlib（3）—散点图》
一、常见图形种类及意义
1、matplotlib能够绘制折线图、散点图、柱状图、直方图、饼图。我们需要知道不同的统计图的意义，以此来决定选择哪种统计图来呈现我们的数据
2、折线图plot 说明：以折线的上升或下降来表示统计数量的增减变化的统计图 特点&…
【机器学习】利用线性回归预测披萨价格
目录 前言 一、绘制散点图 二、数据准备 三、一元线性回归模型训练 四、一元线性回归模型评估 总结 🌈嗨！我是Filotimo__🌈。很高兴与大家相识，希望我的博客能对你有所帮助。 💡本文由Filotimo__✍️原创，首…
工业互联网会是制造业数字化发展的未来吗？
新工业革命正逐步形成，你认为工业互联网会是制造业数字化发展的未来吗？
从这几年的工业互联网发展政策措施，就能看到答案——
早在近三年前，工业互联网创新发展行动计划（2021-2023年）就提出了五方面、11项…
Python数据分析之Jupyter Notebook安装教程
一、简介
Jupyter Notebook是基于网页的交互编程工具，以网页的形式打开，可以在网页页面中直接编写代码和运行代码，代码的运行结果也会直接在代码块下显示。
特点：Jupyter Notebook中所有交互计算、编写说明文档、数学公式、图片…
数据分析基础之《numpy（4）—ndarry运算》
一、逻辑运算
当我们要操作符合某一条件的数据时，需要用到逻辑运算
1、运算符 满足条件返回true，不满足条件返回false
# 重新生成8只股票10个交易日的涨跌幅数据
stock_change np.random.normal(loc0, scale1, size(8, 10))# 获取前5行前5列的数据
s…
《数据分析-JiMuReport》积木报表详细入门教程
积木报表详细入门教程
一、JimuReport部署入门介绍
积木报表可以通过源码部署、SpringBoot集成、Docker部署以及各种成熟框架部署，具体可查看积木官方文档
当前采用源码部署，首先下载Jimureport-example-1.5.6
1 jimureport-example目录查看
使用ID…
2007-2019年中国人口与就业统计年鉴， pdf、xls不定，多项指标可查，可预览后下载
数据名称: 中国人口与就业统计年鉴
数据格式: pdf、xls不定
数据时间: 2007-2019年
数据几何类型: 文本
数据坐标系: ——
数据来源：国家统计局
数据字段: —— 数据预览
目录第一部分 综合数据1-1 分地区年末人口数1-2 按性别分人口数1-3 人口年龄结构…
nifi详细介绍--一款开箱即用、功能强大可靠，可用于处理和分发数据的大数据组件
目录
目录
一、引言
二、NiFi 的历史背景介绍
三、NiFi 是什么？
核心特性
应用领域
四、NIFI 入门
五 、NiFi 工作流程
六、实际应用场景
七、优势总结 一、引言
NiFi（Apache NiFi），全名为“Niagara Files”࿰…
Treemap layout；squarified treemap layout
Treemap布局和Squarified Treemap布局是用于可视化层次数据的一种方法。
Treemap布局： Treemap布局是一种通过矩形区域的大小来表示层次数据的可视化方法。它将层次结构数据递归地划分为矩形区域，其中父节点的大小由其子节点的大小之和决定。通常&#…
小红书话题浏览近4亿，全网热议“尔滨”！关键词数据拆解爆点玩法
据说，“南方小土豆”勇闯哈尔滨后，北方变了？！冻梨切盘摆出花、东北大哥夹子音、就连东北虎都变金渐层了……继淄博后，哈尔滨成为下一个网红城市。哈尔滨为何这样火？通过小红书数据分析，从社交货…
【期末复习向】数据可视化技术
一、重点复习 题型：填空题（15道，2分一个）与简答题（3道题目，10分一个）与绘图题（选画2个类型的图）
1.什么是数据可视化 在计算机视觉领域，数据可视化是对数据的…
Matlab/F#/R进行数据分析和建模算法的经验，vb.net输给他了
微软放弃了vb.net的开发，但是持续花费巨资投入F#,简单一看他的语法就是qbasic ,vb6一样。鹿死谁手，谁能相信vb.net竟然被f#给干掉了。外面有vb6语法的python成了全球第一的编程语言,内部还有强大的教授开发的这工具扯后腿。 有人说为什么中国搞不出像mat…
bulk-RNA seq测序数据分析流程
假如有bulk-RNA测序的数据：TH1，TH2，TH3三个重复（实验组），TW1，TW2，TW3三个重复（对照组）
准备工作
需要安装的软件（如FastQC、Trimmomatic、HISAT…
和鲸社区数据分析每周挑战【第一百二十一期：电商店铺经营分析】
和鲸社区数据分析每周挑战【第一百二十一期：电商店铺经营分析】 文章目录 和鲸社区数据分析每周挑战【第一百二十一期：电商店铺经营分析】一、数据文档二、探索性数据分析三、品类销售效果评估四、用户参与活动优惠的购物行为分析五、不同订单来源对购买…
【头歌】——数据分析与实践-python-Pandas 初体验-Pandas数据取值与选择-Pandas进阶
【头歌】——数据分析与实践-python-Pandas 初体验-Pandas数据取值与选择-Pandas进阶 Pandas 初体验第1关 了解数据处理对象--Series第2关 了解数据处理对象-DataFrame第3关 读取 CSV 格式数据第4关 数据的基本操作——排序第5关 数据的基本操作——删除第6关 数据的基本操作—…
有什么数据恢复软件？告诉你6个好用的数据恢复软件
数据恢复是必不可少的，因为我们的系统中都存储着重要且可能无法替代的数据和文件。
无论数据丢失是由于硬盘驱动器崩溃还是由于计算机突然停止工作，了解如何安全地恢复数据都是至关重要的。
您有多种选项来找回丢失的数据。您需要做的第一件事是将硬盘…
Apache Doris 入门 10 问
基于 Apache Doris 在读写流程、副本一致性机制、 存储机制、高可用机制等方面的常见疑问点进行梳理，并以问答形式进行解答。在开始之前，我们先对本文相关的名词进行解释： FE：Frontend，即 Doris 的前端节点。主要负责接…
Power BI - 5分钟学习修改数据类型
每天5分钟，今天介绍Power BI修改数据类型
Power BI加载数据时，会尝试将源列的数据类型转换为更高效的存储、计算和数据可视化的数据类型。 例如，如果从Excel导入的值的列没有小数值，Power BI Desktop会将整个数据列转换为整数数据…
SPASS-交叉表分析
导入数据 修改变量测量类型 分析->描述统计->交叉表 表中显示行、列变量通过卡方检验给出的独立性检验结果。共使用了三种检验方法。上表各种检验方法显著水平sig.都远远小于0.05,所以有理由拒绝实验准备与评价结果是独立的假设，即认为实验准备这个评价指标是…
与创新者同行，Apache Doris in 2023
在刚刚过去的 Doris Summit Asia 2023 峰会上，Apache Doris PMC 成员、飞轮科技技术副总裁衣国垒带来了“与创新者同行”的主题演讲，回顾了 Apache Doris 在过去一年所取得的技术突破与社区发展，重新思考了在面对海量数据实时分析上的挑战与机…
破解制造业痛点，数据化方案助力高效生产！
随着科技的飞速发展，我们已进入数据化时代。在这个时代，制造业面临着前所未有的挑战。本文将探讨制造业在当今数据化时代遇到的问题以及相应的解决方案。 一、背景
制造业作为全球经济发展的重要支柱，正面临着数据化带来的巨大变革。在这个以…
如何建设产品的指标体系？
1、理解产品定位和目标 在做指标体系前，必须要知道指标体系所服务产品的定位和目标，以保证指标体系对业务的指导意义，切记闭门造车和纸上谈兵。
2．梳理出当前产品阶段的北极星指标 根据产品当前阶段的战略目标制定北极星指标&…
2019年五一杯数学建模A题让标枪飞解题全过程文档及程序
2020年五一杯数学建模
A题 让标枪飞
原题再现 标枪的投掷是一项历史悠久的田径比赛项目。标枪投掷距离的远近受到运动员水平（出手速度、出手角、初始攻角、出手高度、出手时标枪的初始俯仰角速度等），标枪的技术参数（标枪的长度、…
ChatGPT4 完成数据分析结构分析，动态饼图可视化
对于数据分析中的结构占比分析，以下几种图表类型是比较常见和合适的：
1. **饼图（Pie Chart）**：饼图是一种表现部分与整体关系的图表，各部分占整体的比例在图中以圆形的切片形式体现。它适用于表示不同类别之间的比较，以及每个类别占总数的百分比。
2. **环图（Doughnu…
2018年五一杯数学建模C题江苏省本科教育质量综合评价解题全过程文档及程序
2019年五一杯数学建模
C题 江苏省本科教育质量综合评价
原题再现 随着中国的改革开放，国家的综合实力不断增强，中国高等教育发展整体已进入世界中上水平。作为一个教育大省，江苏省的本科教育发展在全国名列前茅，而江苏省13个地级…
相关系数和协方差的关系与区别
相关系数和协方差都是用来衡量两个变量之间关系的统计量，它们在描述变量之间的线性关系上提供了一些信息。下面是它们的关系与区别： 关系：
相关系数的计算涉及到协方差。相关系数等于协方差除以两个变量的标准差的乘积。具体而言，…
游戏数据分析实战 | 学习笔记
第1章：“数羊”与数据化运营
通过游戏测试数据，评估产品质量，帮助产品定位。预估最优市场投放金额，为市场投放决策提供依据，合理分配资源，减少资源浪费对高价值用户进行画像，分析其行为和偏好&…
GIS杂记（三）：MaxEnt模型中的图像地理范围不匹配【全网最好的方法，没有之一】
图像地理范围不匹配问题解决方法 1. 问题描述2. 问题范例3. 问题解决4. 其他参考 1. 问题描述 一般在使用全国的的生物气候变量时，由于其地理范围一致，因此不会出现地理范围不匹配的问题。但是，当加入其他影响因子的时候，如海拔、…
100天精通Python（可视化篇）——第108天：Pyecharts绘制多种炫酷词云图参数说明+代码实战
文章目录 专栏导读一、词云图介绍1. 词云图是什么？2. 词云图应用场景？二、参数说明1. 导包2. add函数三、词云库实战1. 基础词云图2. 矩形词云图3. 三角形词云图4. 菱形词云图5. 自定义图片词云图书籍推荐专栏导读
🔥🔥本文已收录于《100天精通Python从入门到就业》：本…
全国的科技创新情况数据分享，涵盖2020-2022年三年情况
随着国家对科技创新的重视和大力支持，全国的科技创新情况越来越受到关注。
我们根据中国城市统计年鉴的这方面指标，分析汇总得出全国科技创新情况数据，需要说明的是，由于统计年鉴指标调整，每一年的数据并非字段相同&a…
Java爬虫框架下代理使用中的TCP连接池问题及解决方案
引言
当使用Java爬虫框架进行代理爬取时，可能会遇到TCP连接池问题，导致"java.net.BindException: Cannot assign requested address"等错误。本文将介绍如何以爬取小红书为案例，解决Java爬虫框架中代理使用中的TCP连接池问题&…
100天精通Python（数据分析篇）——第63天：Pandas使用自定义函数案例
文章目录每篇前言一、Pandas自定义函数1. pipe()2. apply()3. map()4. applymap()5. agg()二、总结每篇前言 🏆🏆作者介绍：Python领域优质创作者、华为云享专家、阿里云专家博主、2021年CSDN博客新星Top6 🔥🔥本文已收…
AIGC ChatGPT4对Gbase数据库进行总结
ChatGPT4 用一个Prompt完成Gbase数据库的总结。 AIGC ChatGPT 职场案例 AI 绘画 与 短视频制作 PowerBI 商业智能 68集 数据库Mysql 8.0 54集 数据库Oracle 21C 142集 Office 2021实战应用 Python 数据分析实战， ETL Informatica 数据仓库案例实战 Excel 2021实操 …
京东大数据（京东数据采集）：2023年Q3线上投影仪品类销售数据分析报告
11月初，某知名投影仪企业发布了2023年三季度财报。数据显示，今年第三季度，公司营收依然不客观，连续第五个季度业绩持续下滑。
从鲸参谋数据也可以看出，今年Q3，京东平台上该品牌的销量环比下滑约35%&#x…
Python使用模拟退火（Simulated Annealing）算法构建优化器获取机器学习模型最优超参数组合（hyperparameter）实战+代码
Python使用模拟退火（Simulated Annealing）算法构建优化器获取机器学习模型最优超参数组合（hyperparameter）实战+代码 目录
数字化转型导师坚鹏：数字化时代银行网点厅堂营销5大关键点分析
数字化时代银行网点厅堂营销需要抓住以下5大关键点：
1、精准识别客户：在数字化时代，银行网点厅堂营销的关键在于精准识别客户。通过利用大数据和人工智能技术，银行可以分析客户的行为和需求，从而更好地了解客户&#…
银行业数据分析算法应用汇总
数据分析在银行业的应用及具体案例 一、欺诈检测二、客户细分三、风险建模四、营销优化五、信用评分六、客户流失预测七、推荐引擎八、客户生命周期价值预测 一、欺诈检测
欺诈检测即通过分析交易模式，检测可能的欺诈行为，主要有以下几个方面 1.跨机构开…
加班做报表被嘲低效！快用大数据分析工具
做数据分析报表很耗时间，因为不仅要解决多业务系统数据质量标准不一问题，还需要进行大量的公式计算、报表设计与制作。但那是以前，在大数据分析工具强势崛起的当下，这些工作都能交给大数据分析工具来做了。以前是花90%的时间做报表…
虾皮知虾数据分析软件：优化您的电商经营
在当今竞争激烈的电商市场，了解市场动态、分析竞争对手和产品趋势是成功经营的关键。虾皮知虾数据分析软件是一款强大的工具，为电商卖家提供了全面的数据采集和分析功能。本文将介绍虾皮知虾数据分析软件的特点和功能，以及如何利用它来优化您…
小步快跑激活数据要素市场
数据是数字经济发展的核心，也是人工智能迭代发展的关键，对各行各业都会产生深远的影响，这是各国大力推动促进数据要素市场发展的主要原因。但客观来看，数据要素市场是一个极新的领域，而且对于数据要素市场的内涵&#…
社交媒体广告数据采集：Jsoup 的最佳实践
搜狐是中国领先的综合门户网站之一，广告在其网站上广泛投放。为了了解搜狐广告的策略和趋势，采集和分析搜狐广告数据变得至关重要。但是，搜狐网站的广告数据通常需要通过网页抓取的方式获取，这就需要一个强大的工具来解析和提取数…
【100天精通Python】Day53：Python 数据分析_NumPy数据操作和分析进阶
目录
1. 广播 2 文件输入和输出
3 随机数生成
4 线性代数操作 5 进阶操作
6 数据分析示例 1. 广播 广播是NumPy中的一种机制，用于在不同形状的数组之间执行元素级操作，使它们具有兼容的形状。广播允许你在不显式复制数据的情况下，对不同…
机器学习与因果推断的高级实践 | 数学建模
文章目录 因果推断因果推断的前世今生（1）潜在结果框架（Potential Outcome Framework）（2）结构因果模型（Structual Causal Model，SCM） 身处人工智能爆发式增长时代的机器学…
最近数据分析面试的一点感悟...
我是阿粥，也是小z 最近面了不少应届的同学（数据分析岗位），颇有感触，与各位分享。 简历可以润色，但要适度 运用一些原则，如STAR法则，让简历逻辑更清晰，条块分明࿰…
数据分析工具比较：Excel vs Python vs R
写在开头
在数据分析的世界里，选择合适的工具至关重要。本篇博客将深入比较常用的数据分析工具，包括Excel、Python和R，以帮助读者更好地选择适合自己需求的工具。
1.Excel：经典易用的电子表格
优势： 用户友好： Excel是大多数人熟悉的电子表格工具，使用简单，无需编程…
用智能BI数据加工如何实现两个时间的间隔【场景案例】
在数据分析领域，时间间隔计算的功能是为了分析两个时间点之间的间距，从而获得时间间隔的信息。这种计算用于事件发生的频率、持续时间等方面。在JVS-智能BI平台中提供了多种方式对时间间隔计算方式。
这里我们以系统某应用对用户操作日志场景为例&#…
大数据分析与应用实验任务十
大数据分析与应用实验任务十
实验目的： 通过实验掌握spark SQL的基本编程方法； 熟悉RDD到DataFrame的转化方法； 通过实验熟悉spark SQL管理不同数据源的方法。
实验任务：
进入pyspark实验环境，在桌面环境打开jup…
python数据分析中常用的库
Python是数据处理常用工具，可以处理数量级从几K至几T不等的数据，具有较高的开发效率和可维护性，还具有较强的通用性和跨平台性。Python可用于数据分析，但其单纯依赖Python本身自带的库进行数据分析还是具有一定的局限性的…
Sakila数据库和World数据库
Sakila数据库和World数据库 安装MySQL8.2的时候多出两个样例数据库 Sakila数据库和World数据库 Sakila数据库是一个关于DVD租赁的样例数据库，用于展示MySQL的各种功能和特性。Sakila数据库中包含了多个表，包括电影、演员、客户、租赁记录等，可…
京东数据分析（京东数据运营）：2023年10月咖啡市场销售数据分析（商家销量销额店铺数据）
随着我国经济的发展及人们消费观念、消费习惯的变化，咖啡消费越来越成为一种时尚生活方式，国内咖啡市场也在快速增长。且在当前互联网新零售的背景下，线上咖啡市场也愈加繁荣。 根据鲸参谋电商数据分析平台的相关数据显示，今年10月…
使用pandas实现滑动窗口
滑动窗口的用处很多，比如连续3个订单中的最大值 介绍
窗口函数（Window Function）是一种在关系型数据库中使用的函数，通常用于计算某个范围内的数据。在数据分析中，窗口函数也是一种非常有用的工具，可以轻松…
精品Python基于django就业数据分析平台求职招聘应聘-爬虫可视化大屏
《[含文档PPT源码等]精品基于django就业数据分析平台-爬虫》该项目含有源码、文档、PPT、配套开发软件、软件安装教程、项目发布教程等！
软件开发环境及开发工具：
开发语言：python
使用框架：Django
前端技术：JavaS…
Python神器解析时间序列数据：数据分析者必读
更多资料获取
📚 个人网站：ipengtao.com 时间序列数据是在许多领域中都至关重要的数据类型，它涵盖了一系列按时间顺序排列的数据点。Python作为一种强大的数据分析工具，提供了许多库和工具，能够有效地处理、分析和可视…
居民最低生活保障人数数据，2020-2022年数据，shp矢量及表格数据均有！
居民最低生活保障，是国家对共同生活的家庭成员人均收入低于当地最低生活保障标准，且符合当地最低生活保障家庭财产状况规定的家庭，给予最低生活保障。 基本信息.
数据名称: 居民最低生活保障人数数据
数据格式: shpexcel
数据几何类型: 面…
10个Pandas的另类数据处理技巧
本文所整理的技巧与以前整理过10个Pandas的常用技巧不同，你可能并不会经常的使用它，但是有时候当你遇到一些非常棘手的问题时，这些技巧可以帮你快速解决一些不常见的问题。 1、Categorical类型
默认情况下，具有有限数量选项的列都…
HBase 使用JDK21
HBase 使用JDK21 启动zookeeper和hadoop 创建软件目录
mkdir -p /opt/soft
cd /opt/soft下载软件
wget https://dlcdn.apache.org/hbase/2.5.6/hbase-2.5.6-hadoop3-bin.tar.gz解压 hbase
tar -zxvf hbase-2.5.6-hadoop3-bin.tar.gz修改 hbase 目录名称
mv hbase-2.5.6-had…
【Python】如何实现Cche的功能（详细教学）
文章目录介绍一、pandas是什么？二、基本 Cache 的使用1.引入库二，其他 Cache 的使用三，特殊 TTLCache 的使用四，大小计算总结—近期要实现一个小的功能：我需要在短期内对某些数据进行快速查询、修改等操作，…
Pandas数据可视化咖啡店年、月、日、季度价格
人生苦短，我用python python 安装包资料:点击此处跳转文末名片获取 一、数据概览
咖啡是一种用烘焙过的咖啡豆、 咖啡属某些开花植物的浆果种子调制而成的饮料。
从咖啡果实中分离出种子， 生产出一种稳定的、未经烘焙的生咖啡。
然后将种子进行烘焙&a…
BI技巧丨RowNumber应用介绍
白茶在之前的文章中，给大家介绍过Rank函数的应用场景，其实与Rank函数同时推出的还有RowNumber函数，二者之间有一些差异，但是总体应用的场景基本类似。
RowNumber函数基本语法
ROWNUMBER ( [<relation>][, <orderBy>…
Python 03 变量
目录
一、运算符
1.1 算术运算符
1.2 逻辑运算符
1.3 位运算符
常用函数汇总
二、变量
三、数据类型转换 一、运算符
1.1 算术运算符 在Python中*运算符还可以用于字符串，计算结果就是字符串重复指定次数的结果
"" * 5 # 输出 1.2 逻辑运算符 …
python函数详解_INDEX函数
一. 函数的作用
函数就是将一段具有独立功能的代码块 整合到一个整体并命名，在需要的位置调用这个名称即可完成对应的需求。 函数在开发过程中，可以更高效的实现代码重用。 二. 函数的使用步骤
1. 定义函数
def 函数名(参数):代码1代码2......
复制 …
Power BI - 5分钟学习复制列
每天5分钟，今天介绍Power BI复制列功能。
什么是复制列？ 复制列就是将导入Power BI数据表中一列复制，然后生成一个100%相同新列。
举例： 首先，导入一张【Product】样例表(Excel数据源导入请参考每天5分钟第一天)。
…
抖音跑腿小程序开发指南：从零开始到上线
如今，抖音跑腿小程序的开发已经成为一项具有巨大潜力的领域。本文将为您提供一份详尽的开发指南，从零开始引导您完成一个成功的抖音跑腿小程序的开发和上线过程。
第一步：确定目标和需求
了解用户的期望，确定小程序的功能模块&a…
山海鲸可视化软件：打破数据孤岛，支持多种数据源连接
在之前的文章中为大家介绍了山海鲸可视化软件的主要应用场景，那么作为山海鲸可视化软件的开发者，我希望大家能更全面的了解我们这款免费的数字孪生软件，从而轻松上手。本文从数字孪生第一步接入数据开始为大家介绍一下山海鲸可视化软件支持的…
利用python进行数据分析 第十一章 时间序列
时间序列（time series）数据是一种重要的结构化数据形式，应用于多个领域，包括金融学、经济 学、生态学、神经科学、物理学等。在多个时间点观察或测量到的任何事物都可以形成一段时间序 列。很多时间序列是固定频率的，…
智慧农业大数据可视化UI，数据展示平台（免费可视化大屏模版PS资料）
大屏幕展示方式可以实现信息的直观呈现与交互操作，使农业生产者能够一目了然地掌握有关农情、天气、土壤等数据信息，从而科学决策。智慧农业大数据可视化大屏是提升农业生产效益的一种重要工具。
现分享亩产效益指标、农业大数据可视化、农业数据展示平…
透视数据：数据可视化工具的多重场景应用
数据可视化工具已经成为了许多领域中的重要利器，它们在各种场景下发挥着重要作用。下面我就以可视化从业者的角度简单谈谈数据可视化工具在不同场景下的应用：
企业数据分析与决策支持
在企业层面，数据可视化工具被广泛应用于数据分析和决策…
数据分析的基本步骤有哪些？
数据分析的基本步骤如下：
1. 问题定义和目标设置： 确定需要解决的具体问题或目标，明确分析的目的。例如，希望了解某个产品的销售趋势、预测未来的市场需求等。
2. 数据收集和整理： 收集与问题相关的数据&#…
2016年第五届数学建模国际赛小美赛A题臭氧消耗预测解题全过程文档及程序
2016年第五届数学建模国际赛小美赛
A题 臭氧消耗预测
原题再现： 臭氧消耗包括自1970年代后期以来观察到的若干现象：地球平流层（臭氧层）臭氧总量稳步下降，以及地球极地附近平流层臭氧（称为臭氧空洞&#x…
【Python】强烈推荐的50个Pandas常用高级操作（建议收藏）
文章目录前言一、复杂查询1.逻辑运算2、逻辑筛选数据表达式与切片一致3、函数筛选4、比较函数5、查询df.query()6、筛选df.filter()7、按数据类型查询二、数据类型转换1、推断类型2、指定类型3、类型转换astype()4、转为时间类型三、数据排序1、索引排序df.sort_index()2、数值…
全国(山东、安徽)职业技能大赛--信息安全管理与评估大赛题目+答案讲解
🍬 博主介绍👨🎓 博主介绍：大家好，我是 hacker-routing ，很高兴认识大家~
✨主攻领域：【渗透领域】【应急响应】 【python】 【VulnHub靶场复现】【面试分析】
🎉点赞➕评论➕收藏…
数据分析工具 Top 8
你能想象一个没有工具箱的水管工吗? 没有,对吧? 数据从业者也是如此。如果没有他们的数据分析工具，数据从业者就无法分析数据、可视化数据、从数据中提取价值，也无法做数据从业者在日常工作中做的许多很酷的事情。
根据你最感兴趣的数据科学职业——数…
Hadoop入门学习笔记——八、数据分析综合案例
视频课程地址：https://www.bilibili.com/video/BV1WY4y197g7 课程资料链接：https://pan.baidu.com/s/15KpnWeKpvExpKmOC8xjmtQ?pwd5ay8
Hadoop入门学习笔记（汇总） 目录 八、数据分析综合案例8.1. 需求分析8.1.1. 背景介绍8.1.2…
Pendulum详解3——Pendulum在数据分析中的应用 - 时光的数据探险
写在开头：
在数据分析的世界里，时光是一项无可避免的数据元素。处理时间数据，尤其是在大规模数据集和复杂时区的情境下，是数据科学家和分析师们经常面对的挑战。为了迎接这一挑战，我们介绍一款强大的时间处理库 - Pendulum，并深入探讨其在数据分析领域的优越性。
1. 时…
Spark大数据分析与实战笔记（第二章 Spark基础-05）
文章目录 每日一句正能量前言2.5 启动Spark-Shell2.5.1 运行Spark-Shell命令2.5.2 运行Spark-Shell读取HDFS文件 后记 每日一句正能量 成长是一条必走的路路上我们伤痛在所难免。 前言
在大数据处理和分析领域，Spark被广泛应用于解决海量数据处理和实时计算的挑战。…
【InternLM】Lagent智能体工具调用实践浦语·灵笔（InternLM-XComposer）图文理解创作Demo练习
目录 前言一、Lagent智能体工具1-1、什么是智能体？1-2、Lagent智能体 二、InternLM-XComposer（图文理解创作模型介绍）三、Lagent调用实践3-0、环境搭建3-1、创建虚拟环境3-2、导入所需要的包3-3、模型下载3-4、Lagent安装3-5、demo运行 四、I…
Python文件和操作系统基础
文章和代码等已经归档至【Github仓库：https://github.com/timerring/dive-into-AI 】或者【AIShareLab】回复 python数据分析 也可获取。 文章目录 文件和操作系统文件的字节和Unicode 文件和操作系统
代码示例大多使用诸如 pandas.read_csv 之类的高级工具将磁盘上…
python数据可视化之折线图案例讲解
学习完python基础知识点，终于来到了新的模块——数据可视化。 我理解的数据可视化是对大量的数据进行分析以更直观的形式展现出来。 今天我们用python数据可视化来实现一个2023年三大购物平台销售额比重的折线图。 准备工作：我们需要下载用于生成图表的第…
SCS模型（径流曲线法）概述
目录 1.介绍：2.计算公式：参考文献：小结： 1.介绍：
SCS模型（径流曲线法）是由美国农业部水土保持局(Soil Conservation Service) 基于经验提出，最初用于预测在农业用地小型流域降雨所累…
科学计算库-Pandas随笔【及网络隐私的方法与策略闲谈】
文章目录 8.2、pandas8.2.1、为什么用 pandas ？8.2.2、pandas Series 类型8.2.3、pandas 自定义索引8.2.4、pandas 如何判断数据缺失？8.2.5、pandas DataFrame 类型8.2.6、pandas 筛选8.2.7、pandas 重新索引8.2.8、pandas 算数运算和数据对齐8.2.9、pan…
数据可视化：四种关系图数据可视化的效果对比！
python关系图的可视化主要就是用来分析一堆数据中，每一条数据的节点之间的连接关系从而更好的分析出人物或其他场景中存在的关联关系。
这里使用的是networkx的python非标准库来测试效果展示，通过模拟出一组DataFrame数据实现四种关系图可视化。
其余还…
19.Pandas怎样对每个分组应用apply函数?
Pandas怎样对每个分组应用apply函数? 知识：Pandas的GroupBy遵从split、apply、combine模式
这里的split指的是pandas的groupby，我们自己实现apply函数，apply返回的结果由pandas进行combine得到结果
GroupBy.apply(function) function的第一…
26. Pandas处理分析网站原始访问日志
Pandas处理分析网站原始访问日志
目标：真实项目的实战，探索Pandas的数据处理与分析
实例： 数据来源：我自己的wordpress博客蚂蚁学Python – 你有没有为写代码拼过命？那你知不知道 人生苦短，我用Python&am…
R语言ggplot2可视化：错误条（error bar）在图形上是水平的、但是在图例中是垂直的、使用ggstance包纠正过来（图例图标也是水平的）
R语言ggplot2可视化：错误条（error bar）在图形上是水平的、但是在图例中是垂直的、使用ggstance包纠正过来（图例图标也是水平的） 目录
第五章. 可视化数据分析图表—综合应用（双y轴，堆叠柱形图，颜色渐变饼形图，等高线图）
第五章. 可视化数据分析图 5.7 综合应用 1.双Y轴可视化数据分析图表的实现 （柱形图折线图）
双y轴，顾名思义就是两个y轴，可以通过双y轴看出发展情况的同时，还可以看到正常速度。 1).注意： add_subplot一定要…
【python数据分析】对淘商品类母婴购物数据进行分析（含完整源码）
前言
嗨喽，大家好呀~这里是爱看美女的茜茜呐
又到了学Python时刻~ 一、数据集
今天我们来看一个来着阿里云天池的数据集:淘母婴购物数据,有两个csv文件: 1、mum_baby.csv
它包含了953个孩子的生日和性别信息，这些信息是由淘或tian猫的消费者提供的…
京东数据分析（京东大数据）：2023年10月京东手机行业品牌销售排行榜
鲸参谋监测的京东平台10月份手机市场销售数据已出炉！ 根据鲸参谋平台的数据显示，今年10月份，京东平台手机行业的销量约340万，环比增长约11%，同比则下滑约2%；销售额为108亿，环比增长约17%&#x…
手写数字可视化_Python数据分析与可视化
手写数字可视化 手写数字流形学习 手写数字 手写数字无论是在数据可视化还是深度学习都是一个比较实用的案例。 数据在sklearn中，包含近2000份8 x 8的手写数字缩略图。
首先需要先下载数据，然后使用plt.imshow()对一些图形进行可视化： 打开c…
3步轻松获取Pandas DataFrame任意单元格值
在Pandas处理DataFrame数据的过程中，我们时常需要获取某个具体的单元格值进行操作。那么如何高效而灵活地从Pandas DataFrame中提取任意一个单元格的值呢? 今天分享在Pandas DataFrame获取单元格值的3大方法:
第一步:.loc[]方法，传入行列标签 使用.loc…
巧用ChatGPT快速提高职场晋升力、搞定数据分析玩、转新媒体运营
文章目录 一、引言二、ChatGPT在日常工作中的应用场景1. 客户服务与支持2. 内部沟通与协作3. 创新与问题解决 三、巧用ChatGPT提升工作效率1. 自动化工作流程2. 信息整合与共享3. 提高决策效率 四、巧用ChatGPT创造价值1. 优化产品和服务2. 提高员工满意度和留任率 五、总结与展…
【数据分析】(task2)数据清洗及特征处理
note 文章目录note一、缺失值观察和处理二、重复值观察和处理三、特征观察和处理3.1 对年龄分箱处理（离散化）3.2 对文本变量转换3.3 从纯文本Name特征里提取出Titles的特征时间安排Reference一、缺失值观察和处理
数据清洗：如缺失值、重复值…
【SPSS】两配对样本T检验分析详细操作教程（附案例实战）
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
2023年商业智能与数据的十大趋势（附白皮书）
“营销”在业务推进过程中扮演着至关重要的角色。然而，当前营销的影响力却往往未得到广泛理解和重视。立足漫漫历史长河中的当下，我们正在经历一场“完美风暴”。旧结构正在逐步裂解，面对「数据与分析」，我们需要做出调整…
python爬取网站数据
开学前接了一个任务，内容是从网上爬取特定属性的数据。正好之前学了python，练练手。
编码问题
因为涉及到中文，所以必然地涉及到了编码的问题，这一次借这个机会算是彻底搞清楚了。
Unicode是一种编码方案，又称万国码…
阿里巴巴商品详情爬虫数据字段解析 源代码分享 调用示例
返回数据代码段1"item": {"num_iid": "60840463360","title": "Slip-on Daily Urban Walking Shoes","desc_short": "","price": "$47.70","nick": "cn1522808546p…
Python数据分析案例23——电商评论文本分析(LDA,共现网络)
本次案例适合物流，电商，大数据等专业的同学。 案例背景：
对于现在的某宝某东上面电商平台的商品，我们可以去找一家店铺，选着某个商品，爬取文本，然后进行如下的文本分析。
本次选择了某东上面的…
2022年长三角高校数学建模竞赛B题齿轮箱故障诊断解题全过程文档及程序
2022年长三角高校数学建模竞赛
B题 齿轮箱故障诊断
原题再现： 齿轮箱是用于增加输出扭矩或改变电机速度的机械装置，被广泛应用于如汽车、输送机、风机等机械设备中。它由两个或多个齿轮组成，其中一个齿轮由电机驱动。电机的轴连接到齿轮箱的…
Scrapy爬虫数据存储为JSON文件的解决方案
什么是JSON文件
JSON（JavaScript Object Notation）是一种轻量级的数据交换格式，易于人们阅读和编写，同时也易于机器解析和生成。它基于JavaScript Spark语言的一个子集，但独立于Smashing语言，因此在许多中…
数据可视化在电商中的威力：改变经营的新趋势
随着电商行业的迅速发展，数据可视化在电商经营中扮演着越来越重要的角色。我接手的许多可视化大屏设计工作都来自于各类电商店铺，今天让我们一起来看看数据可视化是如何改变电商经营的。
首先，通过数据可视化可以更好地洞察消费者行为。通过…
别再被数据分析“割韭菜了”，光学python、BI没有用，上项目才行
前几天有个粉丝找我，说花699报了一门数据分析课程，还有实战项目，让我帮她看看她做的数据分析。项目的名称叫：豆瓣高分电影分析。她写了一大堆内容，我也没细看，截取几张可视化图表给大家，大家觉得…
马斯克的这波神操作，让我意识到保持写代码的能力有多重要
作为一个在IT行业摸爬滚打了多年的老油条，我是越来越看不懂现在的互联网行业了。
至少曾经我听过太多人吐槽写代码的永远干不过写PPT的，并且在现实工作中验证过也确实如此，但是老马的这一波骚操作，让推特工程师打印出最近30-60天…
花了几百万，仍然无法消除「数据孤岛」，这份数字化建设方案下载
中国信息化建设发展了几十年，像政府和央企、国企这类不差钱的，很多系统购买的原因之一就是“消除数据孤岛”。这个口号喊了几十年，结果系统是越来越多，数据孤岛也越来越严重。就像给裤子打补丁，哪里破了个洞࿰…
【毕业设计】大数据分析的航空公司客户价值分析 - python
文章目录0 前言1 数据分析背景2 分析策略2.1 航空公司客户价值分析的LRFMC模型2.2 数据2.3 分析模型3 开始分析3.1 数据预处理3.1.1 数据预览3.1.2 数据清洗3.2 变量构建3.3 建模分析4 数据分析结论4.1 整体结论4.2 重要保持客户4.3 重要挽留客户4.4 一般客户与低价值客户5 最后…
想改进婴儿fNIRS数据分析？基于这些先进方法的评估值得一看！
导读
在过去的十年中，fNIRS提供了一种非侵入性的方法来研究发展人群的神经激活。尽管fNIRS在发展认知神经科学中的应用越来越多，但在如何预处理和分析婴儿fNIRS数据方面却缺乏一致性或共识。本研究考察了对婴儿fNIRS数据应用更高级统计分析的可行性&…
如何解决企业数字化焦虑？
数据是一种宝贵的战略资源，其潜在价值和增长速度正在改变着人类的工作、生活和思维方式。在未来，各行各业都会积极拥抱大数据，积极探索数据挖掘和分析的新技术、新方法，从而更好地利用大数据。海量的数据规模、快速的数据流转、动…
生态碳汇涡度通量数据分析
生态碳汇涡度相关监测与通量数据分析
朱老师（副教授）：来自国内重点高校，长期从事涡度通量观测与分析研究，发表SCI论文多篇，主持国家与地方科研项目多个，在生态环境数据处理与分析中具有丰富的实…
讲课笔记03：数据分析工具Pandas
文章目录 零、学习目标一、Pandas的数据结构分析（一）Series - 序列1、Series概念2、Series类的构造方法32、创建Series对象（1）基于列表创建Series对象（2）基于字典创建Series对象4、获取Series对象的数据5、Series对象的运算6、增删Series对象的行数据（1）增加行数据（2）…
基于IF的网站异常流量检测
基于IF的网站异常流量检测 小P：最近渠道好多异常数据啊，有没有什么好的办法可以识别这些异常啊 小H：箱线图、 3 σ 3\sigma 3σ 都可以啊 小P：那我需要把每个特征都算一遍吗？不是数值的怎么算啊？ 小H&#…
【Python】如何入门 Python？（经验总结）
文章目录 一、你是如何学习/自学 Python 的？二、Python 的练手项目有哪些值得推荐？三、Python 有哪些入门学习方法和值得推荐的经典教材？四、怎么用最短时间高效而踏实地学习 Python？五、如何处理 Python 入门难以进步的现象&…
Pandas中DataFrame的属性、方法、常用操作以及使用示例
前言 系列文章目录 [Python]目录 视频及资料和课件 链接：https://pan.baidu.com/s/1LCv_qyWslwB-MYw56fjbDg?pwd1234 提取码：1234 文章目录前言1. DataFrame 对象创建1.1 通过列表创建 DataFrame 对象1.2 通过元组创建 DataFrame 对象1.3 通过集合创建 …
Python爬虫数据分析的基本概念
Python爬虫数据分析是一种利用Python编程语言和相关的库来获取互联网上的数据，并对数据进行处理、分析和可视化的技术。Python爬虫数据分析技术在数据挖掘、商业智能、市场调研、舆情分析等领域都有广泛的应用。本文将介绍Python爬虫数据分析的基本概念、常用库和实…
值得重点推荐的BI软件有哪些？全在这里了
在数字化程度越来越高的趋势下，发挥着推动企业数字化转型重要作用的商业智能BI也在不断提升市场份额，也催生出不少的BI软件新星。那么，BI软件有哪些？哪些BI软件更普遍适用于不同行业？针对这些问题，我们做了…
Python数据分析与可视化
学习的最大理由是想摆脱平庸，早一天就多一份人生的精彩；迟一天就多一天平庸的困扰。
学习日记
目录
学习日记 一、数据可视化案例（示例图片来自网络）
1、滴滴的交通大数据 2、2020新冠肺炎各省累计确认病例分布示例 二、数据、…
大数据分析案例-基于随机森林算法预测共享单车租赁数量
🤵♂️ 个人主页：@艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞👍🏻 收藏 📂加关注+ 喜欢大数据分析项目的小伙伴，希望可以多多支持该系列的其他文章 大数据分析案例合集…
【思维模型】五分钟了解＜复利思维＞，为何学习复利思维？什么是复利思维？如何应用复利思维？
【思维模型】五分钟了解＜复利思维＞，为何学习复利思维？什么是复利思维？如何应用复利思维？1. 为何学习复利思维？2. 什么是复利思维？3. 如何应用复利思维？4. 小结参考&#…
A.机器学习入门算法（五）：基于企鹅数据集的决策树分类预测
机器学习算法（五）：基于企鹅数据集的决策树分类预测
本项目链接：https://www.heywhale.com/home/column/64141d6b1c8c8b518ba97dcc
1 逻决策树的介绍和应用
1.1 决策树的介绍
决策树是一种常见的分类模型，在金融风控…
Pandas滑动窗口函数rolling()的使用方法（入门够用）
Pandas滑动窗口函数rolling()的使用方法（入门够用） 📝 在时间序列信号处理过程中，经常会用到滑动窗口处理方法：它规定一个特定单位长度的窗口来选区信号信号序列，然后计算该窗口中信号的统计指标。rolling(…
Python量化交易10——资产组合比例优化(CAMP,VAR,CVAR)
案例背景
本科的金融或者投资学都会学到CAMP模型，资本资产定价模型，可是怎么用代码实现却一直没人教。
本期用Python代码案例配置一个资产组合，并且做CAMP模型，计算VAR和CVAR等指标。
（本期案例中涉及到的公司仅用…
【数据分析】用RFM模型分析用户
RFM模型 RFM模型根据客户活跃程度和交易金额的贡献，进行客户价值细分的一种方法。
R（Recency）——最近一次交易时间间隔。基于最近一次交易日期计算的得分，距离当前日期越近，得分越高。如5分制。反映客户交易活跃度。…
DBT构建和部署机器学习模型预测订单退货
DBT构建和部署机器学习模型预测订单退货 DBT构建和部署机器学习模型预测订单退货 DBT构建和部署机器学习模型预测订单退货 DBT构建和部署机器学习模型预测订单退货 DBT构建和部署机器学习模型预测订单退货 DBT构建和部署机器学习模型预测订单退货 DBT构建和部署机器学习模型预测…
高效拓客必备工具：采集工具助力，让你事半功倍
在当今竞争激烈的市场环境下，企业想要获得更多的市场份额，拓展更多的客户，必须要进行拓客工作。而在拓客过程中，采集工具是必不可少的工具之一。采集工具可以帮助企业快速获取目标客户的信息，并进行有效的沟通和跟进&a…
企业如何实现数字化转型
数字化转型是企业在当今数字时代必须面对的一项重要挑战。在数字化转型的过程中，企业需要重新思考其商业模式、流程和技术架构，以更好地适应不断变化的市场和消费者需求。在本文中，我们将探讨企业如何实现数字化转型。 一、明确数字化转型的目…
Python可视化配色方案，让你审美分分钟变高级~
前言
大家早好、午好、晚好吖 ❤ ~欢迎光临本文章 今天给大家分享Python快速提取任何图片配色方案的工具：Haishoku；
Haishoku是一个用来获取图片主色调和主要配色方案的python库，依赖于python3和pillow
Haishoku安装
pip3 install haisho…
Msray-Plus采集工具帮您快速获取数据，让您的市场营销更加精细
随着互联网的不断发展，数据已经成为企业竞争的重要资产之一。市场营销人员需要通过数据来了解客户需求、市场趋势和竞争对手情况，从而制定更加精细的市场营销策略。然而，采集数据并不是一件容易的事情，需要耗费大量的时间和精力。…
excel工单自动化转换工具的代码怎么写比较好?
如果你要自动化地转换 Excel 工单，可以使用 Python 编写脚本。首先，你需要安装用于读写 Excel 文件的库，例如 pandas 和 openpyxl。然后，你可以使用这些库读取 Excel 文件中的数据，进行必要的处理和转换，并…
信息系统分析和数据分析有何区别？
信息系统分析
信息系统分析是指对一个组织或企业的信息系统进行全面的研究和分析，以确定如何最好地支持其业务和管理需求。它通常包括以下几个方面：
确定问题和机会：信息系统分析师会与组织内的各种利益相关者进行交流，了解他们…
python实战应用讲解-【numpy专题篇】numpy常见函数使用示例（十五）（附python示例代码）
目录
Python Numpy MaskedArray.masked_inside()函数
Python Numpy MaskedArray.masked_invalid()函数
Python Numpy np.chebfromroots()方法
Python Numpy np.chebgrid2d()方法
Python Numpy np.chebgrid3d()方法
Python Numpy np.chebroots()方法
Python Numpy np.che…
获取淘宝商品分类详情API，抓取淘宝全品类目API接口分享(代码展示、参数说明）
商品分类技巧
淘宝店铺分类怎么设置？我们登录卖家账号的时候，我们看到自己的商品，会想要给商品进行分类，一个好的分类可以帮助提高商品的曝光率。那么在给商品分类前，如果您毫无头绪，以下几点可以给您带来…
企业在数字化建设中，BI 处于什么位置？
对市场异常敏感的商业世界自然不会放过获取数字经济的机会，在众多企业开始进行数字化转型，通过信息化建设，部署BI来完成转型工作。
很多人都听说过BI， 但是并不太清楚BI 在IT信息化中到底处于一个什么位置？有很多的疑…
大数据分析案例-基于朴素贝叶斯算法构建微博谣言检测模型
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
python搭建HaIcon物联平台！
Python是一种高级编程语言，易于学习和理解。它在各个领域都有着广泛的应用，例如数据科学、机器学习、爬虫等。
在Python的强大功能之外，Python还有着丰富的第三方库和框架，其中之一就是HaIcon。HaIcon是一种基于Python的物联网平台，它提供了完整的解决方案，包括设备管理…
numpy API test
文章目录 1. np.random.randint(low, highNone, sizeNone, dtypeint)2. np.rot903. np.flip(m,axisnone) 1. np.random.randint(low, highNone, sizeNone, dtypeint)
从[low,high) 随机抽取整数返回
import numpy as np
# 从[0,4)抽取一个整数打印出来
print(np.random.randi…
数字化转型导师坚鹏：企业数字化营销能力提升
企业数字化营销能力提升 课程背景：
很多企业存在以下问题：
不清楚数字化营销对企业发展有什么影响？
不知道如何提升企业数字化营销能力？
不知道企业如何开展数字化营销工作？
课程特色：
原创企业数…
【企业信息化】第8集 免费开源ERP: Odoo 16 Purchase采购管理 改善您的供应链和库存绩效
文章目录 前言一、概览二、主要功能1.自动化采购流程2.供应商价目表和产品库存3.通过采购招标获得最佳要约4.获取采购情况的统计数据5.管理多家公司6.全面地 集成 于其他 Odoo 的应用 总结 前言 轻松管理供应商和采购订单，改善您的供应链和库存绩效。 一、概览 二、…
身为企业管理者，必须了解的财务知识
财务管理工作是企业管理工作中的核心内容，也是企业管理工作中的难点内容，对于集团企业来讲更是任务艰巨而又问题频出。然而，信息时代的来临为解决和完善企业财务管理问题提供了新思路，就集团企业而言，财务管理信息化基…
Kyligence Zen 产品体验——超好用指标平台一站式体验教程
目录 背景介绍Kyligence Zen介绍上手指南数据概览可视化图表 自定义数据新建表新建视图 指标体验目标仪表盘集成优点个人建议体验总结每文一语 背景介绍
在数字化建设初期，许多企业主要采用基于商业智能（BI）报表的方式来处理数据，…
【SQL应知应会】分析函数的点点滴滴（二）
欢迎来到爱书不爱输的程序猿的博客, 本博客致力于知识分享，与更多的人进行学习交流 本文收录于SQL应知应会专栏,本专栏主要用于记录对于数据库的一些学习，有基础也有进阶，有MySQL也有Oracle 分析函数的点点滴滴 1.什么是分析函数：…
图书推荐|Python数据分析与挖掘实战（第2版）
Python数据分析与挖掘实战（第2版）一共分为三个部分，包括基础篇（第1～5章）、实战篇（第6～12章）、提高篇（第13章）。其中基础篇介绍了数据挖掘的基本原…
python数据分析-Mysql中NULL和‘ ‘怎么处理（不使用update）
一、空值NULL和空字符’ ’
展示代码使用的版本是：8.0.28
空值NULL的长度是NULL，是占用存储空间的。空字符串’ 的长度是0，是不占用空间的。 理解：空字符串就像是一个真空状态的杯子，什么都没有;而空值NULL_就像是一…
chatgpt赋能python：Python小波变换——数据分析和信号处理方向的常见工具
Python小波变换——数据分析和信号处理方向的常见工具
介绍
Python是一种流行的编程语言，它具有简单易学和强大的内置库，能够轻松地完成各种任务。小波变换是一种用于数据分析和信号处理的常见工具，它可以捕获并描述信号和数据中的不同特性…
SciPy.stats 库interval() 函数计算置信区间
NumPy 置信区间-火焰兔
平均值的置信区间是数据分析领域广泛用于数据的统计数据的重要组成部分。Python 是数据分析领域的专业人员使用的最流行的编程语言之一，它允许在数组上实现置信区间。
本教程讨论置信区间并演示可用于在 Python 中实现它的不同方法。
置信…
LWN：Julia 中的并发处理！
关注了就能看到更多这么棒的文章哦～Concurrency in JuliaNovember 9, 2021This article was contributed by Lee PhillipsDeepL assisted translationhttps://lwn.net/Articles/875367/Julia 编程语言起源于高性能科学计算领域，所以它自然会很好地支持拥…
chatgpt赋能python：Python埋点：优化网站流量和数据分析的利器
Python埋点：优化网站流量和数据分析的利器
在现代商业运营中，网站流量和数据分析是非常重要的，因为这些数据对于业务指标和商业决策至关重要。而Python埋点技术，是现代网站优化和数据分析的利器，可以帮助企业更好地管…
chatgpt赋能python：Python按列排序详解
Python按列排序详解
在数据处理中，按列排序是一个非常常见的操作。Python作为一门流行的编程语言，针对按列排序操作也提供了丰富的工具和库。本篇文章将介绍Python按列排序的方法和实例，并为读者提供一些有用的技巧。
为什么要按列排序&…
数据可视化：趋势类可视化图表大全
图表是处理数据的重要组成部分，因为它们是一种将大量数据压缩为易于理解的格式的方法。数据可视化可以让受众快速Get到重点。
数据可视化的图表类型极其丰富多样，而且每种都有不同的用例，通常，创建数据可视化最困难的部分是确定哪…
python读取txt文件，提取内容重新组合，逐行读取转换为数组或json对象
读取文件，每一行做字符的截取，然后判断条件重新写入到新的txt文件： def openreadtxt(file_name):packageList[com.haier.uhome.washer, com.tencent.mm, com.ishansong, com.midea.vm.washer, com.didapinche.booking, cn.yonghui.hyd, com.j…
大屏时代：引领信息可视化的新潮流
在信息时代的浪潮下，数据已经成为推动各行各业发展的重要动力。然而，海量的数据如何快速、直观地呈现给用户，成为了一个亟待解决的难题。在这样的背景下，可视化大屏应运而生，以其出色的表现力和交互性成为信息展示的佼…
Python函数基础
函数声明、调用、返回基础
Python中使用def关键字来声明函数，声明函数的格式为：
1
2
3
def func_name(args):...body...[return ...]有3个需要注意的地方：
函数名后面必须加冒号如果函数体和def不在同一行，则必须缩进return指定…
摆脱低工资！80%的高薪人会的动态大屏技巧，工具和教程都给你！
在汇报上下功夫已经是职业人基本的素养，看了某鹅厂的产品组朋友做的汇报才知道他们已经卷到了这种程度！把静态的图表和文字，图片做成了3D动画，你别说，真就很出彩！既有产品的仿真，又有数据的支撑…
银行数字化转型导师坚鹏：农商行数字化转型案例研究
农商行数字化转型案例研究课程背景：
很多银行存在以下问题：
不清楚农商行数字化转型能否成功？
不知道其它农商行数字化转型的成功做法？
不知道其它标杆农商行的数字化转型战略？
课程特色：
用实战案例解…
如何一次性生成大量结构相同、内容不同的二维码
使用 批量模板数据 的方式，可 一次性生成大量结构相同，内容不同的活码 ，大幅提升制码效率。 模板的样式，关联的表单状态等所有内容均可进行修改，修改后所有子码都将批量更新，且模板可重复使用，让…
迪赛智慧数——柱状图（极坐标扇图）：我国民众普遍面临的睡眠问题
效果图 常见的睡眠问题，你占了哪一样?
在网络科技发达的今天，伴随着高压快节奏的生活状态，各阶层各年龄段的睡眠问题接踵而至，甚至只增不减，一觉到天亮的好睡眠变得无价。据最新睡眠报告数据显示，75%的受…
零基础想转行做python爬虫及数据分析方向的程序员，有哪些书可以推荐？
学习Python语言是一个不错的选择，一方面Python的应用广泛，在大数据、人工智能、Web开发等领域有大量的使用，另一方面Python语言本身比较简单，非常适合初学者。
Python是完全可以自学的，如果英语基础还可以的话&#x…
手把手教你学Python之Pandas（一文掌握数据分析与处理库-Pandas）
目录
基本结构之Series
Series对象的创建
Index对象介绍
Series中数据的访问
Series中常用方法
基本结构之DataFrame
DataFrame的创建
DataFrame中数据访问
DataFrame 常见属性
DataFrame 常见方法
DataFrame的合并操作
Pandas中常用方法
加载数据的方法
数…
Python编程入门基础及高级技能、Web开发、数据分析和机器学习与人工智能
文章目录 入门基础安装 Python 环境，选择一个 IDE，如 PyCharm、VSCode等。学习基本语法：变量、数据类型、条件语句、循环语句、函数、异常处理等。熟悉标准库：常用模块、内置函数等。学习基本的面向对象编程（OOP&#…
如何进行探索式数据分析？
【与数据同行】已开通综合、数据仓库、数据分析、产品经理、数据治理及机器学习六大专业群，加微信号frank61822701 为好友后入群。新开招聘交流群，请关注【与数据同行】公众号，后台回复“招聘”后获得入群方法。正文开始很多同学私信问我&…
陌陌聊天数据分析 （二）
陌陌聊天数据分析 （二）
🏆FineBI构建连接
陌陌聊天数据分析 （一）
新建连接 配置连接 测试连接并保存
🏅数据准备
新建分组 添加业务包 添加表
🥈构建可视化报表
🏈添加…
手把手教你搭建可视化数据大屏
可视化现在也是越来越卷了，层出不穷的图表样式和各种各样的色彩搭配让人目不暇接，当然其中站在卷的顶峰的还是可视化数据大屏。就像下面这样： 但是怎么搭建呢，是不是很难呢？今天就带大家手把手搭建可视化数据大屏&…
老大说：谁要再用double定义商品金额，就自己收拾东西走
精选30云产品，助力企业轻松上云！>>> 先看现象 涉及诸如float或者double这两种浮点型数据的处理时，偶尔总会有一些怪怪的现象，不知道大家注意过没，举几个常见的栗子： 典型现象（一&…
除了报表和取数，我还有多少大数据应用的机会呢？
正文开始最近有读者问了一个很好的问题：“大鱼先生，我们企业已经从0到1建立了数据仓库，应该怎么样才能更好地做好整个数据产品从0到1的规划和工作呢？”“现在日常的主要工作是报表、提数和数据稽核工作，我这边的初步想…
Live800：智能客服系统解决企业什么痛点？
随着市场经济的迅猛发展，便捷、多样化的在线交易方式也愈发受到广大消费者的追捧,众多企业开始将营销重心从线下转为线上，逐渐搭建起企业网站、微信公众号、小程序、网上商城等渠道，力图打造一个全方位、深层次的营销服务体系。
伴随着企业销…
如何选择数据分析工具
一个得心应手的数据分析工具，是每一位从业人员做数据分析的利器。面对浩如烟海的数据，如何选择合适的数据分析工具，成为运营、产品、市场等职能部门人员的一个难题，运用用数据分析工具，企业可以整合多种渠道的数据&…
有哪些好用的大数据分析BI软件
在企业的日常运营中离不开数据分析，各类数据的的汇总、整合分析和研究对于企业的发展和决策都起着不可或缺的作用。对于数据量小的型企业来说，做数据分析用Excel就够了，但是对于数据量大的企业，Excel就显得不那么适用了。许多中大…
如何运用BI商业智能工具进行数据钻取？
在商业智能BI应用中，经常会涉及到不同部门、不同层级的人查看数据的情况，由于每个人对业务的关注点不同，所以大家对数据的维度、粒度要求也不同，这个时候运用数据钻取就可以轻松应对大家不同的数据需求了。
数据钻取是按照某个特…
Live800在线客服系统：三个思路提升客服效率
“在线下世界，如果一个客户不满意，他会告诉6个朋友。在互联网世界，他会告诉6000个人。” ——亚马逊创始人杰夫贝佐斯 随着互联网时代的蓬勃发展，消费者之间的关系互联正击穿以前人与人之间的圈层链，消费者的声音被放大…
618战报喜人，但客户服务的硬仗面临这些挑战
每逢大促，电商巨头之间的battle永远是道硬菜，消费者们津津乐道甚至摩拳擦掌等着薅羊毛。而今年的618作为疫情时代的首个重大购物狂欢节，被寄予厚望。有业内人事称："618，对这一年的销售非常非常关键。如果这一波起…
随机实验（精通计量）
无效比较和有效比较 拥有医疗保险的人与没有医疗保险的人直接比较 组间均值之差 平均因果效应 选择偏误
随机化
大数定律：随着样本规模不断增加，样本均值接近总体均值（数学期望）
样本规模足够大（大数定律…
5G与人工智能协助智慧交通
原文地址
清晨人们上班的过程中路遇堵车烦闷，影响一天好心情，急事要事办理过程中遭遇堵车延误事宜，相信对于很多有车一族来说，道路畅通无阻是他们最大的心愿。据统计，全球每天有1300亿分钟花在堵车上，平均…
人脸识别是否具有安全隐患？
原文资讯
人们会经常好奇一个问题假如用照片被人盗窃滥用，将2D的平面图取代三维立体的人脸是否还能解锁手机或者一些支付密码。本是出于安全考虑运用的技术，但是会不会适得其反，出现一些不安全的因素？
人脸识别并不陌生…
【Python数据分析】文本情感分析——电影评论分析（一）
情感分析是文本分析的一种，它能够从一段文本描述中理解文本的感情色彩，是褒义、贬义还是中性。常见的情感分析的使用场景就是客户对商品或服务的评价、反馈，传统模式下的人工审核，不仅消耗大量人力，而且效率࿰…
学习数据挖掘需要的步骤，算法，及数学原理
1.数据挖掘的过程分成 6 个步骤。
1.商业理解：
从商业的角度理解项目需求，再对数据挖掘的目标进行定义。
2.数据理解：
收集部分数据，对数据进行数据描述、数据质量验证等。有利于对收集的数据有个初步的认知。
3.数据准备&am…
Python数据分析讲课笔记01：搭建工作环境
文章目录 零、学习目标一、安装Anaconda（一）下载Anaconda（二）安装Anaconda（三）启动Anaconda命令行1、启动Anaconda Prompt2、启动python和ipython（四）启动Spider二、管理Python包（一）基本语法1、查看安装包2、安装Python包3、升级Python包（二）安装Python扩展模块1、…
Python NumPy新手必备入门教程
Python NumPy库的讲解
一些个人学习NumPy时的总结，不太全面，欢迎大家一起学习交流！
认识数组创建数组数组数据类型数组运算索引与切片转置和轴对称NumPy 通用函数NumPy进行数据分析线性代数模块随机数
import numpy as np # 导入numpy包1…
利用BLEU进行机器翻译检测（Python-NLTK-BLEU评分方法）
双语评估替换分数(简称BLEU)是一种对生成语句进行评估的指标。完美匹配的得分为1.0，而完全不匹配则得分为0.0。这种评分标准是为了评估自动机器翻译系统的预测结果而开发的，具备了以下一些优点： 计算速度快，计算成本低。容易理解。…
手把手教你学Python之异常处理（一文掌握异常处理）
目录
1、Python中的常见错误
2、Python中的常见异常
3、Python中的异常处理
（1）异常处理之try…except…结构
（2）异常处理之try…except…finally…结构
（3）异常处理之try…except… else… finally……
Python直方图绘图：NumPy，Matplotlib，Pandas和Seaborn
In this tutorial, you’ll be equipped to make production-quality, presentation-ready Python histogram plots with a range of choices and features. 在本教程中，您将具备制作具有各种选择和功能的生产质量，可用于演示的Python直方图的能力。 If…
sql汇总子级数据汇总_用SQL汇总数据
sql汇总子级数据汇总About Matt: Matt DeLand is Co-Founder and Data Scientist at Wagon. His team is building a collaborative SQL editor for analysts and engineers. He studied algebraic geometry at Columbia University, taught at the University of Michigan, an…
成为数据分析师的第三年，我写了10W字（原创文章吐血整理）
这篇文是对这个公众号开写至今原创文章的一个汇总统计，方便大家快速查找阅读（文末有个小惊喜）。2020年原创文章盘点 今年以来共发布了9篇原创文章，点击标题即可阅读，按累计阅读量排名如下：利用Excel学习Pyt…
熊猫压缩怎么使用_将Excel与熊猫一起使用
熊猫压缩怎么使用Excel is one of the most popular and widely-used data tools; it’s hard to find an organization that doesn’t work with it in some way. From analysts, to sales VPs, to CEOs, various professionals use Excel for both quick stats and serious d…
利用Excel学习Python：准备篇
写在前面这个系列我们要利用Excel的知识，学会用python进行数据分析，如果你精通Excel想要用python提高数据分析效率，那么这个系列你来对了，如果你已经是python大神，想要建模/算法等高级技巧的，这个系列可能不…
探索另类圆环图的做法
某一日，在网易数读的文章里看见了这样一个图，感慨万千，这其实不就是一个条形图吗，只不过是变成了圆环的样子，效果却比单纯的条形图好了不知道多少倍，我就在想，怪不得老板总说我做的图丑…
假如生活欺骗了你：可以用统计模型来做决策吗？
先举几个“生活欺骗了你”的例子，再来说说本节标题：可以用统计模型来做决策吗？统计关系并不等于因果关系彩票悖论首先根据假设检验，如果原假设概率非常小，就可以拒绝原假设。假设0.0001就是一个非常小的概率࿰…
这样用Excel动态交互图表，还要什么前端？
什么是Excel动态图表交互，如下动图所示，选择不同的日期，出现相应的数据和环比分析，同时折线图跟随日期动态延展等效果。这种动图交互的图表对Excel综合技能的应用考验的比较多，尤其还涉及图表盘设计、颜色搭配、数据与…
分析的基础：平均和交叉的思路
本篇内容为数据分析入门方法系列的第3篇，平均和交叉的思路，有需要回顾前两篇方法的，传送门在这里：《分组分析法》《对比分析法》本文大概1435字读完共需4分钟之前两篇内容提到了对比和分组，这都是实际工作中经常用到的…
不可不知的分组分析法
本篇内容为数据分析入门方法的第二篇，第一篇对比分析传送门在这里。分组分析是将总体数据按照某一特征性质划分成不同的部分和类型进行研究，从而深入分析其内在规律。一、为什么要分组？对于大量的数据，如果不进行分组是很难发现其…
Excel数据处理（缺失值/重复值/异常值/拆分）
6月12日给大家讲解了一下数据获取的东东（时隔略久，忘记的请点击数据获取回顾），时隔一个月，接着我们的 用Excel进行数据分析系列 的第二篇：数据处理。文末有获取本篇实例数据的方法。目录：一、缺…
Excel可视化（1）：5个基本图使用指南
对于Excel可视化分两个部分来写吧，这一节内容是Excel的5个基本图：饼图、条形图、折线图、柱状图和散点图，对于这5个基本图怎么用，有哪些提升美感的小技巧等。下一节内容专门讲解这些图的变种图。01饼图饼图：将数据划分…
twitter api使用_处理流数据：使用Twitter API捕获推文
twitter api使用If you’ve done any data science or data analysis work, you’ve probably read in a csv file or connected to a database and queried rows. A typical data analysis workflow involves retrieving stored data, loading it into an analysis tool, and …
亿发软件：智慧中药房信息化建设，中医药安全煎煮解决方案
传统的中药饮片煎煮服用较为繁琐，局限了诸多人群的使用。为了优化医疗服务,并满足患者不断增长的中医药需求，智慧中药房的概念应运而生。智慧化中药房通过信息化和自动化相结合，旨在提高中药处方的管理和效率。下面就让我们了解一下中药配方颗…
上个月成功入职大厂数据分析岗，分享一些经验和雷区！
个人介绍大家好，我是一名双非学校、本硕连读的统计学专业毕业生，现就职于一家互联网公司。今天我与大家分享一下我的 “数据分析” 学习之路和收藏的学习资料，希望大家看以后能有所收获。其实，我的数据分析之路也并非一路顺风。在…
都是做数据行业，怎么差距那么大？
前几天，我跟朋友一起吃饭，他从之前的金融转行编程，花了半年时间自学数据分析，然后找到一份数据分析师的职业，算是转行成功。到现在已经有一年多的时间，他不但没有表现丝毫职业危机，反而跟我大谈…
【SQL应知应会】行列转换（二）• MySQL版
欢迎来到爱书不爱输的程序猿的博客, 本博客致力于知识分享，与更多的人进行学习交流 本文收录于SQL应知应会专栏,本专栏主要用于记录对于数据库的一些学习，有基础也有进阶，有MySQL也有Oracle 行列转换 • Mysql版 前言一、MySQL行列转换1.数据…
数据中台百家争鸣，到底谁的好？我这里设计了一套指标评估体系
这是傅一平的第366篇原创【提醒：公众号推送规则变了，如果您想及时收到推送，麻烦右下角点个在看，或者把本号置顶】正文开始去年写过一篇文章《傅一平：如何评估数据中台的成熟度？》，谈了数据中台的…
手把手教你学Python之列表list
目录
列表的创建
列表元素的索引
列表的切片操作
列表内容的修改
列表的常见方法
列表表达式 列表是Python中内置的有序可变序列，列表的所有元素放在一对中括号“[]”中，并使用逗号隔开，列表中元素的类型可以相同也可以不同。
列表的创…
贝壳DMP平台建设实践
提醒：公众号推送规则变了，如果您想及时收到推送，麻烦右下角点个在看，或者把本号置顶】正文开始导读：DMP是一个大家讨论已久的话题，尤其广告领域，是以DMP为基础来展开工作的。由于每个公司所面临…
在数据职场如何才能做到顶尖？（附PPT合集）
很多数据从业者对于数据驱动业务都有以下困惑：如何进行数据治理？如何进行数据分析？如何进行数据仓库建模？如何进行大数据平台建设？数据中台如何建设？如何打造数据产品？如何提升自己的数据竞争力…
读透《华为数据之道》
这是傅一平的第361篇原创【提醒：公众号推送规则变了，如果您想及时收到推送，麻烦右下角点个在看，或者把本号置顶】正文开始很多年前阿里出了《大数据之路》一书，在数据技术层面给出了有价值的指导，算是一本经…
风口上转行数据产品经理，必须具备哪些技能？
近年来，有几个关键词正在影响着时代的进程：大数据、人工智能、5G、云计算……而这些新兴技术的持续推进发展，都和“数据”紧密相关。尤其是随着5G商用进程的深化，未来将要打开的千亿市场，势必需要数据的支撑。可以说&a…
数据治理：90%的人搞不清的事情
【与数据同行】已开通综合、数据仓库、数据分析、产品经理、数据治理及机器学习六大专业群，加微信号frank61822701 为好友后入群。新开招聘微信群，请关注【与数据同行】公众号，后台回复“招聘”后获得入群方法。正文开始作者丨石秀峰全文共73…
数据从业者成长的五个阶段
这是傅一平的第358篇原创【与数据同行】已开通综合、数据仓库、数据分析、产品经理、数据治理及机器学习六大专业群，加微信号frank61822702 为好友后入群。新开招聘交流群，请关注【与数据同行】公众号，后台回复“招聘”后获得入群方法。正文开…
Python3数据分析与挖掘建模（10）多因子：复合分析-交叉分析与实现示例
1. 复合分析
1.1 概述
复合分析（Factorial Analysis）是一种统计分析方法，用于研究多个因素对观测结果的影响，并探究各个因素之间的相互作用效应。
在复合分析中，研究者会选择多个因素（也称为处理变量或独…
Python数据分析：情感分析
Python数据分析：情感分析
自然语言处理（NLP）
将自然语言（文本）转化为计算机程序更容易理解的形式预处理得到的字符串进行向量化经典应用： 情感分析文本相似度文本分类
简单情感分析： 情感字…
图表数据分析怎么做，举实例给你说清楚
现在工作离不开图表数据分析，但是图表数据分析却容易出错。而且容易出现错误的地方不是在对数据的处理上，而是在对图表的选择上。 要正确的做好图表数据分析就要选择合适的图表再进行分析。下面跟大家说说怎么解决这个难题，做好图表数据分析&…
数据分析和挖掘服务提供商有没有未来？
。这是傅一平的第351篇原创【与数据同行】已开通综合、数据仓库、数据分析、产品经理、数据治理及机器学习六大专业群，加微信号frank61822701 为好友后入群。新开招聘交流群，请关注【与数据同行】公众号，后台回复“招聘”后获得入群方法。正文…
如何有效设计业务指标体系？
【与数据同行】已开通综合、数据仓库、数据分析、产品经理、数据治理及机器学习六大专业群，加微信号frank61822702 为好友后入群。新开招聘交流群，请关注【与数据同行】公众号，后台回复“招聘”后获得入群方法。正文开始在很多的工作场景中&a…
不要拿ERP的报表忽悠领导！——一个报表引发的企业经营反思
文 | 帆软数据应用研究院船长 本文出自：知乎专栏《帆软数据应用研究院》——数据干货&资讯集中地 领导的经营决策能只依赖于ERP报表吗？ 不能！ 1. ERP报表个性化不足：企业经营决策报表是为企业高层、管理层服务的，格…
新飞电器的BI建设案例
一、河南新飞电器简介 河南新飞电器在制造行业内属于领先地位，其信息化程度较高，面对系统多且杂乱的情况，一个集中展示数据的平台就显得尤为重要。使用BI就是为了在一个相对统一的平台展示需要查看的数据，供决策层进行分析查看&am…
计算机专业如何进大厂实习拿offer？计算机专业就业方向
导语：2022年互联网行业迎来很多大的变革，双减政策下，很多互联网教育公司砍掉了很多业务，也有一批程序员们面临着再次就业的需求，而对于计算机专业在校生而言，2022年计算机专业就业方向有哪些呢?如何在毕业…
python数据分析与挖掘数据之探索数据
文章目录三.数据探索数据质量分析缺失值分析异常值分析一致性分析数据特征分析1.分布分析2.对比分析3.统计量分析4.周期性分析分析：总体来看，正常用户和窃电用户在2012年2月份与3月份日用电量呈现出周期性。以周为周期，由于周末不上班&#x…
闲鱼如何0到1搭建一套发布引导链路
背景随着闲鱼持续不断的需求迭代和业务迅速的发展，如何进一步提升用户的使用、留存和活跃的转化，进而带动整体二手交易市场的增长是核心命题。经闲鱼内部数据分析我们发现，用户的商品发布数与成交量呈现明显正相关，宝贝数量越多的…
38 pandas统计分析基础--Series
简介
Pandas是Python下最强大的数据分析和探索工具。名称来自于面板(PanelData)和Python数据分析(DataAnalysis)。支持类似于SQL的数据增、删、改、查，并带有丰富的数据处理函数。支持时间序列分析功能，支持灵活处理缺失数据。
统计分析几乎贯穿了整个…
为什么我否决了90%的建模需求？
这是傅一平的第346篇原创【与数据同行】已开通综合、数据仓库、数据分析、产品经理、数据治理及机器学习六大专业群，加微信号frank61822702 为好友后入群。新开招聘交流群，请关注【与数据同行】公众号，后台回复“招聘”后获得入群方法。正文开…
Matplotlib模块详解 | CSDN创作打卡
1. 什么是 Matplotlib 模块 Matplotlib 是 Python 中类似 MATLAB 的绘图工具，其能方便地实现数据可视化，熟悉 MATLAB 的也可以很快上手 Matplotlib。 2. Matplotlib 模块构成 Matplotlib 模块构成： 1）Figure 在绘图前，…
【数据分析】疫情对美国民众消费的影响研究报告
本文由前嗅数据研究院出品 自2020年COVID-19爆发以来，美国人的生活方式和人际关系发生了巨大变化。前嗅数据研究院分别从疫情下美国民众消费观念、生活方式、消费行为、以及热门服务等方面做出研究与分析。 | 疫情下美国民众消费价值观、生活方式、时间利用等的变化…
官宣：ForeSpider5.0闪亮登场，低配版即将下架
本周我们期待已久的ForeSpider5.0版本就要闪亮登场了，在前嗅大数据众位大牛们昼夜不分的研讨，开发和测试后，ForeSpider5.0版本终于要和大家见面了，而随着ForeSpider的更新，我们官网上出售的所有低配版本将全部下架&…
大数据分析告诉你：谁是本周科技界的黑天鹅！
在新闻类网站日益壮大的今天，从混杂的新闻信息中，挖掘分析新闻领域动态是一个重要课题。我们用爬虫检测了近一周的科技新闻。以新浪网为例，利用ForeSpider数据采集系统对新浪新闻进行数据采集，挖掘出需要的数据，分析近…
商业智能BI中的OLAP是什么
人们在谈商业智能（BI）时，经常会提到OLAP，有的人可能认为OLAP工具就是BI。其实OLAP仅是BI的一部分，是很重要的一项分析技术。那什么是OLAP呢？
OLAP（Online analytical processing）&a…
和鲸社区数据分析每周挑战【第九十六期：汽车公司客户细分预测】
和鲸社区数据分析每周挑战【第九十六期：汽车公司客户细分预测】 文章目录 和鲸社区数据分析每周挑战【第九十六期：汽车公司客户细分预测】一、前言1、背景描述2、什么是用户分群？3、数据说明4、数据集预览 二、数据读取和数据初步观察三、潜在…
华宇智能数据助力金融机构数据治理，提升数字经营实力
目前，金融行业在数据治理方面做的并不好，违法违规采集使用个人信息、未明示收集使用规则等，导致个人信息泄露、滥用的风险事件时有发生。根据《中小银行金融科技发展研究报告（2019）》披露的数据，有27%的中小…
Python探索性数据分析(EDA)暴力密码猜测攻击网站登录异常检测策略
探索性数据分析(EDA)
探索性数据分析 (EDA) 分析和调查数据集并总结其主要特征，通常采用数据可视化方法。 它有助于确定如何最好地操纵数据源以获得所需的答案，从而更容易发现模式、发现异常、检验假设或检查假设。
EDA 主要用于查看在正式建模或假设检…
戴上AR眼镜解锁积木的AI玩法
叶虹霓shadow 哈喽，我们写了一篇关于结合AIAR辅助拼积木的推送文章，想投稿在mixlab的公众号。好呀，蛮好的~~收稿！opus 干活了shadowopusBrickPal，让我看到了新一代团队作战模式的可能性。他们是2021年 deecamp 人工智能…
Matplotlib绘制动态图效果
在实际应用中，我们经常有这样的需求，希望观察到数据的变化过程而不仅仅是最终的结果，例如股票的实时变化、各国家疫情人数动态变化等。此时，传统的静态图无法满足我们的需求，这就需要借助于动态效果图了。在Matplotlib…
《软件性能测试、分析与调优实践之路》性能测试书
#好书推荐##好书奇遇季#《软件性能测试、分析与调优实践之路》京东当当天猫都有发售。 系统或者软件性能的重要性自然是无须多言，永远没有哪个用户可以忍受打开一个网站或者软件需要很久才能响应，性能是评估一个系统或者软件最实在的指标，如果…
Python数据分析与可视化案例解析
题目需求描述
已知两个Excel表格：学生基本信息表、期末考试成绩表分别用于存放学生的基本信息（包括姓名、性别、班级）和学生的期末成绩（包括姓名、语文、数学、英语、总分），部分数据如下图所示（…
如何才能做好数据中台的API运营？ by 傅一平
数据中台的建设第三年，我们开始推动数据中台的API开放，原因见《为什么是API而不是文件，对于数据中台的开放如此重要？by 傅一平》这篇文章，就是why，这篇文章再讲讲how，也就是如何做的，…
手把手教你学Python之循环结构
目录
while循环
for循环
循环结构嵌套 循环结构主要用于需要重复执行某些操作的场景，通过循环可以大大降低开发人员的工作量，也是利用程序提升工作效率的优势之一。对于循环，主要把握以下几点：什么时候开始执行循环？…
【数据分析与挖掘】数据分析学习及实践记录 | part 03-matplotlib常用统计图
开新坑啦！之前都是晚上七点以后开始学习，今天上午把matplotlib中文显示的问题解决，就开始刷课了。第三部分开启。
老规矩，先上图 01绘制散点图
开篇老师上手一个一周天气的练习。
我跟着标注的数据来源，发现北京历史…
FutureWarning: using a dict on a Series for aggregation is deprecated and will be removed in a futur
FutureWarning: using a dict on a Series for aggregation is deprecated and will be removed in a future version. Use named aggregation instead. Python中出现了以上的错误代码提示，如图： 《Python数据分析与挖掘实战》第3章数据探索，…
pandas由入门到精通-Pandas的基本功能
pandas基础介绍-命令模版 基本功能reindex 重新索引drop 丢弃元素算数与数据对齐函数apply与映射map1. 逐元素函数2. 一维数组上的函数映射于每一行或每一列排序sort 与排名 rank1. 排序2. 排名本文介绍pandas中一些常用的属性方法的概述，给读者提供快速学习的架构和思路。表格…
python pandas库操作的一百个技巧 新手必看 学会你就是pandas大佬
文章目录Trick100：加载大数据Trick99：Unnamed:0trick 98:一个列很多的DF转化成行很多的trick97：把年和那年第几天转化为具体日期trick 96:pandas作交互式图标trick 95:计算缺失值的数量Trick 94：修正格式来节约内存trick 93:通过频…
Python pandas包用法总结
读取CSV文件
from pandas import read_csv; df read_csv(D:\he.csv)
print(df)
返回的是dataframe类型的文件，可通过dos命令行直接输出。 2.输出CSV文件
from pandas import DataFrame; df DataFrame({ age: [21, 22, 23], name: [KEN, John, JIMI]
}); df.t…
如何做好描述统计分析
写在前面什么是描述性统计分析，这不仅是数据分析面试中最常见的问题，也是我们日常分析中必过的一道关卡。要把握数据的分布特征，需要从3个方面进行描述：集中趋势、离散程度和分布形状。1、集中趋势 集中趋势就是指一组数据向某一中…
pandas学习笔记（1）：准备篇
工欲善其事必先利其器，在正式进入python学习前，我们需要进行一些准备，包括python的下载与安装，常用的IDE，以及最后选择一个IDE进行练习。 1.Pandas和Python
Python是胶水语言，学习时要有所取舍。对于有用p…
全球经济研究报告：德国Rocket互联网公司模式浅析
传奇背景
Rocket Internet于2007年成立于德国柏林，是互联网创业温床式公司，其创始人是德国Samwer三兄弟，Marc Samwer、Oliver Samwer和Alexander Samwer。早在1999年，Samwer兄弟创办拍卖网站Alando，四个月后被eBay以5…
聚类分析上证50成分股
2020年3月10日是个划时代的日子，在全球主要市场一片惨淡的时刻，我们的大A终于走出了独立行情。 为了纪念这一天，我决定用EM聚类算法对上证50的成分股做一次聚类，将其划分为十类。 然后，我将从每类中随机选一只，打包一个投资组合，以上帝视角回测一下，PK一下ETF指数基金。…
实验一：时间数据可视化
上图代码如下：
import pyecharts.options as opts
from pyecharts.charts import Polar,Page
import csv
filename "hot-dog-places.csv"
data_x []
data_y []
with open(filename) as f:reader csv.reader(f)for data_row in reader:data_x.append(…
python：pandas中dataframe的基本用法汇总
一. DataFrame的创建
创建一个空的dataframe
1 dfpd.DataFrame(columns{“a”:"",“b”:"",“c”:""},index[0]) out:
1 2 a c b 0 NaN NaN NaN 用list的数据创建dataframe：
1 2 3 a [[‘2’, ‘1.2’, ‘4.2’], [‘0’,…
利用Plotly绘制各类图表
利用Plotly绘制各类图表Plotly部分Plotly的安装检查是否安装成功利用Plotly绘制第一张图尝试大量数据的绘制利用go.Scatter存放数据调取go.Scatter数据绘制散点图散点图go对象标准写法饼图使用自定义数据(PUBG吃鸡游戏数据)绘制数据来源利用Pandas联动Plotly利用Pandas读取csv文…
Python进行数据相关性分析实战
平时在做数据分析的时候，会要对特征进行相关性分析，分析某些特征之间是否存在相关性。本文将通过一个实例来对数据进行相关性分析与展示。
一、数据集介绍
本次分析的是企业合作研发模式效果分析，企业的合作研发大致分为 企企合作、企学合作…
三星智能手机全球销量第一 苹果下一代iPhone将威胁其地位
据调研机构Strategy Analytics报道，三星仍然稳居上一季度智能手机市场份额第一名，这归功于Android系统。今天另一家数据分析机构Kantar透露苹果将在几个月内推出新款手机，这在一定程度上会影响三星的市场份额。 Kantar通过分析欧洲手机市场数…
iOS和安卓系统活跃用户量，中国领跑全球
Flurry近期对中国飞速增长的iOS和安卓系统用户量进行了统计：在2011年初的全球应用会议发布的排行榜上，中国仅位列第11名；今年已经上升到第2位，仅次于美国。不得不说，中国十几亿人口以及其中快速增长的中产阶级为此作出…
大数据实验一 关联规则实验题目：蔬菜价格相关性分析
学习来源
实验目的：在掌握关联规则算法的原理的基础上，能够应用关联规则算法解决实际问题。
实验内容：根据实验数据，采用Apriori等关联规则发现算法，给出相关关联规则。
实验要求：给出数据预处理过程、关…
数据处理日常方法小结
文章目录1.numpy 统计数组的值出现次数2.利用pandas中修改列名3.使用pandas中的to_csv将数据写入csv格式的文件4.关于字典操作查看字典前几项计算字典里面有多少个key1.numpy 统计数组的值出现次数 import numpy as np
from collections import Counterdata np.array([1.1,1.1…
wirehark数据分析与取证logs.pcapng
什么是wireshark？wireshareklogs.pcapng数据包数据包下载 请私信博主wiresharek
Wireshark（前称Ethereal）是一个网络封包分析软件。网络封包分析软件的功能是检索取网络封包，并同时显示出最详细的网络封包数据。Wireshark使用Win…
豆瓣电影分析报告：大陆和港台到底差(cha)在哪里？
Python 2.7 IDE Pycharm 5.0.3 PyExcelerator 0.6.4a 可视化 Plotly 图片要是挂了
请看这里此文备份链接 前言 在上次爬完豆瓣的东西后，感觉锻(zhuang)炼(yi)能(xia)力(bi)之外，貌似并没有实际用处，说实话，我宁可去网页一页页…
Python+数据分析：数据分析：北京Python开发的现状
相信各位同学多多少少在拉钩上投过简历，今天突然想了解一下北京Python开发的薪资水平、招聘要求、福利待遇以及公司地理位置。既然要分析那必然是现有数据样本。本文通过爬虫和数据分析为大家展示一下北京Python开发的现状，希望能够在职业规划方面帮助到…
数据分析基础(1)——超实用‼️Excel 常用函数和实用技巧
学习教程：☑️ 懒人Excel - Excel 函数公式、操作技巧、数据分析、图表模板、VBA、数据透视表教程
目录
一、Excel知识体系✨
二、Excel 常用函数💡
三、Excel 技巧 🤔
补充：
1、自学数据分析学习路线
2、数据查询网站 一、…
nmap数据分析和可视化
预计更新 第一章 nmap漏洞扫描 nmap漏洞扫描的基本原理和技术 nmap漏洞扫描的常用选项和参数 nmap漏洞扫描的实战案例
第二章 nmap网络探测和映射 nmap网络探测和映射的基本原理和技术 nmap网络探测和映射的常用选项和参数 nmap网络探测和映射的实战案例
第三章 nmap安全审计…
拉格朗日插值法、数据规范化
拉格朗日插值法
拉格朗日插值法是插值法中的一种，是用来进行缺失值处理的，将数据集中的未知值，通过拉格朗日插值法推算出来。这里的数学知识就不介绍了，主要介绍在代码中怎么应用。 下面以某餐厅一段时间的销售量的数据集来演示使…
创业公司AppCod.es发布App Store预测工具
和SEO（搜索引擎优化）一样，ASO（App Store Optimization）在应用优化排名、关键词搜索上起着至关重要的作用。在各种应用占据移动互联网半边天的情况下，ASO也逐渐成为应用开发者的重要营销工具。 来自波兰华沙…
Kaggle 年度报告出炉：数据科学家年轻多金，薪资近百万
By 超神经内容提要：2020 年已经逐渐接近尾声，kaggle 发布了其年度调查报告《机器学习与数据科学 2020》，向我们展示了当前数据科学家的群体画像。关键词：机器学习 数据科学 kaggle 调查数据分析竞赛平台 kaggle，近期针…
基于python的股票数据的读取及可视化（K线图）
文章目录1.读取数据2.绘制股票走势图3.绘制K线图1.读取数据
TuShare是一个免费、开源的python财经数据接口包。主要实现对股票等金融数据从数据采集、清洗加工 到 数据存储的过程，能够为金融分析人员提供快速、整洁、和多样的便于分析的数据，为他们在数…
东南亚海外跨境物流管理，移动支付、数据处理程序开发
境外虚拟物流跨境支付平台快速搭建、集成后台采集功能的步骤如下：
一、项目规划与需求分析
在开始搭建境外虚拟物流跨境支付平台之前，需要进行详细的规划和分析。这包括确定项目的目标、了解客户需求、分析市场环境、确定系统架构和技术选型等。通过深…
探索人工智能 | 智能推荐系统 未来没有人比计算机更懂你
前言
智能推荐系统（Recommendation Systems）利用机器学习和数据挖掘技术，根据用户的兴趣和行为，提供个性化推荐的产品、内容或服务。 文章目录 前言核心机器学习为什么说机器学习是智能推荐系统的基础呢？ 数据挖掘数据…
Python数据分析实战-列表字符串、字符串列表、字符串的转化（附源码和实现效果）
实现功能
str([None,master,hh]) ---> [None,"master","hh"] ---> "None,master,hh"
实现代码 import re
import astx1 str([None,master,hh])
print(x1)x2 ast.literal_eval(x1)
print(x2)x3 ",".join(str(item) for item…
四、Linux中cd、pwd以及相对/绝对路径和特殊路径符
1、cd命令：
cd命令可以切换当前工作目录，基础语法是：
cd [linux路径]
（1）、打开Linux的命令提示行，当前工作目录是home，输入“cd /”，可以切换到根目录下，在根目录下输…
excel统计函数篇2之count系列
1、COUNT(value1,[value2],…):计算参数列表中数字的个数
2、COUNTA(value1,[value2],…)：计算参数列表中值的个数 联想在excel之数学函数、excel中的通配符一文中提到求和函数： SUMIF(range,ceriteria,[sum_range])：对范围内符合指定条件的…
2路AD采集FMC子卡模块--【产品资料】
FMC155是一款基于VITA57.1标准的，实现2路14-bit、500MSPS/1GSPS/1.25GSPS 直流耦合ADC同步采集FMC子卡模块。该模块遵循VITA57.1规范，可直接与FPGA载卡配合使用，板卡ADC器件采用ADI的AD9680芯片，该芯片具有两个模拟输入通道和两个…
商业智能BI是什么都不明白，如何实现数字化？
2021年下半年中国商业智能软件市场规模为4.8亿美元，2021年度市场规模达到7.8亿美元，同比增长34.9%，呈现飞速增长的趋势。数字化时代，商业智能BI对于企业的落地应用有着巨大价值，逐渐成为了现代企业信息化、数字化转型中…
Python采集电商平台泳衣数据进行可视化分析
前言
嗨喽，大家好呀~这里是爱看美女的茜茜呐 环境使用: python 3.8 解释器 pycharm 编辑器
模块使用:
第三方模块 需要安装
requests —> 发送 HTTP请求
内置模块 不需要安装
csv —> 数据处理中经常会用到的一种文件格式
第三方模块安装：…
数据分析基础-数据可视化学习笔记03-可视化的符号与表示-图形符号学
概念
图型符号学（Cartographic Symbolization）是地图学领域中的一个重要概念，涉及到如何使用不同的符号、颜色、图案和标记来在地图上表示地理信息和数据。图型符号学旨在传达地理信息，使得地图能够清晰、有效地传达各种空间数据…
查询速度提升15倍！银联商务基于 Apache Doris 的数据平台升级实践
本文导读：
在长期服务广大规模商户的过程中，银联商务已沉淀了庞大、真实、优质的数据资产数据，这些数据不仅是银联商务开启新增长曲线的基础，更是进一步服务好商户的关键支撑。为更好提供数据服务，银联商务实现了从 H…
数字化时代，数据仓库是什么？有什么用？
在激烈的市场竞争和全新的数字经济共同作用下，数字化转型成为了大多数企业的共识，也是获取数字经济的最佳方式。在整个数据价值生产链路中，数据仓库的主要作用就是中心化分发，将原始数据与数据价值挖掘活动隔离。
所有的原始数据…
数据分析讲课笔记01：数据分析概述
文章目录 零、学习目标一、本次课程概述二、数据分析的背景（一）进入大数据时代（二）数据分析的作用 三、什么是数据分析（一）数据分析的概念（二）数据分析的分类1、描述性数据分析2、探…
Python 数据挖掘 | 第3章 使用 Pandas 数据分析
Python 数据挖掘 | 第3章 使用 Pandas 数据分析前言1. Pandas 概述1.1 核心数据结构1.1.1 Series1.1.2 DataFrame1.1.3 Pannelcode1 DataFrame、Panel 和 Series 的构造与访问代码示例2. 基本数据操作2.1 索引操作2.2 赋值操作2.3 排序3. DataFrame 运算3.1 算数运算3.2 逻辑运…
ChatGPT4 助力 Python 数据分析与可视化、人工智能建模及论文高效撰写
2022年11月30日，可能将成为一个改变人类历史的日子——美国人工智能开发机构OpenAI推出了聊天机器人ChatGPT3.5，将人工智能的发展推向了一个新的高度。2023年4月，更强版本的ChatGPT4.0上线，文本、语音、图像等多模态交互方式使其在…
数据分析---SQL(2)
目录 SQL语句的执行顺序是什么举例说明SQL如何实现去重操作举例说明如何将时间戳转为yyyy-MM-dd形式如何将yyyy-MM-dd改为yyyyMMdd形式如何求两个yyyyMMdd形式的日期差几天SQL语句的执行顺序是什么
在SQL中，一条SQL语句的执行顺序如下： FROM子句：首先，执行FROM子句，确定要…
R语言使用do.call函数从列表中提取函数需要的参数、do.call函数可以将列表分解为单个参数并调用函数
R语言使用do.call函数从列表中提取函数需要的参数、do.call函数可以将列表分解为单个参数并调用函数 目录
软件测试|Python数据可视化神器——pyecharts教程（十）
使用pyecharts绘制漏斗图
简介
漏斗图（Funnel Chart）是一种用于可视化数据流程或转化率的图表类型。它通常由一系列阶段组成，每个阶段都有一个名称和一个值，表示在该阶段的转化量或数据流程的进展情况。漏斗图的名称来源于其外观…
pandas基础-pandas之Series+ 读取外部数据+dataframe+dataframe的索引
目录
pandas之Series
pandas之series创建 pandas之Series切片和索引 pandas之series的索引和值编辑 pandas之读取外部数据
pandas之dataframe
pandas之dataframe的创建 传入字典创建数据
dataframe的描述信息
dataframe的索引
pandas之loc pandas之iloc pandas之布尔索…
基于python舆情分析可视化系统+情感分析+爬虫+机器学习（源码）✅
大数据毕业设计：Python招聘数据采集分析可视化系统✅
毕业设计：2023-2024年计算机专业毕业设计选题汇总（建议收藏）
毕业设计：2023-2024年最新最全计算机专业毕设选题推荐汇总
🍅感兴趣的可以先收藏起来&…
任务15：使用Hive进行全国气象数据分析
任务描述
知识点：
使用Hive进行数据分析
重 点：
掌握Hive基本语句熟练使用Hive对天气数据进行分析
内 容：
使用Hive创建外部表使用Hive对数据进行统计分析
任务指导
1. 使用Hive创建基础表
将China_stn_city.csv文件上传到HDFS的/…
智能管理护航制造企业安全生产：信息化升级解决方案解析-亿发
安全生产信息化是通过充分利用信息技术，及时采集安全生产管理中的各种要素和数据，并进行统计分析，随后将分析结果及时反馈，以实现对安全生产管理的指导和帮助，旨在提高安全生产管理的效能。
在提升安全生产管理水平方…
100天精通Python（数据分析篇）——第70天：Pandas常用排序、排名方法（sort_index、sort_values、rank）
文章目录每篇前言一、按索引排序：sort_index()1. Series类型排序1）升序2）降序2. DataFrame类型排序1）按行索引排序2）按列索引排序二、按值排序：sort_values()1. Series类型排序1）升序2ÿ…
使用pyechart创建折线图
import json
from pyecharts.charts import Line
from pyecharts import options# 首先使用文件打开数据
f_us open(Desktop/python/Project/数据可视化/美国.txt,r,encoding"UTF-8")
f_rb open(Desktop/python/Project/数据可视化/日本.txt,r,encoding"UTF-8…
Python数据分析——pandas
1.pandas简介 pandas 是 Python 的核心数据分析支持库，提供了快速、灵活、明确的数据结构，旨在简单、直观地处理关系型、标记型数据。pandas 的目标是成为 Python 数据分析实践与实战的必备高级工具，其长远目标是成为最强大、最灵活、可以支持…
三种风格：山海鲸可视化软件模板的个性化定制之旅“
当我们谈论数据可视化时，一个好的可视化组件套件模板至关重要。一个优秀的模板不仅可以提高数据可视化的效果，还能让用户更加深入地探索和理解数据。作为山海鲸可视化软件的开发者，在提供免费好用的产品同时我们也希望最大限度降低用户设计难…
【Pandas】18 小练习
#【Pandas】18 小练习 2023.1.16 两个pandas小练习
18.1 疫情数据分析
18.1.1 观察数据
import pandas as pd
import osdf pd.read_csv("data/covid19_day_wise.csv")
dfDateConfirmedDeathsRecoveredActiveNew casesNew deathsNew recoveredDeaths / 100 CasesR…
【汽车销售数据】2015~2023年各厂商各车型的探索 数据分析可视化
数据处理的思路：
1 各表使用情况：
汽车分厂商每月销售表，该表主要分析展示top10销量的厂商销量、占比变化情况（柱形图、饼图）；中国汽车分车型每月销售量表，该表主要分析展示top20销量的车型销…
微店商品详情API（micro.item_get）的数据分析和挖掘
随着电商行业的迅猛发展，微店作为电商平台的重要组成部分，提供了丰富的API接口供开发者使用。其中，微店商品详情API（micro.item_get）是用于获取商品详情的接口，为数据分析和挖掘提供了大量有价值的数据源。…
](https://img-blog.csdnimg.cn/9712415c3add452f943c523eadc6605a.png)
快速入门pandas进行数据挖掘数据分析[多维度排序、数据筛选、分组计算、透视表](一)
1. 快速入门python，python基本语法
Python使用缩进(tab或者空格)来组织代码，而不是像其 他语言比如R、C、Java和Perl那样用大括号。考虑使用for循 环来实现排序算法: for x in list_values:if x < 10:small.append(x)else:bigger.append(x)标量类型 …
信息之板：数据看板如何点亮我们的生活
数据看板，作为数据可视化的一种应用形式，已经逐渐渗透到我们的日常生活中，发挥着越来越重要的作用。这种集中呈现和分析信息的工具，不仅在企业管理中大放异彩，更在我们的日常生活中展现出了强大的价值。下面我就以可视…
将Sqoop与Hive集成无缝的数据分析
将Sqoop与Hive集成是实现无缝数据分析的重要一步，它可以将关系型数据库中的数据导入到Hive中进行高级数据处理和查询。本文将深入探讨如何实现Sqoop与Hive的集成，并提供详细的示例代码和全面的内容，以帮助大家更好地了解和应用这一技术。
为…
Python数据分析案例32——财经新闻爬虫和可视化分析
案例背景
很多同学的课程作业都是需要自己爬虫数据然后进行分析，这里提供一个财经新闻的爬虫案例供学习。本案例的全部数据和代码获取可以参考：财经新闻数据 数据来源
新浪财经的新闻网，说实话，他这个网站做成这样就是用来爬虫的…
Numpy-如何对数组进行叠加
前言 本文是该专栏的第23篇，后面会持续分享python的数据分析知识，记得关注。
之前有详细介绍过，numpy替换元素和numpy改变数组形状的方法。本文再来详细介绍下，在数据分析项目上使用numpy如何对数组进行叠加。想了解数组元素替换和改变数组形状的方法，亦或是想了解更多nu…
用时序数据库 DolphinDB 搭建一套轻量化工业试验平台解决方案
DolphinDB 作为集成了高容量高速度流数据分析系统和强大编程语言的一站式解决方案，旨在为用户提供快速存储、检索、分析和计算庞大的结构化数据服务。本文将提供一个轻量化的工业试验平台数据处理解决方案，快速简单地实现海量数据采集、存储、处理和分析…
一文了解ChatGPT4+Python近红外光谱数据分析及机器学习与深度学习建模应用
2022年11月30日，可能将成为一个改变人类历史的日子——美国人工智能开发机构OpenAI推出了聊天机器人ChatGPT3.5，将人工智能的发展推向了一个新的高度。2023年4月，更强版本的ChatGPT4.0上线，文本、语音、图像等多模态交互方式使其在…
如何用Python进行数据分析(保姆级教程）
有小伙伴在学Python新手教程的时候说学Python比较复杂的地方就是资料太多了，比较复杂。
很多网上的资料都是从语法教起的，花了很多时间还是云里雾里，摸不清方向。今天就给大家来捋一捋思路！帮助大家提高学习效率！ Pyt…
【数据分析实战】冰雪大世界携程景区游客客源分布pyecharts地图
文章目录 引言数据集展示Python代码可视化展示本人浅薄分析 写在最后 今年冬天，哈尔滨冰雪旅游"杀疯了"，在元旦假期更是被南方游客"包场"。据哈尔滨市文化广电和旅游局提供大数据测算，截至元旦假日第3天，哈尔…
深入数仓离线数据同步：问题分析与优化措施
一、前言
在数据仓库领域，离线数仓和实时数仓是常见的两种架构类型。离线数仓一般通过定时任务在特定时间点（通常是凌晨）将业务数据同步到数据仓库中。这种方式适用于对数据实时性要求不高，更侧重于历史数据分析和报告生成的场景…
数据分析完整流程一般包括哪几个环节/步骤
问题定义： 确定需要解决的问题或目标，明确分析的方向和目的。 数据收集： 收集与问题相关的数据，可以包括从各种来源获取的结构化或非结构化数据。 数据清洗： 对收集到的数据进行清理，处理缺失值、异常值和…
Homicide+Reports1980-2014连环凶案数据，CSV格式
这个数据集提供了关于谋杀案件的详细信息，包括涉及的机构、受害者和肇事者的信息，以及犯罪的其他细节。下面是每个字段的详细解释：
Record ID: 记录的唯一标识符。Agency Code: 执行机构的代码。Agency Name: 执行机构的名称。Agency Type: …
《Python数据分析技术栈》第05章 06 矩阵（Matrices）
06 矩阵（Matrices）
《Python数据分析技术栈》第05章 06 矩阵（Matrices）
A matrix is a two-dimensional data structure, while an array can consist of any number of dimensions.
矩阵是一种二维数据结构，而数组…
数据分析的理念、流程、方法、工具（下）
四、用户分群
1、用户分群
用户分群是精细化运营的基础要求，也是数据分析的最基础方式。对用户进行分群，能帮助我们了解每个细分群体用户的变化情况，进而了解用户的整体现状及发展趋势。同时，由于运营资源本身有限，不…
【极数系列】Flink环境搭建（02）
【极数系列】Flink环境搭建（02）
引言
1.linux
直接在linux上使用jdk11flink1.18.0版本部署
2.docker
使用容器部署比较方便，一键启动停止，方便参数调整
3.windows
搭建Flink 1.18.0版本需要使用Cygwin或wsl工具模拟unix环境…
[Oracle] INSERT INTO 几种用法
插入数据需要使用 INSERT INTO 语句。该语句有多种写法，具体取决于插入的数据来源和目标，下面介绍一些常见用法和语法。 1.插入所有列的值
如果要将数据插入到表中的所有列中，则可以使用以下 INSERT INTO 语句：
INSERT INTO tab…
GPT4+Python近红外光谱数据分析及机器学习与深度学习建模
详情点击链接：GPT4Python近红外光谱数据分析及机器学习与深度学习建模
第一：GPT4
1、ChatGPT（GPT-1、GPT-2、GPT-3、GPT-3.5、GPT-4模型的演变）
2、ChatGPT对话初体验
3、GPT-4与GPT-3.5的区别，以及与国内大语言模…
大屏数据可视化的设计流程及原则
随着数字经济的快速发展和信息化在各行业各领域的深入推进，可视化大屏在各行各业得到越来越广泛的应用。可视化大屏不再只是电影里奇幻的画面，而是被实实在在地应用在政府、商业、金融、制造、交通、城市等各个行业的业务场景中，切切实实地实…
大数据分析组件Hive-集合数据结构
Hive的数据结构 前言一、array数组类型二、map键值对集合类型三、struct结构体类型 前言
Hive是一个基于Hadoop的数据仓库基础设施，用于处理大规模分布式数据集。它提供了一个类似于SQL的查询语言（称为HiveQL），允许用户以类似于关…
【销售数据分析】客户画像分析之总体画像
前一段时间把财务分析的一些报表及分析场景讲得差不多了，接下来想和大家讲一下销售分析中的一些场景。今年看了许多企业的数据，发现大家2023年比疫情三年更难！从财务的几张报表就会发现净利润亏损的居多，而亏损的主要原因基本上都…
基于python豆瓣电影评论的情感分析和聚类分析，聚类分析有手肘法进行检验，情感分析用snownlp
基于Python的豆瓣电影评论的情感分析和聚类分析是一种用于探索电影评论数据的方法。
情感分析 情感分析旨在从文本中提取情感信息，并对其进行分类，如正面、负面或中性。在这里，我们使用了一个名为snownlp的Python库来进行情感分析。Snownlp是…
企业为何对数据可视化越发看重？
数据可视化，作为信息时代的一项重要技术，正在企业中崭露头角，逐渐成为业务决策和运营管理的得力助手。企业之所以对数据可视化如此重视，是因为它为企业带来了诸多实际利益和战略优势。
首先，数据可视化为企业提供了更…
1月25日，每日信息差
第一、中国和新加坡互免签证，新加坡酒店搜索量较发布前增长4倍。去哪儿数据显示，新加坡酒店搜索量较发布前增长4倍，仍在持续增长中。同程旅行数据显示，消息发布半小时内，同程旅行平台新加坡相关搜索热度较前日同一时段…
2024年，AI 掀起数据与分析市场的新风暴
2024 年伊始，Kyligence 联合创始人兼 CEO 韩卿在其公司内部的飞书订阅号发表了多篇 Rethink Data & Analytics 的内部信，分享了对数据与分析行业的一些战略思考，尤其是 AI 带来的各种变化和革命，是如何深刻地影响这个行业乃至…
【Python百宝箱】Python引领量子风云：量子计算搭建指南
探秘量子之旅：Python量子计算库全览
前言
随着科学技术的不断发展，量子计算逐渐成为计算科学领域的一项引人瞩目的前沿技术。Python作为一种强大而灵活的编程语言，拥有丰富的生态系统，使得科学家们能够在量子计算领域展开更深入…
20个城市公交线路数据分享，Shp+excel格式，2020年，城市发展、公共设施规划必备数据，已实现数据可视化
随着城市交通的不断发展，公交线路已经成为人们出行的重要方式之一。
公交线路数据和公交站点数据是GIS系统中的重要数据集之一。公交线路数据包括公交车辆行驶的路径和站点之间的连接信息，今天分享的就是部分城市的公交线路数据，始发站、终点…
Pandas 与 PySpark 强强联手，功能与速度齐飞
Pandas做数据处理可以说是yyds！而它的缺点也是非常明显，Pandas 只能单机处理，它不能随数据量线性伸缩。例如，如果 pandas 试图读取的数据集大于一台机器的可用内存，则会因内存不足而失败。
另外 pandas 在处理大型数据…
重塑林业管理：山海鲸可视化软件为智慧林业赋能
作为山海鲸可视化软件的开发者，我们深知林业行业在数据可视化和管理方面的需求。因此，在不断升级山海鲸可视化这款可以免费编辑、部署的产品同时，我们针对各行可视化需求，推出各行可视化解决方案。
针对林业管理可视化需求&#…
WebGL在实验室方向的应用
WebGL在实验室方向的应用涉及到实验过程的可视化、数据分析、模拟等方面。以下是一些WebGL在实验室领域的应用示例，希望对大家有所帮助。北京木奇移动技术有限公司，专业的软件外包开发公司，欢迎交流合作。 1.分子模型和化学反应模拟ÿ…
Python读写EXCEL文件常用方法大全
python读写excel的方式有很多，不同的模块在读写的讲法上稍有区别，这里我主要介绍几个常用的方式。
用xlrd和xlwt进行excel读写；用openpyxl进行excel读写；用pandas进行excel读写；
一、数据准备
为了方便演示ÿ…
数据可视化工具之选，三选一？
在数据可视化的世界中，选择一款合适的工具对于提升工作效率和洞察力至关重要。本文将对三款主流数据可视化工具进行详细比较，包括山海鲸可视化、Echarts和D3.js，以帮助您做出明智的选择。
山海鲸可视化
山海鲸可视化是一款免费且功能强大的…
数据分析基础之《pandas（2）—基本数据操作》
一、读取一个真实的股票数据
1、读取数据
# 基本数据操作
data pd.read_csv("./stock_day.csv")data# 删除一些列，使数据简洁点
data data.drop([ma5,ma10,ma20,v_ma5,v_ma10,v_ma20], axis1)data 二、索引操作
1、numpy当中我们已经讲过使用索引选取…
CISAW和CISP-PTE证书选择指南
📣在信息安全领域，选择合适的证书可以为你的职业生涯增添光彩。很多从事信息渗透行业的朋友经常讨论CISP-PTE和CISAW之间的选择问题。今天就从4个方面带你详细了解这两张证书，帮你做出明智的选择！ 1️⃣证书的行业前景 Ǵ…
Pandas数据框、序列定义及数据处理应用在线实验闯关
Pandas数据框、序列定义及数据处理应用在线实验闯关 文章目录 Pandas数据框、序列定义及数据处理应用在线实验闯关一、序列和数据框1、任务描述2、相关知识定义列表和元组序列定义方法构造数据框3、任务实现二、外都数据文件读取1、任务描述2、相关知识读取文件分块读取数据3、…
基于Python flask京东服装数据分析可视化系统，可视化多种多样
技术介绍
京东服装品牌数据分析系统是基于Python Flask框架开发的一款用于分析和展示京东服装品牌数据的Web应用程序。该系统利用Flask提供了一个简单而强大的后端框架，结合Request库进行网络爬虫获取京东服装品牌数据，并使用Pyecharts进行可视化展示&a…
基于Python flask框架的招聘数据分析推荐系统，有数据推荐和可视化功能
研究背景
在当今社会，随着经济的发展和就业市场的竞争日益激烈，求职者面临着越来越多的招聘信息和选择。然而，对于求职者来说，如何快速准确地找到符合自己需求和兴趣的职位成为一个挑战。
传统的求职方式往往是通过招聘网站或招…
python中pandas模块数据处理小案例
内容目录1. 添加随机日期2. 聚合求和3.聚合求和排序4. 聚合求和排序取前十5. 聚合取极值6. 重新赋值7. 按条件赋值pandas作为数据处理的得力工具，简便了数据开发过程，之前串联了pandas的使用方法，现在用几个小案例巩固一下常用的pandas方法。…
《Python数据分析技术栈》第03章 01 正则表达式（Regular expressions）
01 正则表达式（Regular expressions）
《Python数据分析技术栈》第03章 01 正则表达式（Regular expressions）
A regular expression is a pattern containing both characters (like letters and digits) and metacharacters (li…
浏览器插件：WebScraper基本用法和抓取页面内容(不会编程也能爬取数据)
Web Scraper 是一个浏览器扩展，用于从页面中提取数据(网页爬虫)。对于简单或偶然的需求非常有用，例如正在写代码缺少一些示例数据，使用此插件可以很快从类似的网站提取内容作为模拟数据。从 Chrome 的插件市场安装后，页面 F12 打开…
Python从入门到精通学习的十个阶段
文章目录 前言一、Python开发基础二、Python高级编程和数据库开发三、前端开发四、WEB框架开发五、爬虫开发六、全栈项目实战七、数据分析八、人工智能九、自动化运维&开发十、高并发语言GO开发关于Python技术储备一、Python所有方向的学习路线二、Python基础学习视频三、精…
核密度曲线（python
目录 1.代码：2.效果：小结： 1.代码：
import pandas as pd
import matplotlib.pyplot as plt
# 读入数据
file r123.xlsx
sheet Sheet2
col S213
# 标题名称
title col 供订比曲线
xlabel 供订比
# 横轴显示范围
xleft 0
xr…
Python数据分析与挖掘————图像的处理
系列文章目录 文章目录系列文章目录前言图片的马赛克一.安装matplotlib，numpy等模块二.马赛克图片一.导入图片二.定位区域三.图片的合成图片拼接图像的灰度化一.max()方法二.min（）方法三.平均值法mean()函数四.加权平均值法图片的分割总结源代…
快充伤电池？我来帮何同学做个假设检验
最近看到何同学的视频，拿40部手机花两年半做了关于各种充电的实验视频，视频确实很好看，花里胡哨，看着科技感满满～。但是关于实验设计和根据实验的数据得出最后的结论上似乎有些草率。
实验设计上就不提了，…
猿创征文｜ 我的开发者工具箱之数据分析师装备库
工欲善其事，必先利其器。 ——《论语卫灵公》 文章目录前言一、对接需求阶段（一）DBeaver（二）WPS二、设计阶段（一）亿图图示（二）Confluence三、模型报表开发阶段࿰…
实战项目：物流行业数据分析
1、数据来源：某企业销售的6中商品所对应的送货及用户反馈数据
解决问题：
配送服务是否存在问题是否存在有潜力的销售区域商品是否存在质量问题
结论 货品4-西北，货品2-马来西亚，这两条线路存在较大问题，急需提升时效…
国内访问Github超级慢？那是你没有用我这个脚本。直接起飞。
导语
之前很多朋友咨询过国内访问Github较慢的问题，然后我一般让他们自己去知乎上找攻略，但今天我才发现网上竟然没有一个一键配置的脚本，一般都需要我们跟着教程一步步地去做才行。这也太麻烦了，于是自己动手写了个脚本…
R语言dplyr包distinct函数基于dataframe数据中指定单个变量移除重复数据行、keep_all函数用于保留输出数据框中的所有其它变量
R语言dplyr包distinct函数基于dataframe数据中指定单个变量移除重复数据行、keep_all函数用于保留输出数据框中的所有其它变量 目录
阿里云-数据仓库-全链路大数据开发治理平台-DataWorks的数字世界
一、前言
上文我讲到 阿里云-数据仓库-数据分析开发神器-ODPS ，今天我带领大家一起走进神器的成长环境及它的数据世界。
二、 DataWorks是什么
DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎，为数据仓库、数据湖、湖仓一体等…
10种顶流聚类算法Python实现（附完整代码）
目录
前言
一、聚类
二、聚类算法
三、聚类算法示例
1、库安装
2、聚类数据集
3、亲和力传播
4、聚合聚类
5、BIRCH
6、DBSCAN
7、K均值
8、Mini-Batch K-均值
9、均值漂移聚类
10、OPTICS
11、光谱聚类
12、高斯混合模型
三、总结 前言
今天给大家分享一篇关…
【数据分析】(task4)数据可视化
note
matplotlib的四个容器： Figure：顶层级，用来容纳子 Axes，一组具体绘图元素和画布（canvas）。 画板。Axes：matplotlib宇宙的核心，容纳了大量元素用来构造一幅幅子图，一…
扑克玩法：9点半--数据分析
扑克玩法：9点半–数据分析
一、前言
又是新的一年，在这里先给各位读者大大们拜个晚年。祝大家新年快乐，万事如意，阖家欢乐。 过年拜年是中国的传统习俗，在春节期间人们会互相拜访并送上祝福。拜年不仅是一项重要的社…
GEE遥感云大数据在林业中的应用
近年来遥感技术得到了突飞猛进的发展，航天、航空、临近空间等多遥感平台不断增加，数据的空间、时间、光谱分辨率不断提高，数据量猛增，遥感数据已经越来越具有大数据特征。遥感大数据的出现为相关研究提供了前所未有的机遇…
智慧监狱整体解决方案PPT
导读：原文《智慧监狱整体解决方案PPT》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。 喜欢文章，您可以点赞评论转发本文，了解更多…
足球- EDA的历史数据分析并可视化
足球- EDA的历史数据分析并可视化 背景数据介绍探索数据时需要遵循的一些方向:数据处理导入库数据探索 数据可视化赛事分析主客场比分相关性分析时间序列分析 总结 背景
该数据集包括从1872年第一场正式比赛到2023年的44，341场国际足球比赛的结果。比赛范围从FIFA世…
统计学补充概念18-非线性决策边界
概念
在某些情况下，数据可能不适合通过线性决策边界来分割。对于这种情况，我们可以使用非线性决策边界，这通常需要使用更复杂的模型来捕捉数据的复杂关系。
一种常见的方法是使用核函数，例如径向基函数（Radial Basis…
基于LOF算法的异常值检测
目录 LOF算法简介Sklearn官网LOF算法应用实例1Sklearn官网LOF算法应用实例2基于LOF算法鸢尾花数据集异常值检测读取数据构造数据可视化，画出可疑异常点LOF算法 LOF算法简介
LOF异常检测算法是一种基于密度的异常检测算法，基于密度的异常检测算法主要思想…
趋势拟合策略量化分析
根据趋势拟合的量化分析方法，是对股票价格历史数据进行曲线拟合，从而预测出未来几天的股价。在本文所示的程序中，用fndays表示所用历史数据的天数，pndays表示预测未来的天数。例如我们可以用过去10天的价格预测未来3天的股票价格。…
线性回归分析——高尔顿数据集更正版
线性回归分析——高尔顿数据集更正版一、“父亲—儿子”身高数据回归分析1、做数据处理，将数据重复项删除；完成‘儿子’分类2、做回归处理二、“母亲—儿子”身高数据回归分析1、做数据处理，删除重复项；分类儿子身高2、做归回分析…
数据分析基础-数据可视化学习笔记05-交互模型
人类信息处理模型
学习目标
理解交互中的人类认知行为
•人类信息处理模型
•生态模型
•社交互动模型
人类信息处理模型
•在认知心理学中——人类被视为一个信息处理单元
•认知过程被建模为该 IP 单元上的一系列信息过程
•了解人类认知过程，例如推理、…
招商信诺人寿基于 Apache Doris 统一 OLAP 技术栈实践
本文导读：
当前，大数据、人工智能、云计算等技术应用正在推动保险科技发展，加速保险行业数字化进程。在这一背景下，招商信诺不断探索如何将多元数据融合扩充，以赋能代理人掌握更加详实的用户线索，并将智能…
教师必看！如何最大化利用和鲸的资源与平台赋能教学工作
本篇内容面向教授数据科学、大数据、人工智能专业课及相关交叉课程的高校教师，提供了一份资源导览地图，跟随此地图浏览您可以获得：
可作为教学素材的 5万 开源案例及近万份精选数据资源可作为教学拓展的各类训练营、Workshop、数据科学竞赛等…
专业制造一体化ERP系统，专注于制造工厂生产管理信息化，可定制-亿发
制造业是国民经济的支柱产业，对于经济发展和竞争力至关重要。在数字化和智能化趋势的推动下，制造业正处于升级的关键时期。而ERP系统，即企业资源计划系统，能够将企业的各个业务环节整合起来，实现资源的有效管理和信息的…
2023年7月京东护发市场数据分析（京东数据产品）
如今，与面部护肤相比，多数消费者认为头皮也需要认真对待，这在年轻消费群体中体现的较为明显。
随着消费者对护发理念的认同感不断加深，人们日常居家洗护的步骤也更加精细、使用产品品类也愈加多样化。除传统的护发素、发膜等护发…
Python数据分析高薪实战第一天 python基础与项目环境搭建
开篇词 数据赋能未来，Python 势不可挡
互联网公司从红利下的爆发期，进入新的精细化发展阶段，亟须深入分析与挖掘业务与数据价值，从而找到新的增长点突破现有增长瓶颈。各行各业的数据分析需求井喷，数据分析人才成为争…
开源分布式支持超大规模数据分析型数据仓库Apache Kylin实践-上
文章目录概述定义特性术语技术概念架构和组件生态圈部署Docker部署基于hadoop环境安装前置条件安装使用步骤官方样例Cube说明示例演示准备演示数据创建项目选择数据源创建Model创建CubeCube构建与Hive查询对比概述
定义 Apache Kylin 官网中文地址 https://kylin.apache.org/c…
Python Numpy基础教程
本文是一个关于Python numpy的基础学习教程，其中，Python版本为Python 3.x 什么是Numpy
Numpy Numerical Python，它是Python中科学计算的核心库，可以高效的处理多维数组的计算。并且，因为它的许多底层函数是用C语言编…
商业智能推进中国企业数字化进程
商业智能报告对于企业有何作用与意义？经过几年的积累，大部分大中型企业已建立了比较完善的OA、ERP等信息化基础系统。IT系统运行了一段时间之后，积累的数据越来越多，其中包括来自业务系统的订单、库存、交易账目、客户和供应商等&…
欧洲杯案例(数据过滤和排序）
1：找到数据的位置
os.path.join(os.getcwd(),Euro2012_stats)
2：可以作为属性去取,变量，所有要符合变量的命名规则（不能有空格等）
3：有多少支球队参加了2012年的欧洲杯
维度
import pandas as pd
impor…
何为数据分析？数据分析流程是啥？
一、什么是数据分析
指用专业的统计分析方法对大量数据进行分析，并加以详细研究和概括总结，提取有价值的信息，形成有效的分析结论，从而影响业务决策
二、数据分析的重要性
一切事物，如果不能量化它，我们…
59_Pandas中使用describe获取每列的汇总统计信息（平均值、标准差等）
59_Pandas中使用describe获取每列的汇总统计信息（平均值、标准差等）
使用 pandas.DataFrame 和 pandas.Series 的 describe() 方法，您可以获得汇总统计信息，例如每列的均值、标准差、最大值、最小值和众数。
在此，对…
零售数据分析之操作篇5：近期计算与近期筛选
各位数据的朋友，大家好，我是老周道数据，和你一起，用常人思维数据分析，通过数据讲故事。
又有一段时间没来了，抱歉，不过，不管多忙，我都会继续。我始终相信，任…
2023年2月天猫平台面膜品牌销量排行榜（天猫销售数据分析）
随着居民经济收入的不断增加，人们对美的追求也不断提高，因此，人们也更加注重对皮肤的护理。面膜则是其中的一块大蛋糕。 根据鲸参谋平台数据显示，2023年2月在天猫平台上，面膜相关产品的月销量超过一千万件，…
银行数字化转型导师坚鹏：数字化时代客户体验管理与卓越厅堂服务
数字化时代客户体验管理与卓越厅堂服务课程背景：
数字化浪潮下，很多网点存在以下问题：
不清楚如何提升网点数字化客户体验？
不清楚网点数字化客户体验应用案例？
不积善成德如何打造网点卓越厅堂服务？
课…
数据规整：聚合、合并和重塑
目录一、层次化索引重排与分级排序根据级别汇总统计二、合并数据集数据库风格的DataFrame合并索引上的合并轴向连接合并重叠数据三、重塑和轴向旋转重塑层次化索引将“长格式”旋转为“宽格式”将“宽格式”旋转为“长格式”一、层次化索引
层次化索引（hierarchica…
解决方案 | 集采带来冲击，数字化经营管理平台助药企破局
国家集采的制定和常态化开展、两票制、新医改等一系列措施的发布实施，都在挤药价水分，让利于民，药企的利润空间不断被压缩，药品高利润时代一去不复返。在当前环境下，制药企业不得不采用稳增长、寻转机的经营战略&#…
花了5年时间，用过市面上95%的工具，终于找到这款万能报表工具
经常有粉丝问我有“哪个报表工具好用易上手？”或者是“有哪些适合绝大多数普通职场人的万能报表工具？”
从这里我大概总结出了大家选择报表工具最期望满足的3点：
（1）简单易上手：也就是所谓的学习门槛要低…
【python】python智能停车场数据分析（代码+数据集）【独一无二】
👉博__主👈：米码收割机 👉技__能👈：C/Python语言 👉公众号👈：测试开发自动化【获取源码商业合作】 👉荣__誉👈：阿里云博客专家博主、5…
我的Python学习之路(6)
今日学习内容
1.了解Python的组合数据类型，例如集合类型、序列类型（元组类型、列表类型）、字典类型 2.根据三种类型，编写代码实现基本统计值的计算 3.安装jieba库并熟悉它的函数 4.根据jieba库和学习的组合数据类型，实…
数据库设计的重要性和设计原则
说起数据库设计，相信大家都明白怎么回事，但说起数据库设计的重要性，我想大家也只是停留在概念上而已，到底如何重要？怎么重要呢？今天就将我至今为止的理解向大家阐述下。
一个不良的数据库设计，…
数据分析基础-数据可视化03-可视化的符号与表示-图形符号学
概念
图型符号学（Cartographic Symbolization）是地图学领域中的一个重要概念，涉及到如何使用不同的符号、颜色、图案和标记来在地图上表示地理信息和数据。图型符号学旨在传达地理信息，使得地图能够清晰、有效地传达各种空间数据…
Python数据分析实战-DataFrame按照某列指定的顺序排序（附源码和实现效果）
实现功能
dataframe按照某列指定的顺序排序
实现代码
import pandas as pd# 创建一个示例 DataFrame
df pd.DataFrame({name: [Alice, Bob, Charlie, David, Eva],age: [25, 30, 35, 40, 45],gender: [F, M, M, M, F]})# 按照指定顺序排序
sort_order [Eva, David, Charli…
2023年7月婴幼儿辅食市场数据分析（京东商品数据）
随着人们对婴幼儿饮食健康的关注不断增加，市场对高品质、安全、营养丰富的辅食需求也日益旺盛。婴幼儿辅食市场增长放缓，但整体仍保持上升态势。鲸参谋数据显示，今年7月份，京东平台婴幼儿辅食市场的销量为1000万，同比增…
实践和项目：解决实际问题时，选择合适的数据结构和算法
文章目录 选择合适的数据结构数组链表栈队列树图哈希表 选择合适的算法实践和项目 🎉欢迎来到数据结构学习专栏~实践和项目：解决实际问题时，选择合适的数据结构和算法 ☆* o(≧▽≦)o *☆嗨~我是IT陈寒🍹✨博客主页：IT…
异步请求库的实际应用案例：爬取豆瓣经典电影
在日常爬虫过程中，你有没有遇到过需要爬取大量数据的情况，但是传统的同步请求方式让您等得焦头烂额？ 这个问题的根源在于传统的同步请求方式。当我们使用同步请求时，程序会一直等待服务器的响应，直到数据返回后才能继续…
生信豆芽菜-XGboost构建诊断模型
网址：http://www.sxdyc.com/xgboostBuilds 1、准备数据 训练集表达谱数据
训练集样本分组数据
验证集表达谱数据
验证集样本分组数据
2、提交等待运行结果即可
当然，如果不清楚数据是什么样的，可以选择下载我们的示例数据&#…
亿发软件：智慧门店商超系统，2023新零售POS数字运营一体化管理
2023年9月6日，山东济宁一家超市因为酸奶价格标签错误而引发了广泛关注。标签原本显示几十个人为9.9元，但特价销售价却标为10元。这一小小的错误却在社交媒体上引发了轩然大波，让超市一度处于舆论的风口浪尖。超市工作人员回应，表示…
你知道 BI 是什么吗？关于 BI 系统的概述
BI 作为信息化建设中的关键一环，在企业中通常起到承上启下的作用，下能连接打通企业业务系统数据库，将各部门数据分类分级统一储存到数据仓库，简化存储取数流程，减少人力、时间成本；上能提供数据可视化报表…
【愚公系列】2023年02月 Python工具集合-cutecharts图表可视化
文章目录前言一、cutecharts图表可视化1.安装包2.柱状图3.折线图4.饼图5.雷达图6.散点图前言
数据可视化是一种方法，可以通过图表、图形和图像的形式，将数据直观地呈现给人们。这样，人们就可以很容易地理解和分析数据，并从中获得…
【思维模型】五分钟了解＜第一性原理＞，为什么学习第一性原理？什么是第一性原理？如何运用第一性原理？
【思维模型】五分钟了解<第一性原理>，为什么学习第一性原理？什么是第一性原理？如何运用第一性原理？1. 为什么学习第一性原理？2. 什么是第一性原理？3. 如何运用第一性原理？4. 小结参考&…
【数据分析实战】基于python对酒店预订需求进行分析
文章目录📚引言📖数据加载以及基本观察📑缺失值观察及处理🔖缺失值观察以及可视化🔖缺失值处理📖用户数据探索📑什么时间预定酒店将会更经济实惠？📑哪个月份的酒店预订是…
A.机器学习入门算法（六）基于天气数据集的XGBoost分类预测
1.机器学习算法（六）基于天气数据集的XGBoost分类预测
本项目链接：https://www.heywhale.com/home/column/64141d6b1c8c8b518ba97dcc
1.1 XGBoost的介绍与应用
XGBoost是2016年由华盛顿大学陈天奇老师带领开发的一个可扩展机器学习系统。严…
企业为什么需要数据可视化报表
数据可视化报表是在商业环境、市场环境已经改变之后，发展出来为当前企业提供替代解决办法的重要方案。而且信息化、数字化时代，很多企业已经进行了初步的信息化建设，沉淀了大量业务数据，这些数据作为企业的资产，是需要…
关于数据分析和数据指标，企业还需要做什么？
数据虽然已经成为了各行各业对未来的共识，也切实成为了各领域企业的重要资产。但真正谈到发挥数据的价值，就必须从规模庞大的数据中找出需求的数据，然后进行利用。这个过程光是想想就知道很麻烦，更别提很多数据都是经常会用到的&a…
复现NC图表：Krona绘制嵌套饼图
今天的内容基本无代码。我们要复现的是一篇NC文章的嵌套饼图。图是饼图，特点是有多层。对于多层饼图的R语言实现，网上有教程（包括简单的pie、ggplot2以及其他的R包），自行百度。这里我们介绍Krona这个工具，有…
Pandas入门实践2 -数据处理
为了准备数据进行分析，我们需要执行数据处理。在本节中，我们将学习如何清理和重新格式化数据（例如，重命名列和修复数据类型不匹配）、对其进行重构/整形，以及对其进行丰富（例如，离散化…
Pandas 删除数据
文章目录一、删除缺失值1.1 按照行删除数据1.1.1 删除空值对应的所有行1.1.2 删除所有列数据都为空值的行1.1.3 删除大于等于5个列中的数值为空值的行1.2 按照列删除数据1.2.1 删除所有空值对应的行，并原地替换1.2.2 删除某些列中任意列中数值为空值对应的行1.2.3 删…
仅三行就能学会数据分析——Sweetviz详解
文章目录前言一、准备二、sweetviz 基本用法1.引入库2.读入数据3.调整报告布局总结前言
Sweetviz是一个开源Python库，它只需三行代码就可以生成漂亮的高精度可视化效果来启动EDA(探索性数据分析)。输出一个HTML。
如上图所示，它不仅能根据性别、年龄等…
【Python】如何有效比较两个时间序列在图形上的相似度？
文章目录前言一、1.准备二、实操1.使用Matplotlib可视化比较两个时间序列2.计算两个时间序列的相关系数：3.使用Python实现动态时间规整算法（DTW）：总结前言
比较两个时间序列在图形上是否相似，可以通过以下方法&#x…
pandas数据聚合和重组
介绍pandas数据聚合和重组的相关知识，仅供参考。
目录
1GroupBy技术
1.1简介
1.2对分组进行迭代
1.3选取一个或一组列 1.4通过字典或Series进行分组
1.5利用函数进行分组
2数据聚合
2.1简介
2.1面向列的多函数应用
2.2以‘无索引’的方式返回聚合数据
1G…
1月奶粉电商销售数据榜单：销售额约20亿，高端化趋势明显
鲸参谋电商数据监测的2023年1月份京东平台“奶粉”品类销售数据榜单出炉！ 根据鲸参谋数据显示，1月份京东平台上奶粉的销量约675万件，销售额约20亿元，环比均下降19%左右。与去年相比，整体也下滑了近34%。可以看出&#…
Microsoft Power BI部署方案
目录
前言
一、部署环境概述
二、Azure 账户创建
三、创建虚拟机，安装 SQL Server
四、配置虚拟网络环境
五、安装 Power BI 服务端
六、创建 Power BI 环境及 Power BI 门户
七、配置数据网关
八、上传数据集、创建报表
九、发布共享内部报表
十、设置安…
探究大语言模型(LLM)：让ChatGPT火爆的背后
随着人工智能技术的快速发展，大语言模型（Large Language Model，LLM）也逐渐成为研究热点之一。LLM是一种能够生成自然语言文本的人工智能模型，它的主要作用是自动生成高质量的文章、对话和翻译等自然语言内容。其中&…
用Python按时间分割txt文件中的数据
案例
有一个监测系统，每隔两分钟就会记录一下监测结果，如下图所示：现在要求按小时将数据提取，并存为新的txt文件，也就是1天会对应有24个txt文件。先整理一下思路： 读取数据将每行数据的时间戳转换成“日期-小时”格式，并按此分类数据，存入字典 按“日期-小时”分断，将…
gma 地理空间绘图：(1) 绘制简单的世界地图-3.设置地图框
内容回顾
gma 地理空间绘图：(1) 绘制简单的世界地图-1.地图绘制与细节调整 gma 地理空间绘图：(1) 绘制简单的世界地图-2.设置经纬网
方法
SetFrame(FrameColor ‘black’, FrameWidth 0.6, ShowFrame True, ShowLeft True, ShowBottom True, Sho…
模板学堂丨妙用Tab组件制作多屏仪表板并实现自动轮播
DataEase开源数据可视化分析平台于2022年6月正式发布模板市场（https://dataease.io/templates/）。模板市场旨在为DataEase用户提供专业、美观、拿来即用的仪表板模板，方便用户根据自身的业务需求和使用场景选择对应的仪表板模板，并…
40. 实战：基于tkinter实现用户UI界面——对34小节的VIP音乐解析系统的全面升级（附源码）
目录
前言
目的
思路
代码实现
1. 首先设计主页UI界面
2. 封装核心解析歌曲代码
3. 下载音乐到本地
4. 将界面居中，禁止修改窗口大小，等待关闭/退出指令
完整源码
运行效果
使用过程
菜单栏
打包的exe
总结 前言
本节将升级34. 实战&…
如何利用TURF分析来对餐厅菜品进行组合搭配？
1.数据源说明
1.1 数据简单说明
本数据源采用的是某餐厅8月份的销售明细表。本文会主要用到一下字段值：
order_id， 产品订单号dishes_name，菜品名称counts, 消费数量amounts，消费金额
1.2 数据截图
以下是数据源的截图
1.3…
案例1：金融数据分析----code知识点详解版
案例1：金融数据分析----code详解版1.引言1.1案例分析目标1.2涉及知识点1.3案例分析流程2.数据获取涉及知识点：2.1安装tushare库2.2获取Token2.3导入tushare库并设置Token2.4获取数据2.6保存数据3.数据预处理涉及知识点：3.1读取已有数据3.2清理…
基于ICA的ASL灌注成像去噪
导读动脉自旋标记(ASL)成像通过追踪磁性标记血液在脑内的积聚来获得灌注图像。由于生成的图像本身具有较低的信噪比(SNR)，因此通常会获取多个测量值并取平均值，但代价是增加了扫描持续时间和产生运动伪影的机会。然而，在采集时间有限且患者运…
我在工作中使用到的stream流【案例1：两层树形结构】
案例1：两层树形结构 文章目录案例1：两层树形结构介绍最后的代码知识点学习：介绍 属性：位置 关联点：WarehouseTypes 仓库类型 解释：这个位置可以是那些仓库的 举例：1201,1202,12031204 属性&…
[获取数据集] 数据分析、机器学习获取开放的数据集
[获取数据集] 数据分析、机器学习获取开放的数据集
不管数据分析还是机器学习，用真实的数据比用虚拟的数据得出的结果要好，以下是一些比较流行的开放数据存储库，里面有成千上万覆盖各个领域的数据。 流行的开放数据存储库:
UC Irvine Machi…
数学建模-如何用matlab画出漂亮的图（一）
1 画图基本指令hold on :保持打开的命令关闭图形保持功能hold off:title ( xx)命名xlabel (xx’ ) x轴标注ylabel (xx’ ) y轴标注figure (x) 创建图窗hidden on 将网格设为不透明hidden off 将网格设为透明legend (xx)加图例grid on加网格线subplot (2,2.4).显示第4个图形yyax…
大数据模型、离线架构、实时架构
一.大数据模型
8种常见的大数据分析模型：1、留存分析模型；2、漏斗分析模型；3、全行为路径分析；4、热图分析模型；5、事件分析模型；6、用户分群模型；7、用户分析模型；8、黏性分析模型…
【数据分析之道】数据分析导读
文章目录专栏导读1、什么是数据分析？2、数据分析的应用3、数据分析的重要性4、数据分析基本流程总结专栏导读 ✍ 作者简介：i阿极，CSDN Python领域新星创作者，专注于分享python领域知识。 ✍ 本文录入于《数据分析之道》࿰…
Python3，5行代码，生成自动排序动图，这操作不比Excel香？
5行代码生成自动排序动图1、引言2、代码实战2.1 pynimate介绍2.2 pynimate安装2.3 代码示例3、总结1、引言
小屌丝：鱼哥，听说你的excel段位又提升了？ 小鱼：你这是疑问的语气？ 小屌丝：没有~ 吧… 小鱼&…
Python 可视化最频繁使用的10大工具
今天介绍Python当中十大可视化工具，每一个都独具特色，惊艳一方。 文章目录Matplotlib技术提升SeabornPlotlyBokehAltairggplotHoloviewsPlotnineWordcloudNetworkxMatplotlib
Matplotlib 是 Python 的一个绘图库，可以绘制出高质量的折线图、…
基于XGBoost的用户流失预测
基于XGBoost的用户流失预测 小P：小H，我怎么能知道哪些用户有可能会流失呢？我这里有一份数据，你帮忙看看哪些字段更有助于寻找流失用户 小H：我只需要告诉你哪些特征更重要是吗？ 小P：对对…
什么是“关键对话”？“关键对话”背后的底层思维是什么？如何进行一场“关键对话”？
什么是“关键对话”？“关键对话”背后的底层思维是什么？如何进行一场“关键对话”？01 什么是“关键对话”？02 “关键对话”背后的底层思维是什么？03 如何进行一场“关键对话”？第一步：建立安全感…
最强的Python可视化神器，你有用过么？
数据分析离不开数据可视化，我们最常用的就是Pandas，Matplotlib，Pyecharts当然还有Tableau，看到一篇文章介绍Plotly制图后我也跃跃欲试，查看了相关资料开始尝试用它制图。
1、Plotly
Plotly是一款用来做数据分析和可视…
【思维模型】五分钟了解＜金字塔原理＞，为什么学习金字塔原理？什么是金字塔原理？如何应用金字塔原理？
【思维模型】五分钟了解＜金字塔原理＞，为什么学习金字塔原理？什么是金字塔原理？如何应用金字塔原理？1. 为什么学习金字塔原理？2. 什么是金字塔原理？3. 如何应用金字塔原理？…
Python数据分析案例26——时间序列的多阶段预测（GRU+RVM）
本篇案例适合理工科硕士。 承接上两篇硬核案例：Python数据分析案例25——海上风力发电预测（多变量循环神经网络） 之前都是直接预测，即用前面的数据——之前的X和之前的y直接预测未来的y。
本章介绍一个多阶段的预测方法ÿ…
银行数字化转型导师坚鹏：数字化转型背景下的银行柜员提升之道
数字化转型背景下的银行柜员提升之道
课程背景：
很多银行都在开展银行数字化运营工作，目前存在以下问题急需解决：
l 不清楚银行数字化运营包括哪些关键工作？
l 不清楚银行数字化运营工作的核心方法论？
l 不清楚银行数字…
Matlab如何计算功率谱熵？|信息熵之功率谱熵，完整代码及测试过程。
信息熵
熵的概念最初在热力学中提出，熵的本质被解释为即熵的本质是一个系统“内在的混乱程度”。熵的概念在不同的学科中引申出更为具体的概念，在信息论中信息熵的具体定义为： H ( X ) = p ( x i ) ∑ i = 1 n 1 p ( x
python数据分析-matplotlib折线图知识总结01
python绘图库matplotlib的知识总结一.matplotlib是什么二.matplotlib的安装与导入三.matplotlib的常用函数四.matplotlib绘制折线图的使用方法1.设置图形大小2. 利用数据绘图3.调整x,y轴的刻度,旋转角度,显示描述信息,绘制网格,添加图例4.图形的样式5.绘制多条折线6.显示绘制的…
Python数据分析案例25——海上风力发电预测（多变量循环神经网络）
本案例适合理工科。
承接上一篇的硬核案例：Python数据分析案例24——基于深度学习的锂电池寿命预测
本次案例类似，只是进一步拓展了时间序列预测到多变量的情况。上一个案例的时间序列都是只有电池容量一个特征变量，现在采用多个变量进行神…
坚鹏：《银行业数字化转型指导意见》政策解读及银行数字化转型
中国银保监会《关于银行业保险业数字化转型的指导意见》政策解读及银行数字化转型课程背景：
很多银行存在以下问题：
不知道如何准确理解中国银保监会《关于银行业保险业数字化转型的指导意见》相关政策
不清楚中国银保监会《关于银行业保险业数字化转型…
数据的特征分析及房价增幅与M2增幅的相关性案例（axis=1为横向，axis=0为纵向）
数据的排序
.sort_index()方法在指定轴上根据索引进行排序，默认升序
.sort_index(axis0, ascendingTrue）
axis0 表示的是纵轴 ascending表示是否为递增排序，默认为true axis为1 这个by是根据你哪个轴的索引进行排序 NaN统一放到排序末尾 …
报错解决：Python ‘NoneType‘ object is not subscriptable ， 获取到的数据为None，需要保留数据
人生苦短，我用python
爬取某DB电影数据的时候，
在获取内容的时候出现
NoneType object is not subscriptablePython 资料报错交流:点击此处跳转文末名片获取 获取数据的部分代码是： writer_avatars (writers_list[wi][avatars][small]) …
倒计时组件：可视化如何自定义目标时间 / 数字倒数
倒计时组件支持通过自定义目标时间或倒数数字，在报表和大屏中展示时间倒数和数字倒数。
下面以Sugar BI为例，为大家展示
倒计时展示模式
倒计时组件提供「时间倒数」和「数字倒数」两种展示模式，效果如下： 默认为「时间倒数」模…
Python第二章---列表简介
1、列表是什么？
在Python中用 [ ] 表示列表，用 逗号 , 分隔元素
每个元素用对应类型的方法标注，如字符串类型用单引号‘ ’标注 形如
list1 [a,b,c]
print(list1);
输出时，会打印全部内容，包括符号 访问列表元…
Python数据分析教程08：pandas进行外卖订单数据分析
目录
功能点1：将订单以天为单位输出为单个文件
功能点2：提取数据表某列中，不是某个给定值的数据
功能点3：统计一个订单从下单到完成配送时刻之间的时间差
功能点4：绘制订单的持续时间曲线
功能点5：提取…
Python结合OpenAI的GPT-3 API做数据分析
本文使用了OpenAI的GPT-3 API来生成数据分析报告。GPT-3是一种基于深度学习的自然语言处理模型，可以生成高质量的自然语言文本。在本示例中，我使用GPT-3来分析给定的CSV文件中的数据，并生成相应的报告。
以下是完整的Python代码示例…
常见的九种大数据分析模型
常见的9种大数据分析模型分别为： 事件分析、 属性分析、 渠道分析、 Session分析、 留存分析、 归因分析、 漏斗分析、 路径分析、 分布分析
1、【事件分析】 事件分析，是指用户在 APP、网站等应用上发生的行为，即何人，何时&…
python列表list元素降序排列两种方法
python列表list元素降序排列的两种方法
sort()方法
python列表内置了一个sort()方法，可以用于为元素列表进行排序，当将默认参数reverse设置为True，sort()方法将为列表进行降序的排序，语法如下： listObj.sort(reverse…
优思学院 | 质量工程师的职责有哪些？
质量工程师，是一位肩负着质量管理、质量控制和质量改进使命的职业人员。他们身负使命，不断探究、发现、改进，为企业打造出更加卓越、可靠的产品和服务。
在大多数企业中，质量工程师是一个非常重要的职位，他们的职责在…
Hex Tech，一个带编程协同能力的 BI 平台的“危”与“机”
数据从业者常在多种工具之间跳来跳去，这种碎片化导致了协作、共享和生产力方面的问题。 企业云数据量的增加以及数据转换、模型构建和可视化工具的出现，推动了现代数据堆栈的崛起。大部分公司都在加大对数据团队的投入，以适应不断变化的需求…
NCL数据分析与处理
详情点击链接：NCL数据分析与处理
一，NCL简介及安装 NCL简介；Windows及Linux操作系统下的NCL安装步骤；NCL运行方式二，基本语法 变量；运算符；数组；元数据；数组的截取&…
python：GDAL库教程
卫星遥感数据是地球科学、环境监测、农业生产等领域的重要数据源，而Python中的GDAL库是一款常用的开源GIS库，能够处理各种常见的遥感数据格式，包括Tiff、HDF、NetCDF等。
在本文将介绍如何使用Python中的GDAL库读取和保存遥感数据。对于读取遥感数据，我们通过gdal.Open()函…
教育大数据总体解决方案（7）
考勤查询 创客教室为体现学校创新教育的成果，丰富学校创新实践活动，加强创新课程普及教育，把机器人创新教育作为学校的教育特色来体现，使学生通过理论与实践相结合的方法，进一步学习掌握机械、电子结构、信息技术、人工…
Pandas-如何对指定某列的NaN值进行替换或填充
前言 本文是该专栏的第31篇，后面会持续分享python数据分析的干货知识，记得关注。
笔者在本专栏之前有单独详细介绍过，使用Numpy对数组元素进行替换的方法，感兴趣的同学，可翻阅查看“Numpy-如何对数组的元素进行替换”。
而本文来单独介绍pandas对指定列的NaN值进行操作的…
同步辐射散射SAXS数据处理的流程与步骤
同步辐射散射SAXS是一种用于研究物质结构的实验技术，该技术可以获得物质的小角散射模式。这些模式可以提供关于物质内部结构的信息，包括粒子形态、尺寸和分布。SAXS技术在许多领域得到了广泛应用，如生物化学、材料科学、聚合物科学等。在SAXS…
Python中的三器一闭(详细版)
python中的三器一闭迭代器什么是迭代什么是可迭代对象判断数据是否可迭代什么是迭代器迭代器的本质使用迭代器取数据自定义迭代器生成器创建生产器的方法关键字yieldnext和send装饰器装饰器的功能定义装饰器闭包什么是闭包函数、匿名函数、闭包、对象 当做实参时的区别迭代器
…
数组a与数组b作内积：即a和b所有对应位置两元素相乘 将所有的相乘结果(积)求和 numpy.inner(a,b)
【小白从小学Python、C、Java】 【计算机等级考试500强双证书】 【Python-数据分析】 数组a与数组b作内积： 即a和b所有对应位置两元素相乘 将所有的相乘结果(积)求和 numpy.inner(a,b)
[太阳]选择题 请问关于以下代码的输出结果是？ import numpy as np …
盘点国产BI软件中，那些电商数据分析功能
老牌国产BI软件基本都是适用于所有行业，会为各行各业的提供智能数据可视化分析功能板块，那么，老牌国产BI软件之一的奥威BI软件又为电商数据分析提供了哪些功能板块，效果怎样？
1、提供标准化跨境电商分析方案
这套跨境…
Python数据分析学习路径合辑
Jupyter Notebook的使用
Anaconda：XGBoost的安装_anaconda 安装xgboost_紫昂张的博客-CSDN博客
设置Jupyter文档的标题_jupyter怎么设置标题_紫昂张的博客-CSDN博客 Python清洗数据
Python数据分析：用rename()修改字段名_python修改字段名_紫昂张的博…
论性价比，这家奥威BI大数据分析平台很能打
论性价比，国产BI大数据分析平台几乎是毫无悬念地胜过大多数外国BI，而在国产BI大数据分析平台里，奥威BI的性价比也是出了名地高。在同等价位的BI大数据分析平台中，奥威BI大数据分析平台不仅能提供智能高效的数据分析功能、花样繁多…
智能化电力运维：数字孪生的崭露头角
随着科技的不断发展，数字孪生技术在各个领域的应用愈发广泛，尤其在电力运维领域，它正发挥着革命性的作用。数字孪生是一种虚拟仿真技术，通过实时模拟真实世界的物理对象或过程，可以从多方面为电力运维带来改变…
高效数据湖构建与数据仓库融合：大规模数据架构最佳实践
文章目录 数据湖和数据仓库：两大不同理念数据湖数据仓库 数据湖与数据仓库的融合统一数据目录数据清洗和转换数据安全和权限控制数据分析和可视化 数据湖与数据仓库融合的优势未来趋势云原生数据湖自动化数据处理边缘计算与数据湖融合 结论 🎉欢迎来到云…
【PowerQuery】Excel 的自动刷新功能-最低一分钟刷新
在Excel集成了PowerQuery之后，它提供了数据的手动刷新功能之外，也提供了数据的自动刷新功能。需要注意的是，PowerQuery提供的自动刷新功能是针对连接的，也就是说在PowerQuery自动刷新功能不是全局刷新功能，而是针对连接本身提供。接下来我们来看一下如何实现PowerQuery连接…
CLIP（Contrastive Language-Image Pretraining）
概念
是一个由 OpenAI 开发的深度学习模型，它融合了文本和图像的信息，以便同时理解和生成文本和图像。CLIP 可以执行各种任务，包括图像分类、文本描述生成、图像生成以文本描述等。
多模态 CLIP 的核心思想是使用对比学习来训练一个模型&am…
淘宝商品描述详细信息API接口
淘宝商品描述详细信息API接口是一个用于获取淘宝商品详细信息的API，通过它可以获取到商品的标题、价格、图片等信息。通过淘宝商品描述详细信息API接口，开发者可以方便地获取宝贝的相关信息，并将它们用于各种应用场景中。淘宝商品描述详细信息…
数据分析之面试题目汇总（万字解读）
1、解释数据清洗的过程及常见的清洗方法。 数据清洗是指在数据分析过程中对数据进行检查、处理和纠正的过程；是数据预处理的一步，用于处理数据集中的无效、错误、缺失或冗余数据 常见的清洗方法包括：处理缺失值、处理异常值、去除重复值、统一…
利用gpt进行GMV变化数据分析
prompt: 现在已知男性GMV从800降至600，女性GMV从1200至1300，请计算男女GMV变动对整体GMV变动的贡献度 output:
在这个问题中，我们要计算男性和女性的GMV（总销售额）变动对整体GMV变动的贡献度。首先，计算男…
外贸电商商品如何做好上架工作？
跨境电商业务的蓬勃发展已经成为互联网行业的热点话题之一。不论是将海外货源卖回国内，还是通过国内货源销往海外，跨境电商平台都面临着如何实现商品上架的关键问题。在这篇文章中，将探讨成功上架商品的关键步骤。 一、准备好接口。
跨境电商…
2023年 python结合excel实现快速画图(零基础快速入门)
目录
1.适用人群
2.环境配置
3.基本用法
3.1 数据读取 3.2 数据分析
3.3 数据组装
3.4 制表：
4.快速提升
5.效果展示 1.适用人群
电脑有python环境，会python基本使用，需要短时间内完成大量画图任务的数据分析的人群。（有…
【山河送书第十二期】：《巧用ChatGPT快速搞定数据分析》参与活动，送书两本！！
【山河送书第十二期】：《巧用ChatGPT快速搞定数据分析》参与活动，送书两本！！ 关键亮点内容简介作者简介购买链接参与方式往期赠书回顾 关键亮点 用ChatGPT颠覆数据分析，1分钟生成数据分析结果！ 30多个精心挑…
2023年8月京东户外鞋服市场（京东数据运营）
当前，户外活动的热潮使得户外鞋服市场备受青睐，带动了整个市场的高增长。
根据鲸参谋电商数据分析平台的相关数据显示，今年8月份，京东平台户外鞋服市场的销量为46万，同比增长约25%；销售额为9500万…
Python 爬虫实战之爬淘宝商品并做数据分析
前言
是这样的，之前接了一个金主的单子，他想在淘宝开个小鱼零食的网店，想对目前这个市场上的商品做一些分析，本来手动去做统计和分析也是可以的，这些信息都是对外展示的，只是手动比较麻烦，所以…
干货：数据仓库基础知识（全）
1、什么是数据仓库？ 权威定义：数据仓库是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合，用于支持管理决策。
1）数据仓库是用于支持决策、面向分析型数据处理；
2）对多个异构的数据源有效集…
机器学习项目实战-能源利用率 Part-5（模型解释）
博主前期相关的博客可见下： 机器学习项目实战-能源利用率 Part-1（数据清洗） 机器学习项目实战-能源利用率 Part-2（探索性数据分析） 机器学习项目实战-能源利用率 Part-3（特征工程与特征筛选） 机…
2023年NOC大赛创客智慧编程赛项Python 复赛模拟题（一）
题目来自：NOC大赛创客智慧编程赛项Python 复赛模拟题（一）
第一题：
编写一个彩票游戏：随机生成一个不重复的五位数作为彩票号，游戏提示用户输入一个五位整数，然后根据下面的规则判断用户是否能赢得奖金，最后要求输出彩票号和奖金。
(1)若用户输入的数字和彩票的数字完…
奥威BI数据可视化大屏分享|多场景、多风格
数据可视化大屏一般应用在品牌推广展示、商务交流、数据分析决策、数据监控等场景，由此催生出各种不同风格的BI数据可视化大屏设计。下面就从奥威BI软件的BI报表模板中截取几个有着不同风格，起着不同作用的BI数据可视化大屏报表，一起来了解一…
采集工具助力企业拓客，让你的业务快速扩张
随着互联网的快速发展，越来越多的企业开始将业务拓展到线上，以便更好地接触到更多的潜在客户，打开更多的销售渠道。然而，这并不是一件容易的事情，需要企业具备一定的市场洞察力和业务拓展能力。而在这个过程中…
气象、生态、遥感、水文、洪水、语言、地质、双碳等领域模型应用教程
提供了丰富的地学实践应用的教学，涵盖各个方面，并提供代码和实例。
农林生态、遥感类视频课程推荐（点击文字查看课程内容）1 无人机遥感在农林信息提取中的实现方法与 GIS 融合制图精品视频课程 2 无人机生态环境监测、图像处理与…
使用R语言进行方差分析（ANOVA、ANCOVA）
方差分析1. ANOVA模型拟合1.1 aov()函数1.2 表达式中各项的顺序2. 单因素方差分析（One-Way ANOVA）2.1 绘制各组均值及其置信区间的图形2.2 多重比较-TukeyHSD2.2.1 成对比较图2.2.2 多重均值比较-TukeyHSD（更易理解）2.3 评估检验的…
Pandas 简单入门教程
简单介绍pandas入门Pandas 简单入门教程什么是Pandas？安装Pandas导入Pandas数据结构创建Series创建DataFrame基本操作查看DataFrame中的数据查看DataFrame中的列名查看DataFrame中的索引查看DataFrame中的统计信息对DataFrame进行转置操作对DataFrame进行排序操作对…
十大常见行业 BI 可视化应用
智能商业指的是利用互联网、物联网、自动化、人工智能等新一代信息技术，在一定程度上对市场判断、发展决策、业务复盘、业务预测等商业行为实现智能化、自动化，整个过程基本不需要人类参与。
很多企业部署了商业智能BI系统，这是一种包含了数…
Pandas入门实践3 -数据可视化
人类大脑擅长于在数据的视觉表现中寻找模式;因此在这一节中，我们将学习如何使用pandas沿着Matplotlib和Seaborn库来可视化数据，以获得更多的特性。我们将创建各种可视化，帮助我们更好地理解数据。
使用pandas绘图
我们可以使用plot()方法创…
数据分析----IQR（Interquartile Range）四分位距的理解与应用及Python实现
【原文链接】数据分析----IQR（Interquartile Range）四分位距的理解与应用及Python实现
一、IQR（Interquartile Range）四分位距的含义
1.1 IQR的官方定义
IQR 是用于标记离群值的另一种稳健方法。用于检测离群值的 IQRÿ…
Python机器学习、深度学习技术提升气象、海洋、水文领域应用
Python是功能强大、免费、开源，实现面向对象的编程语言，能够在不同操作系统和平台使用，简洁的语法和解释性语言使其成为理想的脚本语言。除了标准库，还有丰富的第三方库，Python在数据处理、科学计算、数学建模、数据挖…
pyecharts从入门到精通-地图专题GEO-世界地图和中国城市地图
文章目录 参考安装与查看pyecharts地图实现-Geo完成Geo地理坐标系实现。案例演示拓展-pyecharts中GEO源码 参考
官方文档:https://pyecharts.org/#/zh-cn/quickstart Python使用Pyecharts画Geo地图，如何显示具体地点名称 pyecharts世界地图用：国家中英文…
PyEcharts数据可视化（1）——配置项
PyEcharts
学习连接
一、查看pyecharts版本
import pyecharts
print(pyecharts.__version__)输出：1.9.0
二、绘制第一个图表
from pyecharts.charts import Bar
bar Bar() # 创建柱形图对象
bar.add_xaxis(["衬衫","羊毛衫","雪纺衫…
自助式数据分析平台：jvs数据智仓-统计报表的使用条件及界面介绍
统计报表界面介绍 统计报表是指利用表格和报表等形式，将数据以清晰的结构和布局的方式呈现出来，以便用户进行数据分析和决策制定的一种BI统计方法。表格式的BI统计通常采用交叉表格、分组表、报表等形式，对数据进行整合、分析和展示ÿ…
R语言 | 处理矩阵与更高维数据
目录
一、矩阵
1.1 建立矩阵
1.2 认识矩阵的属性
1.3 将向量组成矩阵
二、取得矩阵元素的值
2.1 矩阵元素的取得
2.2 使用负索引取得矩阵元素 三、修改矩阵的元素值 四、降低矩阵的维度 五、矩阵的行名和列名
5.1 取得和修改矩阵对象的行名和列名
5.2 dimnames()函数…
【第十一届泰迪杯B题】产品订单的数据分析与需求预测
文章目录 一、问题背景二、数据说明三、需要解决的问题3.1 探索性数据分析3.2 模型建立与求解四、数据集下载4.1 示例数据4.2 训练全部数据4.3 最后测试全部数据五、比赛时间点说明一、问题背景
近年来企业外部环境越来越不确定，复杂多变的外部环境，让企业供应链面临较多难题…
python爬虫之pandas操作csv、excel文件
在Python的数据科学和爬虫开发中，pandas是一个非常常用的库，因为它提供了各种操作数据的函数和方法。其中，pandas可以非常方便地处理CSV和Excel文件。
CSV文件操作
CSV（Comma Separated Values）是文本文件格式之一&a…
2023年第二十届五一数学建模竞赛C题：“双碳”目标下低碳建筑研究-思路详解与代码答案
该题对于模型的考察难度较低，难度在于数据的搜集以及选取与处理。
这里推荐数据查询的网站：中国碳核算数据库（CEADs）
https://www.ceads.net.cn/
国家数据
国家数据data.stats.gov.cn/easyquery.htm?cnC01
以及各省市《统…
数据分析如何入门？这4类 Excel 函数助你从小白到大神
Excel是我们从事数据分析的朋友们，会经常用到的最基本的工具。而Excel函数又是Excel中最为重要的、最为常用的知识点，我们必须要掌握。
基于此，今天就分类为大家讲述最为常用的Excel函数。
逻辑函数
1、and
2、or
3、if
当使用了if(…
成为数据分析师，需要具备哪些技能？
随着互联网的发展，数据分析师的特点越来越明显，对数据分析师综合素质的要求也较高。
1、较强的数据挖掘、信息整理、和逻辑分析能力
数据分析，也是数据分析师的一个方向。
制作日常性的经营报表，对公司或者行业KPI指标进行拆解…
数据分类分级 数据识别-实现部分敏感数据识别
目录 敏感数据识别敏感字段敏感字段识别方式敏感数据识别规则 代码示例正则表达式身份证号手机号座机号邮箱地址Ipv4地址Ipv6地址MAC地址中国新旧版、英、美、日、韩、加拿大护照性别民族省份医师资格证书医师执业证书永久居住证港澳通行证大陆通行证军官证关键字地址算法
【Python入门】Python的判断语句（if语句的基本格式）
前言 📕作者简介：热爱跑步的恒川，致力于C/C、Java、Python等多编程语言，热爱跑步，喜爱音乐的一位博主。 📗本文收录于Python零基础入门系列，本专栏主要内容为Python基础语法、判断、循环语句、函…
数据分析01——Anaconda安装/Anaconda中的pip换源/jupyter配置
0、前言：
数据分析三大模块知识：numpy（数组计算）、pandas（基于numpy开发，用于数据清洗和数据分析）、matplotlib（实现数据可视化） 1、Anaconda安装：
安装Ana…
生态系统服务（InVEST模型应用）
白老师（研究员）：长期从事生态系统结构-格局-过程-功能-服务的变化与响应关系等研究工作；重点围绕生物多样性、生态系统服务与价值等，构建生物地球化学模型和评价指标体系，为城市、区域和自然保护区的可持续…
国产自研BI系统，更懂中国企业数据分析需求
国产自研BI系统是指由中国企业自主研发的商业智能（BI）系统，这类系统更加了解中国企业的数据分析需求，能够提供更加贴合实际的解决方案。比如说奥威BI系统就是典型的国产自研，不仅了解中国企业的数据分析需求࿰…
指标收集与分析：打造可观测性平台的关键技术【文末送书】
文章目录 写在前面兼容全域信号量所谓全域信号量有哪些？统一采集和上传工具统一的存储后台自由探索和综合使用数据好书推荐 写作末尾 写在前面
随着可观测性理念的深入人心，可观测性平台已经开始进入了落地阶段，它的先进性已经毋庸置疑&…
大模型chatgpt4分析功能初探
大模型chatgpt4分析功能初探
目录
1、探测目的
2、目标变量分析
3、特征缺失率处理
4、特征描述性分析
5、异常值分析
6、相关性分析
7、高阶特征挖掘
1、探测目的
1、分析chat4的数据分析能力，提高部门人效
2、给数据挖掘提供思路
3、原始数据…
2023华为杯研究生数学建模D题区域双碳目标与路径规划研究思路代码详解
最新更新：2023华为杯研赛D题已更新第1问代码，第1问代码关键点分析：题目没有给出能源供应部门碳排放量，需要计算能源供应部门碳排放量(重要！！！)。
后续详细思路和代码更新地址：2023年…
Pandas数据处理分析系列7-连接合并查询
Pandas 查询
Pandas 连接查询-merge
在实际数据分析过程中，有时候需要把不同的工作表，按照某些公共的列，将多个工作表连接起来，组合成一份新工作表，类似于Excel的Vlooup函数，或数据库的连接关系。Pandas 也提供了连接关系函数merge(),其将两个DataFrame的行按照指定的列…
从淘宝数据分析产品需求（商品销量总销量精准月销）
淘宝数据分析总体来说可以分为商品分析、客户分析、地区分析、时间分析四大维度(参考数据雷达的分析思路)。在这里我重点说商品分析。
在淘宝上开店的竞争还是非常激烈的，随便拿出一个单品就有很多竞品存在，所以做起来还是很难的，而想要在众…
做BI智能数据分析，奥威BI系统是专业的
威BI系统是一个全方位智能化、可视化的企业数据分析工具，注重满足企业的实际需求，提供贴合实际的解决方案，旨在帮助企业更好地利用数据，以实现商业价值。
注重企业数据的收集、整合和管理
对于企业来说，数据的来源和…
基金市场的冷热传递什么信号？
摘要及声明
1：本文主要利用实际数据进行检验，从定量角度分析基金发行情况与股票市场之间的关系；
2：本文主要为理念的讲解，模型也是笔者自建，文中假设与观点是基于笔者对模型及数据的一孔之见，…
Pandas数据分析系列8-数据分组与聚合
Pandas 数据分组 在处理数据时，经常会需要对某一列或多列进行分组，分组后再对数据进行计算累加、最大值、最小值等。类似于Excel里的分类汇总，
在Pandas中，我们可以使用groupby 来完成这系列的分组统计。
语法结构:
dataframe.groupby(by=None, axis=0, level=None, …
解读GIS软件：从ArcGIS到山海鲸可视化的全方位介绍
在现代社会，地理信息系统（GIS）的应用已经渗透到了各个领域，为我们提供了丰富的地理数据分析和可视化工具。下面介绍几款常见的GIS工具软件，一起来了解它们的特点和优势。 1. ArcGIS: ArcGIS由Esri公司开发，…
数据可视化工具中的显眼包：奥威BI自带方案上阵
根据经验来看，BI数据可视化分析项目是由BI数据可视化工具和数据分析方案两大部分共同组成，且大多数时候方案都需从零开始，反复调整，会耗费大量时间精力成本。而奥威BI数据可视化工具别具匠心，将17年经验凝聚成标准化、…
机器学习和数据挖掘02-Gaussian Naive Bayes
概念
贝叶斯定理： 贝叶斯定理是概率中的基本定理，描述了如何根据更多证据或信息更新假设的概率。在分类的上下文中，它用于计算给定特征集的类别的后验概率。
特征独立性假设： 高斯朴素贝叶斯中的“朴素”假设是，给定…
ChatGPT 总结数据分析的所有知识点
ChatGPT功能非常多，特别是对某个行业，某个方向，某个技术进行总结那是相当专业的。
如下图。 直接用一个指令便总结出来数据分析当中的所有知识点内容。
AIGC ChatGPT ，BI商业智能， 可视化Tableau, PowerBI, FineReport， 数据库Mysql Oracle， Office， Python ，ETL Ex…
《Python数据分析入门学习》- 3、进阶数据预处理
《Python数据分析入门学习》- 3、进阶数据预处理 目录 《Python数据分析入门学习》- 3、进阶数据预处理1 学习目标2 学习内容3 代码应用下篇预告更多内容 本文是《Python数据分析入门学习》系列的第3篇文章，分别有以下几个部分组成：学习的目标和内容、所…
自助式数据分析平台：JVS智能BI功能介绍（一）数据源
一、数据源配置
数据源概述
数据源是JVS-智能BI支持多种数据形态的基础，核心的目标是将不同的数据来源通过统一接入，实现将不同的数据实现统一的数据加工、数据应用。目前JVS-智能BI主要支持3种形态的数据：数据库、API、离线文件。 界面介…
机器学习和数据挖掘04-PowerTransformer与 MinMaxScaler
概念 PowerTransformer（幂变换器）
PowerTransformer 是用于对数据进行幂变换（也称为Box-Cox变换）的预处理工具。幂变换可以使数据更接近正态分布，这有助于某些机器学习算法的性能提升。它支持两种常用的幂变换&#x…
洞察商机，驱动创新：智能数据分析引领企业发展
“五度易链”产业大数据解决方案由产业经济、智慧招商、企业服务、数据服务四大应用解决方案组成，囊括了产业经济监测、产业诊断分析、企业监测预警、企业综合评估、大数据精准招商、招商智能管理、企业管理、企业培育、企业市场服务、企业金融服务、产业数据开放服…
genome comparison commend 2 MCMCtree
仅本人练习使用！！后续会逐渐修改！！ mcmctree估算物种分歧时间 - 简书 https://www.cnblogs.com/bio-mary/p/12818888.html 估算系统树分歧时间 —— paml.mcmctree,r8s | 生信技工 http://www.chenlianfu.com/?p2948 4. 使用PAM…
Python 案例实训教学，支持“教师-学生”双视角切换｜ModelWhale 版本更新
学年伊始、辞旧迎新，金秋九月，ModelWhale 迎来新一轮的版本更新，持续优化你的使用体验。
本次更新中，ModelWhale 主要进行了以下功能迭代：
• 新增 “教师-学生”双视角切换（团队版✓）
• 新…
应急三维电子沙盘数字孪生系统
一、简介应急三维电子沙盘数字孪生系统是一种基于虚拟现实技术和数字孪生技术的应急管理工具。它通过将真实世界的地理环境与虚拟世界的模拟环境相结合，实现了对应急场景的模拟、分析和决策支持。该系统主要由三维电子沙盘和数字孪生模型两部分组成。三维电子沙盘是…
Python通过Flask+pyecharts对房地产数据实现数据分析结果Web可视化（二）
一、背景 在Python通过pyecharts对爬虫房地产数据进行数据可视化分析（一）基础上添加Flask框架实现web可视化功能，把生成的所有图表生成一份完整的数据分析报告，这样就可以方便直接在网页上看到整体的数据分析可视化结果。 二、步骤…
Spark SQL案例【电商购买数据分析】
数据说明 Spark 数据分析 （Scala）
import org.apache.spark.rdd.RDD
import org.apache.spark.sql.{DataFrame, SparkSession}
import org.apache.spark.{SparkConf, SparkContext}import java.io.{File, PrintWriter}object Taobao {case class Info(u…
数据分析技能点-独立性检验拟合优度检验
在这个数据驱动的时代，数据分析已经成为了一个不可或缺的工具，无论是在商业决策、医疗研究还是日常生活中。然而数据分析并不仅仅是一堆数字和图表；它是一个需要严谨的科学方法和逻辑推理的过程。
本文将重点介绍两种广泛应用于数据分析的统计检验方法：独立性检验和拟合优…
使用Python进行App用户细分
App用户细分是根据用户与App的互动方式对用户进行分组的任务。它有助于找到保留用户，找到营销活动的用户群，并解决许多其他需要基于相似特征搜索用户的业务问题。这篇文章中，将带你完成使用Python进行机器学习的App用户细分任务。
App用户细…
Python3数据科学包系列(一):数据分析实战
一: 数据分析高级语法：序列(Series) # -*- coding:utf-8 -*-from pandas import Seriesprint(-------------------------------------序列Series定义与取值-------------------------------------------)
print("""Series序列可以省略,此时索引号默…
【pandas技巧】group by+agg+transform函数
目录
1. group by单个字段单个聚合
2. group by单个字段多个聚合
3. group by多个字段单个聚合
4. group by多个字段多个聚合
5. transform函数 studentsgradesexscoremoney0小狗小学部female958441小猫小学部male938362小鸭初中部male838543小兔小学部female909314小花小…
数据可视化工具在成绩分析中的作用与意义
数据可视化是将数据转化为图表、图形和可交互式界面的过程，它在成绩分析中扮演着重要的角色。通过将学生成绩数据以图形化方式展示，数据可视化工具可以帮助教育者更好地理解和解释学生的表现，发现隐藏在数据背后的模式和趋势。本文将详细介绍…
智能导览与实时监测：数字孪生助力景区管理
在当今旅游业快速发展的背景下，景区“人流管理”成为了一个越来越重要的问题。数字孪生技术由于其自身优势，可以为景区管理者提供更智能、更高效的管理方案。本文结合山海鲸可视化几个数字孪生案例带大家一起了解数字孪生在景区人流管理方面的应用&#…
Java电商平台 - API 接口设计之 token、timestamp、sign 具体架构与实现
一：token 简介
Token：访问令牌access token, 用于接口中, 用于标识接口调用者的身份、凭证，减少用户名和密码的传输次数。一般情况下客户端(接口调用方)需要先向服务器端申请一个接口调用的账号，服务器会给出一个appId和一个key,…
开发者职场“生存状态”大调研报告分析 - 第一版
听人劝、吃饱饭，奉劝各位小伙伴，不要订阅该文所属专栏。 作者：不渴望力量的哈士奇(哈哥)，十余年工作经验, 跨域学习者，从事过全栈研发、产品经理等工作，现任研发部门 CTO 。荣誉：2022年度博客之星Top4、博客专家认证、全栈领域优质创作者、新星计划导师，“星荐官共赢计…
Python数据挖掘项目实战——自动售货机销售数据分析
摘要：本案例将主要结合自动售货机的实际情况，对销售的历史数据进行处理，利用pyecharts库、Matplotlib库进行可视化分析，并对未来4周商品的销售额进行预测，从而为企业制定相应的自动售货机市场需求分析及销售建议提供参…
Apache Doris 在小鹅通的应用实践
峰会官网已上线，最新议程请关注：doris-summit.org.cn 点击报名 先到先得 本文导读： 随着网络直播规模的不断扩大，在线知识服务在直播行业中迎来了广阔的发展机遇。小鹅通作为一家以用户服务为核心的技术服务商，通过多平…
Apache Doris 2.0.2 版本正式发布！
峰会官网已上线，最新议程请关注：doris-summit.org.cn 点击报名 亲爱的社区小伙伴们，Apache Doris 2.0.2 版本已于 2023 年 10 月 6 日正式发布，该版本对多个功能进行了更新优化，旨在更好地满足用户的需求。有 92 位贡献…
Python数据分析实战-表连接-merge四种连接方式用法（附源码和实现效果）
实现功能
表连接-merge四种连接方式用法， 将两个pandas表根据一个或者多个键（列）值进行连接。
实现代码 import pandas as pddf1 pd.DataFrame({key: [a, b, d],data1: range(3)})
print(df1)df2 pd.DataFrame({key: [a, b, c, a, b],dat…
WMS仓储-亿发数字化工厂库存管理系统，提升中小企业仓储管理效率
中小企业竞争日益激烈的市场中，仓库管理的重要性不可低估。为了适应不断变化的业务规模和模式，中小企业对仓库管理提出了更高水平的智能化要求。数字化工厂库存管理系统，正是应运而生，助力企业加强仓库智能作业效率，并…
Python数据分析实战-实现T检验（附源码和实现效果）
实现功能
T 检验（Students t-test）是一种常用的统计方法，用于比较两个样本之间的均值是否存在显著差异。它可以应用于许多场景，其中一些常见的应用场景包括： A/B 测试：在市场营销和用户体验研究中…
【Python数据分析工具】
文章目录 概要整体架构流程技术名词解释 概要
数据分析是一种通过收集、处理、分析和解释大量数据，以发现有价值信息、洞察趋势、制定决策并解决问题的过程。在现代科技和互联网的推动下，数据分析变得日益重要。它不仅仅是对数字和图表的简单解释&#…
零售数据分析师熬夜整理:人、货、场、供、财这样做
在零售数据分析中，人、货、场、供、财数据分析非常重要，它们分别是指人员、商品、场所、供应和财务，对这些要素进行数据分析，可以更好地了解市场需求、优化商品供应链、调整销售策略和提高盈利能力。零售数据量大、分析指标多且复…
通过商品ID查询京东商品详情数据，可以拿到商品标题，商品价格，商品库存，商品销量，商品sku数据等，京东API接口
要通过商品ID查询京东商品详情数据，可以按照以下步骤进行：
在京东开放平台注册开发者账号，并创建应用。在创建应用时，选择商品API权限。在您的应用中，找到获取商品详情数据的接口。京东开放平台提供了多个API接口来获…
Python 爬虫实战之爬拼多多商品并做数据分析
Python爬虫可以用来抓取拼多多商品数据，并对这些数据进行数据分析。以下是一个简单的示例，演示如何使用Python爬取拼多多商品数据并进行数据分析。
首先，需要使用Python的requests库和BeautifulSoup库来抓取拼多多商品页面。以下是一个简单的…
企业有了BI，为什么还需要以指标为核心的ABI平台？
#01
企业对BI期望越高
失望越大？
— BI（Business Intelligence，商业智能）历经多年发展，已经被中国企业所熟知。 随着信息化的发展，企业越发希望决策有理有据，而不是拍脑袋就决定。这样产生的…
检查两个数组在维度,形状以及元素值上是否均等价 numpy.array_equiv()
【小白从小学Python、C、Java】 【计算机等级考试500强双证书】 【Python-数据分析】 检查两个数组在维度,形状 以及元素值上是否均等价 numpy.array_equiv() [太阳]选择题 请问以下代码中执行语句输出结果依次是？ import numpy as np a np.array([1, 2]) b np.ar…
LAS Spark+云原生：数据分析全新解决方案
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 随着数据规模的迅速增长和数据处理需求的不断演进，云原生架构和湖仓分析成为了现代数据处理的重要趋势。在这个数字化时代，企业面临着海量数…
数据可视化工具 ，不会写 SQL 代码也能做数据分析
数据可视化工具可以帮助人们以直观、易于理解的方式展现和分析数据。这些工具使得即使不会写 SQL 代码的人也能进行数据分析，并从中获得有价值的信息和见解。
本文将详细介绍几种常用的数据可视化工具及其功能和优点。
1. Datainside:
Datainside是一款流行的数…
数据分析技能点-数据的种类
在日常生活中，数据无处不在。当你去超市购物时，你可能会注意到商品的价格、重量、口味等；当你在社交媒体上浏览时，你可能会注意到好友的点赞数、评论等。这些都是数据的一种形式，而了解这些数据的种类和特点有助于我们更好地理解和使用它们。
数据的基本分类
数据大致可…
数据分析技能点-统计量抽样分布
在我们日常生活和工作中，数据和统计无处不在。无论是关注天气预报，还是参与公司业绩的分析，统计量和抽样分布都是不可或缺的工具。但是这些专业术语可能会让一些没有统计背景的人感到困惑或排斥。本文旨在以通俗易懂的语言和生活中的实例，解释这些概念和它们的应用。
基础…
定义现代化实时数据仓库，SelectDB 全新产品形态全面发布
导读：9 月 25 日，2023 飞轮科技产品发布会在线上正式召开，本次产品发布会以 “新内核、新图景” 为主题，飞轮科技 CEO 马如悦全面解析了现代化数据仓库的演进趋势，宣布立足于多云之上的 SelectDB Cloud 云服务全面开放…
数据分析技能点-机器学习优化思想
优化思想，这个听起来极其专业和高端的词汇，其实它无处不在，悄无声息地影响着我们的生活和决策。从寻找最快的上班路线，到决定如何配置投资组合，优化思想都是一个不可或缺的元素。而在机器学习领域，优化思想更是扮演着至关重要的角色。 文章目录 优化的基础优化问题与实际…
178_技巧_Power BI 动态排名多项展示
178_技巧_Power BI 动态排名多项展示
一、背景
在 Power BI 中做排名矩阵时，我们经常遇到同一维度下，多项展示排名的问题。类似这样的排名矩阵，排名的名次不会太多，但是同一维度下会有多项同时展示排名，并且还要满足…
成为Smartbi合伙人，现金奖励可达15000元
2023年Smartbi推出合伙人计划即日起至2023年12月31日只要您成为思迈特软件合伙人推荐有效商机即有机会赢取上万元现金奖励商机奖励1000元，合同签约奖励可达15000元同时我们将为您提供全方位的支持和帮助实现共谋、共创、共赢！*点击https://www.smartbi.c…
什么是中国版软件能力成熟度之CSMM
当前，中国软件产业蓬勃发展，产业增速迅猛，发展韧性和潜力进一步凸显。由于我国长期缺乏相关的自主标准，20多年来国外标准在我国软件评估领域占据主导地位，不仅阻碍了我国自主产业发展，甚至通过评估等手段可…
迪赛智慧数——柱状图（象形标识图）：在选择另一半时，你更看重的是？
效果图 好看只排第六，第一确实众望所归！当代男女择偶标准出炉，一张图带你看清。
女性挑选另一半时，她们更看重伴侣收入高、职业体面、工作能力强、受教育程度高，还得和自己有共同话题。
男性择偶观和女性恰恰相反&am…
Kyligence Zen产品体验——一站式指标平台泰酷辣~
文章目录 一、前言二、为什么需要指标化平台三、什么是Kyligence Zen四、Kyligence Zen新特性五、Kyligence Zen注册篇六、Kyligence Zen体验篇七、Kyligence Zen实战篇7.1 导入数据7.2 创建指标7.3 指标分析 八、Kyligence Zen总结篇九、参考资料 一、前言
随着互联网和物联网…
接口访问统计 热点数据发现
之前忘了在哪里看到的，在这里记录一下 基于 nginxelk
https://www.cnblogs.com/wa1l-E/p/14495033.html
通过 logstash 收集 nginx 日志，分析后存储到 elasticsearch 中。最后通过 kibana 进行分析。 nginxkafka
https://zhuanlan.zhihu.com/p/428356…
chatgpt赋能python：Python不挂科，学会这些技能就足够
Python不挂科，学会这些技能就足够
Python已成为现代编程语言中最受欢迎的一种，它擅长处理数据、人工智能等复杂的软件开发任务。互联网时代的到来也让Python的使用场景更加广泛，从前后端开发到数据分析。无论是学习Python的初学者还是有一定…
快速入门Python语言：人生苦短，我用Python~~Python语言经验分享
⭐方向一：“你是如何学习/自学 Python 的？” 我通过自学的方式学习Python。我的自学方法具有良好的灵活性和自控力，在这个过程中，我注重打下坚实的基础，确保学习的深度与广度，以提高对Python语言和编程的认…
Python数据分析之Pandas核心使用进阶
文章目录 DateFrame 行级遍历的两种方法操作Pandas的index三种方法重新设置行index将某列设置为index将index 设置为列 如何理解Pandas的列自动对齐空值检查和填充对数据集DataFrame去重对DataFrame分组使用join连接两个DataFrame和四种join方法使用pivot_table 透视DateFrameP…
基于关联规则挖掘的商品交叉销售分析
基于关联规则挖掘的商品交叉销售分析 小P：我们最近考虑将一些相关的商品打包销售，以提高GMV，有没有好的方法啊 小H：参考经典的啤酒尿布案例，可以尝试通过关联规则挖掘相关信息 数据探索
# 导入库
import pandas as pd…
2022年长三角高校数学建模竞赛C题隧道的升级改造与设计解题全过程文档及程序
2022年长三角高校数学建模竞赛
C题 隧道的升级改造与设计
原题再现： 某地现存一旧式双洞隧道，现计划将该隧道在旧貌基础上升级改造。在升级改造前，需进行定标与设计。考虑到该隧道洞壁附着特殊涂料，无人机在洞内通信信号较差&am…
大数据分析平台：即需即用，告别“等一下”
数据分散在不同的业务系统中，整合清洗后才能用于数据分析，且由于IT不如业务那般清楚分析逻辑、需求等，很难及时响应新的分析需求，导致每次要数据、要报表时得到的回答都是“等一下”。那怎么办？那就用大数据分析平台&a…
如何将枯燥的大数据进行可视化处理？
在数字时代，大数据已经成为商业、科学、政府和日常生活中不可或缺的一部分。然而，大数据本身往往是枯燥的、难以理解的数字和文字，如果没有有效的方式将其可视化，就会错失其中的宝贵信息。以下是一些方法，可以将枯燥的…
京东数据报告：2023年8月京东手机行业品牌销售排行榜
鲸参谋监测的京东平台8月份手机市场销售数据已出炉！
根据鲸参谋电商数据分析平台的数据显示，8月份，京东平台手机的销售量为380万，环比下滑约7%。同比下滑约17%；销售总额为120亿，环比下滑约17%，…
nodejs+vue宁夏旅游景点客流量数据分析
然后通过引入混沌算法构建了旅游景点客流量预测的学习样本,最后引入数据挖掘技术对旅游景点客流量预测进行建模, 与粒子群算法优化BP神经网络的,支持向量机的旅游景点客流量预测模型的 目 录 摘 要 I ABSTRACT II 目 录 II 第1章 绪论 1 1.1背景及意义 1 1.2 国内外研究概况 1…
使用baostock获取上市公司情况
起因是有个不知道什么专业的同学问了我一题 cs:
import baostock as bs
import pandas as pd
import datetime
日线指标参数包括：date,code,open,high,low,close,preclose,volume,amount,adjustflag,turn,tradestatus,pctChg,peTTM,pbMRQ,psTTM,pcfNcfTTM,isST
周…
矩阵点乘multiply()函数和矩阵乘法dot()函数
【小白从小学Python、C、Java】 【计算机等考500强证书考研】 【Python-数据分析】 矩阵点乘multiply()函数 和矩阵乘法dot()函数 [太阳]选择题 使用multiply()和dot()函数,输出错误的是： import pandas as pd import numpy as np df1pd.DataFrame([[0,1],[2,3]])…
2023年Q3户外装备市场行业分析报告（京东数据分析）：同比增长7%，品牌化发展是核心
近年来，户外运动在我国不少地方蓬勃兴起，发展至今，户外运动早已不是聚焦专业领域的小众群体活动，现已发展成为当下热门的大众休闲活动，参与人群愈发广泛，而这股热潮也带动着相关产业的发展。 今年Q3&#x…
Numpy数值计算Numpy 进阶在线闯关_头歌实践教学平台
Numpy数值计算进阶 第1关 Numpy 广播第2关 Numpy 高级索引第3关 Numpy 迭代数组 第1关 Numpy 广播
任务描述 本关任务：给定两个不同形状的数组，求出他们的和。 编程要求 首先用 arange() 生成一个数组，然后用 reshape() 方法，将数…
Python数据分析：在职场中的竞争优势
前言
在职场中，技能的重要性是不言而喻的。越来越多的职位要求员工具备数据分析能力，而Python作为一种强大的数据分析工具，正在成为职场中的“利器”。然而，尽管Python数据分析提供了巨大的优势，许多人依然未能掌握这…
大数据之陌陌聊天数据分析案例
目录 目标需求
数据内容
基于Hive数仓实现需求开发
1.建库建表、加载数据
2.ETL数据清洗
3需求指标统计 目标需求
基于Hadoop和hive实现聊天数据统计分析，构建聊天数据分析报表
1.统计今日总消息量
2.统计今日每小时消息量，发送和接收用户数
3.…
基于LDA主题+协同过滤+矩阵分解算法的智能电影推荐系统——机器学习算法应用(含python、JavaScript工程源码)+MovieLens数据集（四）
目录 前言总体设计系统整体结构图系统流程图 运行环境模块实现1. 数据爬取及处理2. 模型训练及保存3. 接口实现4. 收集数据5. 界面设计 系统测试相关其它博客工程源代码下载其它资料下载 前言
前段时间，博主分享过关于一篇使用协同过滤算法进行智能电影推荐系统的博…
时间序列预测模型实战案例(七)(TPA-LSTM)结合TPA注意力机制的LSTM实现多元预测
论文地址->TPA-LSTM论文地址
项目地址-> TPA-LSTM时间序列预测实战案例 本文介绍
本文通过实战案例讲解TPA-LSTM实现多元时间序列预测，在本文中所提到的TPA和LSTM分别是注意力机制和深度学习模型,通过将其结合到一起实现时间序列的预测，本文利用…
不同性别人群的股骨颈骨密度随年龄的变化趋势
增龄是发生骨质疏松的危险因素。因此，中老年人需要积极防范骨质疏松，以免发生骨折等不良事件。 为了探究不同性别人群的股骨颈骨密度随年龄的变化趋势，首先创建一个df，变量有id（编号）、age（年龄…
京东数据分析：2023年9月京东笔记本电脑行业品牌销售排行榜
鲸参谋监测的京东平台9月份笔记本电脑市场销售数据已出炉！ 9月份，笔记本电脑市场整体销售下滑。鲸参谋数据显示，今年9月份，京东平台上笔记本电脑的销量将近59万，环比下滑约21%，同比下滑约40%；销…
alibaba店铺所有商品数据接口（alibaba.item_search_shop）
阿里巴巴店铺的所有商品数据接口（item_search_shop）可以获取到店铺内所有商品的信息，包括产品的ID、SKU信息、价格、库存、图片等。这些数据可以用于构建各种业务场景，例如供应链管理、电商平台的价格比较、竞品分析、实时库存查询…
“产业大数据”助推园区实现可持续发展！
产业园区在现代经济体系中扮演着重要角色，不仅是地方经济的重要支柱，更是企业发展的舞台。产业园区要想实现可持续的长远发展，不仅需要不断的招引优质企业入驻，更要时刻关注园内的企业，培育有潜力的企业，…
京东数据分析：2023年10月京东洗衣机行业品牌销售排行榜
鲸参谋监测的京东平台10月份洗衣机市场销售数据已出炉！ 10月份，洗衣机市场整体销售呈上升走势。鲸参谋数据显示，今年10月，京东平台洗衣机市场的销量为143万，环比增长约23%，同比增长约1%；销售额约…
使用数据分析，识别设备异常
设备健康监测系统在工业领域中扮演着至关重要的角色，它能够帮助企业及时发现设备异常，预防故障，提高设备使用寿命和生产效率。而异常诊断技术则是设备健康监测系统中的核心部分，能够实现对设备异常情况的准确判断。根据设备状态数…
2023年Q3乳品行业数据分析（乳品市场未来发展趋势）
随着人们生活水平的不断提高以及对健康生活的追求不断增强，牛奶作为优质蛋白和钙的补充品，市场需求逐年增加。 今年Q3，牛奶乳品市场仍呈增长趋势。根据鲸参谋电商数据分析平台的相关数据显示，2023年7月-9月，牛奶乳品市…
clang插件对llvm源码插桩，分析函数调用日志(2)--google镜像
tick_plot__compile.ipynb clang插件对llvm源码插桩，分析函数调用日志(1) 分析
进出、链、出
df进出df[ df[tickKind].isin( [FuncEnter,FuncReturn] ) ]#代码中，只有在函数进入时，计算了链条长度 并写磁盘
df入df[ df[tickKind].isin…
TypeError: ‘dict‘ object is not callable in Python
错误的初始化和输出方式：
my_dict []
print (my_dict(area))
正确的初始化和输出方式：
my_dict {}
print(my_dict[area])
使用Python调用API接口获取淘宝商品数据
一、引言
随着互联网的发展，电子商务已经成为了我们生活中不可或缺的一部分。淘宝作为中国最大的电子商务平台，其商品种类繁多，价格透明，购物方便，深受消费者的喜爱。然而，淘宝的商品数据量庞大࿰…
机器学习实战——《跟着迪哥学Python数据分析与机器学习实战》
跟着迪哥学Python数据分析与机器学习实战 一、基础部分二、信用卡欺诈检测实战 —— 监督学习2.1 下采样与过采样2.1.1 过采样数据生成策略SMOTE 2.2 逻辑回归2.3 分类结果混淆矩阵2.4 过采样实战2.5 实战总结2.6 版本依赖排错 三、知识加油站￥银行卡的分类 一、基础…
淘宝数据分析在商业活动的具体应用
商业活动过程中会产生很多方面的数据，这些数据所反映的是关于消费者和潜在的大型客户的信息，如果能够对这些数据进行深入的分析就会对于用户的行为掌握得更为精准，比如说在淘宝中运用数据分析就能够分析出当前的用户在淘宝时段和地域中的特点…
【Python数据挖掘】Python自动售货机销售数据分析与应用
python 01案例背景02分析目标03 分析过程04 数据预处理4.1. 清洗数据4.1.1 合并订单表并处理缺失值4.1.2 增加“市”属性4.1.3 处理订单表中的“商品详情”属性4.1.4 处理“总金额（元）”属性 4.2.属性选择4.3.属性规约 05 销售数据可视化分析5.1.销售额和…
迪赛智慧数——柱状图（基本柱状图）：购买雪糕考虑的因素
效果图 冰淇淋季节来袭，因其细腻凉爽的口感和浓郁的口味被广大消费者所钟爱，近年来已经从一款传统的解暑冷冻饮品转变为一种原料丰富、口味多元、追求健康、愉悦和高品质生活方式的休闲食品。据数据显示，82.2％女性、82.3%男性消费…
统计软件与数据分析Lesson16----pytorch基本知识及模型构建
统计软件与数据分析Lesson16----pytorch基本知识及模型构建 0.上节回顾0.1 一元线性回归数据生成数据处理初始数据可视化 0.2 梯度下降Gradient DescentStep 0: 随机初始化 Random InitializationStep 1: 计算模型预测值 Compute Models PredictionsStep 2: 计算损失 Compute t…
【SPSS】生存-寿命表分析详细操作教程（附案例实战）
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
数据分析笔记：基本概念，常用图表，报告大纲
1.数据分析
1.1定义
对数据进行分析。数据分析是为了提取有用信息和形成结论而对数据加以详细研究和概括总结的过程。在实际工作中，帮助管理者判断和决策。
1.2步骤
数据分析的基本步骤包括明确思路，制定计划、数据收集、数据处理、数据分析、数据显…
B/S与C/S数字孪生应用架构选型
B/S架构由浏览器（Browser）和服务器（Server）两部分组成，即将用户界面放在浏览器端，应用程序的核心逻辑放在服务器端，通过网络传输实现数据交互。B/S架构的数字孪生场景渲染，常见有以下…
国内版Office 365 E3到E1降级方案
目录
文章目录
前言
一、什么是Office 365 E3和E1？
二、为什么需要Office 365 E3到E1降级？
三、Office 365 E3到E1降级的操作步骤
四、Office 365 E3到E1降级的注意事项
总结 前言
本篇文章将会介绍国内版Office 365 E3到E1降级方案，…
FineReport自定义排序
FineReport是帆软的报表开发工具，报表开发者可以用低代码的形式，配置出报表。主要适用于较简单的填报场景（比如填写销售目标，维护项目映射关系等），用户可以在报表上填报数据，存储于数据库&#…
Python【数据分析第二阶段测试】
Python【数据分析第二阶段测试】
第一部分：SQL查询 数据库中有如下所示的表1（tb_user）和表2（tb_recharge），其中表2包含了2021年一季度的用户充值数据。 表1：tb_user。 user_iduser_name1张三2李…
chatgpt赋能python：Python操作表格的全面指南
Python操作表格的全面指南
表格是一种非常实用的数据展示方式，程序员在处理数据以及展示数据时也经常使用表格。Python提供了多个强大的库操作表格，本文将为你介绍一些常见的Python操作表格的方式——包括读取、写入、处理和操作。
读取表格
Python提…
Splunk Enterprise 9.0.5 (macOS, Linux, Windows) 发布 - 机器数据管理和分析
Splunk Enterprise 9.0.5 (macOS, Linux, Windows) - 机器数据管理和分析
请访问原文链接：https://sysin.org/blog/splunk-9/，查看最新版。原创作品，转载请保留出处。
作者主页：sysin.org 混合世界的数据平台
快速、大规模地从…
数据可视化系列指南之地图类图表大全
导语
随着数据在各行业中的应用越来越广泛，大家也逐渐认识到数据可视化在企业生产经营中的重要作用，在数据可视化过程中，图表是处理数据的重要组成部分，因为它们是一种将大量数据压缩为易于理解的格式的方法。数据可视化可以让受…
Python数据挖掘：自动售货机销售数据分析与应用
📕作者简介：热爱跑步的恒川，致力于C/C、Java、Python等多编程语言，热爱跑步，喜爱音乐的一位博主。 📗本文收录于恒川的日常汇报系列，大家有兴趣的可以看一看 📘相关专栏C语言初阶、C…
Seaborn数据可视化综合应用Basemap和Seaborn在线闯关_头歌实践教学平台
Seaborn数据可视化综合应用Basemap和Seaborn 第1关 Seaborn第2关 Seaborn图形介绍第3关 Basemap 第1关 Seaborn
任务描述 本关任务：编写一个绘制每个月销售总额的折线图。 编程要求 本关的编程任务是补全右侧上部代码编辑区内的相应代码，根据输入文件路…
数字化可能会用到哪些系统
数字化企业在实施数字化转型过程中，通常会使用多个系统来支持不同的业务需求和功能。以下是一些可能会用到的系统，并对其进行详细介绍：
1. 企业资源计划系统（ERP）：
企业资源计划系统是数字化企业的核心系…
做数据可视化，谨记三大要点
数据可视化报表就是“一图胜千言”的最佳例子。数据可视化，也就是将数据图形化、图表化，以良好的视觉效果呈现数据，达到发现、分析、预测、监控、决策等目的。要想做出一份优秀的数据可视化报表，那就要在做报表时谨记三大要点&…
京东平台销量销额数据查询：2023年9月京东空调行业品牌销售排行榜！
鲸参谋监测的京东平台9月份空调市场销售数据已出炉！ 鲸参谋数据显示，今年9月份，京东平台大家电品类——空调的整体销售呈现下滑。从数据来看，9月空调的月销量将近60万，环比下滑约59%，同比下滑约6%ÿ…
集团公司管控的三种模式：财务管控、运营管控、战略管
集团管控是集团公司通过对子公司采用层级的管理控制、资源的协调分配等策略和方式，使集团的组织架构和业务流程达到最佳运作效率的管理体系。 不同的集团管控模式决定了不同的财务管控方式。但不论采取何种管控模式，集团对财务的管理与控制都是其最为核心…
2018年亚太杯APMCM数学建模大赛A题老年人平衡能力的实时训练模型求解全过程文档及程序
2018年亚太杯APMCM数学建模大赛
A题 老年人平衡能力的实时训练模型
原题再现 跌倒在老年人中很常见。跌倒可能会导致老年人出现许多并发症，因为他们的康复能力通常较差，因此副作用可能会使人衰弱，从而加速身体衰竭。此外，对跌倒…
2019年亚太杯APMCM数学建模大赛B题区域经济活力及其影响因素的分析与决策求解全过程文档及程序
2019年亚太杯APMCM数学建模大赛
B题 区域经济活力及其影响因素的分析与决策
原题再现 区域（或城市或省级）经济活力是区域综合竞争力的重要组成部分。近年来，为了提高经济活力，一些地区推出了许多刺激经济活力的优惠政策…
当数据库遇上深度学习：AI DataLoader 助力因子管理模型训练全流程
深度学习模型有能力自动发现变量之间的关系，而这些关系通常是不可见的，这使得深度学习可以挖掘新的因子和规律，为量化投资策略提供更多可能性。在传统的量化策略开发流程中，通常会使用 Python 或第三方工具生成因子，并…
MIT-BIH-AF 数据集开发库
目录 1 介绍数据集2 本博客函数库代码地址以及介绍读取dat,qrc,atr文件，获得 ECG_rpeaks，ann_aux_note，ann_sample，ECG0寻找时间点函数----signal_time_sample寻找R_R峰信号以及其位置----find_R_R_peak寻找 nR 峰信号以及位置---…
数据分析实战 | 多元回归——广告收入数据分析
目录
一、数据及分析对象
二、目的及分析任务
三、方法及工具
四、数据读入
五、数据理解
六、数据准备
七、模型构建
八、模型预测
九、模型评价 一、数据及分析对象
CSV格式的数据文件——“Advertising.csv”
数据集链接：https://download.csdn.net/d…
尺度悖论：数据分析必须警惕的坑
I. 尺度悖论的概述
尺度悖论是指在某些系统或现象中，尺度的大小或范围会对其性质、行为或理解产生矛盾或困难的现象。尺度悖论常出现在自然科学、社会科学和哲学等领域中，引发了一系列有关尺度和尺度变化对系统行为的影响的研究。
II. 举3个简单的例子…
使用flink实现《实时数据分析》的案例 java版
目录 实时数据分析案例文档介绍环境数据源数据处理数据清洗数据转换数据聚合 数据输出总结 实时数据分析案例文档
介绍
本文档介绍了使用Java和Flink实现实时数据分析的案例。该案例使用Flink的流处理功能，从Kafka主题中读取数据，进行实时处理和分析&a…
chatgpt赋能python：Python开发BI，助力企业数据驱动决策
Python开发BI，助力企业数据驱动决策
随着企业数据规模的呈现爆炸式增长，传统的Excel等表格计算工具已经无法满足业务需求，因此，企业需要更加全面和强大的方法来进行数据分析和展示。此时，BI（全称Business …
chatgpt赋能python：Python中引入其他包的指南
Python中引入其他包的指南
Python是一种流行的编程语言，拥有丰富的开源软件包和库。许多Python程序将使用其他包来增强其功能。在本文中，我们将探讨如何在Python项目中使用和引入其他包。
什么是Python包和库？
Python包是一组可重复使用的…
模板学堂｜DataEase地图视图功能详解
DataEase开源数据可视化分析平台于2022年6月正式发布模板市场（https://dataease.io/templates/）。模板市场旨在为DataEase用户提供专业、美观、拿来即用的仪表板模板，方便用户根据自身的业务需求和使用场景选择对应的仪表板模板，并…
2023年Q1天猫电脑品类数据分析（含笔记本、游戏本、平板电脑）
目前，PC市场中正经历新旧产品的换代，在各行业消费复苏的背景下，PC市场的整体市场需求也有回暖的可能。结合鲸参谋平台上第一季度的销售数据，我们一起来看一看电脑市场当前的销售表现如何！ 笔记本电脑 尽管人们的消费需…
python基础语法第2章变量和数据类型之05变量
大家好，我是阿语，从今天开始每天更新8篇python教程从第一个基础语法开始每天更新一下基础内容，这些会分类出来，保持一天完整的python教程，有的人肯定会问 为什么最后才写爬虫了，阿语在这里声明一下…
python基础语法第2章变量和数据类型之08-转换数据类型
大家好，我是阿语，从今天开始每天更新8篇python教程从第一个基础语法开始每天更新一下基础内容，这些会分类出来，保持一天完整的python教程，有的人肯定会问 为什么最后才写爬虫了，阿语在这里声明一下…
python基础语法第2章变量和数据类型之07输入
大家好，我是阿语，从今天开始每天更新8篇python教程从第一个基础语法开始每天更新一下基础内容，这些会分类出来，保持一天完整的python教程，有的人肯定会问 为什么最后才写爬虫了，阿语在这里声明一下…
python基础语法第2章变量和数据类型之04注释
大家好，我是阿语，从今天开始每天更新8篇python教程从第一个基础语法开始每天更新一下基础内容，这些会分类出来，保持一天完整的python教程，有的人肯定会问 为什么最后才写爬虫了，阿语在这里声明一下…
Python中的数据分析库有哪些？
Python中的数据分析库非常丰富，常用的有以下几个： NumPy：提供基础的数值计算功能，包括数组处理、线性代数、傅里叶变换等。 Pandas：提供便捷的数据结构（Series、DataFrame等），方便数…
任务态相关的一些知识总结
静息态的数据处理现在都比较简单了，因为有了fmriprep和qsiprep流程工具，没有特别的难度。 而关于任务态，则有一些独特的处理方式，因为最近要做任务态的数据分析，所以学习一下。
先学习下R的4个重输出函数：…
关于数据仓库那点事，一文捋清
借助海量的数据，企业进行了深层次的数字化改革，把数据当成了企业发展的核心，但无效的数据即使规模再大，也对企业没有意义，所以数据质量也就愈发重要。
数据仓库
事实上，很多人在看到数据仓库的第一眼&…
Python数据分析02：科学计算库Numpy
文章目录 零、学习目标一、认识NumPy数组对象二、创建NumPy数组（一）采用array()函数创建数组（二）采用zeros()和ones()函数创建数组（三）采用empty()函数创建数组（四）采用arange()函数创建数组（五）注意事项三、ndarray对象的数据类型（一）查看数据类型1、查看数据类型…
python数据可视化玩转Matplotlib直方图、箱型图、密度图、正态分布、偏度和峰度
目录 1. 直方图、箱线图和密度图
1.1 直方图
1.2 箱线图
1.3 密度图
2. 正态分布
3. 偏度和峰度
结论 1. 直方图、箱线图和密度图
直方图、箱线图和密度图是数据分析中十分常用的图形。它们可以帮助我们更好地理解数据的分布情况，从而更好地进行数据分析和处…
数字化转型导师坚鹏：如何制定企业数字化转型年度培训规划
如何制定企业数字化转型年度培训规划
——以推动企业数字化转型战略落地为核心，实现知行果合一 课程背景：
很多企业都在开展企业数字化转型培训工作，目前存在以下问题急需解决：
缺少针对性的企业数字化转型年度培训规划
不清…
查找字符串出现的路径-自用
import os import sys,getopt import time import csv import pandas as pd tracer_pathsys.argv[1] t1 time.time() tracer_line [] content_path os.listdir(“tracer_path”) for i in content_path: tracer pd.read_csv(“tracer_path” i,“r”, encoding‘utf-8’, …
分析1996~2015年人口数据特征间的关系并分析1996~2015年人口数据各个特征的分布分散状况
python数据分析与应用
实训1 分析1996~2015年人口数据特征间的关系
并分析1996~2015年人口数据各个特征的分布分散状况
运行环境：jupyter notebook 数据：populations.npz 链接：https://pan.baidu.com/s/123wS4QmhXAHGMUK5K-9evA 提取码&am…
Python数据可视化库：使用Bokeh创建交互式图表
一、Bokeh 简介
Bokeh 是一个流行的 Python 数据可视化库，可以生成高质量的交互式图表，无论是简单的线图、散点图，还是复杂的多维面图、网络图，Bokeh 都能轻松处理。同时，它支持网页输出，使得图表可以轻易…
Kyligence Zen 一站式指标平台体验——“绝对实力”的指标分析和管理工具——入门体验评测
🦖欢迎观阅本本篇文章，我是Sam9029 文章目录 前言Kyligence Zen 是什么Kyligence Zen 能做什么Kyligence Zen 优势在何处 正文注册账号平台功能模块介绍指标图表新建指标指标模板 目标仪表盘数据设置 实际业务体验---使用官网数据范例使用流程归因分析指…
IT自动化和人工智能将在2021年走向何方？
随着IT自动化和人工智能技术的进步和发展，IT人员的工作方式发生了重大变化。今年发生的突如其来的新冠疫情，也迫使大多数组织的员工在家远程工作。 如果疫情持续蔓延到2021年，那么组织将会继续让员工远程工作，并采用多种工作方式混…
牛客网专项练习Pytnon分析库（八）
1.以下选项中哪些是数据离散程度的衡量指标（D）。
①极差 ②四分位差 ③方差 ④标准差 ⑤平均差 ⑥变异系数 ⑦众数
A.①②③④
B.①②③④⑤⑦
C.①③④⑤
D.①②③④⑤⑥
解析： 用来衡量数据离散程度的指标包括：极差、四分…
【Python数据分析】Python中axis的理解
axis用来为超过一维的数组定义属性。 理解时从数据变化的方向入手！
以二维数据为例，在二维数据中，1表示横轴，方向从左到右；0表示纵轴，方向从上到下从数轴的方向入手，理解数据变化，a…
Clickhouse 3分片2副本 集群搭建方法 附基本原理概念和详细搭建步骤 (单节点多实例部署方法)
Clickhouse 3分片2副本 集群搭建方法
Written By: Xinyao Tian 【原创文章 码字不易 转载请注明作者及出处】
概述
本文档描述了 Clickhouse 集群在三台物理主机上的 “3分片2副本” 的配置及搭建方法。
由于本搭建方案涉及 “1 台物理节点启动多个 Clickhouse 实例” 的情…
Live800：让每一次客户互动成为生意机会，营销型客服系统是趋势
经过高速增长的10年后，随着互联网红利的逐步消失，中国经济开始迈进存量时代，再加上疫情造成“内卷化”，企业将面对更多元的客户需求、更精细的运营挑战，如何找到可持续增长新动能成为首要解决的问题。
有业内人士表示…
Live800：为什么接待你的客服无法解决问题？
客户与客服的“爱恨情仇”三天三夜也说不完。客服作为最接近客户的工作岗位，每天都要面对形形色色的客户，因为这样那样的原因时常会发生一些让人啼笑皆非的对话，有时也会言辞激烈互相争执。
于是有人提出客服界的终极疑惑，为什么…
大数据学习中，有哪些数据吐槽，有没有困扰你的
01. 由于供职于成都科多大数据公司，做讲师的原因，会经常收到一些学员或朋友学习和工作中的困扰问题，有涉及数据转型入门的问题，有数据成长进阶的问题，也有实际业务数据的问题，当然，更有一些特殊…
数据分析全景图及修炼指南
数据分析全景图及修炼指南
数据分析在现代社会中有重要地位。掌握数据，就是掌握规律。当你了解了市场数据，对它进行分析，就可以得到市场规律。当你掌握了产品自身的数据，对它进行分析，就可以了解产品的用户来源、用户…
数据分析方法论（一）
数据分析方法论主要有两大块：1）统计分析方法论：描述统计、假设检验、相关分析、方差分析、回归分析、聚类分析、判别分析、主成分与因子分析、时间序列分析、决策树等；
2）营销管理分析方法论： SWOT、4P、P…
天猫订单之数据分析与挖掘——分类分析
天猫订单之数据分析与挖掘——分类分析 文章目录 天猫订单之数据分析与挖掘——分类分析0. 写在前面1. 分类分析1.1 决策树预测1.2 随机森林1.3 朴素贝叶斯算法0. 写在前面 Windows：Windows10Python：Python3.9本次案例项目主要是采用Pandas和Numpy对天猫订单数据集进行处理、…
python绘制带置信区间的折线图
本文目录 一、数据准备二、添加置信区间三、完整代码四、运行结果五、python绘图往期系列文章目录 在统计学和数据分析领域中，我们常常需要比较两个或多个样本数据之间的差异。而带置信区间的折线图则是一种直观且常用的展示数据差异的方式。在这篇文章中࿰…
探索可视化大屏：引领信息时代的视觉革命
可视化大屏是一种利用先进的数据可视化技术和交互技术，将大量的数据和信息以直观、易于理解的方式展示在大屏幕上的解决方案。可视化大屏通常由高分辨率的显示屏、强大的计算和处理设备以及专业的可视化软件组成，它通过图表、图形、动画等可视化元素&…
2021年长三角高校数学建模竞赛A题Go!Fun游长三角解题全过程文档及程序
2021年长三角高校数学建模竞赛
A题 Go!Fun游长三角
原题再现： 又到一年毕业季，来自浙江杭州的一位大学生小李同学，家境良好，平时学习刻苦，在即将毕业之际，准备给自己安排一个毕业旅行，同时帮助…
笔记之【MySQL经典概括】
一条sql语句的执行过程
查看缓存 缓存打开SQL大小写敏感哈希查找验证权限 解析 词法分析语法分析生成解析树 预处理 特殊语义处理权限验证 查询优化 对于select生成执行计划基于成本的预测 提交给存储引擎 根据表的Meta信息，提交给对应的存储引擎 返回结果 返回结果…
python 读取MATLAB 产生的dat格式数据 绘制暗孤子传输3D图
读硕士期间写过一些光孤子传输的论文。当时随便数值模拟的一些数据，都是MATLAB完成的，现在也忘光了，网上倒是有不少MATLAB的仿真程序模拟光孤子的传输。直到现在，光孤子数值模拟的python程序我还是没有做出来。过年在家实在没事情，刷到我的母校的光电所的文章，号召大家向…
基于lightgbm的kaggle比赛实践：Give me some credit
0 背景介绍
Give Me Some Credit https://www.kaggle.com/c/GiveMeSomeCredit/overview，是Kaggle上关于信用评分的项目，通过改进信用评分技术，预测未来两年借款人会遇到财务困境的可能性。并以此为依据来决定是否给予借贷人信用授权。目标是…
根据DataFrame1中指定列c1的每个值a1 从DataFrame2中指定列c2中的每个值a2 找到与a1最临近的值a2,进行所在行合并
【小白从小学Python、C、Java】 【计算机等级考试500强双证书】 【Python-数据分析】 根据DataFrame1中指定列c1的每个值a1 从DataFrame2中指定列c2中的每个值a2 找到与a1最临近的值a2,进行所在行合并
[太阳]选择题 关于以下代码说法错误的是： import pandas as pd…
LWN：5.9 kernel开发过程数据分析！
关注了就能看到更多这么棒的文章哦～Some 5.9 kernel development statisticsBy Jonathan CorbetOctober 13, 2020https://lwn.net/Articles/834085/5.9 kernel 经过了 10 个星期的开发周期，在 10 月 11 日发布了。这是继 2019 年底的 5.4 版本之后&#…
Python3数据分析与挖掘建模（2）数据获取手段
1. 填写、埋点、日志
（1）填写：填写是指用户通过表单、问卷调查或交互界面等方式主动提供数据。用户可以在应用程序或网站中填写个人信息、意见反馈、订单信息等。这种方式可以获取用户直接提供的数据，用于个性化推荐、用户调研和…
chatgpt赋能python：Python数据分析：Vlookup函数在Python中的实现
Python数据分析：Vlookup函数在Python中的实现
简介
Vlookup是一种常见的数据分析函数，用于在两个数据表/数据集中查找并关联相应的数据。这个函数是在Excel中非常常见的，但是当我们进行大型数据分析时，我们可以使用Python来实现…
饮酒过多和腌制食品是导致中风的最大导火索
中风是一种常见的疾病，它的发生和饮食习惯有很大关系。近年来，我国中风病患人数和病发率都呈现出了不同程度的上升趋势，这给我们的健康带来了很大的威胁。下面我们可以通过数据可视化大屏来了解一下饮食健康与预防中风有哪些影响，…
APP高曝光率到智能化投放，SDK猫眼信息流广告的投放策略！
随着移动设备和社交媒体的普及，越来越多的人开始通过信息流获取新闻、娱乐和其他内容。信息流广告是一种以自然的方式呈现在用户浏览的内容中，以吸引用户点击的广告形式。
除此之外，各种类型的媒体也开始将其自身的交互特点与信息流广告相…
探索地理空间的无限可能：GIS地图的应用与发展
随着科技的飞速发展和数字化时代的来临，GIS地图正成为一个强大的工具，为我们提供了更准确、全面的地理空间数据和智能化的解决方案。GIS地图集成了地理信息、空间分析和可视化技术，为我们打开了一个全新的世界，让我们能够更好地理…
2023洗发护发市场分析（头皮清洁护理等新兴品类销售数据分析）
如今，随着人们消费观念的转变，对洗发护发相关用品的要求也逐渐提高，由原来单一的清洁功能到更注重洗发护发用品的功能及护理效果。因此，洗发护发产品的品类不断增加，洗发护发产品的市场规模也不断扩大，整体…
python爬虫之分析文本数据的词频
Python是一种高级编程语言，也是数据科学中的一种重要工具。在文本数据分析中，Python提供了许多功能强大的库和工具，其中一个重要的工具就是分析文本数据的词频。
分析文本数据的词频是文本分析的重要方法，也是自然语言处理的重要…
主成分分析——SPSS实例分析
主成分分析是用原始变量的线性组合来表示主成分，且主成分彼此之间互不相关，且能反映出原始数据的绝大部分信息。 一般来说，当研究的问题涉及到多变量且变量之间存在很强的相关性时，我们可考虑使用主成分分析的方法来对数据进行简化…
selenium爬虫运行慢如何解决？
Selenium作为一个强大的自动化工具，可用于编写爬虫程序，尽管Selenium在处理动态网页上非常强大，但对于静态网页爬简单数据提取，使用轻量级库或工具可能更加上所述，Selenium作为一个灵活可定动化工具，在需要…
【数据管理架构】OLAP 与 OLTP：有什么区别？
这些术语经常相互混淆，那么它们的主要区别是什么？您如何根据自己的情况选择合适的术语？ 我们生活在一个数据驱动的时代，使用数据做出更明智决策并更快响应不断变化的需求的组织更有可能脱颖而出。您可以在新的服务产品（…
2023年1月至4月天猫平台美妆品类销售数据分析
如今，随着人们消费观念的突破，越来越多的人用美妆来诠释个性表达，美丽经济获得更多关注，化妆品消费理念逐渐增强，因此，美妆市场也形成了较大的规模。 根据鲸参谋电商数据显示，2023年1月至4月&am…
Live800：套路不通流量太贵，在线客服系统带来改变
中国互联网进入存量竞争阶段，这不是什么新鲜命题。
根据4月27日发布的QuestMobile《2021中国移动互联网春季大报告》数据显示：中国移动互联网月活跃用户规模分水岭，是2019年2月。在此之前，互联网用户增长欣欣向荣，此后…
Live800：用在线客服系统，换你更少的等待
这一代年轻人，做什么都要快。
看文章，只看导语，再迅速浏览小标题，就算全文看完；
看剧，先看前3集，再看最后3集，没有6集看不懂的剧，有就用三倍速再看一集；
坐…
大数据分析与机器学习的结合：实现智能决策
章节一：引言
在当今数字化时代，大数据分析和机器学习已经成为推动技术创新和业务发展的关键要素。大数据的快速增长和复杂性使得传统的数据处理方法变得不再有效。而机器学习作为一种自动化的数据分析方法，能够从海量数据中挖掘出有价值的信…
python实现MACD策略背离点的判断
MACD策略python实现背离点的判断
话不多说直接贴代码和运行结果！！ ****运行环境：**PyCharm2017.1
import baostock as bs
import pandas as pd
import talib as ta
import matplotlib.pyplot as plt
def computeMACD(code,startdate,enddat…
Spark数据分析及处理
文章目录用例1：数据清洗用例2：用户留存分析用例3：活跃用户分析用例4：活跃用户地域信息分析用例5：用户浏览深度分析本项目用到的文件获取如下,提取码: 6xdx点我获取文件注意:本文都是在spark-shell环境下完成用例1&…
斯坦福大学10张图剖析人工智能发展新趋势
斯坦福大学顶尖项目AI Index报告十张精选图表，全面解析关于AI快速发展的启示和见解。AI Index专注于追踪和观察AI的活动和进展，并以可靠、可验证数据为基础，促进对AI的了解。1.AI学术研究论文激增9倍以上自1996年以来，每年发表的计…
pandas (十) 缺失值的处理：填充、删除、过滤、查询
Pandas使用函数处理缺失值
isnull和notnull：检测是否是空值，可用于df和seriesdropna：丢弃、删除余缺失值 axis: 删除行还是列，{0 or ‘index’, 1 or ‘columns’), default 0 how: 如果等于any则任何值为空都删除，如…
《Go并发编程实战》好书配套示例源码课件教学视频
#好书推荐##好书奇遇季#《Go并发编程实战》京东当当天猫都有发售。本书配套源码、课件、开发环境和教学视频。 《Go并发编程实战》
Go语言是谷歌公司开发的一款开源的系统编程语言，被称为面向21世纪的C语言，在多核硬件架构、超大规模分布式计算集群和We…
数据之美，堪比好莱坞大片！
看完下面的几张图，你就知道自己有多无知了。堪称是好莱坞大片啊！1城市3D空间通过2D瓦片图层的3D化，能够在经度维度、量级、时间多个维度上真实还原城市3D空间。例子中为模拟的轨迹数据和旧金山食物供应商分布。2GPS轨迹分布以三种不同的方式描…
MySQL总结(八)数据库表与表之间的关系-详解
精选30云产品，助力企业轻松上云！>>> 表与表之间的关系 1.表关系的概念 在现实生活中,实体与实体之间肯定是有关系的。比如：员工和部门，老师和学生等。那么我们在设计表的时候，就应该体现出表与表之间的这种…
Java小案例: 求1000以内的水仙花数
精选30云产品，助力企业轻松上云！>>> 要求在控制台分别展示1000以内的水仙花数。 如下：↓ 水仙花数规则： 水仙花数至少是一个3位数每位数字的立方数的累加和，正好等于该数字本身。例如：153就是一…
阿语python基础语法v5.0之第7节 元组
大家好，我是阿语，从今天开始每天更新8篇python教程从第一个基础语法开始每天更新一下基础内容，这些会分类出来，保持一天完整的python教程，有的人肯定会问 为什么最后才写爬虫了，阿语在这里声明一下…
python基础语法第2章变量和数据类型之09-运算符
大家好，我是阿语，从今天开始每天更新8篇python教程从第一个基础语法开始每天更新一下基础内容，这些会分类出来，保持一天完整的python教程，有的人肯定会问 为什么最后才写爬虫了，阿语在这里声明一下…
python基础语法第2章变量和数据类型之10条件语句if
大家好，我是阿语，从今天开始每天更新8篇python教程从第一个基础语法开始每天更新一下基础内容，这些会分类出来，保持一天完整的python教程，有的人肯定会问 为什么最后才写爬虫了，阿语在这里声明一下…
全网目前最全python例子（附源码）六、Python利器
Python利器Python中的三大利器包括：迭代器，生成器，装饰器，利用好它们才能开发出最高性能的Python程序，涉及到的内置模块 itertools提供迭代器相关的操作。此部分收录有意思的例子共计14例。1 寻找第n次出现位置def sea…
A Text-Based Analysis of Corporate Innovation
A Text-Based Analysis of Corporate Innovation(Gustaf Bellstam) – 论文精读 文章目录A Text-Based Analysis of Corporate Innovation(Gustaf Bellstam) -- 论文精读核心速览问题背景方法论研究方法细节通过LDA得到创新主题根据创新主题得到衡量指标主回归比专利衡量更优的…
深入浅出的数据分析方法
【与数据同行】已开通综合、数据仓库、数据分析、产品经理、数据治理及机器学习六大专业群，加微信号frank61822702 为好友后入群。新开招聘微信群，请关注【与数据同行】公众号，后台回复“招聘”后获得入群方法。正文开始引言：你有…
傅里叶周期分析软件专业版
1.功能介绍 本软件可用于股票、期货、基金、实验数据的傅里叶周期性分析和趋势预测，主要的功能是通过Excel自动导入数据，可以是多列数据，然后选择其中的一列数据进行傅里叶周期分析，将一条无规则的曲线分解成多个周期波形&#…
EVIEWS：ARCH类、GARCH、EGARCH，建模估计沪深300指数2019-2020年交易日的波动率，并对结果进行分析。
选择两个ARCH类模型，建模估计沪深300指数2019-2020年交易日的波动率，并对结果进行分析。
以下都是通过Eviews软件对ARCH、GARCH、EGARCH进行操作，代码量较少（‘点点点就可以’）
一、实验内容
自回归条件异方差检验和…
解读人工智能在医疗保健市场的蓬勃发展
由于COVID19大流行，卫生保健机构随时准备采用基于人工智能(AI)的解决方案，以取得有效的结果。看起来COVID19似乎已经开始采用这种技术，在过去的几年中，医疗机构已经意识到了这种新兴技术。由于其具有分析和处理大型数据集的能力&a…
白宫即将出台人工智能新规，保持美国在AI领域的领导地位
据美国白宫高级技术官员迈克尔克拉特西奥斯(Michael Kratsios)表示，特朗普政府正在完善对各机构如何监管人工智能的指导方针，以平衡促进和控制 AI 行业有序稳定地发展。
克拉特西奥斯表示，这份指导意见遵循了 1 月份起草的十项原则草案&…
AI吻合度100%，某业余6段棋手吊打围甲7段，疑似AI附体
作者 | 贝爽
近日，又一场专业围棋赛登上了知乎热榜。
原因同样是疑似选手利用AI作弊。
9月6日，在浙江嘉兴举办的“创奇商硂”围棋交流赛上，业余6段选手李徐战胜了职业选手7段张涛。这一结果，让不少专业人士心生蹊跷，…
【算法学习】隐马尔可夫模型HMM（例题+代码）
隐马尔可夫模型HMM
介绍了模型的基本知识，和三个基本问题。其中对概率计算问题和预测（解码）问题进行了详细分析，并提供了python代码实现
公众号关注 52DATA ，获得更多数据分析知识,感谢支持—> 文章目录隐马尔可夫…
【算法学习】马尔可夫过程及经典例题讲解（含代码实现）
公众号关注 52DATA ，获得更多数据分析知识,感谢支持—> 文章目录马尔可夫过程1. 马尔可夫性2. 马尔可夫链2.1 转移概率矩阵（随机矩阵）2.2 状态概率2.3 平稳分布3.一个很经典的例题帮助理解马尔科夫预测方法1.求状态转移概率2.运用状态概率…
主成分分析与因子分析-原理及python实现
下面两种算法一般都需标准化消除量纲影响
主成分分析(PCA)
目的
数据降维，将n维数据降为n’维数据。原数据X:nm,samplepoint:(x1,...,xn)T,base:{w1,...,wn}X:n\times m,sample\,point:(x_1,...,x_n)^T,base:\lbrace w_1,...,w_n\rbraceX:nm,samplepoint:(x1,.…
【Paper reading】BENGI Measuring the reproducibility and quality of Hi-C data
BENGI & Measuring the reproducibility and quality of Hi-C data
1. A curated benchmark of enhancer-gene interactions for evaluating enhancer-target gene prediction methods
2. Measuring the reproducibility and quality of Hi-C data 文章目录BENGI & M…
寒假数据处理任务总结
任务描述
本次任务要处理的数据共101227行，样例如下：
18 Jogging 102271561469000 -13.53 16.89 -6.4
18 Jogging 102271641608000 -5.75 16.89 -0.46
18 Jogging 102271681617000 -2.18 16.32 11.07
18 Jogging 3.36
18 Downstairs 103260201636000 -…
Python数据分析基础——Excel文件——处理单个工作表——读写Excel文件（1）
参考文献：《Python数据分析基础》 前言
尽管Excel工作簿可以包含多个工作表，但有时只需一个工作表中的数据。此外，知道如何分析一个工作表，就很难扩展到分析多个工作表。
创建脚本
#!/usr/bin/env python3
import sys
from xlr…
Python数据分析基础——Excel文件——内省Excel工作簿
参考文献：《Python数据分析基础》 前言
Excel文件和CSV文件
Excel文件与CSV文件的不同：首先Excel文件不是纯文本文件，所以不能在文本编辑器中打开它并查看数据。例如，在记事本中打开一个Excel文件。 Excel文件 在记事本中的格式…
Python数据分析基础——CSV文件——从多个文件中连接数据
参考文献：《Python数据分析基础》 前言
对于包含相似数据的多个文件，常常希望将其中的数据连接起来，以使所有数据都在一个文件中。如果需要处理的文件数量和文件大小过大时，手动处理根本不可能完成。文件将介绍如何通过Python完成…
Python数据分析基础——CSV文件——读取多个CSV文件
参考文献：《Python数据分析基础》 前言
在大多数情况下，需要处理的文件很多。在这种情况下，Python会给你带来惊喜，因为它可以让你自动化和规模化地进行数据处理，远远超过手工处理能够达到的限度。
创建多个CSV文件
…
Python数据分析基础——CSV文件——选取连续的行
参考文献：《Python数据分析基础》 前言
有时，在文件内容中，工作表头部和尾部都是你不想处理的。 例如，在supplier_data_unnecessary_header_footer.csv文件中，头部有“I don’t care about this row”，尾部…
Python获取某品牌加盟数据采集实现可视化数据分析
前言
大家早好、午好、晚好吖 ❤ ~欢迎光临本文章 开发环境 : python 3.8 运行代码 pycharm 2022.3 辅助敲代码 jupyter 数据分析使用软件
模块使用 ： requests 数据请求模块 需要安装 parsel 数据解析模块 csv pandas pyecharts
第三方模块安装…
数据分析与展示Numpy库复习
表示、清洗、统计和展示数据
Numpy库入门
NumPy是一个开源的Python科学计算基础库，包含： • 一个强大的N维数组对象 ndarray • 广播功能函数 • 整合C/C/Fortran代码的工具 • 线性代数、傅里叶变换、随机数生成等功能 NumPy是SciPy、 Pandas等数据处…
pycharm中的matplotliib 3D图旋转设置
pycharm中的matplotliib 3D图旋转设置
1、“文件—>设置”，打开设置窗口。 2、找到最后一个工具 3、找到“Python Scientific”，去除右边Show plots in toolwindow候选框中的勾号 鼠标左键就可以进行旋转了
可以看出是真实的3维图
import numpy …
大数据分析实训——使用Spark SQL分析美国新冠肺炎疫情
项目思路：
使用Spark SQL读取文件数据集来生成Data Frame对象，再利用Spark SQL函数对Data Frame对象进行数据分析，并将结果存入MySQL数据库，再以Web网页的形式对分析结果进行可视化，其中使用Spring Boot读取数据库把数…
pandas出图Plot
import pandas as pd
import numpy as np
import matplotlib.pyplot as plt
# 随机生成1000个数据
data pd.Series(np.random.randn(1000),indexnp.arange(1000))
# 为了方便观看效果, 我们累加这个数据
data data.cumsum()
# pandas 数据可以直接观看其可视化形式
data.plot…
大数据分析标签库_标签分析
大数据分析标签库This article is following the steps of the analysis started here.本文正在按照从此处开始的分析步骤进行操作。 We are going to have a look at the tags used in our 60,000 questions from StackOverflow with Quality Rating. It should give us a bet…
python：比较两个DataFrame是否完全一样
在官方文档中：pandas.testing.assert_frame_equal — pandas 1.3.5 documentation
介绍了可以使用assert_frame_equal()函数来比价两个DataFrame是否完全一样，包括数值和数据类型。如果不一样，会显示哪列或哪行不一样，比价方便。…
三类最常用的数据分析工具，你用过哪一类？
现在，数据分析已经成为企业做出各种经营决策不可或缺的环节，无论是财务、市场、销售还是运营，都离不开数据分析。数据分析是将收集来的各种各样的数据进行分析，提取有用信息，对数据加以详细研究和概括总结的过程。数据…
熊猫烧香教程_熊猫阅读CSV教程
熊猫烧香教程In this tutorial we will learn how to work with comma separated (CSV) files in Python and Pandas. We will get an overview of how to use Pandas to load CSV to dataframes and how to write dataframes to CSV. 在本教程中，我们将学习如何在P…
SYNTHIA-RAND-CITYSCAPES数据集云盘下载
最近SYNTHIA-RAND-CITYSCAPES的官网总是崩溃，小伙伴们不能下载数据，特意压缩了下上传阿里云盘 链接 https://pkueducn-my.sharepoint.com/:u:/g/personal/shiyongjie_pku_edu_cn/ESJ7hh_A30xAk1aLIvkZ_fAB-fW9QK5RTZEFJlgoTp5QwA?exVOtFR 里面的RAND_CI…
乔伊斯。文森特_熊猫和文森特简介
乔伊斯。文森特Get an introduction to Pandas and its two main data structures as well as how to visualize your data using Vincent once you are done munging it with Pandas. 了解Pandas及其两个主要数据结构，以及在使用Pandas完成数据整理后如何使用Vince…
商业智能bi是什么意思？
商业智能（简称BI）像雨后的蘑菇一样蓬勃发展。商业智能始于决策支持系统，随着早期计算机的普及，已经有了长足的发展。后来，IBM提出了“数据仓库”的概念。同时，硬件的扩展，软件的更新以及数据库在…
政府如何利用大数据提升治理水平？
随着信息技术的飞速发展，各个领域的数据量呈爆炸式增长。特别是在云计算，物联网和移动互联网等IT技术得到广泛应用之后，数据的增长已实现了从定量到质变的转变。数据像波浪一样席卷而来，人类社会已经进入大数据时代。大数据不仅是…
python·文本分析
python文本分析词云词云图from wordcloud import WordCloudfrom pyecharts.charts import WordCloud停用词处理词云图
from wordcloud import WordCloud
import matplotlib.pyplot as plt #数学绘图库
import jieba #jieba分词库
from wordcloud import WordCloud,I…
MATLAB中的数值类型
MATLAB中的数值类型
浮点数
MATLAB 以双精度或单精度格式表示浮点数。默认为双精度，可以通过一个简单的转换函数将任何数值转换为单精度数值（single（））。
浮点数的定义
双精度浮点 MATLAB 根据适用于双精度的 IEEE…
电力行业海量数据处理如何做？看中节能、上海电气案例分享
⬆️ 点击图片，与专业的解决方案架构师聊一聊为实现发电、输电、变电、配电、用电的实时智能联动，电力行业开始在传统业务之上构建信息网络、通讯网络、能源网络，运用云计算、物联网等新兴技术，大力发展数字化、信息化、智能化。在…
手把手教你学Python之函数（一文掌握Python中的函数）
目录
1、函数的定义
2、函数的调用
3、函数中参数类型及其特点
4、参数传递规则
5、变量作用域
6、函数的递归调用
7、Python中的一些特殊函数 所谓的函数，实际上是指具有一定功能的代码块，通过函数我们可以快速的调用某一功能，不需要…
阿语python4-2 美多商城v5.0第1.1.1节 美多商城项目准备01-项目需求分析
从今天开始阿语将更新美多商场实战笔记，也就说从今天开始，下面的全部都是实战，喜欢的可以关注一下，一起学习python项目需求分析需求分析原因：可以整体的了解项目的业务流程和主要的业务需求。项目中，需求驱…
python熊猫图案_Python熊猫：您可能不知道的技巧和功能
python熊猫图案Pandas is a foundational library for analytics, data processing, and data science. It’s a huge project with tons of optionality and depth. 熊猫是用于分析，数据处理和数据科学的基础库。 这是一个庞大的项目，具有大量的可选项和…
涛思数据荣登“创业邦100未来独角兽榜单”“2021 AIoT新维奖行业先锋榜”
导语：2021年临近年末之期，涛思数据的荣誉墙上再添两个重量级奖项，这也成为新收到的最耀眼的“新年礼物”。“涛思数据荣登2021 AIoT新维奖企业榜行业先锋榜在数字化时代，物联网无疑已经成为企业转型升级的技术底座，各行…
LibreQDA公开发布
A news worthy of The Tryolabs’ Herald: 特鲁拉布斯先驱报的消息值得 We have just proudly released to the public LibreQDA, a Qualitative Data Analysis tool that we have developed alongside with the Universitat Autnoma de Barcelona and the Universidad de la…
python回归及岭回归_Python中比例的回归
python回归及岭回归I frequently predict proportions (e.g., proportion of year during which a customer is active). This is a regression task because the dependent variables is a float, but the dependent variable is bound between the 0 and 1. Googling around,…
检索数据不能检索了_数据检索和清理：跟踪迁移模式
检索数据不能检索了Advancing your skills is an important part of being a data scientist. When starting out, you mostly focus on learning a programming language, proper use of third party tools, displaying visualizations, and the theoretical understanding of…
Python数据分析：朴素贝叶斯
Python数据分析：朴素贝叶斯
假定样本每个特征与其他特征都不相关，即样本所包含的属性在判定其是否为某一类时的概率分布上是独立的尽管有着朴素思想和过于简单的假设，但朴素贝叶斯分类器在很多复杂的现实情形中仍能取得相当好的效果优点&…
Java8之用流收集数据
Java8之用流收集数据 第六章 用流收集数据 1、 toList() 用法 List<Transaction> transactions transactionStream.collect(Collectors.toList()); 2、归约和汇总 1)count/counting long howManyDishes menu.stream().collect(Collectors.counting());
//这还可以写得更…
python制作可视化图表_可视化数据–用python覆盖图表
python制作可视化图表Visualizing data is vital to analyzing data. If you can’t see your data – and see it in multiple ways – you’ll have a hard time analyzing that data. There are quite a few ways to visualize data and, thankfully, with pandas, matplo…
汽车4S店如何在数字化管理下，提高市场竞争力
在所有人都认为疫情过后，经济形势会一路向阳，但是，实际情况出乎所有人的意料，各行各业举步维艰。
新闻爆出的各大房地产，恒大的2.4万亿让人瞠目结舌，还有碧桂园和融创，也是债台高筑了ÿ…
Pandas中Concat与Append_Python数据分析与可视化
Pandas中Concat与Append 合并时索引的处理join和join_axes参数append()方法 在Numpy中，我们介绍过可以用np.concatenate、np.stack、np.vstack和np.hstack实现合并功能。Pandas中有一个pd.concat()函数与concatenate语法类似，但是配置参数更多࿰…
游戏数据分析对于运营游戏平台的重要性
游戏数据分析对于运营游戏平台具有至关重要的意义，它可以提供深入的见解，帮助了解玩家行为、偏好和互动，从而优化游戏体验，提高玩家参与度和留存率。 首先，通过游戏数据分析，运营者可以了解玩家在游戏中的表…
一文说尽零售数据分析指标体系
零售的本质业务模式是通过在各种渠道上吸引客户来购买我们的商品来实现盈利，其实就是客户-渠道-商品，也就是我们常说的“人、场、货”，除此之外还有供应链、财务等起到重要的辅助作用。因此如果要构建起系统化的零售数据分析指标体系…
数据分析案例-某公司员工数据信息可视化（文末送书）
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
为什么企业都在建立指标体系，有什么用途？
什么是指标体系
指标是指企业从不同角度梳理日常业务活动，把积累的庞大数据提炼成不同的业务指标，然后反过来用指标来指代具体的业务活动。
指标体系则是把这些从不同部门、业务、人员中提炼出的业务指标融合汇总到一起，形成一个指标系统&a…
2023年Q3线上生鲜水产数据分析：市场不景气，销额同比下滑44%
事实上，今年线上的生鲜生意市场并不景气。无论是Q1季度还是Q2季度，线上（京东平台）的销售额均同比去年下滑了10%左右。 然而到了Q3季度，整个下滑态势愈发严峻。可以看到鲸参谋数据显示，7月至9月生鲜水产在京…
用Python做数据分析之数据筛选及分类汇总
1、按条件筛选（与，或，非） 为数据筛选，使用与，或，非三个条件配合大于，小于和等于对数据进行筛选，并进行计数和求和。与 excel 中的筛选功能和 countifs 和 sumifs 功能相似…
html动态爱心超文本标记代码，丝滑流畅有特效，附源码
直接上代码
<!DOCTYPE html>
<html><head><title></title><script src"js/jquery.min.js"></script></head><style>* {padding: 0;margin: 0;}html,body {height: 100%;padding: 0;margin: 0;background: #0…
GhatGPT AIGC 人工智能数据分析与可视化Python
Python是一种通用编程语言，具有广泛的应用领域。其中之一就是数据分析和可视化。Python可以处理大量数据，并且提供了许多库和工具来帮助分析数据和创建可视化。
下面是一些常用的Python库和工具，用于数据分析和可视化： NumPy：用于科学计算的基础库。NumPy提供了数组对象、…
管理驾驶舱这么做，领导都点赞（附方案下载）
你是否知道你的企业是否充分利用了可用的数据资源？ 著名的著名的质量管理专家，威廉爱德华德莱克（William Edwards Deming）曾说过："数据不是权力，能够理解数据的能力才是真正的权力。" 企业在经营…
数据分析实战 | 泊松回归——航班数据分析
目录
一、数据及分析对象
二、目的及分析任务
三、方法及工具
四、数据读入
五、数据理解
六、数据准备
七、模型训练
八、模型评价 一、数据及分析对象
CSV文件：o-ring-erosion-only.csv
数据集链接：https://download.csdn.net/download/m0_7…
一文了解游戏行业（数据分析）
一.概况
1.基本术语
游戏行业基础术语——持续更新ing...
2.产业链
包括游戏开发，发行和销售等环节
游戏开发：上游环节；是游戏产业链的核心环节，包括游戏策划，美术设计，程序开发等，是决定游…
时间序列预测实战(十二)DLinear模型实现滚动长期预测并可视化预测结果
官方论文地址->官方论文地址
官方代码地址->官方代码地址
个人修改代码->个人修改的代码已经上传CSDN免费下载
一、本文介绍
本文给大家带来是DLinear模型，DLinear是一种用于时间序列预测（TSF）的简单架构，DLinear的核…
将复数中的虚部取反 即对复数求共轭 numpy.conjugate()
【小白从小学Python、C、Java】 【计算机等级考试500强双证书】 【Python-数据分析】 将复数中的虚部取反 即对复数求共轭 numpy.conjugate()
[太阳]选择题 请问以下代码中执行语句输出结果是？ import numpy as np a np.array([1 2j, 3 - 4j]) print("【显示…
数据分析实战 | KNN算法——病例自动诊断分析
目录
一、数据及分析对象
二、目的及分析任务
三、方法及工具
四、数据读入
五、数据理解
六、数据准备
七、模型训练
八、模型评价
九、模型调参
十、模型改进
十一、模型预测 一、数据及分析对象
CSV文件——“bc_data.csv”
数据集链接：https://dow…
一篇文章真正讲懂模型评估指标(准确率，召回率，精确率，roc曲线，AUC值）
背景：
最近在做一些数据分析的比赛的时候遇到了一些头疼的问题，就是我们如何评估一个模型的好坏呢？
准确率，召回率，精确率，roc曲线，roc值等等，但是模型评估的时候用哪个指标呢&…
时间序列预测实战(九)PyTorch实现LSTM-ARIMA融合移动平均进行长期预测
一、本文介绍
本文带来的是利用传统时间序列预测模型ARIMA(注意：ARIMA模型不属于机器学习)和利用PyTorch实现深度学习模型LSTM进行融合进行预测，主要思想是->先利用ARIMA先和移动平均结合处理数据的线性部分（例如趋势和季节性）…
数据分析实战 | SVM算法——病例自动诊断分析
目录
一、数据分析及对象
二、目的及分析任务
三、方法及工具
四、数据读入
五、数据理解
六、数据准备
七、模型训练
八、模型应用及评价 一、数据分析及对象
CSV文件——“bc_data.csv”
数据集链接：https://download.csdn.net/download/m0_70452407/88…
描述性统计：寻找异常数据：分位数和异常值
1、数学定义和使用指南
分位数是指把一组数据按大小排序后划分为若干份，使每份的数据个数相等或差不多相等。常用的分位数有四分位数、中位数等。
四分位数是一种常用的分位数，它把一组数据分为四份，分别是最小值到第一四分位数、第一四分位…
简单实现，在nodejs中简单使用kafka
什么是 Kafka
Kafka 是由 Linkedin 公司开发的，它是一个分布式的，支持多分区、多副本，基于 Zookeeper 的分布式消息流平台，它同时也是一款开源的基于发布订阅模式的消息引擎系统。
Kafka 的基本术语
消息：Kafka 中的…
高级数据分析方法与模型
前言
数据思维练习不仅要熟练地掌握了分析工具，还要掌握大量的数据分析方法和模型。
这样得出的结论不仅具备条理性和逻辑性，而且还更具备结构化和体系化，并保证分析结果的有效性和准确性。今天从以下6个维度36种分析模型和方法逐个简略介绍…
二、数据运营：B-O价值模型
B - O 价值模型，即 Business - Operation 模型，业务一运营模型。这是一个非常成熟的概念，其变体 BOSS 系统，即 BSS 业务支撑系统和 OSS 运营支撑系统已经在通信运营上使用20多年之久。
B - O 价值模型试图建立起一种通用的业务经…
通过指标体系分析指标变化的原因
指标体系是重要的数据产品。在应用指标体系进行数据分析，并寻找指标变化原因时，通常把这个过程叫多维分析。
多维分析包括如下两个层面：
1．基于指标的业务口径来寻找原因 从指标的业务口径来寻找变化的原因，是指当指…
求最大公约数math.gcd()
【小白从小学Python、C、Java】
【计算机等级考试500强双证书】
【Python-数据分析】
求最大公约数
math.gcd() [太阳]选择题
下列代码执行输出的结果是？
import math
print("【执行】print(math.gcd(6, 8))")
print(math.gcd(6, 8))
print(&quo…
时间序列预测实战(十六)PyTorch实现GRU-FCN模型长期预测并可视化结果
往期回顾：时间序列预测专栏——包含上百种时间序列模型带你从入门到精通时间序列预测 一、本文介绍
本文讲解的实战内容是GRU-FCN(门控循环单元-全卷积网络)，这是一种结合了GRU（用于处理时间序列数据）和FCN（全卷积网络…
个推用户运营全新上线用户生命周期管理功能，助力APP快速实现用户精细化运营
近期，个推用户运营上线了APP用户生命周期管理功能。该功能可以帮助APP多维度洞察⽤户所处的⽣命周期分布，旨在帮助运营人员快速全面地了解用户，从而基于用户生命周期针对性地做出用户运营策略调整，提升用户价值和运营指标。 个推如…
时间序列预测：深度学习、机器学习、融合模型、创新模型实战案例（附代码+数据集+原理介绍）
本文介绍->给大家推荐一下我的时间序列预测专栏，本专栏平均质量分98分，而且本专栏目前免费阅读，其中涉及机器学习、深度学习、融合模型、个人创新模型、数据分析等一系列有关时间序列的专栏，其中的实战的案例不仅有简单的模型类…
SPASS-图表的创建编辑
点击折线图 展示图如下： 双击图表，可进行编辑 图表基本设定
选择、移动图表元素和调整图表元素的大小
鼠标点击图表元素选择Tab键进行轮换选择Ctrl键鼠标进行多个元素选择十字箭头——移动元素双头箭头——调整元素大小
更改图表的外观
文本的内容、…
元数据管理，数字化时代企业的基础建设
随着新一代信息化、数字化技术的应用，众多领域通过科技革命和产业革命实现了深度化的数字改造，进入到以数据为核心驱动力的，全新的数据处理时代，并通过业务系统、商业智能BI等数字化技术和应用实现了数据价值，从数字经…
Python：容器之集合
创建集合
age {1, 2, 3, 4, 5}
age set([1, 2, 3, 4, 5])
# 这两种方式的输出相同：
{1, 2, 3, 4, 5} 删除元素
age {1, 2, 3, 4, 5}
# age为：
{1, 2, 3, 4, 5}age.remove(5)
# age为：
{1, 2, 3, 4} 添加元素
age {1, 2, 3, 4, 5}
# ag…
Python如何使用Matplotlib模块的pie()函数绘制饼形图？
Python如何使用Matplotlib模块的pie函数绘制饼形图？ 1 模块安装2 实现思路3 pie()函数说明4 实现过程4.1 导入包4.2 定义一个类4.3 读取数据并处理4.4 定义饼图绘制方法 5 完整源码 1 模块安装
先安装matplotlib：
pip install matplotlib安装numpy模块…
2023企业如何挑选智能工单系统？选亿发工单管理解决方案提供商，移动派单
在企业运作中，工单管理是一项至关重要的工作流程，可以使用标准化、系统化的方式对问题和请求进行全面管理、维护和追踪。 然而，传统的工单处理方式常常受到办公地点和时间的限制，存在工单录入繁琐易错、工作流程曲折耗时、跨部门协…
用PHP使用API接口获取虾皮商品详情
作为一名程序员，我们常常需要与各种API接口打交道，以获取我们需要的数据。本文将向您展示如何使用PHP编程语言与虾皮的API接口进行交互，以获取虾皮商品详情。
一、准备工作
在开始编写代码之前，确保您已经完成了以下准备工作&am…
一道 python 数据分析的题目
python 数据分析的题目。
做题方法：使用 pandas 读取数据，然后分析。
知识点：pandas，正则表达式，py知识。
过程：不断使用 GPT，遇到有问题的地方自己分析，把分析的结果告诉 GPT&am…
数据分析场景下，企业如何做好大模型选型和落地？
在数据驱动的数字化时代，有效的数据分析已成为企业成功的关键因素。而随着大模型带来能力突破，让AI与数据分析相互结合，使分析结果更好支撑业务，促进企业内部数据价值释放，成为了当下企业用户尤为关注的话题。 如何按照…
虾皮之家数据分析插件：知虾数据分析工具提升销量的利器
在当今的电商市场中，虾皮Shopee成为了许多商家的首选平台。然而，随着竞争的加剧，店铺运营变得越来越具有挑战性。如何提升销量，优化标题和图片，合理设置SKU，并准确跟踪店铺活动数据和竞品数据，已…
python sql_pandasql：让python讲SQL
python sql介绍 (Introduction) One of my favorite things about Python is that users get the benefit of observing the R community and then emulating the best parts of it. I’m a big believer that a language is only as helpful as its libraries and tools. 关于…
airbnb机器学习模型_机器学习基础：预测Airbnb价格
airbnb机器学习模型Machine learning is easily one of the biggest buzzwords in tech right now. Over the past three years Google searches for “machine learning” have increased by over 350%. But understanding machine learning can be difficult — you either u…
pandas数据重构与数据转换
pandas数据重构与数据转换
重构
import numpy as np
import pandas as pddf_obj pd.DataFrame(np.random.randint(0,10, (5,2)), columns[data1, data2])
df_obj运行结果： stack 将列索引旋转为行索引，完成层级索引 stacked df_obj.stack()
print(s…
pandas数据合并
pandas数据合并
pd.concat 沿指定轴方向将多个对象合并到一起 注意指定轴的方向，默认axis0 # index 没有重复的情况
ser_obj1 pd.Series(np.random.randint(0, 10, 5), indexrange(0,5))
ser_obj2 pd.Series(np.random.randint(0, 10, 4), indexrange(5,9))
ser…
pandas数据连接
pandas数据连接
pd.merge
import pandas as pd
import numpy as npdf_obj1 pd.DataFrame({key: [b, b, a, c, a, a, b],data1 : np.random.randint(0,10,7)})
df_obj2 pd.DataFrame({key: [a, b, d],data2 : np.random.randint(0,10,3)})print(df_obj1)
print(------------…
pandas数据操作
pandas数据操作
索引操作： series索引 ser_obj[‘label’] 通过索引名称访问 ser_obj[pos] 索引位置访问 import pandas as pdser_obj pd.Series(range(5), index [a, b, c, d, e])
print(ser_obj.head())
print(--------------)# 行索引
print(通过索引名称&am…
python pcap教程_PCA教程
python pcap教程Principal Component Analysis (PCA) is an important method for dimensionality reduction and data cleaning. I have used PCA in the past on this blog for estimating the latent variables that underlie player statistics. For example, I might have…
适用于Python的Pandas数据科学备忘单
由Karlijn Willems | 2016年11月30日 (by Karlijn Willems | November 30, 2016)This post originally appeared on the DataCamp blog. Big thanks to Karlijn and all the fine folks at DataCamp for letting us share with the Yhat audience! 该帖子最初出现在DataCamp博客…
这款多维数据分析工具超级好用
在进行数据分析的过程中，我们如果想要了解数据，就需要从不同维度去探索。如果仅仅从单一维度去分析，很有可能会遗漏掉重要的数据信息。多维分析(OLAP)对于企业来说是进行数据分析时的核心，借助OLAP可以进行多角度、立体化、灵活动…
这6条建议，帮你选择正确的BI分析平台！
如今的商业智能BI不同于传统，已经逐渐向自助型的、以业务为主导的模式过渡。而站在IT角度，IT也应该采用一种能够让业务部门在所有层面参与整个计划的协作方式，但这也许需要更高层领导的支持和鼓动。
本文将重点介绍BI分析平台的评估和选择&a…
pow python_使用Quantipy Python软件包从测量数据自动生成大型PowerPoint甲板
pow python由盖尔弗赖森| 2017年3月21日 (by Geir Freysson | March 21, 2017)About Geir: Geir is the co-founder and CEO of Datasmoothie, a tech company that brings the joy back into statistical analysis. Geir is also a caffeine enthusiast and Internet addict. …
python处理excel
Python可以通过使用第三方库来处理Excel文件。 一种常用的库是 pandas，它可以轻松地读取和写入Excel文件： import pandasas pd# 读取Excel文件
df pd.read_excel(file.xlsx)# 写入Excel文件
df.to_excel(file.xlsx, indexFalse)另一种常用的库是 openpy…
python：小技巧收集
保持数据的原始类型 from numpy import dtype
pd.read_excel(filepath, dtypedtype) 获取列名，并将列名赋值给没有表头的相同数据 df_data_list[1].columnsdf_data_list[0].columns
df_data_list[2].columnsdf_data_list[0].columns
df_data_list[3].columnsdf_data…
python高效爬虫的实现可以从哪些方面入手
在爬取数据的时候大家都希望自己的程序是能高效完成爬虫任务的，高效爬虫在提高爬取速度的同时也增加了爬取的数据量。这对于需要大量数据支撑的数据分析、机器学习、人工智能等任务非常重要。高效爬虫可以获取更多的原始数据，并允许更精准的数据清洗和处…
方差齐性检验python实现
方差齐性
在方差分析有一个重要的前提叫方差齐性
先讲讲什么是方差齐性，方差齐性是指不同组间的总体方差是一样的。那为什么方差分析的前提是要组间的总体方差保持一致呢？先想想方差分析是做什么呢？方差分析是用来比较多组之间均值是否存在…
python数据分析软件0代码,python数据分析软件开发
大家好，小编为大家解答python数据分析软件0代码的问题。很多人还不知道python数据分析处理软件，现在让我们一起来看看吧！1、sas和python的区别sas和python的区别： 1.成本SAS是商业软件，对于大部分个体数据分析师而言&a…
Python库matplotlib 图形绘制
学习地址工具
pycharm2018.3.3 x64python3.7.2matplotlib 3.1.0
Matplotlib简介
Matplotlib是Python的2D绘图库，与turtle绘图不同，turtle是内置在python库里面的，而Matplotlib是第三方库，需要安装。 Matplotlib可以生成直方图、…
基于大数据技术对基金分析-python
提示：本文为个人原创，仅供技术探讨与交流，对实际投资并不造成建议。 基于大数据技术对基金分析-python 前言一、数据获取：python爬虫1).从天天基金数据接口获取数据2).爬虫前期准备3).爬虫具体实现 二、数据清洗及计算指标1.过滤数…
OpenTSDB 查询过滤器
文章目录Query FiltersGroupingOpenTSDB 1.x - 2.1ExamplesOpenTSDB 2.2Explicit TagsExamplesBuilt-in 2.x Filtersliteral_oriliteral_ornot_literal_ornot_iliteral_orwildcardiwildcardregexpLoaded FiltersPluginsQuery Filters 原文地址：http://opentsdb.net/…
OpenTSDB 查询数据
文章目录Querying or Reading DataQuery ComponentsTimesFiltersAggregationDownsamplingRateOrder of OperationsQuerying or Reading Data 原文地址 http://opentsdb.net/docs/build/html/user_guide/query/index.html OpenTSDB 提供了多种提取、操作和分析数据的方法。 可以…
分享篇：我用数据分析做副业
主业是数据分析专家，副业是数据咨询顾问，过去十年里面利用数据分析发家致富
人生苦短，我学Python！
利用技能可以解决的问题，哪些场景下可以催生出需求，深度剖析数据分析的技能树 由浅入深，一个…
2018年五一杯数学建模B题商业银行人民币贷款规模分配及盈利问题解题全过程文档及程序
2019年五一杯数学建模
B题 商业银行人民币贷款规模分配及盈利问题
原题再现 商业银行贷款投放的简单模型是：从客户端吸收存款，缴存法定准备金（法定准备金率：大型金融机构15.5%，中小金融机构12%；法定准备金…
企业数字化过程中数据仓库与商业智能的目标
当前环境下，各领域企业通过数字化相关的一切技术，以数据为基础、以用户为核心，创建一种新的，或对现有商业模式进行重塑就是数字化转型。这种数字化转型给企业带来的效果就像是一次重构，会对企业的业务流程、思维文化、…
菲律宾shopee怎么推广？shopee菲律宾站点什么好卖？——站斧浏览器
菲律宾shopee怎么推广
首先，要想在Shopee上成功推广自己的店铺，关键是提升店铺的曝光率。有多种方式可以增加店铺的曝光率，其中之一是使用Shopee提供的广告服务。
Shopee广告分为首页广告和搜索广告两种形式。商家可以根据自己的需求选择适…
时间序列预测中的4大类8种异常值检测方法(从根源上提高预测精度)
一、本文介绍
本文给大家带来的是时间序列预测中异常值检测，在我们的数据当中有一些异常值（Outliers）是指在数据集中与其他数据点显著不同的数据点。它们可能是一些极端值，与数据集中的大多数数据呈现明显的差异。异常值可能由于…
数学建模 | 灰色预测原理及python实现
目录
一、灰色预测的原理
二、灰色预测的应用及python实现 一、灰色预测的原理
灰色预测是以灰色模型为基础，灰色模型GM(n,h)是微分方程模型，可用于描述对象做长期、连续、动态的反应。其中，n代表微分方程式的阶数，h代表微分方…
数据降维(Data Dimensionality Reduction)
数据降维 Data Dimensionality Reduction 概念基本思想分类基本原理主成分分析（PCA降维）principal component analysis概念原理 概念
数据降维是在某些特定条件下，减少数据中变量的个数，使得数据的维数降低。
基本思想
数据降…
根据DataFrame指定的列该列中如果有n个不同元素则将其转化为n行显示explode()
【小白从小学Python、C、Java】 【计算机等考500强证书考研】 【Python-数据分析】 根据DataFrame指定的列 该列中如果有n个不同元素 则将其转化为n行显示 explode()
选择题 以下代码两次输出结果分别为几行？ import pandas as pd df pd.DataFrame({种类:[蔬菜,水…
2020年五一杯数学建模A题煤炭价格预测问题解题全过程文档及程序
2020年五一杯数学建模
A题 煤炭价格预测问题
原题再现 煤炭属于大宗商品，煤炭价格既受国家相关部门的监管，又受国内煤炭市场的影响。除此之外，气候变化、出行方式、能源消耗方式、国际煤炭市场等其他因素也会影响煤炭价格。请完成如下问题。…
企业数字化决策者深度分享
2023年11月18日，数聚股份应邀参加在台州椒江举办的数字中国企业峰会。本次会议中，诸多在企业数字化进程中做出重要贡献的高层管理者分享了各行各业极具引领性、创新性的数字化实践案例、产品和解决方案；数聚股份董事长陈庆华携其前瞻的数字化…
时间序列预测实战(二十一)PyTorch实现TCN卷积进行时间序列预测（专为新手编写的自研架构）
一、本文介绍
本篇文章给大家带来的是利用我个人编写的架构进行TCN时间序列卷积进行时间序列建模（专门为了时间序列领域新人编写的架构，简单不同于市面上大家用GPT写的代码），包括结果可视化、支持单元预测、多元预测、模型拟合效…
Python：第六次全国人口普查数据分析及可视化（pandas、matplotlib）
一、数据获取
在国家统计局网中下载第六次人口普通统计表：http://www.stats.gov.cn/tjsj/pcsj/rkpc/6rp/indexch.htm
然后通过pandas将excel数据解析为多级字典
先观察excel数据 可以转化为这样的多级词典： 理清字典关系后代码就简单了
def getDataD…
怎么做数据分析？数据分析的这些环节你不得不知
很多刚开始做数据分析的朋友，不知道数据分析该如何下手，更不知道一个完整的数据分析流程有哪些环节。数据分析的流程比较简单，主要包括以下六个环节：明确分析目的、数据获取、数据处理、数据分析、数据可视化、结论与建议。
一、…
常用的5款数据分析BI软件，你用过哪个？
随着大数据的快速发展，数据分析越来越受到企业的重视，不少企业已经部署了数据分析BI软件，来帮助处理分析数据。也有很大一部分企业一直在纠结到底该选哪一款数据分析BI软件，因为现在市场上的数据分析BI软件实在是太多了。笔者就此…
有哪些好用的企业商业智能BI软件
数字化的今天，各种数据处理分析工具使企业的运营效率大大提升。而商业智能BI的出现给企业带来了更多的帮助。凭借商业智能BI的数据挖局、数据分析和数据可视化等功能，企业可以提高运营效率，增加利润率，并制定更快、更明智的业务决…
新人和老人关于数据思维的50个区别
10多年前自己以新人的身份开启数据生涯，现在算是一个数据老人了，与当初的自己相比，现在看数据的视角发生了很大的变化，这里列出了50条关于新人老人在数据认知上的可能的差异，希望能带来些启示。第一条新人把一张张宽表…
如何全面而深刻的理解数据标准？（理论+案例）
这是一篇关于数据标准的综述，希望通过读这篇文章，你会对数据标准有全新的认识。注：数据标准规范相关文档见文末下载地址，包括《数据标准管理实践白皮书》、《数据资产管理实践白皮书》、《JRT 0105-2014 银行数据标准定义规范》、…
一款好用的数据分析工具都有哪些特点？
随着科学，技术和经济的进步，人类已经进入了信息化和大数据时代。人类生活的世界每天都在爆炸性地生成大量数据，并且面临着诸如宇宙繁星般的大量数据。如何收集，清理，整合，存储，计算，…
十款常用的数据展示（可视化）软件介绍，操作便捷，功能强大
大数据的出现使数据可视化可谓发挥到了极致。数据可视化主要是为了直观，实时地查看数据变化并做出第一反馈。正因为人们分析了大量数据，所以可视化的数据展示可以使用户很直接的了解并感受到大数据带来的震撼。
数据可视化可以分为多种类型，…
数据分析实战——淘宝数据分析2014 kaggle
淘宝用户行为分析 文章目录淘宝用户行为分析数据预处理缺失值处理数据一致化处理用户行为分析日访问量分析用户活跃度小时的访问量分析用户行为分析复购情况分析漏斗流式分析import pandas as pd
datapd.read_csv("train_user.csv")
datauser_iditem_idbehavior_type…
手把手教你学Python之操作数据库（掌握Python操作SQLite数据库）
目录
1、数据库基础
（1）常见数据库类型
（2）关系型数据库
（3）SQLite数据库
2、结构化查询语言SQL
3、Python操作数据库
（1）Python操作数据库核心API
（2࿰…
手把手教你学Python系列视频——通俗易懂，简单易学上手快
目录
一、为什么要学习Python？
时代背景：人工智能产业已上升为国家战略
市场需求：人工智能已成为科技最大风口
人工智能时代，编程已成为一项基本技能。
Python，人工智能时代最佳的编程入门语言。
二、本课程适合…
手把手教你学Python之Matplotlib绘图（一文掌握数据可视化库-Matplotlib）
目录
Matplotlib介绍
线形图（折线图）
直方图
条形图
饼状图
散点图 Matplotlib介绍 matplotlib是一个Python 的2D绘图库，提供了一套表示和操作图以及图内部对象的函数，借助它可以绘制多种多样的数据图，如线形图、…
Python数据分析：特征降维-主成分分析（PCA)
Python数据分析：特征降维-主成分分析（PCA)
principal components analysis(PCA)
用于减少数据集的维度，同时保持数据集中对方差贡献最大的特征保留低阶主成分，忽略高阶成分，低阶成分往往能够保留数据最重要方面
方差…
Python数据分析：人工神经网络（ANN)
Python数据分析：人工神经网络（ANN)
神经网络基本组成： 输入层（input layer），隐藏层（hidden layer），输出层（output layer） 每层由神经元或单元组…
Python数据分析：常用图像特征
Python数据分析：常用图像特征
常用图像特征
颜色特征纹理特征形状特征skimage中的特征方法 skimage.feature
颜色特征
图像检索中应用最为广泛的视觉特征 颜色直方图：从256种灰度颜色分为k个区间，然后计算每个区间中像素点总数。
图像形…
Python数据分析：文本分类
Python数据分析：文本分类
TF-IDF（词频-逆文档频率）： TF，Term Frequency（词频），表示某个词在该文件中出现的次数 IDF，Inverse Document Frequency（逆文档频率…
阿里的数据仓库建模是否也是“华而不实”？
前言这两天在脉脉上有一个帖子很火，主题居然是讨论数据建模的，太令我诧异了！这个时候脉脉上不应该都是在炫耀年终奖和新Offer么？这个帖子是一位百度的同学在吐槽，为啥阿里的《大数据之路》讲的好像很牛，但是…
数据湖，比“数据中台”更需要重视的概念｜腾研识者
作者火雪挺 腾研识者、腾讯CSIG资深架构师一件事物若能经得起时间的推敲，经得起历史的选择，回过头去看仍能矗立在长河之中，那我们通常会称它为“经典”。10年前，Pentaho公司（一家开源BI公司）的CTO詹姆斯迪克…
数据中台建设成功的三个阶段
提醒：公众号推送规则变了，如果您想及时收到推送，麻烦右下角点个在看，或者把本号置顶】正文开始前言：自从数据中台爆火以后，天天有人问如何度量数据中台建设的效果，怎么证明数据中台建设就成功了…
数据团队要用数据驱动业务，首先得学会用数据驱动自己！
【与数据同行】已开通综合、数据仓库、数据分析、产品经理、数据治理及机器学习六大专业群，加微信号frank61822701 为好友后入群。新开招聘交流群，请关注【与数据同行】公众号，后台回复“招聘”后获得入群方法。正文开始数据驱动业务是数据从…
【从零开始学爬虫】采集收视率排行数据
l 采集网站
【场景描述】采集收视率排行数据。
【源网站介绍】收视率排行网提供收视率排行,收视率查询,电视剧收视率,综艺节目收视率和电视台收视率信息。
【使用工具】前嗅ForeSpider数据采集系统
【入口网址】http://www.tvtv.hk/archives/category/tv
【采集内容】
…
你真的需要那么多报表么？
【与数据同行】已开通综合、数据仓库、数据分析、产品经理、数据治理及机器学习六大专业群，加微信号frank61822702 为好友后入群。新开招聘微信群，请关注【与数据同行】公众号，后台回复“招聘”后获得入群方法。正文开始数据利用之现状-报表迷…
Python数据分析：文本相似度
Python数据分析：文本相似度
文本相似度： 度量文本间的相似性 使用词频表示文本特征 文本中单词出现的频率或次数将文本表示成向量 向量间相似度 余弦相似度 sim(A,B)cos(θ)A⋅B∥A∥B∥\operatorname{sim}(A, B)\cos (\theta)\frac{A \cdot B}{\…
EPM 函数之EPMCopyRange
EPM 函数之EPMCopyRange
最近接触到SAP BPC，其中对数据的操作主要是在EPM上，其中安装了EPM插件后常用的一个公式是CopyRange，官方解释如下：
此函数可用于添加和复制单元格范围的内容，直到达到报表的底部（…
Python数据分析：股票数据分析案例
Python数据分析：股票数据分析案例
步骤：
准备数据可视化数据、审查数据处理数据根据ACF、PACF定阶拟合ARIMA模型预测
import pandas as pd
import pandas_datareader
import datetime
import matplotlib.pylab as plt
from matplotlib.pylab import s…
分析生产和库存，靠这一套指标就够了！
在生产过程中，需要为生产的各个环节顺利提供物资准备的库存。包括原材料库存、零配件库存、在制品库存等。而有相应的物资，就有相应的库存。而在制造业中，大多数都是希望做到柔性生产、“零库存”生产。 然而，“零库存”是一种理想…
企业数据分析，搞定这3个重点事半功倍！
近年来，人们对信息的关注已不仅限于数据本身，而是通过一系列统计工具及分析手段去挖掘其背后隐藏的价值，从而带来诸如减人增效、辅助决策的效果。 传统的电子电气制造业是典型的人口密集型生产行业，企业转型离不开自动化和信息化&…
不融资，如何在大数据BI市场占据一席之地
这家公司是中国上一代2B厂商中的代表，又是在大数据及云计算新一轮技术热潮中活的很好的创新型公司。 帆软成立于2006年，当时企业服务市场基本没受到资本市场关注，帆软早期也没有接受资本支持。作为一家不融资的创业公司，生存是第一…
商业公司应该如何配备数据分析团队？
近期收到读者朋友的咨询，他们在建立开发部数据团队的过程中遇到困惑：在大老板的支持下，部门破天荒获得了组建专职数据团队支持开发部，然而新部门几乎没有工作成果，薪酬又高的吓人，几乎面临解散。 我认为如果…
深度解析艾瑞咨询《2017年度中国商业智能行业研究报告》
近日，艾瑞咨询发布了2017年度《中国商业智能行业研究报告》，聚焦于人工智能和商业智能的行业应用，即人工智能技术如何应用于商业智能决策，以及如何实现商业经营的智能化与自动化。该报告指出，中国企业精细化运营的需求…
我是如何入门、成长并进阶为数据分析师的？
前几天和一朋友A聊天，一个在我看来完全可以在大部分行业领域公司独当一面的数据分析师，目前仍谦虚的以“数据猿”自称。从事数据分析的他，半路出家，起初虽然懂一些数据库的知识，但仍然和很多人一样，艰难地上…
2016年五一杯数学建模B题能源总量控制下的城市工业企业协调发展问题解题全过程文档及程序
2016年五一杯数学建模
B题 能源总量控制下的城市工业企业协调发展问题
原题再现 能源是国民经济的重要物质基础,是工业企业发展的动力，但是过度的能源消耗，会破坏资源和环境，不利于经济的可持续发展。目前我国正处于经济转型的关键时期&…
finebi 新手入门案例
finebi 新手入门案例 连锁超市销售数据分析 步骤：
准备公共数据新建分析主题处理数据在数据中分析在图形中分析数据大屏
准备公共数据
点击公共数据 点击新建文件夹 修改文件夹名称 上传数据 鼠标悬停在文件夹上，右侧出现 鼠标悬停在文件夹上&#x…
数学建模-基于脑出血患者院前指标的多种机器学习预测模型构建及比较研究
基基于脑出血患者院前指标的多种机器学习预测模型构建及比较研究
整体求解过程概述(摘要) 卒中是全球致残率、致死率最高的疾病之一，其中脑出血（Intracerebral hemorrhage，ICH）患者仅占卒中患者的 20%，但致残、死亡人…
2022年高校大数据挑战赛B题图像信息隐藏求解全过程论文及程序
2022年高校大数据挑战赛
B题 图像信息隐藏
原题再现： 互联网的快速发展，给图像、视频的传播方式带来巨大变化。图像作为媒体的重要载体，每天有大量的原创图像公开在互联网上，如何保护图像版权的同时不破坏原始的图像一直是图像处…
有没有适合新手练习 Python 的做题类网站？
不多说了，直接上货~
1. LeetCode
LeetCode 是一个刷算法题的网站，里面有多种语言可选 ，题目分为简单、中等和困难三个级别，可以根据自己的水平进行选择，想进大厂的话，这可能是必不可少的一关。 网址&…
京东大数据分析：2023年10月手机行业销量同比增长249%
今年双11，手机仍是竞争极为激烈的产品品类，各大手机厂商均在双11之前做足了准备，10月下旬，各电商平台双十一预售正式开启。而在双11大促节的参与下，10月份手机市场的整体销售也呈现增长趋势。 根据鲸参谋平台的数据显示…
京东数据分析：2023年10月京东彩妆销售大数据采集
鲸参谋监测的京东平台10月份彩妆市场销售数据已出炉！ 鲸参谋数据显示，今年10月份，京东平台上彩妆市场的销量将近430万，环比增长约21%，同比下滑约3%；销售额将近5.8亿，环比增长约7%，同…
Matplotlib图形配置与样式表_Python数据分析与可视化
Matplotlib图形配置与样式表 配置图形修改默认配置rcParams样式表 Matplotlib的默认图形设置经常被用户诟病。虽然2.0版本已经有了很大改善，但是掌握自定义配置的方法可以让我们打造自己的艺术风格。
配置图形
我们可以通过修个单个图形配置，使得最终图…
pyhon数据分析A股股票策略实际买卖总结（每月末更新数据）
简介
本篇文章主要记录python数据分析a股股票选股后实际买卖的记录。
选股策略
低位寻股，筛选出低位股价股票已经做过调整的股票，做短线交易（不超过7天），不贪，小赚即走。分三个时段，开盘三十…
hivesql 将json格式字符串转为数组
hivesql 将json格式字符串转为数组 完整过程SQL在文末 json 格式字符串 本案例 json 字符串参考格式，请勿使用本数据 {"data": [{"province": 11,"id_card": "110182198903224674","name": "闾丘饱乾"…
基于日志做变量耗时分析
目录 一：需求二：耗时分析方案三：实现步骤 一：需求
目前我们的变量计算系统中存在大量的变量计算。 随着业务的越来越多， 变量计算也越来越多。 为了维护我们变量计算服务的高处理性能， 我们需要对目前的变…
BOSS直聘网站数据分析岗位信息爬取
Boss直聘网站已改用ajax了，可以改用selenium库爬取，下面爬虫已过时，但数据分析方法还是可以用的，数据分析全部代码都已给出。
语言：Python3
目录
一、信息爬取
二、数据分析 2.1 数据解析 2.2 数据分析 2.2.1 数据…
数据分析报告的框架——既要懂分析，也要会讲故事
数据分析项目到收尾关头，总要出一份数据报告。 按照项目类型，可能是产品投放市场的效果评估；日常报表数据汇总；活动数据分析。而报告也分多种情况，有的需要给项目组一个交代，有的需要和业务组一同评估分析&…
如何成为一家真正发挥大数据作用的 “数据驱动型公司”？
在本章节中，我想试着描述、分享一下大数据在公司商业运营情境当中所扮演的角色。 大数据的能力是从何处而来？ 首先，我想先花一点时间来谈谈有关数据的价值，数据所发挥的作用，它是从何处而来的。 我认为「企业专家中心「…
数据挖掘——第三章：数据预处理
文章目录1. 数据存在的问题1.1 原始数据存在的问题1.2 数据质量要求1.3 预处理主要任务2. 数据清洗2.1 空缺值处理2.2 噪声处理3. 数据集成3.1 集成过程中涉及的实体识别3.2 冗余问题3.3 检测冗余方法4. 数据归约4.1 数据归约的标准：4.2 数量归约：直方图…
UWA学堂上新｜如何构建数据分析体系
怎么看为游戏引进的IP价值是否合适？如何精准定位目标用户？如何评估产品质量？上线后的反响如何评估？如何做下一步的运营和规划？这一系列问题，如果没有数据的支撑，我们又怎么能明确地走向下一步&a…
【读书笔记-＞统计学】08-01 连续型概率分布与正态分布-连续数据、概率密度函数、连续概率概念简介
连续型概率分布与正态分布
连续数据
前面讲到的概率分布涉及的都是离散数据，即数据由一个个单独的数值组成，其中的每一个数值都有对应概率。例如，在分析老虎机收益概率分布时，每一局赌局出现的收益数额是确定的，我们…
一份接地气的数据方案！——能源化工生产管理数据分析
文| 帆软数据应用研究院 船长 更多大数据资讯和企业案例可关注 ：知乎专栏《帆软数据应用研究院》 笔者最近参加了帆软上海的化工行业沙龙，与众多知名化工企业CIO聊天，有不少思考与收获。今天就就来谈谈能源化工生产管理数据分析，说…
【读书笔记-＞统计学】04-01 利用概率理论预测和决策-概率与事件、维恩图、互斥与相交事件、交集与并集概念简介
利用概率理论预测和决策
老样子，书还是用一个情境帮助我们学习概率：假如你在一个赌场，你有一些筹码，“轮盘赌”正在进行，对此你也非常的感兴趣。 轮盘赌简介 庄家转动一个轮盘，随后朝相反方向掷出一个小球…
【读书笔记-＞统计学】03-02 各种“距”和“差”-方差、标准差、标准分概念简介
变异性 “>” 分散性 继续上一篇挑选球员的例子，全局、四分位距可以告诉我们最大值和最小值之间的差值，但是无法告诉球员们得到这些最高分或最低分的频率（得高分次数多的球员好），以及球员们得到更接近数据中心的得分…
数据分析_04_pandas
pandas
处理除了数值型的数据之外的其他类型数据 常用数据类型 Series 一维数据，带标签的数组DataFrame 二维数据 创建Series数组 pd.Series([1,23,2,2,1], indexlist(“abcde”)) 也可以用字典转换到Series 转变数值类型 t2.astype(float)
切片和索引 获取值 …
京东运营数据分析（京东数据采集）：2023年10月京东护肤行业品牌销售排行榜
鲸参谋监测的京东平台10月份护肤市场销售数据已出炉！ 鲸参谋数据显示，2023年10月份，京东平台上护肤市场的销量为2000万，环比增长约28%，同比降低约26%；销售额为25亿，环比增长约24%，同…
京东平台双11全品类完整销售数据回顾（京东大数据-京东数据采集-京东数据接口）
今年的双十一，大家依然没有等到各大平台的官方战报。
所以，对于绝大部分品牌、商家、咨询公司乃至有数据研究需求的小伙伴来说，很难了解到今年大促消费者的真实消费水平。 为此，鲸参谋简单整理出了10个京东大类目（含5…
Python绘制几种常见的时序分析图
时间序列数据是一种按照时间顺序排列的观测值集合，每个观测值对应于一个特定的时间点。这种数据在许多领域中都具有重要的应用价值，如金融、经济、气候科学等。通过分析时间序列数据，可以帮助我们掌握潜在的模式、发现趋势和季节性波动等重要…
数据分享 I 重点城市现状建筑数据，shp格式放送
数据名称: 现状建筑数据
数据格式: Shp
数据时间: 不同城市的数据时间有所不同，详情可搜“吧唧数据”
数据几何类型: 面
数据坐标系: WGS84坐标系
数据来源：网络公开数据 深圳市现状建筑数据示意图 东莞市部分镇街现状建筑数据示意图 武汉市部…
京东运营数据分析：10月京东奶粉行业销售数据分析
近年来，随着出生人口红利逐渐消逝，婴幼儿奶粉竞争进入红海时代，产品逐渐过剩。在这种情况下，我国奶粉市场进入调整阶段，企业开始将目光投向奶粉的品类细分领域，如有机奶粉、羊奶粉、特殊配方奶粉、成人奶粉…
数据分析基础之《matplotlib（6）—饼图》
一、饼图介绍
1、什么是饼图 饼图广泛的应用在各个领域，用于表示不同分类的占比情况，通过弧度大小来对比各种分类。饼图通过将一个圆饼按照分类的占比划分成多个区块，整个圆饼代表数据的总量，每个区块（圆弧࿰…
数据可视化：解锁企业经营的智慧之道
在现代企业管理中，数据可视化已经成为了一项重要的工具。它不仅仅是简单地展示数据，更是提供了深入理解数据、做出更明智决策的方法。作为一名可视化设计从业人员，我经手过一些企业自用的数据可视化项目，今天就来和大家聊聊数据可…
深入体验：山海鲸可视化软件的独特魅力
山海鲸可视化软件是一款功能强大的数据可视化工具，作为该软件的资深用户，我深感其独特的魅力和优势。下面，我将从软件特点、操作体验、数据交互和实际应用场景等方面，为大家详细介绍山海鲸可视化软件。 首先，山海鲸可视…
软考：2024年软考高级：软件工程
软考：2024年软考高级: 提示：系列被面试官问的问题，我自己当时不会，所以下来自己复盘一下，认真学习和总结，以应对未来更多的可能性
关于互联网大厂的笔试面试，都是需要细心准备的 （1…
做数据分析为何要学统计学（5）——什么问题适合使用t检验？
t检验（Students t test），主要依靠总体正态分布的小样本（例如n < 30）对总体均值水平进行差异性判断。
t检验要求样本不能超过两组，且每组样本总体服从正态分布（对于三组以上样本的࿰…
无需繁琐编程 开启高效数据分析之旅！
不学编程做R统计分析：图形界面R Commander官方手册
R Commander是 R 的图形用户界面，不需要键入命令就可通过熟悉的菜单和对话框来访问 R 统计软件。 R 和 R Commander 均可免费安装于所有常见的操作系统——Windows、Mac OS X 和 Linux/UNIX。
本书作…
假设检验和统计推断：从样本到总体
1. 写在开头
统计学中的假设检验和统计推断是从样本数据中对总体进行推断和判断的关键工具。本文将深入探讨假设检验的类型，并结合具体的场景和例子，展示不同类型假设检验的应用。
2. 单样本 t 检验
2.1 概述
单样本 t 检验（One-sample t-test）是一种用于比较一个样本的…
Python、Stata、SPSS怎么学？推荐一波学习资料
1.Python学习推荐书目
关于Python机器学习，推荐学习杨维忠、张甜所著的，清华大学出版社出版的《Python机器学习原理与算法实现》，以及张甜、杨维忠所编著的，清华大学出版社出版的《Python数据科学应用从入门到精通》，…
Graphpad Prism10.1.0 安装教程 (含Win/Mac版)
GraphPad Prism
GraphPad Prism是一款非常专业强大的科研医学生物数据处理绘图软件，它可以将科学图形、综合曲线拟合（非线性回归）、可理解的统计数据、数据组织结合在一起，除了最基本的数据统计分析外，还能自动生成统…
自助POS收银机-亿发互联网收银解决方案助力零售业迎接数字经济挑战
零售业作为中国经济的主动脉，扮演着至关重要的角色。最新发布的《中国线下零售小店数字化转型报告》揭示了当前线下零售小店所面临的多重痛点，经营方式传统、滞后的内部管理和营销模式，以及缺乏消费数据等问题，这些痛点都指明&…
深度探索大数据分析：挖掘价值与洞察力
目录 写在开头1. 导论1.1 大数据的定义与特征1.2 大数据对业务和决策的影响1.3 大数据分析的基本原则2. 大数据技术与工具2.1 分布式计算框架2.2 数据存储与管理2.3 大数据处理与分析工具3. 数据采集与清洗3.1 数据源的多样性3.2 数据采集工具与技术3.3 数据清洗与预处理的重要…
观测云实现日志存储与分析 10 倍性价比提升｜SelectDB 技术团队
作者：观测云 CEO 蒋烁淼 & 飞轮科技技术团队
在云计算逐渐成熟的当下，越来越多的企业开始将业务迁移到云端，传统的监控和故障排查方法已经无法满足企业的需求。而观测云可提供整体数据的分析、洞察、可视化、自动化、监测告警、智能巡查…
从Excel到智能化：智能报表的演进与未来发展趋势 | 文末免费领取数据分析超大鼠标垫
摘要：本文由葡萄城技术团队于CSDN原创并首发。转载请注明出处：葡萄城官网，葡萄城为开发者提供专业的开发工具、解决方案和服务，赋能开发者。 报表的迭代历程
报表工具的诞生与计算机技术的出现和信息技术的进步密不可分。下图是报…
城市之眼：数据可视化在智慧城市的角色
作为智慧城市建设的核心组成部分，数据可视化扮演着至关重要的角色。在城市中，数据源源不断地产生，涵盖了从交通流量、环境质量到市民需求等各个方面。而数据可视化作为将这些数据呈现出来的手段，对智慧城市的发展起着关键性的作用…
2022年第十一届数学建模国际赛小美赛B题序列的遗传过程解题全过程文档及程序
2022年第十一届数学建模国际赛小美赛
B题 序列的遗传过程
原题再现： 序列同源性是指DNA、RNA或蛋白质序列之间的生物同源性，根据生命进化史中的共同祖先定义[1]。DNA、RNA或蛋白质之间的同源性通常根据它们的核苷酸或氨基酸序列相似性来推断。显著的相…
什么是数据清洗、特征工程、数据可视化、数据挖掘与建模？
1.1什么是数据清洗、特征工程、数据可视化、数据挖掘与建模？ 视频为《Python数据科学应用从入门到精通》张甜 杨维忠 清华大学出版社一书的随书赠送视频讲解1.1节内容。本书已正式出版上市，当当、京东、淘宝等平台热销中，搜索书名即可。内容涵…
分类与群组：解析分类和聚类分析技术
目录 写在开头1. 数据分类与聚类简介1.1 分类分析1.2 聚类分析1.3 对比分析2. 如何学习分类和聚类分析技术2.1 学习理论知识2.1.1 数学知识2.1.2 编程基础2.1.3 深入学习算法2.1.3.1 分类算法学习举例2.1.3.2 聚类算法学习举例2.1.4 参与实战2.2 应用成功案例2.2.1 分类算法成功…
利用 Python进行数据分析实验（一）
一、实验目的
使用Python解决简单问题
二、实验要求
自主编写并运行代码，按照模板要求撰写实验报告
三、实验步骤
本次实验共有5题：
有四个数字：1、2、3、4，能组成多少个互不相同且无重复数字的三位数？各是多少&…
阶段四：数据分析与机器学习(学习基本的机器学习算法，如线性回归，决策树等。)
Python 是一种广泛使用的编程语言，特别适用于数据分析和机器学习。下面是如何使用 Python 来学习基本的机器学习算法，如线性回归和决策树。
首先，你需要安装一些必要的库。对于机器学习，最常用的库包括 Scikit-learn、Pandas、Nu…
Altair推出 Altair RapidMiner 2023 平台，提供生成式 AI 功能
Altair推出 Altair RapidMiner 2023 平台，提供生成式 AI 功能
更新包括自动聚类、扩展 SAS、Python 和 R 编程功能等
近日，Altair（纳斯达克股票代码：ALTR）近日宣布其数据分析和 AI 平台 Altair RapidMiner 取得了一系…
Python Pandas 自定义操作函数`apply()`,`map()`,`applymap()`用法归纳（第17讲）
Python Pandas 自定义函数apply(),map(),applymap()用法归纳（第17讲） 🍹博主 侯小啾 感谢您的支持与信赖。☀️ 🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔…
Django + Matplotlib：实现数据分析显示与下载为PDF或SVG
写作背景
首先，数据分析在当前的信息时代中扮演着重要的角色。随着数据量的增加和复杂性的提高，人们对于数据分析的需求也越来越高。
其次，笔者也确确实实曾经接到过一个这样的开发需求，甲方是一个医疗方面的科研团队࿰…
虾皮关键词工具：优化您的Shopee商品曝光度和搜索排名
在Shopee平台上，关键词工具对于提高商品曝光度和搜索排名非常重要。本文将向您介绍一些值得推荐的关键词工具，这些工具可以帮助您找到合适的关键词以优化您的商品列表，并提高搜索排名和曝光度。 先给大家推荐一款shopee知虾数据运营工具知虾免…
利用 Python 进行数据分析实验（五）
一、实验目的
使用Python解决问题
二、实验要求
自主编写并运行代码，按照模板要求撰写实验报告
三、实验步骤
1 爬取并下载当当网某一本书的网页内容，并保存为html格式 2 在豆瓣网上爬取某本书的前50条短评内容并计算评分的平均值(自学正则表达式) …
数据清洗、特征工程和数据可视化、数据挖掘与建模的主要内容
1.4 数据清洗、特征工程和数据可视化、数据挖掘与建模的内容 视频为《Python数据科学应用从入门到精通》张甜 杨维忠 清华大学出版社一书的随书赠送视频讲解1.4节内容。本书已正式出版上市，当当、京东、淘宝等平台热销中，搜索书名即可。内容涵盖数据科学…
Navicat 连接 GaussDB分布式的快速入门
Navicat Premium（16.3.3 Windows版或以上）正式支持 GaussDB 分布式数据库。GaussDB分布式模式更适合对系统可用性和数据处理能力要求较高的场景。Navicat 工具不仅提供可视化数据查看和编辑功能，还提供强大的高阶功能（如模型、结构…
利用 Python 进行数据分析实验（七）
一、实验目的
使用Python解决问题
二、实验要求
自主编写并运行代码，按照模板要求撰写实验报告
三、实验步骤
操作书上第九章内容请画出如图2.png所示的图形通过编码获得fcity.jpg的手绘图像（如beijing.jpg所示）
四、实验结果
T2
&qu…
数据分析基础之《matplotlib（4）—柱状图》
一、柱状图绘制
1、柱状图要素 有类别
2、需求：对比每部电影的票房收入 电影数据如下图所示：
3、matplotlib.pyplot.bar(x, height, width0.8, bottomNone, *, aligncenter, dataNone, **kwargs) 说明： x：有几个类别 height&am…
数据可视化私有化部署：为何成本居高不下？
尽管在可视化设计这行干了好多年，也接手过不少项目，但昂贵的私有化部署费用总能让我发出由衷的感叹：“这几十万一年也太贵了！”。可以预见，数据可视化软件私有化部署所带来的高昂成本，将是许多企业面临的问…
python数据分析总结(matplotlib)
目录
前言
目录
图表配置
绘图
线条样式(linestyle)
点标记(marker)
画布(figure)
坐标轴
图表组成
多图表
双y轴 前言 本片文章为个人python数据分析matplotlib学习总结文章，内容简洁，仅供参考。 图表配置 plt.rcParams["font.sans-ser…
Python数据科学视频讲解：数据清洗、特征工程和数据可视化的注意事项
1.6 数据清洗、特征工程和数据可视化的注意事项 视频为《Python数据科学应用从入门到精通》张甜 杨维忠 清华大学出版社一书的随书赠送视频讲解1.6节内容。本书已正式出版上市，当当、京东、淘宝等平台热销中，搜索书名即可。内容涵盖数据科学应用的全流程…
python HTML文件标题解析问题的挑战
引言
在网络爬虫中，HTML文件标题解析扮演着至关重要的角色。正确地解析HTML文件标题可以帮助爬虫准确地获取所需信息，但是在实际操作中，我们常常会面临一些挑战和问题。本文将探讨在Scrapy中解析HTML文件标题时可能遇到的问题，并…
SPSS多元对应分析
前言： 本专栏参考教材为《SPSS22.0从入门到精通》，由于软件版本原因，部分内容有所改变，为适应软件版本的变化，特此创作此专栏便于大家学习。本专栏使用软件为：SPSS25.0 本专栏所有的数据文件请点击此链接下…
数据分析 | 离散型数据的类别转换 | Python代码
有一列类别数据，共有25433条样本，38个类别，其中有24个类别有对应的大类，现需要将38个类别全部转换成其对应的大类，没有对应的大类的类别转换成unknown。 数据集见GitHub连接：https://github.com/ChuanTaoLa…
做数据分析为何要学统计学（3）——何为置信区间？它有什么作用？
置信区间是统计学中的一个重要工具，用以使用样本参数()来估计总体均值在某置信水平下的范围。通俗一点讲，如果置信度为95%（等价于显著水平a0.05），置信区间为[a,b]，这就意味着总体均值落入该区间的概率为95%…
智慧水利-城市防汛调度大屏提升防汛工作的效率和准确性
近年来，水利自然灾害一直以层出不穷的强度和频率摧毁我们人类的家园。国内每年夏天的洪涝灾害一直困扰着长江流域地区，每年夏天微博上关于洪涝的热门新闻也是层出不穷。以近期出现的山西大雨为例，异常降雨造成山西省11个市76个县（…
R语言，table()函数实现统计每个元素出现的频数+并将最终统计频数结果转换成dataframe数据框形式
在 R中，要统计dataframe数据框中每个元素出现的频数，可以使用table()函数。以下是一个示例：
目录
一、创建数据
二、统计第一列每个元素出现的频数
三、统计第二列每个元素出现的频数
四、将频数结果转换为数据框，并改列名 一…
Jupyter Notbook+cpolar内网穿透实现公共互联网访问使用数据分析工作
文章目录 1.前言2.Jupyter Notebook的安装2.1 Jupyter Notebook下载安装2.2 Jupyter Notebook的配置2.3 Cpolar下载安装 3.Cpolar端口设置3.1 Cpolar云端设置3.2.Cpolar本地设置 4.公网访问测试5.结语 1.前言
在数据分析工作中，使用最多的无疑就是各…
做数据分析为何要学统计学（5）——什么问题适合使用卡方检验？
卡方检验作为一种非常著名的非参数检验方法（不受总体分布因素的限制），在工程试验、临床试验、社会调查等领域被广泛应用。但是也正是因为使用的便捷性，造成时常被误用。本文参阅相关的文献，对卡方检验的适用性进行粗浅…
2023年5个自动化EDA库推荐
EDA或探索性数据分析是一项耗时的工作，但是由于EDA是不可避免的，所以Python出现了很多自动化库来减少执行分析所需的时间。EDA的主要目标不是制作花哨的图形或创建彩色的图形，而是获得对数据集的理解，并获得对变量之间的分布和相关…
StarRocks上新，“One Data、All Analytics”还有多远？
K.K在《未来十二大趋势》中认为，我们正处于一个数据流动的时代。商业乃数据之商业。归根结底，你在处理的都是数据。
的确，当数据成为新的核心生产要素之际，数据分析就犹如最重要的生产工具之一，决定着企业在数字化时代…
数学建模-数据新动能驱动中国经济增长的统计研究-基于数字产业化和产业数字化的经济贡献测度
数据新动能驱动中国经济增长的统计研究-基于数字产业化和产业数字化的经济贡献测度
整体求解过程概述(摘要) 伴随着数据要素化进程的不断加深，对于数据如何作用于经济发展，数据与其他要素结合产生的动能应该如何测度的研究愈发重要。本文将数据新动能分…
【玩转TableAgent数据智能分析】利用TableAgent进行教育数据分析
文章目录 前言九章云极（DataCanvas）介绍前期准备样例数据集体验1. 样例数据集-Airbnb民宿价格&评价 体验1.1 体验一1.2 体验二 教育数据的分析（TableAgent&ChatGLM对比）1. 上传文件2. 数据分析与对比2.1 分析一2.1.1 Tabl…
DAP数据集成与算法模型如何结合使用
企业信息化建设会越来越完善，越来越体系化，当今数据时代背景下更加强调、重视数据的价值，以数据说话，通过数据为企业提升渠道转化率、改善企业产品、实现精准运营，为企业打造自助模式的数据分析成果，以数据…
数据挖掘目标（客户价值分析）
import numpy as np
import pandas as pd
import matplotlib.pyplot as plt
import seaborn as snsIn [2]:
datapd.read_csv(r../教师文件/air_data.csv)In [3]:
data.head()Out[3]:
Start_timeEnd_timeFareCityAgeFlight_countAvg_discountFlight_mileage02011/08/182014/0…
数据可视化：解析跨行业普及之道
数据可视化作为一种强大的工具，在众多行业中得到了广泛的应用，其价值和优势不断被发掘和利用。今天就让我以这些年来可视化设计的经验，讨论一下数据可视化在各个行业中备受青睐的原因吧。 无论是商业、科学、医疗保健、金融还是教育领域&…
2010年全国地质灾害隐患点数据，shp/excel格式，含灾害类型、等级、经纬度坐标等字段
基本信息.
数据名称: 全国地质灾害隐患点数据
数据格式: Shp、Excel
数据时间: 2010年
数据几何类型: 点
数据坐标系: WGS84坐标系
数据来源：网络公开数据
数据字段：
序号字段名称字段说明1xzqhdm行政区划代码2xzqhmc行政区划名称3mc名称4z…
2023第二届全国大学生数据分析大赛A完整原创论文（含摘要+问题分析+模型建立与求解+python代码）
大家好，从昨天肝到现在，终于完成了2023第二届全国大学生数据分析大赛A题某电商平台用户行为分析与挖掘的完整论文啦。
给大家看一下目录吧：
目录
摘 要： 10
一、问题重述 12
二．问题分析 13
2.1问题一 13
2.2问…
Python数据分析入门到进阶：数据清洗（含详细代码）
在上一篇文章中，介绍了如何使用python导入数据，导入数据后的第二步往往就是数据清洗，下面我们来看看如何使用pandas进行数据清洗工作
导入相关库
import pandas as pddataframe pd.read_csv(rC:/Users/DELL/data-science-learning/python数…
做数据分析为何要学统计学（8）——总体不服从正态分布时使用什么假设检验方法？
大多数情况下，我们都假设样本所在总体服从正态分布，然后使用t检验、方差分析等假设检验方法。但是总体如果不服从正态分布，那么就得使用非参数检验方法，如Mann-Whitney U检验和Wilcoxon秩和检验。其中Mann-Whitney U检验适用于独立…
2019年第八届数学建模国际赛小美赛C题预测通过拥堵路段所需的时间解题全过程文档及程序
2019年第八届数学建模国际赛小美赛
C题 预测通过拥堵路段所需的时间
原题再现： 在导航软件中，行程时间的估计往往是一个重要的功能。现有的导航软件往往通过出租车或安装了该软件的车辆获取实时GPS数据来确定当前的路况。在交通拥堵严重的情况下&#…
迅速理解什么是通信前置机
通信前置机设在两个通信对象之间，是实质性的物理服务器，适应不同通信协议或数据格式之间的相互转换。 前置机的作用：
隔离——隔离客户端与服务端，保障后端安全减负——处理非核心业务，分担后端服务器压力࿰…
EasyV易知微助力智慧城市未来趋势发展——数字孪生城市
“智慧城市的未来趋势就是数字孪生”——《基于数字孪生的智慧城市》 城市数字化管理、智慧城市和数字孪生城市的发展是相互促进、逐步深化的过程。
城市数字化管理作为起点，奠定了信息化、数据化的基础；而智慧城市则将数字城市管理进一步升级ÿ…
利用python进行数据分析 第十四章 14.3 1880-2010年间全美婴儿姓名
14.3 1880-2010年间全美婴儿姓名 美国社会保障总署（SSA）ᨀ 供了一份从1880年到现在的婴儿名字频率数据。Hadley Wickham（许多流行R包的作者）经常用这份数据来演示R的数据处理功能。 我们要做一些数据规整才能加载这个数据集&am…
2021年数维杯国际大学生数学建模A题新冠肺炎背景下港口资源优化配置策略求解全过程文档及程序
2021年数维杯国际大学生数学建模
A题 新冠肺炎背景下港口资源优化配置策略
原题再现： 2020年初，新型冠状病毒（COVID-19）在全球迅速蔓延。根据世界卫生组织2021年7月31日的报告，新冠病毒疫情对人类的影响可能比原先预…
Tableau安装详解及密钥申请
文章目录Tableau介绍下载软件申请密钥安装软件❤️ 作者简介：大家好我是小鱼干儿♛是一个热爱编程、热爱算法的大三学生，蓝桥杯国赛二等奖获得者🐟 个人主页 ：https://blog.csdn.net/qq_52007481⭐ 个人社区：【小鱼干爱…
手把手教你学Python之字典
目录
字典的创建
字典的主要方法
字典推导式
字典的排序 字典是一种无序可变的容器，字典中的元素都是"键(key):值(value)"对， “键”和“值”之间用冒号隔开，所有“键值对”放在一对大括号“{}”中，元素之间用逗号分…
Origin: Piper diagram/Trilinear diagram (三线图)
利用Origin绘制piper diagram图piper diagram 简介从百分比数据创建一个piper图数据准备绘制图形自定义piper图参数三元图与菱形图间距的调整三元图颜色及形状的调整添加数据标签图例更新piper diagram 简介
piper diagram常被用作水文地质研究中水样中化学成分的有效图形表示…
关于Numpy数组切片操作的整理与思考
1.Python3中切片的定义
切片的语法表达式为：[start_index : end_index : step]，其中：
start_index表示起始索引end_index表示结束索引step表示步长，步长不能为0，且默认值为1
切片操作是指按照步长，截取从…
Python3 生成器（generator）概念浅析
引子
某次面试问候选人：Python 中生成器是什么？答曰：有 yield 关键字的函数。而在我印象中此种函数返回的值是生成器，而函数本身不是。如下：
In [1]: def get_nums(n): ...: for i in range(n): ...: yi…
我，非科班专科生，花3个月自学python，终于能兼职赚钱了
现在这个时代，人人开始追求做斜杠青年，多方面开展副业，赚取几份工资。有很多朋友就抓住了Python的风口，靠着Python兼职月入一万。那么学完Python，有哪些可以做的兼职呢？
一、闲暇时间，接自由单…
Python数据分析：Python日期和时间处理及操作
Python数据分析：Python日期和时间处理及操作
时间序列分类：
时间戳（timestamp） 特定的时刻固定周期（period） 某月或某年时间间隔（interval） 由起始时间戳和结束时间戳表示
dateti…
那么多转行计算机成功的例子，我要不要转行？我能行，吗？
我发现有不少朋友是希望通过学习 Python 转行成为程序员的。但其中大部分可能都对编程、程序员、IT行业并不十分熟悉，只能从网上获取一些零碎的信息来管中窥豹。针对一些普遍的疑问，我在此做点梳理，分享下我个人的经验和建议。
在开始之前我…
Pandas+Pyecharts | 北京近五年历史天气数据可视化
文章目录 🏳️🌈 1. 导入模块🏳️🌈 2. Pandas数据处理2.1 读取数据2.2 处理最低气温最高气温数据2.3 处理日期数据2.4 处理风力风向数据 🏳️🌈 3. Pyecharts数据可视化3.1 2018-2022年历史温度分布…
Excel数据选项卡下面没有数据分析和规划求解
1.打开Excel，依次点击“文件”——“更多”——“选项” 2.点击“加载项”——“转到”——勾选“分析数据库”和“规划求解”，然后确定即可。
数据分析入门-day01
1.1安装pandas
参考链接：
Python的pandas安装超级详细_请让我滚的博客-CSDN博客_pandas怎么安装
Pandas 安装 | 菜鸟教程
1.2安装numpy
NumPy 安装 | 菜鸟教程
1.3 导入numpy和pandas
1.3.1当前路径方式
import pandas as pd
import numpy as npdf pd.read…
【数据分析与挖掘】数据分析学习及实践记录 | part 06-numpy中的nan和常用方法
回顾到九月初，学到数据分析部分的05，开始中断走自然语言处理部分的内容。
对于未挖完的坑来说，接下来的部分应该不算很难，争取后面几天把这部分更完。接上之前部分的并不难，比如主要是重新打开jupyter，然后…
店铺如何选址？这套算法预测销售额，误差仅300元！
店铺选址在生活中是经常接触到的，而且店铺选址对于企业的策略制定、营业额等都有直接或间接的影响，所以， 店铺选址并不是一个陌生的词。实际来讲店铺选址的最终落地点是店铺的未来一段时间的销量，企业通过预测店铺未来销量与开店标…
一个案例告诉你，数据挖掘如何用于企业生产
数据挖掘，你想到了什么？
聊到数据挖掘话题时，大多数人的第一反应是什么？ 就是那些教授学者搞得研究吧，能用吗？都是唬人的吧？再现实一点，数据挖掘能商用不？这玩意应该还是…
AB实验的最小样本量（功效分析）
样本大小、显著性水平、功效、效应值，给定任意三个量，可以推算出第四个量：
效应值的计算：依赖于假设检验中使用的统计方法，如两样本均值之差除以标准差（如下），或两样本均值之差除以…
cdp 持续数据保护_什么是CDP（哥伦比亚数据产品）？
cdp 持续数据保护CDP：哥伦比亚数据产品 (CDP: Columbia Data Products) CDP is an abbreviation of "Columbia Data Products". It was a data security based corporation which intended to manufacture a number of the foremost IBM PC clones in 197…
ccc 邮箱_CCC的完整形式是什么？
ccc 邮箱CCC：催化剂控制中心 (CCC: Catalyst Control Center) CCC is an abbreviation of the "AMD Catalyst Control Center". CCC是“ AMD催化剂控制中心”的缩写 。 It is an elemental part of the AMD Catalyst software engine. It makes use of Q…
python 每n个切片_Python | 分离饼图中的每个切片
python 每n个切片A pie plot or a pie chart is a circular statistical graphic technique, in which a circle is divided into slices with respect to numerical proportion. In a pie chart, the arc length, central angle, and area of each slice, is proportional to …
”父母子女身高“数据集（高尔顿数据集）进行线性回归分析实验
”父母子女身高“数据集（高尔顿数据集）进行线性回归分析实验一、配置Excel二、对数据做线性回归分析三、父亲母亲分别与儿子做回归方程分析1、父亲与儿女数据分析2、母亲与儿女身高数据分析一、配置Excel
实验将使用到Excel的数据分析工具，一…
数据分析入门-机器学习部分
机器学习1——分类问题
为建模准备数据
在时间场景中，我们一般会另设一个Dev数据集作为开发数据集（测试集），我们在成功建模后用它对模型调优。模型是从训练集中训练出来的，然后用Dev数据来度量它的指标准确度等&…
程序员转python有没有前途
3月的Tiobe编程语言排行榜不出意外，python依然强势霸榜，从90年出生到现在，python从一开始的无人问津到近两年的热度逐年上涨，爆发，令很多其他语言的程序员都有些焦虑，到底要不要转语言学python，…
比python可视化更强大，这两个可视化工具真yyds
有多少人对Excel的了解，仅仅停留在制作报表上？
上周接到哩哩的求助，说领导让她收集今年下半年的各项数据，汇总后再对报表数据进行处理，做成数据可视化图表，周五下班前就得完成。
她都快急哭了，…
使用NetFlow分析网络异常流量(1)
一、前言近年来，随着互联网在全球的迅速发展和各种互联网应用的快速普及，互联网已成为人们日常工作生活中不可或缺的信息承载工具。然而，伴随着互联网的正常应用流量，网络上形形色色的异常流量也随之而来，影响到互联网…
对连续型数据，用pandas和plt进行折线图分析
此次分享一个分析连续型数据的案例。目前市场上会常用此方法去观察金融数据，销量数据等问题的分析。 数据真实，采集自某网站。
这里拿过来的数据，时间字段是分开了，首先做了个预处理，把时间整合下，并添加到…
【评价指标】详解F1-score与多分类MacroF1MicroF1
基本概念
首先，要背住的几个概念就是：accuracy,precision,recal, TP,FP,TN,FN
TP:true positive。预测是正确的正样本FP:false positive。预测是错误的正样本TN：true negative。预测是正确的负样本FP:false positive。预测是错误的负样本
…
【读书笔记-＞统计学】05-03 “概率”的整体影响-相互独立的随机变量、线性变化随机变量的计算概念简介
相互独立的随机变量的“加”与“减”
新的情景：假设有2台老虎机，它们各自独立，其概率分布分别如下：
老虎机1：
x-5395P(Xx)0.990.01
老虎机2，也就是上面用过的老虎机：
y-223487398P(Yy)0.977…
如何将枯燥的大数据呈现为可视化的图？
将数据转化成可视化图表/形，其实一个工具就能完成，碍于工具太多，按照使用场景，暂且将已成熟应用的分为三个层次： 第一层：数据报告、信息图 这里统称信息图。信息图是把数据、信息或知识可视化，必…
数据化管理在餐饮业中的应用
一、为什么要重视数据化运营和管理？ “从经营到管理，管理方向需要数据灯塔” 餐饮市场和社会各业具有相似之处，也有很明确的本质不同。 1、首先，餐饮市场不像电信、石油市场是垄断性的，餐饮市场充分透明，符…
各地都在搞大数据，你的家乡有啥特色没——解读2017年地方政府大数据报告
文 | 帆软数据应用研究院 水手哥 本文出自：知乎专栏《帆软数据应用研究院》——数据干货&资讯集中地 日前，数据中心联盟大数据发展促进委员会发布了《我国地方政府大数据发展规划分析报告》，聚焦各省市大数据发展举措，对37个省…
如何培养数据分析的思维？
工具的运用都大同小异，思维的不同决定个体的差异。这一小节我们来探索数据分析的思维模式，如何培养数据分析的思维？这里列出5个数据分析中常见的思维模式供大家学习参考。01结构化思维结构化的思维是很重要且应用最为广泛的一种思维模式&…
对比Excel学习SQL（6）：表连接
本文是对比Excel学习SQL系列第6篇文章，之前5篇传送门在此：《分组和子查询》、《计算字段》、《对行和列的操作》、《库/表/记录的增查删改》、《写给小白的SQL学习文章》。表连接可以用来联合多张表进行查询，也就是将多张表横向整合成为一张表…
超级菜鸟怎么学习数据分析
各位亲爱的小伙伴，中秋快乐，为了不打扰大家过节，这篇文章就提前发了。今天聊一聊超级菜鸟怎么学习数据分析，我将从三个方面来阐述：数据分析、学习和超级菜鸟。本文大概2700字，读完需10分钟，建议…
数据化运营7大经典思路
1. 分解思路 做互联网运营的数据分析，首先就是学会“分解”。将数据分解，将问题分解。所有的数据都可以层层向下分解，找出更多的“子数据”，通过对子数据的挖掘和优化，往往能逐个击破，找到方向，…
价值百万的企业大数据分析报告是如何炼成的？
很多企业往往会花高额价钱来请咨询公司对企业的整体经营情况做一个分析，生成一个报告。但是对于多数已经有数据管理的企业，可以针对一个具体企业、一个具体问题开展针对性的数据分析，从点到面地解决问题。现如今企业有了更多的数据来源途径和…
数据分析之帕累托（贡献度）分析
帕累托分析又叫贡献度分析，原理是20/80定律，即80%的利润常常来自于20%的产品。
以某餐饮菜品的盈利数据为例：
R语言实现：
1、导入数据
dishdata <- read.csv(file"catering_dish_profit.csv",header T) #源数据…
深度解读｜数据化管理的四个层次
数据的重要性不言而喻，已经被越来越多的公司接受、熟知和应用。那么关乎数据，到底在哪些方面可以促进业务的腾飞？或者换种说法，业务对数据有哪些层次的需求？还有，数据对管理有哪些方面的贡献？ 依…
框架梳理｜企业大数据管理之道
作为数据从业者，有时候也会被大数据所“迷惑”。究竟何为大数据，数据的价值体现在何处，有哪些值得借鉴的成功模式？ 恰逢最近在看《大数据管理——企业转型升级与竞争力重塑之道》一书，文章从大数据驱动决策、大数据优化…
作为余额宝最大的合伙公司，其数据平台建设有何讲究？
天弘基金是经中国证监会批准成立的全国性公募基金管理公司，13年与支付宝合作推出了余额宝，是余额宝基金管理人，是国内公募规模最大，客户数最多的基金公司。
对于大数据和云计算，天弘基金可以说在金融行业里是走在前沿…
python数据可视化基础
python中数据可视化基础1、numpy 模块2、 pandas 模块3、数据读取与导入4、matolotlib 模块本文主要讲解python的数据可视化基础，内容包括：numpy、pandas、matolotlib。上一篇：
python数据分析之pandas1、numpy 模块
# -*- coding: utf-8 -*…
商业智能软件对比评测：FineBI和Tableau
FineBI和Tableau是比较好的自助式商业智能软件，功能都很强大，是企业数据可视化不可或缺的利器，但两款产品还是有非常大的区别的，例如Tableau的功能全面且深入，更适合专业的数据分析人员，而FineBI则是面向普…
自助式BI为何能取代传统BI，逐渐占据商业智能市场？
前言：未来的时代将由数据勾画，未来的BI将是自助BI的时代
随着数据爆发式增长，像ERP、OA、CRM等系统在企业运用的越来越多。这些系统的使用必然会产生很多的数据，比如在产品加工设计测试维护过程中产生的主数据；在生产…
如何搭建报告系统，提升管理水平
随着企业的快速发展，无论是人员还是业务都有了一定程度上的扩展，传统的管理方法势必会造成很多问题。而企业信息化管理是企业提升管理水平、理顺内部机制、增加盈利和降低成本的有效手段，因此引入信息化管理成了必然。 那么，企业该…
如何搭建报告系统，提升管理水平
随着企业的快速发展，无论是人员还是业务都有了一定程度上的扩展，传统的管理方法势必会造成很多问题。而企业信息化管理是企业提升管理水平、理顺内部机制、增加盈利和降低成本的有效手段，因此引入信息化管理成了必然。 那么，企业该…
报表或BI的价值在哪？
报表或者bi的价值在哪？这已经是十几年的问题啦！
为什么要解释这个并不新鲜的问题，是因为当一个两个问我的时候，并没有在意，被问的多了，觉得这问题并没有过时。
数据挖掘和建模分析，其价值很容…
一切围绕信任——闲鱼无忧购的技术演进
背景闲鱼无忧购是阿里巴巴集团旗下品牌，专注于为追求品质和性价比的人群提供品牌自营、品牌授权等优质商品 （包括但不限于官翻准新、滞销处理、退换货处理、展示品样等），并提供无忧售后服务的服务平台。闲鱼无忧购（此前…
前端搞报表|数据分析提效全链路解决方案
背景介绍闲鱼 2014 年成立至今已实现了千万级 DAU 的跃迁，业务决策方法和基于方法背后的能力亟需提升——从原始的经验驱动到更科学合理的数据驱动体系，这里需要越来越多的数据分析和报表开发工作。在整个数据分析的链条上，存在一些痛点的事情…
A2M峰会直击｜闲鱼纳米镜——人人都是数据分析师
背景闲鱼的业务在发展过程中，伴随着大量的活动和各种各样的实验。一般运营活动前期需要对市场进行调研，了解用户群体；中期进行活动设计和活动实验，根据实验效果调整活动方案；后期则进行复盘工作，整理相关数…
【从零开始学爬虫】模板的高级选项
【功能描述】
模板的高级选项
高级选项不常用，其具体说明如下： 【模板的高级选项】 1. 字符编码
默认自动识别。如果该页面未能自动识别发生乱码，需要自行选择字符编码。可以选择GBK或UTF-8。
2. 文档类型
默认自动识别。可以选择采集xm…
为什么汉语不能用来编程？
在2020年元旦之夜 距离地球543万光年的嗅星球上 一位神秘大反派把嗅星球源主机上的
数据删库后跑路 嗅豆博士
作为嗅星球上的科技大佬 不得不通过量子传输通道 将族人传送到其他的星球避难 此时
前嗅研究院正在进行一项
量子通讯协议测试 嗅豆博士和他的宠物团子 就这样…
万万没想到 ——五一去哪儿玩
大家好，我叫前大嗅，现在正在思考一个五一去哪儿玩的千古难题。 本来想好好的出去玩四天，可是一想到五一各大景点的盛况，又感到莫名的忧伤。 可是尽管如此，还是阻止不了我蠢蠢欲动的春游心。
所以我打算用我超人的逻辑…
【邀请函】Greenplum和机器学习用户大会
2017年11月4日 上海云南南路118号凯腾大厦12楼 主题：Greenplum和机器学习 会议介绍 Pivotal Greenplum是唯一的开源无共享大规模并行处理（MPP）数据库，专为商业智能处理和高级数据分析而设计。它专门适用于机器学…
天猫双十一成交额是如何预测的
2020年淘宝双十一成交额4982亿，要知道2019年是2684亿，猛地一瞅，好牛，但总量越来越大的同时增长率却逐年降低呀，且今年的统计口径和历年都不一样（后面会说统计口径的问题）。 其实早在2019年双十…
过程/数据矩阵（U/C矩阵）
[编辑]什么是U/C矩阵 U/C矩阵是用来表达过程与数据两者之间的关系。矩阵中的行表示数据类，列表示过程，并以字母U（Use）和C（Create）来表示过程对数据类的使用和产生。 U/C矩阵是MIS开发中用于系统分析阶段的一…
强势回归！再说回归分析
↑ 点击上方 “可乐的数据分析之路” 关注 星标 ~ 大概率每天早8点25更新 哈喽大家好，我是可乐今天要再说回归分析咦，我为什么要说 再 呢？当然是因为之前写过回归分析的文章了-> 细说回归分析高尔顿发现了“向平均回归”，一个…
能把统计学的原理和应用说明白，这本书不简单！
↑ 点击上方 “可乐的数据分析之路” 关注 星标 ~ 大概率每天早8点25更新 哈喽，大家好，我是可乐今天给大家推荐这本《深入浅出统计学》，文末有我总结的知识图谱。《深入浅出统计学》这本书我看了好几遍，一直没法下笔写它的总结&…
终于搞清楚正态分布、指数分布到底是啥了！
↑ 点击上方 “可乐的数据分析之路” 关注 星标 ~ 大概率每天早8点25更新 哈喽，大家好，我是可乐今天这篇文章接2个月以前的那篇文章 离散型随机变量的概率分布，继续来聊聊连续型随机变量的概率分布，以及用Python如何实现。并非所…
数据分析都会用到哪些工具？
↑ 点击上方 “可乐的数据分析之路” 关注 星标 ~ 大概率每天早8点25更新 哈喽，大家好，我是可乐今天来聊聊数据分析都会用到的工具，你都在用什么呢？数据分析的工具有很多，从数据分析岗位的描述里其实就能发现企业都需…
教你用算法找对象、指导工作与生活 | 算法之美
哈喽大家好，我是可乐。
今天给大家带来《算法之美》的读后感。
（文末是这本书的知识图谱） 我们所有人的生活都受到有限空间和有限时间的限制，因此常常面临一系列难以抉择的问题。在一天或者一生的时光里，哪些事是我…
做数据分析不得不看的书有哪些？（文末抽奖送书）
书不在多，而在于精。（文末抽奖送书哟）数据分析类的书有很多，可以按数据分析的流程分类，每个流程应该看哪些书籍。也可以按照通识类和工具类进行分类，通识类可以理解为入门读物类，工具类就是针对…
python.pickle() 数据对象的持久性储存，超详细
模块 pickle 实现了对一个 Python 对象结构的二进制序列化和反序列化， 将数据对象以二进制的形式进行保存 pickle.dump(obj, file, protocolNone, *, fix_importsTrue, buffer_callbackNone) 将对象 obj 封存以后的对象写入已打开的 file object file。
import num…
世卫组织使用的GIS软件是哪款？
摘要 在此次新冠病毒疫情中，使用微信或支付宝等扫描二维码进出小区、园区、商场等的背后，都是利用GIS形成空间防控闭环。事件卫生组织也一直通过GIS工具进行疫情方面的研究和使用。 世卫组织使用的GIS软件有哪些？ Epi Info 7 (CDC)Free Map…
数据分析中会常犯哪些错误，如何解决？
这篇文章从数据分析的几个阶段，总结了14个我们可能会犯的一些错误，以及如何避免。
数据获取阶段
在数据采集/获取阶段，容易犯的错误：
NO.1 采样偏差
在数据采集的时候，如果不能获取到总体的数据，那就要…
SQL今日一题（12）：去重后计数
这是SQL今日一题的第12篇文章今天有两道题目，因为很相似所以放在一起说。题目描述1从titles表获取按照title进行分组，每组个数大于等于2，给出title以及对应的数目t。用到titles表，这个表是一个新表，之前的题目没有遇到…
香港地区Airbnb数据可视化分析
一、背景 Airbnb作为一个新兴的短租平台，颠覆了大众对于传统酒店住宿的认知，随着社区平台的不断发展壮大，为世界各国的诸多旅行者们提供了数以百万计的独特入住选择，其中包含别墅、公寓、城堡、树屋等。同时，也使得有空…
用Excel做控制图
一、什么是控制图 控制图亦称“质量管理图”、“质量评估图”。根据数理统计原理分析和判断工序是否处于稳定状态所使用的、带有控制界限的一种质量管理图表。 控制图常用于QC（质量管理）中，可以用来评估过程是否存在异常，进而进行…
数据分析常用方法总结
1、细分对比分析
细分对比分析是数据分析的基础。
2、分布，占比
3、时间趋势
4、象限
5、同期群分析，属于纵向分析
同期群分析是指将用户进行同期群划分以后，分析和对比不同同期群组用户的相同指标，这套分析方法就是同期群分…
用CSS选择器傻瓜式爬取豆瓣TOP250
提示：爬虫步骤很机械，方法很多样，请多多练习… CSS选择题的傻瓜式用法 前言一、导入所需要的模块二、创建爬虫类，主要是请求方法跟解析存储方法1.请求方法2.解析与存储方法测试代码前言
本次爬虫也是为了完成作业，这也是一个连反爬虫都没设置的基础级网站，所以没啥特殊的…
爬虫！教你用python里的json分分钟爬取腾讯招聘动态网站求职信息！(结构化数据)
首先解释一下为什么要导入json跟time模块，打开腾讯招聘网 右键检查点击elements里面的网页元素 来到network里面你会发现当前链接response里面并没有我们想要的数据信息 那么我们开始思考，这会不会是一个动态网页链接 接下来我们点击"XHR"
2012年移动互联网小心倒春寒
世界末日的传言让2012年显得十分扎眼，但在移动互联网世界里，没有人想会想到世界末日，这个正在引发新一轮投资的产业，投资规模正在望刷新历年的纪录。一项统计报告显示，2010年中国移动互联网行业投资案例共发生22起&…
Scrapy爬虫简单实例
第一个Scrapy框架爬虫
我要爬取的网站是一个网课网站http://www.itcast.cn/channel/teacher.shtml，爬取内容是所有老师的基本信息。
1.创建一个基于Scrapy框架的爬虫项目
进入自定义的项目目录中，运行下列命令：
**ITCast为项目名字**
scr…
numpy快速入门教程1
数组概念 NumPy的主要对象就是同类型的多维数据。它是一张表，所有元素（通常是数字）。在NumPy中，维度称为轴，轴的数目为rank。 NumPy的数组的类称为ndarray，别名array。 numpy.array与Python标准库的…
数据分析——数值标准化
数据分析——数值量纲化引例常用方法标准化（常用）归一化（常用）均值化正向化逆向化区间化引例
我们在进行多维度数据分析的时候，可能会遇到这样的情况： 例如分析某地区银行客户存款结构情况，可能…
数据挖掘——航空公司客户分类与价值评估案例
1. 背景和目标
1.1 背景
航空公司竞争压力大，企业营销焦点由产品中心转为客户中心针对不同类型的用户，进行精准营销，实现利润最大化解决问题的关键是建立合理的客户价值评估模型，对客户进行分类，有针对性地进行营销。…
百度智能云产业智能化新生态，新在哪里？
当前，我国数字经济蓬勃发展，并已进入产业智能化新阶段。在此背景下，产业需要更简单更全面的生态。近日，百度 Create 2021大会智能生态分论坛召开，百度多位专家与合作伙伴共同展示了百度智能云产业智能化新生态。随着人…
高速公路视联网解决方案来了！全面助力行业智能运行监测升级
在交通强国建设纲要引领下，高速公路智慧化已成智慧城市建设的重要一环。为更好地满足人民群众对出行的美好需求，百度智能云打造了高速公路视联网平台解决方案，帮助高速公路领域客户快速构建运行监测体系，实现对视频资源的高效利用…
城市治理不再难！百度智能云携手慧联无限推出内涝智能监测预警系统
今年7月，全国竟有多座城市因为暴雨引发的洪涝灾害频频登上热搜。轻则“城市看海”，重则“内涝成灾”，我国城市普遍性的内涝问题，在极端降雨天气影响下，扎堆出现在公众面前，呼吁着社会各界力量寻求解决之道。…
破局新金融风险 知识图谱非常香！
导言本篇为金融行业“自主可控”系列文章。前几期我们从底层逻辑、负载均衡等角度分析了金融行业“科技创新”、“自主可控”所面临的挑战。本期我们从知识图谱谈起。在金融行业，知识图谱应用的范围越来越广。知识图谱与 AI 结合之后，可以识别伪造资料、…
泉州水务大脑正式投产，百度智能云守护绿水青山
水是万物生命的源泉。今年3月22日是“世界水日”，3月22-28日是“中国水周”。而最近“我国水管漏水一年漏掉700个西湖”的话题也冲上热搜，引发广泛关注。根据国家统计局数据，截至2018年底，我国人均水资源仅为世界平均水平的1/4&am…
偏度系数与偏态系数的简要阐述
偏度系数：描述分布偏离对称性程度的一个特征数。当分布左右对称时，偏度系数为0；当偏度系数大于0时，即重尾在右侧时，称该分布为右偏（正偏态）；当偏度系数小于0，即重尾在左侧…
入门R语言（2）：变量、运算符、决策、循环、函数、字符串的基础方法
R语言是一门很适合数据分析、绘图的一门语言，在当今数据分析领域中占据很重要的位置，本文简要介绍了R语言基础内容如变量、运算符、决策等。希望能帮助大家入门，本文参考编程狮网站https://www.w3cschool.cn/r/进行整理，亦可直接进…
入门R语言（1）：R对象
R语言为用于统计分析、绘图的一门语言，在当今的数据分析任务中占据了很重要的位置，之后数据分析类的任务可能会需要用到R，因此打算从零开始学习R语言，记录学习的过程。
本文主要参照w3cschool编程狮网站的教程进行学习整理。 文章…
Python的多线程为什么不能利用多核处理器
1.全局解释锁
如题: Python的多线程为什么不能利用多核处理器？
全局解释器锁(Global Interpreter Lock)是计算机程序设计语言解释器用于同步线程的一种机制，它使得任何时刻仅有一个线程在执行。
即便在多核处理器上，使用 GIL 的解释器也只…
当代程序员的薪资中值大概是多少？多少薪资区间分布人数最多？
中国大陆地区工,作5年以上的程序员
一线城市
一线厂子年薪50W以上
二线厂子年薪30W以上
三线厂子年薪20W以上
1,2,3厂子外包员工大多数20W左右
其他小厂子年薪15W左右
二线城市
一线厂子年薪30W以上
二线厂子年薪20W以上
三线厂子年薪15W以上
1,2,3厂子外包员工大多…
鹏城，我们来啦！“Greenplum走进深圳” 火热报名中
在激烈的数字化市场竞争中，众多企业都迫切需要一个可靠稳定、灵活易用、高性能的数据仓库解决方案，支持企业数据分析战略，提升业务的敏捷性。 与此同时，被广泛应用于数据仓库领域的Greenplum平台，正在凭借其优秀的数据…
《Greenplum走进西安》技术研讨会：性能、新特性、案例，精彩纷呈
了解更多Greenplum相关内容，欢迎访问Greenplum中文社区网站 随着疫情的好转，Greenplum中文社区的线下活动又重启啦！今年，我们将走进各大省会城市，举办《Greenplum走进全国》系列技术研讨会，携原厂专家&…
R语言——三个数据集
第一章数据概览（1）三个数据集1.1 uspop 数据集为一组时间序列数据，从 1790 年至 1970 年，每隔 10 年取一个值1.2 Titanic 数据集记录了泰坦尼克号沉船事件中乘客年龄，性别，船舱等级，以及是否存活…
Gartner 2019排名：Greenplum跃居第三
获得技术资料内容，请访问Greenplum中文社区网站 近日全球权威研究和顾问公司Garnter发布了2019 数据分析管理产品和解决方案（Data Management Solution for Analytics, DMSA）行业报告。在报告中，Gartner从多个角度的12项关键指标中…
【PPT】时空数据分析
获得技术资料内容，请访问Greenplum中文社区网站 本次分享的内容是在8月17日举办的2018大数据、容器、云原生应用主题系列技术研讨会第三场中，Pivotal 中国研发中心软件工程师王淏舟分享的内容——《时空数据分析》。 时空数据存储和分析一直是大数据应用…
百度智能云 × 沛县 | 数据治理成就新城市
作为江苏北部的重要门户，沛县正在借助大数据的力量，提升政务数据治理能力和政府服务水平。沛县是首批全国文明县城、全国科技进步先进县，荣获全国百强县、全国工业百强县、国家知识产权强县工程试点县等诸多荣誉称号。为深入贯彻落实国家大数…
概率统计Python计算：离散型自定义分布数学期望的计算（一）
对非经典分布的随机变量，当然可以按博文《自定义离散型分布》中介绍的方法，自定义rv_discrete（离散型）或rv_continuos（连续型）的子类（详见博文《自定义连续型分布》），然后…
概率统计Python计算：假设检验应用——基于成对数据的检验
设有nnn个相互独立的观测结果(X1,Y1)(X_1,Y_1)(X1,Y1)，(X2,Y2)(X_2,Y_2)(X2,Y2)，⋯\cdots⋯，(Xn,Yn)(X_n,Y_n)(Xn,Yn)，诸对XiX_iXi和YiY_iYi受同一因素影响，DiXi−YiD_iX_i-Y_iDiXi−Yi~N(μ,σ…
积极探索数据智能，百度智能云描绘数字山西新蓝图
近日，山西省领导一行莅临百度（山西）人工智能基础数据产业基地调研，并在听取了基地工作成果汇报后指出，建设数字山西，是推进治理体系和治理能力现代化的必然选择、必由之路，希望百度加强与山西的…
打造物流行业专属地图，你期待的公测版已上线
随着电子商务的发展，以快递为代表的物流行业正迅速扩张，快递网点、物流转运中心如雨后春笋般涌现。若想在其中占得先机，地图是不能忽视的一环，无论是干线车辆运输、快递员派送，还是仓库网点选址等物流活动，…
覆盖广、高精准，金融业瞄上智能营销
上世纪90年代沃尔玛超市将“啤酒”与“尿布”摆在同一区域的做法，大大增加了商品销售收入，成为借助数据分析实现智能营销的经典案例。而今天，在人工智能等新技术的加持下，数据分析技术正在不断进化，千人千面的智能营销…
如何提升居民幸福感？百度智能云联手北京朝阳区打造“智能城市”
高耸林立的写字楼，玲琅满目的大卖场，各种趣味十足的新鲜事物，这是我们喜欢的城市，它给予我们幸福。但是在另一面，拥堵的交通、冷漠的陌生人群、冰冷的水泥围墙，又让居民感到困扰，幸福感下降。在…
喜讯 | 百度大数据4款产品通过DCA大数据能力评测
2018年11月30日，为期两天的数据中心联盟第七批大数据产品评测结果评审会圆满结束。本期测评，百度4款大数据产品：时序数据库TSDB数据仓库Palo（现已更名Doris，Apache孵化中）数据科学与机器学习平台Jarvis分布…
百度云×百信银行：金融科技点亮智惠生活
THURSDAY2018年9月4日，2018 百度云智峰会在上海盛大召开。在当天下午的智能金融分论坛上，来自百信银行副行长兼首席信息官寇冠分享了《金融科技点亮智惠生活》的主题演讲。寇冠介绍到，百信银行作为全球首家由“主流商业银行主流互联网公司”联…
通知：首届百度云智师资特训营开营啦
有一个好消息和大家分享。再过一周，百度云智学院即将举办第一期百度云智师资特训营。这一次培训的目的是，深耕人工智能教育领域，构建百度ABC教育生态，提升高校教师的人工智能、大数据、云计算的教育教学水平以及业务创新能力。为了…
运用数据挖掘技术研究方剂配伍规律应注意的几个问题
http://www.studa.net/yaoxue/090904/17071481.html 作者：陈云慧，王燕，张昱，谭圣琰 宋姚屏，蒋永光
【摘要】 近年来，数据挖掘技术正逐渐被广泛运用到方剂配伍规律的研究中，在运用该技术进…
云智学院 | 十分钟看懂时序数据库⑸-分布式计算
物联网领域近期如火如荼，互联网和传统公司争相布局物联网。作为物联网领域数据存储的首选，时序数据库也越来越多进入人们的视野，而早在2016年7月，百度云在其天工物联网平台上发布了国内首个多租户的分布式时序数据库产品TSDB&…
云资讯 | iOS10上线了，中国工业物联网却更焦虑了
iOS10发布更新，其背后的HomeKit智能家居平台被物联网行业视为刺激物联网商业消费市场的新机遇。不过作为一个空间和规模更大的物联网市场，中国工业物联网却一直迟迟难觅激活点。当今物联网最大的驱动力就是商业消费和工业应用。iOS10激发起商业消费的巨大…
云学府·大数据专场传来捷报！
冷飕飕的寒风也挡不住粉丝们对云学府大数据专场的热情！13:35，嘉宾早早就位，一扫初冬的寒冷！14:00，活动正式开始，现场已经爆棚！百度开放云高级产品经理张琪，首先抛出了大数据产品需求…
寿险行业数据挖掘应用分析
寿险行业数据挖掘应用分析 寿险是保险行业的一个重要分支，具有巨大的市场发展空间，因此，随着寿险市场的开放、外资公司的介入，竞争逐步升级，群雄逐鹿已成定局。如何保持自身的核心竞争力，使自己始终立于不败…
日志宝：大众也能看懂的Web访问日志数据分析
每个人都可能会生病，网站也一样。对于一个网站来说，Web访问日志就像是网站的脉搏，时时刻刻记录并反映着网站的运营状况。由于Web访问日志包含的数据量很大，而看懂Web访问日志也需要具备一定的专业知识。而“日志宝”能够专业解决W…
机锋网社交应用数据分析:无社交 不应用
随着近日赚足人们眼球的Facebook上市，以及与其有关的照片分享软件Instagram被其以高价收购，当前的互联网，最流行的词莫过于“社交”了，一切与社交相关的应用似乎都被格外的关注了起来，本期，结合一些市场内的…
Centzy：坑爹的店铺必滚蛋
仅25%的美国本土商业拥有自家的网页，但是会把自家的报价放到网站上更加少得可怜，才10%。Centzy是一个根据价格、营业时间和质量而排序的商业搜索引擎。通过它用户可以快速找到最物美价廉的店铺和服务。 Centzy使用的是自建的众包平台，用户可以…
Hadoop必将风靡2012年的六个理由
毫无疑问，Hadoop已经赢得了大量投资者和IT媒体的青睐，但却很少看到任何的实际产出。即将过去的2011是风暴来袭前的准备阶段，为很多新公司新用户建立了一个海量数据的分析平台。就连微软这样的互联网巨头都已放弃其他平台而选择Hadoop…
数据挖掘与数据分析实战（一）
一、数据开源
本数据分析项目的数据来源于第八届中国可视化与可视化分析大会。数据集地址连接：http://naq.cicidata.top:10443/chinavis/opendata
二、使用的工具
1、python3.8 2、pyCharm 2020.3.1 3、pandas库 4、numpy库 5、matplotlib库
三、前期准备
1、下…
想从事大数据行业，大数据、数据分析和数据挖掘的区别一定要懂
大数据、数据分析、数据挖掘的区别是，大数据是互联网的海量数据挖掘，而数据挖掘更多是针对内部企业行业小众化的数据挖掘，数据分析就是进行做出针对性的分析和诊断，大数据需要分析的是趋势和发展，数据挖掘主要发现的是…
Tsfresh 时序数据特征挖掘 特征算子简介
本篇介绍现有主要算子含义和使用注意是想基础算子简单复合算子一.本身无时序概念算子二.本身有时序概念算子复杂复合算子一些使用感悟和补充懂的都懂,下文算子基本按照源码顺序罗列.如果有其他关于tsfresh的问题,欢迎留言讨论,后续可能会再写tsfresh的其他系列文章.部分算子示例…
一个matplotlib绘制直方图/条形图的实例
分析的数据是这样子的csv文件，内容是外国读者对红楼梦的情感评价。 生成的图片：
代码：
import matplotlib.pyplot as plt
import matplotlib as plot
import numpy as np
import pandas as pd
plt.style.use(fivethirtyeight)
plot.rcPa…
pandas与numpy等
文章目录pandas求某列有多少种不同的数求众数区间划分（pd.cut)groupby()pandas mad()函数sklearn feature_importance_iloc locpandas.DataFrame.copypandas.Dataframe.corr(methodspearman)代码效率极低，会占用大量资源set合并、交集、差集plt.hist()Ty…
“让数据说话”成为现实，百度智能云打造即问即答的数据管家
大数据时代，“用数据说话”成为大多数企业经营决策的必备武器。然而，只有很少的人拥有数据分析能力，能从分散的、冗长的数据中分析出有价值的信息。“如果数据自己就能说话，直接回答我们对数据的疑问，该有多好…
数字化时代，选择商业智能BI解决80%数据问题
数据是需要有人来照料、培养的，如果企业没有完善的数据治理方案，就很难保障数据的质量，进而导致数据无法利用，让这些辛苦积累的数据失去了价值。
数据治理目标
数据从业务活动中产生，也会深刻影响到业务本身。
对于…
python统计字符串中连续的重复字符个数(如abbbc里重复元素个数为3)
#统计字符串中连续的重复字符个数
def maxDup(strs):nlen(strs)maxlen1length1maxstr[]for i in range(n-1): if strs[i]strs[i1]:length1maxstr.append(strs[i1])if length>maxlen:maxlenlengthelse:length1print(maxlen)
if __name__ __main__:strsabbbcmaxDup(strs) #结…
百度智能云时序时空数据库正式开放内测啦！
时空数据是同时具备时间与空间属性的高维数据，占据了现实世界中超过80%的“数据份额”。随着移动互联网、物联网、5G的迅猛发展，时空数据将呈现爆发式增长，海量时空数据中所蕴含的巨大价值对智慧城市、数字孪生等行业的建设具有重要意义。因此…
excel 保留小数点俩位后 计算值求和结果错误
问题 (￣_￣|||)
自动求和数值就是对不上账，然后手工计算了下发现自动求和不对，NND。
问题原因
自动求和之前的数值是输入的公式 原始金额*0.006 然后设置格式保留小数位俩位。然后自动求和。 1.问题出在这里 自动求和的时候他用…
关于绩效考核，可能与你理解的不一样
原创不易，求分享、求一键三连之前有个同学问我技术部的绩效方案怎么设计，想着这么多年的考核与被考核，我陷入了沉思，一方面是我对考核的认识未必正确、全面，另一方面是有些同学未必能接受这种说法，但教学相…
当数字孪生遇到可视化，将会发生什么？
作者｜康翔编辑｜阿冒 设计｜沐由还记得22年前影片《黑客帝国》临近尾声的经典一幕吗？当涅槃之后的尼奥重新审视世界时，他看到的变得与先前完全不同，曾经再也熟悉不过的世界，已经化作了数字雨般的…
西部数据OptiNAND：“闪”动的硬盘
作者｜康翔编辑｜阿冒 设计｜沐由在存储江湖里，年逾65周岁的硬盘声若洪钟、底气十足。多少年来，青衫磊落的一代代后生小子们，总喜欢在出师之后就来瞅瞅，看老人家在上了年岁之后，尚能饭…
BI在零售业中的应用
BI在零售业中的应用 在国外,BI分析系统作为经营和竞争的有效工具在零售业中的应用已颇为成熟,正在倚仗这一科学而有效的手段,国外的零售巨头们在全球范围内拥有越来越大的经营优势。使用BI分析系统,能跟好的利用BI(Business Intelligent)即商业智能的功能来分析零售经营的各…
Redis的特殊数据类型
Geospatial类型 说明：Geospatial类型主要用于记录地区的经纬度信息，用于获取不同地区的距离等信息。底层使用zset实现，所有zset的相关操作在Geospatial类型中同样适用。 127.0.0.1:6379> geoadd city 116.40 39.90 beijing # 添加城市的经…
数据分析报告结构规范设计
数据分析报告结构规范设计 不好的例子
○ 不知道主要说什么：没主题
○ 不知道你讲半天说明什么：没结论
○ 不觉得你有依据：没证据
○ 听完无感：没行动
好的例子
本报告主要介绍如何写一篇转发量高的新媒体文章的问题。&…
如何写一篇数据分析报告3 - 分析背景是什么
一 做好准备
信息不要脱离背景数据分析是一种服务：你的工作是为用户提供帮助，让他们免去审视各种数据，直接跨越到理解这些数据在其职责范围内的意义数据分析要帮用户理清重点，让他们更好的预测和处理问题，知道如何分配…
wirehark数据分析与取证hacker1.pcap
什么是wireshark？wiresharekhacker1.pcap数据包数据包下载 请私信博主!wiresharek
Wireshark（前称Ethereal）是一个网络封包分析软件。网络封包分析软件的功能是检索取网络封包，并同时显示出最详细的网络封包数据。Wireshark使用W…
wirehark数据分析与取证dump.pcap
什么是wireshark？ wiresharekdump.pcap数据包数据包下载 请私信博主wiresharek
Wireshark（前称Ethereal）是一个网络封包分析软件。网络封包分析软件的功能是检索取网络封包，并同时显示出最详细的网络封包数据。Wireshark使用WinPCAP作为接口，直接与网卡进行数据报文交换。…
wirehark数据分析与取证attack.pcap
什么是wireshark？wiresharekattack.pcap数据包数据包下载 请私信博主wiresharek
Wireshark（前称Ethereal）是一个网络封包分析软件。网络封包分析软件的功能是检索取网络封包，并同时显示出最详细的网络封包数据。Wireshark使用Win…
2023年国赛高教杯数学建模D题圈养湖羊的空间利用率解题全过程文档及程序
2023年国赛高教杯数学建模
D题 圈养湖羊的空间利用率
原题再现 规模化的圈养养殖场通常根据牲畜的性别和生长阶段分群饲养，适应不同种类、不同阶段的牲畜对空间的不同要求，以保障牲畜安全和健康；与此同时，也要尽量减少空间闲置所…
个人用户的数据之美：数据可视化助力解读
数据可视化是一种强大的工具，不仅可以为企业和专业人士提供见解，也对个人用户带来了许多实际的帮助。下面我就以一个数据可视化从业者的视角，来谈谈数据可视化对个人用户的益处： 首先对于个人用户来说，数据可视化可以让…
大数据分析岗是干什么的？
大数据分析岗主要负责从大规模数据集中提取、整理、分析和解释有关业务、市场或其他相关领域的信息的职位。
主要的职责和工作内容如下：
1. 数据收集和整理
收集各种数据源（包括结构化、非结构化和半结构化数据），并将其整理成可…
探索统计学：Python中的Statsmodels库统计推断
写在开头
统计推断是数据科学中的一个核心领域，它通过从样本中提取信息来对整个总体进行推断。在实际的数据分析中，我们常常需要了解样本的特征，并基于这些样本推断总体的性质。这正是统计学的魅力所在。在本文中，我们将深入研究统计推断的各个方面，着重介绍在Python中应…
航空港务数据大屏为航空港的可持续发展提供有力支撑！
随着经济的发展，不断加建与扩建民用机场，空港行业规模不断扩大。在不断引进和消化发达国家先进技术的同时，中国深入开展了对新技术和新材料的研究，极大地丰富和发展了中国的机场建设技术。且各项机场建设计划均已落实推进…
2017年第六届数学建模国际赛小美赛B题电子邮件中的笔迹分析解题全过程文档及程序
2017年第六届数学建模国际赛小美赛
B题 电子邮件中的笔迹分析
原题再现： 笔迹分析是一种非常特殊的调查形式，用于将人们与书面证据联系起来。在法庭或刑事调查中，通常要求笔迹鉴定人确认笔迹样本是否来自特定的人。由于许多语言证据出现在电…
ChatGPT助力Excel数据分析：让你的工作事半功倍！
文章目录 一、ChatGPT简介二、ChatGPT在Excel数据分析中的应用1. 数据清洗2. 数据处理3. 数据分析4. 数据可视化 三、如何使用ChatGPT进行Excel数据分析1. 安装ChatGPT插件2. 输入问题或命令3. 查看结果并调整参数4. 导出结果并分享四、总结与展望 《巧用ChatGPT高效搞定Excel数…
【第七在线】数据分析与人工智能在商品计划中的应用
随着技术的不断进步，数据分析和人工智能（AI）已经成为了现代商品计划的关键组成部分。在服装行业，这两项技术正在帮助企业更好地理解市场需求、优化库存管理、提高生产效率和提供更好的客户体验。本文将深入探讨数据分析和人工智能…
数据分析——火车信息
任务目标
任务
1、整理火车发车信息数据，结果的表格形式为： 2、并输出最终的发车信息表
难点
1、多文件 一个文件夹，多个月的发车信息，一个excel，放一天的发车情况
2、数据表的格式特殊 如何分析表是一个难点
数…
JVS低代码和智能BI（自助式数据分析）12.19更新功能说明
低代码更新功能
新增:
1、表单组件：标题、分割线、按钮等非数据组件增加小程序端隐藏设置；
隐藏设置允许开发者对表单组件中的非数据组件进行隐藏，例如，可能只想展示表单的部分内容，或者希望在特定条件下显示或隐藏…
数字转换：探析数据可视化的激增原因
现在，数据可视化作为一种强大的工具逐渐走进人们的视野，其爆发式发展背后涌现了多种原因值得探讨，今天我就以可视化从业者的视角来简单谈谈数据可视化爆发式发展背后的原因。
首先是互联网和传感技术的普及，令大量数据源不断涌现…
开发医疗陪诊系统源码：搭建安全高效的医患互动平台
本文将深入探讨开发医疗陪诊系统的源码，以及如何搭建一个安全高效的医患互动平台。
一、引言
医疗陪诊系统旨在通过技术手段，缩短患者与医生之间的距离，提供更快速、便捷的医疗服务。
二、技术选型
2.1前端技术
在搭建医疗陪诊系统的前…
KNN算法及其优缺点
K-最近邻算法（K-Nearest Neighbors, KNN）是一种基本的分类和回归算法。它的工作原理是通过在训练样本中找到距离待分类样本最近的K个样本，并根据这K个样本的标签来确定待分类样本的标签。KNN算法具有以下优点和缺点。
优点：
简单…
数据分析-Pandas如何统计数据概况
数据分析-Pandas如何概况的获得统计数据
时间序列数据在数据分析建模中很常见，例如天气预报，空气状态监测，股票交易等金融场景。此处选择巴黎、伦敦欧洲城市空气质量监测 N O 2 NO_2 NO2数据作为样例。
python数据分析-数据表读写到panda…
数据可视化：赋能企业决策的视觉力量
数据可视化在企业中扮演着至关重要的角色，为决策者提供了直观、深入的数据解读，帮助他们更好地理解业务状况并作出明智的决策。今天我就以可视化从业者的角度来简谈说说如何让数据可视化为更好地为企业服务。
首先，数据可视化可以让数据更易…
17个常用经典数据可视化图表与冷门图表
数据可视化是创建信息图形表示的过程。随着可视化技术的飞速发展，可以利用强大的可视化工具选择合适的数据可视化图表来展示数据。以下专业人士都应该知道的一些最重要的数据可视化图表。
常见数据可视化图表
饼图 饼图是最常见和最基本的数据可视化图表之一。饼图…
ChatGPT 4 实战案例，Excel2021多条件查找
在Excel的使用过程中，查找操作是经常需要完成。例如下列实际需求： 多条件的查找应用，如果不知道用什么公式来完成，可以借助于ChatGPT4来帮忙实现。
Prompt::有一个Excel表格A6至A16为班级，B6至B16为姓名，D6至D16为考核得分，请根据A3单元格的班级和B3单元格的姓名来查找…
实战经验分享：开发同城外卖跑腿小程序
下文，小编将与大家一同探究同城外卖跑腿小程序的开发实战，包括但不限于技术选型、开发流程、用户体验等多个方面。 1.技术选型
在同城外卖跑腿小程序的开发中，技术选型是至关重要的一环。对于前端，选择了使用Vue.js框架ÿ…
Python 数据分析 Matplotlib篇 增加注释【plt.text() plt.annotate()】（第3讲）
Python 数据分析 Matplotlib篇 增加注释【plt.text() & plt.annotate()】（第3讲） 🍹博主 侯小啾 感谢您的支持与信赖。☀️ 🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔…
Python数据科学视频讲解：特征决策树分箱
5.3 特征决策树分箱 视频为《Python数据科学应用从入门到精通》张甜 杨维忠 清华大学出版社一书的随书赠送视频讲解5.3节内容。本书已正式出版上市，当当、京东、淘宝等平台热销中，搜索书名即可。内容涵盖数据科学应用的全流程，包括数据科学应…
【python】python课设 天气预测数据分析及可视化(完整源码）
目录 1. 前言2. 项目结构3. 详细介绍3.1 main.py3.2 GetModel.py3.3 GetData.py3.4 ProcessData.py3.5天气网.html 4. 成果展示 1. 前言 本文介绍了天气预测数据分析及可视化的实现过程使用joblib导入模型和自定义模块GetModel获取模型，输出模型的MAE。使用pyechart…
69_Pandas.DataFrame获取行号和列号
69_Pandas.DataFrame获取行号和列号
将讲解如何从pandas.DataFrame的行名和列名中获取行号和列号，以及如何从列元素的值中获取行名和行号。 下面对内容进行说明。
根据行名和列名获取行号和列号 get_loc() 方法 当行名和列名重复时 列表索引、列 从列元素值获取行…
单挑力扣（LeetCode）SQL题：1308. 不同性别每日分数总计
相信很多学习SQL的小伙伴都面临这样的困境，学习完书本上的SQL基础知识后，一方面想测试下自己的水平；另一方面想进一步提升，却不知道方法。
其实，对于技能型知识，我的观点一贯都是：多练习、多实…
零基础入门网络安全必看的5本书籍（附PDF)
书中自有黄金屋，书中自有颜如玉。很多人学习一门技术都会看大量的书籍，经常也有朋友询问：零基础刚入门，应该看哪些书？应该怎么学？等等问题。今天就整理了5本零基础入门网络安全必看书籍，希望能帮…
【印象深刻的实战经历】两次全国大学生数学建模经历分享
目录
🌼初次接触
初次参加培训
分享培训所得
比赛开始
🔥再次接触
参加校赛
机缘巧合
再次培训
比赛开始
📕技巧总结
从问题的实际意义分析大体上可分为
从问题的解决方法上分析
做国赛题目的步骤
赛前准备
选题
寻找思路…
真心建议，入职业务部门前先学会BI数据分析
不管进入哪个业务部门，都需要具备一定的数据分析能力，能够从不断累积的数据中发现并解决问题。比如销售部门的需要通过分析销售数据，及时发现销售不佳的商品，调整销售策略，提高销售额、销售利润等。而随着精细化数据分…
山海鲸开发者视角：帮助汽车制造商取得市场优势
山海鲸可视化是一款致力于数字孪生领域的产品，为各行各业提供专业的数据可视化解决方案。作为山海鲸开发者，我们在开发免费好用的数字孪生工具同时也希望能让大家通过多种解决方案了解我们软件的多种可能性，本文就为大家介绍我们的汽车行业解…
Python数据分析的模块有哪些?
Python数据分析的模块有很多，以下是一些常用的模块：
NumPy：NumPy是Python科学计算的基础包，提供了多维数组对象、复杂数据类型、数学函数等工具，还提供了线性代数、傅里叶变换等功能。 pandas：pandas是一个…
电商数据分析-03-电商数据采集
参考
最最最全数据仓库建设指南，速速收藏！！ 第1章 数据仓库概念
数据仓库规划 1.1 数仓搭建 我们这里所说的数据仓库，是基于大数据体系的，里面包含标签类目，区别于传统的数据仓库。下面我们来将这张图分解…
牛客网SQL训练4—SQL进阶挑战
文章目录 一、增删改操作1. 插入记录2. 更新记录3. 删除记录 二、表与索引操作1. 表的创建、修改与删除2. 索引的创建、删除 三、聚合分组查询1. 聚合函数2. 分组查询 四、多表查询1. 嵌套子查询2. 合并查询3. 连接查询 五、窗口函数1. 专用窗口函数2. 聚合窗口函数 六、其他常…
Python/R/GUI/BI类型常用数据可视化工具
什么是数据可视化工具？ 数据可视化工具是指旨在可视化数据的所有形式的软件。它们处理数据输入，将其转换为用户可以根据自己的需求进行定制的视觉效果。
不同的工具可以包含不同的功能，但最基本的是，数据可视化工具提供输入数据集…
阶段四：数据分析与机器学习(掌握使用scikit-learn库进行高级机器学习)
Scikit-learn是一个在Python中实现机器学习的强大库。以下是一些如何使用scikit-learn进行高级机器学习的基本步骤： 数据导入和预处理：首先，你需要导入你的数据集。这通常通过pandas库完成，然后对数据进行预处理，包括数据清洗，缺失值处理，异常值处理，数据标准化等。imp…
产品经理学习-策略产品数据分析
策略产品数据分析方法
目录：
策略产品数据与用户行为数据分析
埋点，策略数据收集核心技能
用户行为数据分析应用
数据平台实施
策略产品数据与用户行为数据分析
用户是当下最好的运营资源
获取用户的方式：广撒网、铺渠道、抢流量
现…
单挑力扣（LeetCode）SQL题：1285. 找到连续区间的开始和结束数字（难度：中等）
给题目：1285. 找到连续区间的开始和结束数字
（通过次数8,111 | 提交次数9,900，通过率81.93%）
表：Logs
------------------------
| Column Name | Type |
------------------------
| log_id | int …
VR与数字孪生：共同构筑未来的虚拟世界
随着科技的不断发展，数字孪生和VR已经成为当今热门的科技话题。作为山海鲸可视化软件的开发者，我们对这两者都有深入的了解。在此，我们将详细探讨数字孪生与VR的区别和联系。
首先，数字孪生（Digital Twin）…
simulink代码生成（九）—— 串口显示数据（纸飞机联合调试）
纸飞机里面的协议是固定的，必须按照协议配置；
（1）使用EasyHEX协议，测试int16数据类型 测试串口发出的数据是否符合？ 串口接收数据为： 打开纸飞机绘图侧：
（1）…
京东年度数据报告-2023全年度白酒十大热门品牌销量榜单
今年，在消费环境复苏的背景下，不少白酒企业都在通过一系列的措施，如去库存、跨界联名等等，来为白酒消费市场积极寻找更大的增量和可能性。整体来看，2023年白酒市场呈现出较好的发展态势。
根据鲸参谋平台的数据显示&a…
Python 箱线图的绘制（Matplotlib篇-13）
Python 箱线图的绘制（Matplotlib篇-13） 🍹博主 侯小啾 感谢您的支持与信赖。☀️ 🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ�…
数据可视化与地理空间
写在开头
数据可视化是将数据以图形形式呈现，使其更易于理解和分析的过程。在地理空间分析中，数据可视化不仅能够展示地理位置信息，还能够有效地传达地理空间数据的模式、趋势和关联。本文将探讨数据可视化在地理空间分析中的作用，介绍Python中常用的数据可视化工具，并深…
数据处理系列课程 01：谈谈数据处理在数据分析中的重要性
一、数据分析
可能很多朋友第一次听到这个名词，那么我们先来谈一谈什么是数据分析。 数据分析是指用适当的统计分析方法对收集来的大量数据进行分析，将它们加以汇总和理解，以求最大化地开发数据的功能，发挥数据的作用。数据分析是…
中国发电厂分布POI数据，shp矢量数据和excel格式均有，已清洗加工，可直接用于数据分析
数据名称: 中国发电厂分布poi数据
数据格式: shpexcel
数据几何类型: 点
数据坐标系: WGS84
数据来源：网络公开数据
数据字段：
序号字段名称字段说明1mc名称2idid3lon经度4lat纬度5fdlx发电类型6fdlxbc发电类型别称7jcsj建成时间8ssqlr所属权利人…
中国文化文物和旅游统计年鉴，数据含pdf、excel等格式，文本形式呈现，可预览数据
基本信息.
数据名称: 中国旅游统计年鉴
数据格式: pdf、xls不定
数据时间: 2012-2020年
数据几何类型: 文本
数据坐标系: ——
数据来源：文化和旅游部、网络公开数据
原名为《中国旅游统计年鉴》2020年后更名为《中国文化文物和旅游统计年鉴》ÿ…
帆软FineBi V6版本经验总结
帆软FineBi V6版本经验总结
BI分析出现背景
现在是一个大数据的时代，每时每刻都有海量的明细数据出现。这时大数据时代用户思维是：1、数据的爆炸式增长，人们比起明细数据，更在意样本的整体特征、相互关系。2、基于明细的“小…
python可视化界面自动生成,python如何做可视化界面
大家好，小编来为大家解答以下问题，python gui可视化操作界面制作，python做出的炫酷的可视化，现在让我们一起来看看吧！ 目录 前言 一.环境配置 插件： 1.python 2.Chinese 3.Open In Default Browser 安装pyt…
【2023】通过docker安装hadoop以及常见报错
💻目录 1、准备2、安装镜像2.1、创建centos-ssh的镜像2.2、创建hadoop的镜像 3、配置ssh网络3.1、搭建同一网段的网络3.2、配置host实现互相之间可以免密登陆3.3、查看是否成功 4、安装配置Hadoop4.1、添加存储文件夹4.2、添加指定配置4.3、同步数据 5、测试启动5.1…
DataGear 4.7.0 发布，数据可视化分析平台
DataGear专业版 1.0.0 正式发布，欢迎试用！ http://datagear.tech/pro/
DataGear 4.7.0 发布，严重漏洞和BUG修复，具体更新内容如下：
新增：HTTP数据集新增【编码请求地址】支持，可用于解决请求…
大数据引爆点：数据可视化的飞速发展
在信息时代，数据如潮水般涌入，企业和个人面临的挑战前所未有。而在这个数据的浩瀚海洋中，数据可视化如一道明亮的灯塔，引领着信息时代的航行者。近几年，数据可视化以其直观、生动的特性，迅速成为了信息表达…
使用 Kafka 和 CDC 将数据从 MongoDB Atlas 流式传输到 SingleStore Kai
SingleStore 提供了变更数据捕获 (CDC) 解决方案，可将数据从 MongoDB 流式传输到 SingleStore Kai。在本文中，我们将了解如何将 Apache Kafka 代理连接到 MongoDB Atlas，然后使用 CDC 解决方案将数据从 MongoDB Atlas 流式传输到 SingleStore…
pandas 基本用法Python
一、merge函数用途 pandas中的merge()函数类似于SQL中join的用法，可以将不同数据集依照某些字段（属性）进行合并操作，得到一个新的数据集。 二、merge()函数的具体参数 用法： DataFrame1.merge(DataFrame2, how‘inner’…
pandas数据分析40——读取 excel 合并单元格的表头
案例背景
真的很容易疯....上班的单位的表格都是不同的人做的，所以就会出现各种合并单元格的情况，要知道我们用pandas读取数据最怕合并单元格了，因为没规律...可能前几列没合并，后面几列又合并了....而且pandas对于索引很严格&am…
分析咪蒙1013篇文章，300多万字，她凭什么会火？
文章首发于公众号：程序员共成长 咪蒙，文学硕士，驾驭文字能力极强。并且是一个拥有一千多万粉丝，每篇文章阅读量都100W，头条发个软文都能赚80万，永远都能抓住粉丝G点的那个女人。 1月份因为某篇文章…
数据可视化--表格融合练习
数据可视化--表格融合练习pd.merge()函数说明代码演练参考书籍pd.merge()函数说明
使用共有列作为两个数据框数据融合的依据，主要使用pd.merge()函数：
参数说明： left: 传递左表数据right: 传递右表数据how: 数据融合方式 left:保留左表的数…
一个每周总结的产品经理，都会写点啥？【8月第四周】
- 边听边看，效果更好- - 8月第四周- 一年52周，每周都要总结反思。我之前试过365天每日记录，一段时间后觉的不合理。我们不是每天都有启发，刻意为了总结而每日就失去了意义。成长在于有感而发。我们以每周的维度记录，即…
一份很哇塞的产品经理述职报告（附PPT下载）
述职报告怎么写，首先需要确定我们汇报的对象是谁。我此次述职，面向的是公司内部与项目相关的所有人员，不仅有高层领导，还包括产品团队内部成员。然后此次述职的背景为，我近期独立负责了一条新的产品线，大家…
认识excel篇3之数据的有效性（数据验证）
数据有效性不仅能够对单元格的输入数据进行条件限制，还可以在单元格中创建下拉列表菜单方便用户选择输入。如果没有做数据验证，单元格内默认可以输入任意类型的数据。数据验证就是限制单元格输入数据（必须输入符合要求的才能输入）…
数据清洗考虑的几个个方面--阿宏
阿宏-数据清洗考虑的几个方面
1、预处理
在实际业务处理中，数据通常是脏数据。所谓的脏，指数据可能存在以下几种问题（主要问题）: 1.数据缺失 （Incomplete） 是属性值为空的情况。如 Occupancy “ ” 2. 数…
小灵通机号分离原理及其实现方式
一般情况下，小灵通的号码都是通过写码器烧写到小灵通机身中，并且在小灵通的交换机定义了相同的号码。这种处理方式简洁直观，小灵通用户通过查询手机菜单就可以知道本机的号码，而交换机维护人员通过查找相关的数据库表也可以很方便…
奥威BI财务数据分析方案：借BI之利，成就智能财务分析
随着智能技术的发展，各行各业都走上借助智能技术高效运作道路，财务数据分析也不例外。借助BI商业智能技术能够让财务数据分析更高效、便捷、直观立体，也更有助于发挥财务数据分析作为企业经营管理健康晴雨表的作用。随着BI财务数据分析经验的…
2023年7月京东冰箱行业品牌销售排行榜（京东运营数据分析）
作为日常使用的大家电之一，如今我国冰箱产业已渐趋饱满，市场增长有限。今年上半年，冰箱市场整体销额同比去年来看勉强保持小幅增长。不过，7月份，冰箱大盘的销售表现就略显萧条了。
根据鲸参谋电商数据分析平台的相关数…
乘大潮而崛起，浪潮云洲大有可为
作者｜康翔编辑｜阿冒 设计｜沐由在机械化、电气化、信息化之后，人类社会又开始迈向第四次工业革命。被视作第四次工业革命重要基石的工业互联网，已经成为全球诸多国家把握发展机遇的共同选择。从2015年起，我…
新算力，是世界进步的源动力
作者｜康翔编辑｜阿冒 设计｜沐由在计算的世界里，PowerEdge是不折不扣的一大杀器。拥有20多年历史、经过15代演进的PowerEdge，已经成为戴尔易安信，乃至整个数据中心领域的“明星”产品。如果曾经到访过数据中…
聚焦场景，金融行业数字化转型的小需求与大变化
撰文：康翔编辑：阿由设计：紫菜“近年来，银行网点缩减已成趋势。”在不久前的一篇报道中，《科技日报》做出了这样的判断。报道告诉我们，2019年，六家国有大行网点合计减少836个，而在今年…
核音智言助力工地智慧化发展
当前，我国经济发展正从传统粗放式的高速增长阶段，进入高效率、低成本、可持续的中高速增长阶段。随着社会的不断发展，建设市场的不断改进，工程体量也随之不断增长，工地环境更为复杂，对施工记忆和工艺水平提…
智慧环保—核音智言助力环保行业智能发展
经过多年的努力，我国环境质量局部有所改善，但是全国环境总体恶化趋势没有得到根本遏制，生态环境现状离人民群众的要求相差甚远，环境保护的压力相当沉重。未来一段时期，我国仍处于能源资源消耗高增长期和环境污染高风险…
详解零售行业供应链管理核心KPI指标（四）
现在零售行业的供应链管理越来越复杂了，复杂的原因是因为市场的变化、商业模式、销售模式的变化。
比如在以往传统的线上电商平台、线下渠道，现在线上电商还增加直播带货，线下渠道又增加了O2O模式。从一线城市的供应链还是做到供应链下沉到二…
敏捷感悟：试错与反馈是通往正确结果的唯一法则
01—一次紧急任务有一次我在出差途中接到一个紧急任务，要我统计过去几个Sprint里围绕各维度的故事数，以供领导向上汇报。我是在早上接到信息，当天下午前要给答复。我当时没有把公司电脑带在身边。我立马通过微信询问团队里哪个小伙伴在开公司…
excel统计函数篇1之average系列
一、excel中的统计函数
1、AVERAGE(number1,number2,...)：返回其参数的平均值
2、AAVERAGEA(value1,value2,...)：返回其参数的平均值，包括数字、文本和逻辑值 可以在括号内手动输入，也可以引用单元格，对序列求平均的…
Python数据分析实战-找出两个列表中的不同元素（附源码和实现效果）
实现功能
使用 Python 的集合操作来实现找出两个列表中的不同元素。将两个列表转化为集合类型，然后使用集合的操作来找出不同的元素。
实现代码 list1 [1, 2, 3, 4, 5]
list2 [3, 4, 5, 6, 7]set1 set(list1)
set2 set(list2)diff set1.symmetric_difference…
ONES 出席首届「精益软件工程大会」，分享效能改进实践
2022年6月16日-21日，中国信息通信研究院举办首届「精益软件工程大会」。作为中国信通院云计算标准和开源推进委员会（TC608）会员单位，ONES 受邀出席这次大会。在大会主论坛上，《2022年「软件质效领航者」优秀案例》正式…
初级数据分析师-必知
1.数据分析的定义：数据分析的目的是把隐藏的在一大批看似杂乱无章的数据背后的信息集中提炼出来，总结出所研究出的对象的一大批内在规律。数值也称为观测值，通过实验，测量，观察，调查等方式获取结果…
《玩转Python数据分析专栏》大纲
欢迎来到《玩转Python数据分析分类专栏》！在这个专栏中，我们将带您深入探索数据分析的世界，以Python为工具，解析各个领域的实际应用场景。通过100篇教程，我们将逐步引领您从入门级到高级，从基础知识到实战技巧，助您成为一名优秀的数据分析师。
专栏目标
本专栏旨在帮助…
数据分析两件套ClickHouse+Metabase(二)
Metabase篇
Metabase安装部署
任何问题请查看 -> 官方文档
jar包从GitHub下载 -> 地址 同样有个问题, 默认数据源里没有ClickHouse, 不过ClickHouse官方提供了插件包 -> 插件包 在安装metabase目录下新建一个plugins文件夹, 把下载的clickhouse.metabase-driver.ja…
IT运维：使用数据分析平台监控深信服防火墙（进阶）
概述 本文主要在原文档基础上，进行了字段抽取规则、图表的优化。 字段抽取：原文档使用正则的方式，创建了多个视图，本文将改为正则键值的抽取方式，并介绍键值抽取的适用场景 图表的优化：原文使用多为简单的…
excel日期函数篇1
1、DAY(serial_number)：返回序列数表示的某月的天数
在括号内给出一个时间对象或引用一个时间对象（年月日），返回多少日 下面结果都为20 2、MONTH(serial_number)：返回序列数表示的某年的月份
在括号内给出一个时间对…
多用户一体化建设跨境电商小程序、app开发
跨境电商是指通过互联网技术，进行国际贸易的电子商务活动。随着跨境电商的快速发展，许多企业开始关注开发跨境电商小程序和app，以扩大其国际业务。下面是多用户一体化建设跨境电商小程序和app的开发步骤。
第一步：需求分析和规划…
费米问题：如何估算？
解答费米问题有两个重要的思想：
第一个是“逻辑树法”：
用逻辑拆解把一个大的问题拆分为几个小问题，大问题是未知的，而拆解后的小问题是可以通过经验和逻辑推算得出的。最后再把得到解答的小问题反推到大问题上，用已…
生信豆芽菜-箱线图使用说明
网站：http://www.sxdyc.com/visualsBoxplot 一、使用方法 1.打开网址（http://www.sxdyc.com/singleCollectionTool?href-diff），选择“箱线图”。
准备数据： 第一个文件为特征的表达文件，第一列为样本&am…
生信豆芽菜-差异基因富集分析的圈图
网址：http://www.sxdyc.com/visualsEnrichCirplot 1、数据准备 准备一个基因集的文件
2、选择富集分析的数据库，同时输入展示top几的条目，选择颜色，如果是GO的话选择三个颜色，如果是KEGG选择一个，如果是G…
651页23万字智慧教育大数据信息化顶层设计及建设方案WORD
导读：原文《651页23万字智慧教育大数据信息化顶层设计及建设方案WORD》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。
目录
一、 方案背景
1.1 以教育…
excel常见的数学函数篇2
二、数学函数
1、ABS(number)：返回数字的绝对值
语法：ABS(数字)；返回数字的绝对值；若引用单元格，把数字换为单元格地址即可 2、INT(number)：向小取整
语法：INT(数字)；若引用单元格…
excel日期函数篇2
1、DATE(year,month,day)：根据年、月、日三个数值返回其表示的日期 2、DATEVALUE(date_text)：返回由文本字符串表示的日期的十进制数字 处理时间的时候，如果得到的是字符串格式，要将其转换为日期进行相关操作。excel函数里是使用文…
python进行数据分析：数据预处理
六大数据类型 见python基本功
import numpy as np
import pandas as pd数据预处理
缺失值处理
float_data pd.Series([1.2, -3.5, np.nan, 0])
float_data0 1.2
1 -3.5
2 NaN
3 0.0
dtype: float64查看缺失值
float_data.isna()0 False
1 …
Apache Doris 入门教程31：计算节点
需求场景
目前Doris是一个典型Share-Nothing的架构, 通过绑定数据和计算资源在同一个节点获得非常好的性能表现. 但随着Doris计算引擎性能持续提高, 越来越多的用户也开始选择使用Doris直接查询数据湖数据. 这类场景是一种Share-Disk场景, 数据往往存储在远端的HDFS/S3上, 计…
![[数据分析与可视化] Python绘制数据地图5-MovingPandas绘图实例](https://img-blog.csdnimg.cn/img_convert/27d0e108fa1ee2c9ea997ab4c1812057.png)
[数据分析与可视化] Python绘制数据地图5-MovingPandas绘图实例
MovingPandas是一个基于Python和GeoPandas的开源地理时空数据处理库，用于处理移动物体的轨迹数据。关于MovingPandas的使用见文章：MovingPandas入门指北，本文主要介绍三个MovingPandas的绘图实例。 MovingPandas官方仓库地址为：mo…
对话即数据分析，网易数帆ChatBI做到了
大数据产业创新服务媒体 ——聚焦数据 改变商业 在当今数字化快速发展的时代，数据已经成为业务经营与管理决策的核心驱要素。无论是跨国大企业还是新兴创业公司，正确、迅速地洞察数据已经变得至关重要。然而，传统的BI工具往往对用户有一定的…
使用selenium如何实现自动登录
回顾使用requests如何实现自动登录一文中，提到好多网站在我们登录过后，在之后的某段时间内访问该网页时，不会给出请登录的提示，时间到期后就会提示请登录！这样在使用爬虫访问网页时还要登录，打乱我们的节奏…
Pandas数据分析教程-pandas的数据结构
pandas数据分析-pandas的数据结构 pandas 数据结构Series1. 创建Series数组2. 性质3. 索引4. 运算DataFrame1. 创建Df数组2. 性质3.索引4. 对列进行增删改Index Objects本文介绍pandas中一些常用的属性方法的概述，给读者提供快速学习的架构和思路。表格中提供的一些参数方法没…
Pandas由入门到精通-分层索引
采集的数据存储后通常会分为多个文件或数据库，如何将这些文件按需拼接，或按键进行连接十分重要。这节将介绍数据索引的复杂操作如分层索引，stack,unstack,seet_index,reset_index等帮助重构数据，数据的拼接如merge,join,concat,combine_first等帮助连接数据，以及数据透视表…
（7）原神各属性角色的max与min
在对全部角色进行分析之后，还有必要对各属性角色的生命值/防御力/攻击力进行max与min显示：
话不多说，上货！
from pyecharts.charts import Radar
from pyecharts import options as opts
import pandas as pd
from pyecharts.ch…
使用Python中的value_counts()函数统计excel表格中不同数据出现的次数，调用pandas中 的value_counts()函数，可以对Series里面的每个值进行计数并且排序
#将excel列转化为python中的Series,即一维数组，然后统计Series中各数据的频数
import pandas as pd
data pd.read_excel(rC:/Users/Administrator/Desktop/data.xlsx) #读取excel表格数据
count data[number].value_counts()#number为表格列名
print(count)
大数据：什么是数据分析及环境搭建
一、什么是数据分析
当今世界对信息技术的依赖程度在不断加深，每天都会有大量的数据产生，我们经常会感到数据越来越多，但是要从中发现有价值的信息却越来越难。这里所说的信息，可以理解为对数据集处理之后的结果，是从数据集中提炼出的可用于其他场合的结论性的东西，而从…
python中几种数据类型
python 中的数据类型
python 在定义变量的时候不需要定义数据类型，导致很多小伙伴对python 中的数据类型不是很熟悉，通过这篇文章，我希望大家能够有所收获 python 中的数据类型，下面通过一段代码和结果展示给大家
print(type(10…
生信豆芽菜-单基因与TMB的关系
网址：http://www.sxdyc.com/panCancerTmb 该工具主要用于查看在泛癌中单基因与TMB的关系
提交后等待运行成功即可
为什么要做数据可视化系统
数据可视化系统在当今数字时代发挥着重要的作用，成为许多组织和企业的不可或缺的工具。随着信息爆炸式增长和数据处理的需求不断增加，数据可视化系统帮助人们更好地理解和分析数据，为决策提供重要支持。数聚股份将详细介绍为什么要做数据可视…
云计算：新一代的技术革命
云计算，作为21世纪的一项重要技术革命，已在全球范围内引发了深远的影响。它改变了我们存储和处理数据的方式，使得企业无需再建设和维护昂贵的本地服务器和数据中心。本文将深入探讨云计算的基本概念，类型，主要优点&…
excel图形二（雷达图、瀑布图甘特图、旭日图、树状图、组合图）与动态图
1、雷达图中想加入蜘蛛网类似的线，可先把图改成折线图，然后选中纵坐标轴，在填充与线条选项下将线条更改为实线，然后可设置颜色，然后再将图表更改成雷达图（效果如左图到右图）； 2、雷…
吉佳数字资产管理平台
一：平台简介
吉佳数字资产管理平台，通过对行业数据的采集、治理、存储以及统计和分析，得出具有参考价值的大数据分析结果，通过数据分析报告下载或大屏展示等形式，供数据需求者利用，从而达到数据辅助决策、…
Matplotlib数据可视化（五）
目录
1.绘制折线图
2.绘制散点图
3.绘制直方图
4.绘制饼图
5.绘制箱线图 1.绘制折线图
import matplotlib.pyplot as plt
import numpy as np
%matplotlib inline
x np.arange(9)
y np.sin(x)
z np.cos(x)
# marker数据点样式，linewidth线宽，li…
数字化时代，数据仓库和商业智能BI系统演进的五个阶段
数字化在逐渐成熟的同时，社会上也对数字化的性质有了进一步认识。当下，数字化除了前边提到的将复杂的信息、知识转化为可以度量的数字、数据，在将其转化为二进制代码，引入计算机内部，建立数据模型，统一进行…
Pandas常用操作整理
序号操作名称操作用途案例官方文档链接1pandas.merge进行表连接pd.merge(table1, table2, on"id", how"left")前往2pandas.DataFrame.drop_duplicates删除重复行df.drop_duplicates([brand, style], keeplast)前往3pandas.DataFrame.sort_values根据值进行…
python_爬取【搜狗图片】
1.利用python抓取网站上的图片，对于学习python及对网页数据分析处理很有帮助，也可以学习一些web方面的知识，我尝试使用【搜狗图片】搜索到的图片作为抓取对象，抓取【搜狗图片】主页各个标题栏的图片，以及【其他】输入图…
企业数字化转型大数据湖一体化平台项目建设方案PPT
导读：原文《企业数字化转型大数据湖一体化平台项目建设方案PPT》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。 喜欢文章，您可以点赞评论转发…
什么是LTV，舔狗的LTV可以乘以N吗？
依旧注意一下，数据类文章比较敏感，舔狗只是代词，千万不要以为我是舔狗。之前我们探讨过如何对自己的用户进行分层：不知怎么选，用RFM模型看舔狗质量！也探讨了如何判断自己适不适合海后（主播&…
不知怎么选，用RFM模型看舔狗质量！
假设我长得很漂亮，拥有众多追求者，但是初出闺房的我对这世界上的男人毫无认知，那么该如何选择呢？这真是一个问题！妈妈说，愿意为我花钱的男人未必爱我，但不愿意为我花钱的男人必定不爱我…
你为什么不想向上汇报？
汇报属于构建构建团队信息通道中的一环，也是必要的一环，1V1、项目汇报、部门月会都属于汇报的一种，前面有文章做了全局信息通道的概述：新晋总监生存指南终章——构建团队信息通道而在具体的时候依旧会有很多问题，这里还…
新晋总监生存指南二——建立指标
一、膨胀的团队、膨胀的复杂度书接上文：新晋总监生存指南开篇之总监二三事按照之前的逻辑：如果你想创造一个能够维持一定秩序、不会分解的系统，那么这个系统必然是一个开放系统，就需要为他注入能力，并让其在系统中流动…
9万字企业数字化技术中台、数据中台、工业互联网建设方案WORD
导读：原文《9万字企业数字化技术中台、数据中台、工业互联网建设方案WORD》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。
目录
1 概述
1.1. 数字化企…
【FusionInsight 问题】FusionInsight HD 6.5.1 集群中遇到的问题（01）
FusionInsight HD 6.5.1 集群中遇到的问题（01） FusionInsight HD 6.5.1 集群中遇到的问题（01）Spark-on-HBase认证问题Failed to find any Kerberos tgt服务端配置修改客户端配置修改 Spark-on-HBase依赖包问题phoenix-core-4.13.1…
【核磁共振成像】单射成像和高速脉冲序列
目录 一、提高成像速度的手段二、平面回波成像(EPI)序列三、常用或基本EPI序列四、EPI变型序列五、渐开平面螺旋(spiral)扫描序列六、RARE序列七、GRASE序列八、STEAM序列 一、提高成像速度的手段 MRI扫描时间可表示为 其中Nex为激发次数，NpE1和NpE2是两个相位…
MySQL 中常用函数详解
MySQL 提供了一系列丰富的函数，这些函数在数据处理中起着重要的作用。下面，我们将详细介绍一些最常用的 MySQL 函数，包括字符串函数、数学函数、日期和时间函数、聚合函数等。
1. 字符串函数 1.1 CONCAT() CONCAT() 函数用于连接两个或多个字…
紧跟老板思维，这款数据可视化工具神了
在今时今日，依靠大数据可视化分析工具做出一张形象直观、符合企业审美的数据可视化分析报表都不是什么难事，难就难在于做出一张能够紧随老板思维变化展开可视化分析的数据可视化分析报表。接下来要介绍的这款数据可视化工具就是这么一款神奇的BI工具&…
知虾|Shopee数据分析工具是什么？Shopee虾皮卖家必备工具
知虾|Shopee数据分析工具是什么？Shopee虾皮卖家必备工具 在当今竞争激烈的电商行业，拥有准确的市场洞察和数据驱动的决策是成功的关键。Shopee作为全球领先的电商平台之一，市场也出现很多为商家提供了一系列强大的工具和功能，其中…
智慧水务建设项目可研报告-222页【可研报告】
导读：原文《智慧水务建设项目可研报告-222页【可研报告】》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。
部分内容：
业务需求分析
3.3.1业…
Python数据采集实战-使用BeautifulSoup框架解析HTML文档并提取所需内容（附源码和实现效果）
实现功能
使用BeautifulSoup框架解析HTML文档并提取所需内容的例子：假设我们要从以下HTML文档中提取所有超链接的链接地址
实现代码 from bs4 import BeautifulSoup
import requests# 发送请求并获取HTML文档
url "https://www.baidu.com"
response r…
【数据分析】波士顿矩阵
波士顿矩阵是一种用于分析市场定位和企业发展战略的管理工具。由美国波士顿咨询集团（Boston Consulting Group）于1970年提出，并以该集团命名。
波士顿矩阵主要基于产品生命周期和市场份额两个维度，将企业的产品或业务分为四个象限…
【从零学习python 】66.深入了解正则表达式：模式匹配与文本处理的利器
文章目录 正则表达式模式非打印字符特殊字符定位符重复特殊序列进阶案例 正则表达式模式
模式字符串使用特殊的语法来表示一个正则表达式：
字母和数字表示他们自身，一个正则表达式模式中的字母和数字匹配同样的字符串。
re.search(rH,Hello) # 这里的…
生信豆芽菜-EMT评分的计算
网址：http://www.sxdyc.com/gradeEmt 1、数据准备 表达谱数据，行为基因，列为样本
2、提交后，等待运行成功即可下载
当然，如果不清楚数据是什么样的，可以选择下载我们的示例数据，也可以关注…
R语言13-R语言中的数据导入导出和批量导入
数据导入
CSV 文件： 使用 read.csv() 函数导入逗号分隔的文本文件。
data <- read.csv("data.csv")Excel 文件： 使用 readxl 包中的函数 read_excel() 导入 Excel 文件。
install.packages("readxl") # 安装 readxl 包&#…
R语言10-R语言中的循环结构
在R语言中，有几种常用的循环结构，可以用来多次执行特定的代码块。以下是其中的两种主要循环结构：
for循环： for 循环用于按照一定的步长迭代一个序列，通常用于执行固定次数的循环。
for (i in 1:5) {print(i)
}while…
涂鸦智慧社区平台｜以人为本，构建有温度的“数智社区”
2020年是老旧小区智能化改造取得巨大成就的一年，老旧社区改造是国家重大的民生项目，住建部数据显示，全国共有老旧小区近16万个，大部分老旧社区建成于80年代甚至更早，面临基础设施老化、安全隐患高、物业管理不完善等问…
Python数据分析-Pandas
Pandas
个人笔迹，建议不看
import pandas as pd
import numpy as npSeries类型
spd.Series([1，3，5，np.nan,6,8],index[a,b,c,d,e])
print(s) # 默认0-n-1，否则用index数组作行标
s.index
s.value # array()
s[a] &g…
python中的matplotlib画散点图（数据分析与可视化）
python中的matplotlib画散点图（数据分析与可视化）
import numpy as np
import pandas as pd
import matplotlib.pyplot as pltpd.set_option("max_columns",None)
plt.rcParams[font.sans-serif][SimHei]
plt.rcParams[axes.unicode_minus]Fa…
R语言15-R语言中的列的分裂与合并长宽数据转换
列的分裂与合并
列的分裂： 使用 separate() 函数将一个包含多个值的列分裂成多个列。
install.packages("tidyr") # 安装 tidyr 包（如果尚未安装）
library(tidyr)data <- data %>%separate(col_name, into c("part1…
ABTest学习路径
ABTest基础概念
AB测试可以用来测什么？不能测什么？_紫昂张的博客-CSDN博客
AA实验是什么？_紫昂张的博客-CSDN博客
ABTest&统计学
ABTest&Python
ABTest实例
sql解决取多个截至每个月的数据
问题：需要查询1月、1-2月、1-3月… 1-12月，分区间的累计数据，在同一个sql语句里面实现。 多个分开查询效率不高，并且数据手动合并麻烦。
with t1 as (
SELECT *,CASE WHEN insutype 390 THEN 居民 ELSE 职工 END 人员类别,SUBST…
常用的数据可视化工具有哪些？要操作简单的
随着数据量的剧增，对分析效率和数据信息传递都带来了不小的挑战，于是数据可视化工具应运而生，通过直观形象的图表来展现、传递数据信息，提高数据分析报表的易读性。那么，常用的操作简单数据可视化工具有哪些࿱…
【Anaconda】安装及使用
知识目录 前言一、 Anaconda是什么二、为什么使用Anaconda三、安装步骤3.1 下载安装3.2 配置conda源 结语 前言
大家好！我是向阳花花花花，本期给大家带来的是 Anaconda 安装及使用。
每日金句分享：故事不长，也不难讲。』—— 「…
2023年京东婴童纸尿裤行业数据分析（京东数据运营）
当前，面对出生率下降、消费疲软等各种大环境不确定性，不仅是线下母婴店深陷于“生意难”的境地，线上消费同样受影响颇深，婴童纸尿裤类目便是如此。下面结合鲸参谋平台的数据，从行业大盘、品牌端等方面来看一下婴童纸尿…
2023年7月京东空气净化器行业品牌销售排行榜（京东运营数据分析）
随着科技发展，智能家具在日常生活中出现的频率越来越高，许多曾经不被关注的家电也出现在其中，包括近年来逐渐兴起的空气净化器。伴随人们对自身健康的重视度越来越高，作为能够杀灭空气污染物、有效提高空气清洁度的产品࿰…
【100天精通Python】Day59：Python 数据分析_Pandas高级功能-多层索引创建访问切片和重塑操作，pandas自定义函数和映射功能
目录
1 多层索引（MultiIndex）
1.1 创建多层索引
1.1.1 从元组创建多层索引
1.1.2 使用 set_index() 方法创建多层索引
1.2 访问多层索引数据
1.3 多层索引的层次切片
1.4 多层索引的重塑
2 自定义函数和映射
2.1 使用 apply() 方法进行自定义函…
AB测试可以用来测什么？不能测什么？
AB测试可以测什么： AB测试是常用的因果推断方法，可以用来检验新功能发版是否有效、策略上线是否有效。
有两个大方向的应用场景，一是产品迭代，二是策略优化。其中策略包括运营策略、算法策略等。 具体例子：
应用场景…
什么是财务数字化？财务数字化怎么做？
如今，科技飞速发展，产业变革加剧，诸如大数据、人工智能、云计算和物联网等技术发展迅速，逐步改变人类生产生活的方方面面。一场影响世界的数字化变革正在悄然发生。2020年9月，国务院印发《关于加快推进国有企业数字化转…
改进探索性数据分析的实用技巧！
Datawhale干货 译者：张峰，Datawhale成员 让 EDA 更简单（更美观）的实用指南！ 原文链接：https://towardsdatascience.com/practical-tips-for-improving-exploratory-data-analysis-1c43b3484577 介绍 探索性…
400电话系统的数据分析和优化对企业的发展和增长有什么具体的好处？
对企业而言，通过400电话系统的数据分析和优化可以带来以下具体好处，促进企业的发展和增长： 优化客户满意度：通过数据分析和优化，企业可以更好地了解客户的需求和偏好，针对性地提供个性化的服务。这将提升客…
python-数据可视化-下载数据-CSV文件格式
数据以两种常见格式存储：CSV和JSON
CSV文件格式
comma-separated values
import csv
filename sitka_weather_07-2018_simple.csv
with open(filename) as f:reader csv.reader(f)header_row next(reader)print(header_row)
# [USW00025333, SITKA AIRPORT, A…
![10万字智慧政务大数据平台项目建设方案222页[Word]](https://img-blog.csdnimg.cn/img_convert/2dc2c6ade877991a5dc7888403cfbc68.jpeg)
10万字智慧政务大数据平台项目建设方案222页[Word]
导读：原文《10万字智慧政务大数据平台项目建设方案222页[Word]》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。
1.1 项目建设目标
推进市一级政府搭建数…
Streamlit 讲解专栏（十一）：数据可视化-图表绘制详解（中）
文章目录 1 前言2 绘制交互式散点图3 定制图表主题4 增强数据可视化的交互性与注释步骤1步骤二 5 结语 1 前言
在上一篇博文《 Streamlit 讲解专栏（十）：数据可视化-图表绘制详解（上）》中，我们学习了一些关…
在云原生时代，构建高效的大数据存储与分析平台
文章目录 1. **选择适当的数据存储技术：**2. **采用分布式架构：**3. **数据分区和索引：**4. **采用列式存储：**5. **数据压缩和编码：**6. **使用缓存技术：**7. **数据分片和复制：**8. **自动化运…
数据分析基础-数据可视化学习笔记04-互动方式
交互方式
交互（Interaction）是指用户与系统、设备或其他用户之间的相互作用、传递信息和交流的过程。在计算机科学、人机交互和用户体验领域，交互是用户与技术之间的核心概念，它决定了用户如何与计算机系统或其他技术进行沟通、操…
Datatable：Python数据分析提速高手，飞一般的感觉！
1
前言
Datatable是一个Python库： 详细介绍大家可以去官网查看： https://datatable.readthedocs.io/en/latest/?badgelatest
Datatable的有点包括： 高效的多线程算法 Memory-thrifty 内存映射磁盘上的数据集 本地C实现 完全开源
Da…
数据分析 | 特征重要性分析 | 树模型、SHAP值法
前言 在分析特征重要性的时候，相关性分析和主成分分析往往是比较简单的方法，相关性分析是通过计算特征与目标变量之间的相关系数来评估特征的重要性。它可以告诉我们特征和目标变量之间的线性关系程度，但对于非线性关系就无能为力了ÿ…
在 Amazon 搭建无代码可视化的数据分析和建模平台
现代企业常常会有利用数据分析和机器学习帮助解决业务痛点的需求。如制造业中，利用设备采集上来的数据做预测性维护，质量控制；在零售业中，利用客户端端采集的数据做渠道转化率分析，个性化推荐等。
亚马逊云科技开发者…
【核磁共振成像】相位差重建
目录 一、相位差map重建一般步骤和反正切函数主值范围二、反正切运算三、可预期相位误差和伴随场的校正四、图形变形校正 一、相位差map重建一般步骤和反正切函数主值范围 MRI是一个相敏成像模态，MR原始数据傅里叶变换后的复数图像中每个像素值有模和相位。标准模重…
探索软件架构与网络通信协议：构建现代网络应用
文章目录 1. 软件架构：构建应用的基石1.1 C/S架构：客户端/服务器1.2 B/S架构：浏览器/服务器 2. 网络通信协议：构建连接的桥梁2.1 4层模型：数据的分层传输2.2 IP地址与端口号：标识和定位 3. TCP通信…
【征稿信息】第四届先进材料和智能制造国际学术会议（ICAMIM2023)
第四届先进材料和智能制造国际学术会议（ICAMIM2023) 2023 4th International Conference on Advanced Materials and Intelligent Manufacturing 2023年广州市“国际学术会议之都”建设项目— 第四届先进材料和智能制造国际学术会议（ICAMIM2023)将于202…
Python数据分析的第三方库
ython作为一种简单易学、功能强大的编程语言，逐渐成为数据分析领域的首选工具。在Python数据分析中，有许多优秀的第三方库可以帮助我们进行数据处理、可视化和建模。
常用第三方库：
NumPy：提供了高性能的多维数组对象和用于数组…
ChatGPT AIGC 完成二八分析柏拉图的制作案例
我们先让ChatGPT来总结一下二八分析柏拉图的好处与优点 同样ChatGPT 也可以帮我们来实现柏拉图的制作。
效果如下： 这样的按年份进行选择的柏拉图使用前端可视化的技术就可以实现。
如HTML，JS，Echarts等，但是代码可以让ChatGPT来做，生成。
在ChatGPT中给它一个Prompt
…
2023年7月京东打印机行业品牌销售排行榜（京东运营数据分析）
鲸参谋监测的京东平台7月份打印机行业销售数据已出炉！
7月份，打印机市场呈现下滑趋势。根据鲸参谋平台的数据可知，当月京东平台打印机的销量为48万，环比下降约28%，同比下降约18%；销售额为4亿，环…
浅谈一下企业信息化管理
企业信息化管理
企业信息化是指将企业的生产过程，物料，事务，财务，销售等业务过程数字化，通过各种信息系统网络价格成新的信息资源，提供给各层次的人们东西观察各类动态业务中的一切信息，以便于…
Pyecharts数据可视化（一）
目录 1.Pyecharts简介
2.Pyecharts的常用方法
3.Pyecharts绘制柱状图
3.1 绘制并列柱状图
3.2 绘制水平直方图 1.Pyecharts简介
Pyecharts是一个用于创建交互式图表的Python库。它基于Echarts，一个强大的JavaScript图表库，Pyecharts允许Python开发者…
Pyecharts数据可视化（三）
目录
1.绘制词云图
2.绘制桑基图
3.绘制平行坐标图
4.绘制结点图
5.绘制地图
本文主要介绍了如何利用Pyecharts绘制词云图、桑基图、平行坐标图、节点图和地图，虽然这些图平时不是很常用，但是看起来还是比较好看的，如果放在论文当中&am…
【100天精通Python】Day52：Python 数据分析_Numpy入门基础与数组操作
目录
1 NumPy 基础概述
1.1 NumPy的主要特点和功能
1.2 NumPy 安装和导入
2 Numpy 数组
2.1 创建NumPy数组
2.2 数组的形状和维度
2.3 数组的数据类型
2.4 访问和修改数组元素
3 数组操作
3.1 数组运算
3.2 数学函数
3.3 统计函数
4 数组形状操作
4.1 重塑数组形…
使用Puppeteer进行游戏数据可视化
导语
Puppeteer是一个基于Node.js的库，可以用来控制Chrome或Chromium浏览器，实现网页操作、截图、测试、爬虫等功能。本文将介绍如何使用Puppeteer进行游戏数据的爬取和可视化，以《英雄联盟》为例。
概述
《英雄联盟》是一款由Riot Games开…
【linux命令讲解大全】051.Linux Awk脚本语言中的字段定界符和流程控制
文章目录 设置字段定界符流程控制语句条件判断语句循环语句while语句for循环do循环 其他语句 数组应用数组的定义读取数组的值数组相关函数二维、多维数组使用 从零学 python 设置字段定界符
默认的字段定界符是空格，可以使用-F “定界符” 明确指定一个定界符&…
ChatGPT AIGC 完成动态堆积面积图实例
先使用ChatGPT AIGC描述一下堆积面积图的功能与作用。 接下来一起看一下ChatGPT做出的动态可视化效果图： 这样的动态图案例代码使用ChatGPT AIGC完成。 将完整代码复制如下：
<!DOCTYPE html>
<html>
<head><meta charset="utf-8"><tit…
使用Python进行健身手表数据分析
健身手表(Fitness Watch)数据分析涉及分析健身可穿戴设备或智能手表收集的数据，以深入了解用户的健康和活动模式。这些设备可以跟踪所走的步数、消耗的能量、步行速度等指标。本文将带您完成使用Python进行Fitness Watch数据分析的任务。
Fitness Watch数据分析是健…
excel中的引用与查找函数篇1
1、COLUMN(reference)：返回与列号对应的数字
2、ROW(reference)：返回与行号对应的数字 参数reference表示引用/参考单元格，输入后引用单元格后colimn()和row()会返回这个单元格对应的列号和行号。若参数reference没有引用单元格，…
Python数据分析实战-将字符串中的空格替换为逗号且要保留特定词组（附源码和实现效果）
实现功能
将字符串中的空格替换为逗号且要保留特定词组
实现代码
import restring "Linux Python Cloud Native Distributed System AI C Deep Learning Framework Micro Service Automation Git IoT"# 定义要保留的特定词组
special_phrases ["Deep Learn…
python数据分析基础—取某列字符的前几个字符
文章目录 前言取某列前几个字符方法一：[x[:7] for x in data["calling_nbr"]]方法二：data[calling_nbr].str[:7] 前言
在进行数据分析时，有时候我们需要提取单列的前几个字符串进行分析。本文主要讲述针对这种情况处理方法。 取某…
十四、MySQL(DCL)如何实现用户的简单管理？配置用户？
1、DCL语句： 要学习DCL语言，就要清楚DCL语言是用来干什么的，首先DCL语言英文全称是Data Control Language，是数据控制语言，主要用来管理数据库用户、控制数据库的访问权限/ 2、DCL的基础语法： （…
生信豆芽菜-机器学习筛选特征基因
网址：http://www.sxdyc.com/mlscreenfeature 一、使用方法 1、准备数据 第一个文件：特征表达数据
第二个文件：分组信息，第一列为样本名，第二列为患者分组
第三个文件：分析基因名
2、选择机器学习的方…
2023 年高教社杯全国大学生数学建模竞赛-E 题 黄河水沙监测数据分析详解+思路+Python代码
2023 年高教社杯全国大学生数学建模竞赛-E 题 黄河水沙监测数据分析
十分激动啊啊啊题目终于出来了！！官网6点就进去了结果直接卡死现在才拿到题目，我是打算A-E题全部做一遍。简单介绍一下我自己：博主专注建模四年，参与…
【GeoDa实用技巧100例】023：geoda探索性空间数据分析
文章目录 全局空间关联性指标局部空间关联性指标探索性空间数据分析是一种具有识别功能的空间数据分析方法，主要用于探测一些变量的空间关联性和集聚现象。某一变量在空间上发生集聚，意味着在一定区域内，这一变量在各个地域单元之间具有自相关性：某一地域单元该变量较高，其…
17万字集团大数据平台整体方案word
导读：原文《17万字集团大数据平台整体方案word》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。以下是部分内容，
1.1.1 总体目标
根据集团信…
数据可视化分析年轻人的储蓄方式和动机
近代年轻人的储蓄态度和习惯正逐渐成为社会关注的焦点。在这个充满机遇和挑战的时代，年轻一代面临着前所未有的多样化选择和诱惑，这也在一定程度上影响了他们的理财行为。随着经济环境的不断变化，数字化金融工具的兴起，以及财务知…
SQL中的CASE WHEN语句：从基础到高级应用指南
SQL中的CASE WHEN语句：从基础到高级应用指南
准备工作 - 表1: products 示例数据：
我们使用一个名为"Products"的表，包含以下列：ProductID、ProductName、CategoryID、UnitPrice、StockQuantity。
-- 建表
CREATE TA…
![python代码的基本操作[文件写入][文件读取]](https://img-blog.csdnimg.cn/35b40b748af14afe9ac774029a274d08.jpg)
云计算环境中高性能计算的挑战与对策
文章目录 云计算中的高性能计算挑战1. 资源竞争：2. 网络延迟：3. 数据传输效率：4. 虚拟化开销：5. 节点异构性： 高性能计算在云计算环境中的对策1. 定制化虚拟机镜像：2. 弹性资源调整：3. 高效数据…
2023京东口腔护理赛道行业数据分析（京东销售数据分析）
近年来，口腔护理逐渐成为年轻人重视的健康领域，从口腔护理整体市场来看，牙膏和牙刷等基础口腔护理产品仍占据主导地位。不过，随着口腔护理市场逐步朝向精致化、专业化、多元化等方向发展，不少新兴口腔护理产品受到消费…
地下管线三维自动建模软件MagicPipe3D V3.0发布
2023年9月1日经纬管网建模系统MagicPipe3D V3.0正式发布，该版本经过众多用户应用和反馈，在三维地下管网建模效果、效率、适配性方面均有显著提升！MagicPipe3D本地离线参数化构建地下管网模型（包括管道、接头、附属设施等ÿ…
奥威BI数据可视化工具一出马，财务数据分析不再烧脑
数据可视化工具可以使财务数据分析更加直观和易于理解。这些工具可以将大量的财务数据简化为易于阅读和理解的图表、图形和表格，帮助财务人员更快地分析和发现问题。例如，通过将财务数据转化为柱状图、折线图、饼图等图形，可以更加清晰地展示…
Python数据攻略-Pandas与地理空间数据分析
地理空间数据分析已经成为数据分析不可或缺的一部分。无论是在城市规划、交通分析，还是在环境科学中，地理空间数据都发挥着关键作用。
本文将为初学者和新手提供一个详细的指南，通过使用Python的Pandas库和Geopandas库，来进行地理空间数据分析。 文章目录 用Pandas处理地理…
python读取CSV文件并生成折线图
Python是一门非常强大的编程语言，能够处理各种各样的数据。CSV（Comma-Separated Values）是一种常见的文件格式，经常用于存储和交换数据，特别是在数据分析和数据处理领域。在这篇文章中，我们将通过使用Pytho…
快速用Python进行数据分析技巧详解
概要
一些小提示和小技巧可能是非常有用的，特别是在编程领域。有时候使用一点点黑客技术，既可以节省时间，还可能挽救“生命”。
一个小小的快捷方式或附加组件有时真是天赐之物，并且可以成为真正的生产力助推器。所以࿰…
选择MobPush的三大理由
当前越来越多的移动应用开发者意识到了与用户保持稳定联系的重要性，当前市场上涌现了众多第三方推送服务商，如何甄别并择优选用合适的推送工具对移动应用实现用户裂变增长至关重要。MobPush智能多通道推送服务作为MobTech袤博科技开发的一款高效便捷的消…
184_Python 在 Excel 和 Power BI 绘制堆积瀑布图
184_Python 在 Excel 和 Power BI 绘制堆积瀑布图
一、背景
在 2023 年 8 月 22 日 微软 Excel 官方宣布：在 Excel 原生内置的支持了 Python。博客原文
笔者第一时间就更新到了 Excel 的预览版，通过了漫长等待分发，现在可以体验了…
Spark SQL【电商购买数据分析】
Spark 数据分析 （Scala）
import org.apache.spark.rdd.RDD
import org.apache.spark.sql.{DataFrame, SparkSession}
import org.apache.spark.{SparkConf, SparkContext}import java.io.{File, PrintWriter}object Taobao {case class Info(userId: Lo…
智慧银行：数字化金融时代的引领者
在当今数字化的时代，金融行业正经历着一场前所未有的变革。传统的银行模式已经不再适用，取而代之的是智慧银行的新兴概念。智慧银行不仅仅是数字化的银行，更是一个全新的金融服务范式，将科技与金融相结合，为客户提供更…
DolphinDB x 龙蜥社区，打造多样化的数据底座
近日，浙江智臾科技有限公司（以下简称“DolphinDB”）正式签署 CLA 贡献者许可协议，加入龙蜥社区（OpenAnolis）。 DolphinDB 主创团队从 2012 年开始投入研发产品。作为一款基于高性能时序数据库，D…
数据分析技能点-标准计分离差
在日常生活和工作中，我们经常会遇到需要对一组数据进行分析和评价的情况。这时标准计分和离差就成了非常实用的工具。但什么是标准计分和离差？它们又如何应用于实际问题中？
本文旨在解释这两个概念，并通过一个生活中非常受欢迎的主题——《三国志》的武将属性，来进行实际…
使用Python进行员工流失分析
员工流失分析是指分析离开公司、企业的员工的行为，并将他们与公司中的现有员工进行比较。它有助于找出哪些员工可能很快离开。所以，如果你想学习如何分析员工流失，这篇文章适合你。本文中，将带您完成使用Python进行员工流失分析的…
数据分析技能点-双变量的相关分析
在数据驱动的世界里，我们常常需要理解两个或多个变量之间的关系。这不仅在学术研究中有着至关重要的作用，而且在日常生活的各个方面也是如此。例如健康专家可能需要了解饮食和身体健康之间的关系，而市场分析师可能对广告支出和销售额之间的联系感兴趣。这就是双变量相关分析…
2023年8月京东洗烘套装行业品牌销售排行榜（京东数据开放平台）
鲸参谋监测的京东平台8月份洗烘套装市场销售数据已出炉！
根据鲸参谋平台的数据显示，今年8月份，京东平台洗烘套装的销量为1.1万，同比增长约218%；销售额约为1.2亿，同比增长约279%。可以看到，洗烘…
Spring Boot事件机制浅析
1、概述
在设计模式中，观察者模式是一个比较常用的设计模式。维基百科解释如下： 观察者模式是软件设计模式的一种。在此种模式中，一个目标对象管理所有相依于它的观察者对象，并且在它本身的状态改变时主动发出通知。这通常透过呼…
数据分析技能点-多元分析和应用
在这个数据驱动的时代，多元分析已经成为了一个不可或缺的工具，用于从复杂和多维的数据中提取有用的信息。不论是在营销策略、金融投资，还是在社会科学研究中，多元分析都有广泛的应用。然而多元分析并不仅仅是一种数学工具或计算方法，它更是一种思维方式，一种用于解决复杂…
三分钟，教你做出领导满意的可视化报表
数字化已然成为社会发展的共识，企业想要在未来的竞争中占据优势，获取不断发展的数字经济，就必须将数据看作企业的战略资源，利用数据可视化将数据转化为信息，促进企业发展。
数据可视化是什么
在早期数据分析领域&…
Excel自学三部曲_Part3：Excel工作场景分析实战
文章目录 一、Excel工作场景与知识点总结1. 学哪个Excel?（1）学习哪个版本的Excel?（2）Excel和WPS到底学哪个？ 2. 怎么用Excel?（1）低量级数据的存储（2）一次性的数据处理…
MNE系列教程2——MNE中的Raw及其基本用法
一、Sample 1
1. 读取文件
import mne
from mne.datasets import sample
import matplotlib.pyplot as plt
# sample的存放地址
data_path = MNE-sample-data# 该fif文件存放地址
fname = data_path + /MEG/sample/sample_audvis_raw.fif2. 打印基本信息
raw = mne
32 数据分析（下）pandas介绍
文章目录 工具excelTableauPower Queryjupytermatplotlibnumpypandas数据类型Series基础的SeriesSeries的字典操作增加表的索引名字和表名字索引操作 DataFrameDataFrame 的基础使用DataFrame的列方法------理解DataFrame的行列方法------使用loc 与 iloc 对齐操作SeriesDataFr…
【已更新代码图表】2023数学建模国赛E题python代码--黄河水沙监测数据分析
E 题 黄河水沙监测数据分析 黄河是中华民族的母亲河。研究黄河水沙通量的变化规律对沿黄流域的环境治理、气候变 化和人民生活的影响，以及对优化黄河流域水资源分配、协调人地关系、调水调沙、防洪减灾 等方面都具有重要的理论指导意义。 附件 1 给出了位于小浪底水…
重磅功能 一键助你打造TikTok爆款视频
内容为王的时代，内容需求大爆炸。短视频电商即是当下的时代红利，也是营销领域最前沿的谜题。
TikTok短视频日新月异，但是内容选题、标签、热度视频该如何找？这些问题至关重要...
为了解决上述这些电商客户的痛点，超店…
使用Python将网页数据保存到NoSQL数据库的方法和示例
随着大数据和人工智能技术的快速发展，对于大规模数据的处理需求日益增多。NoSQL数据库作为一种新兴的数据存储解决方案，具有高可扩展性、高性能和灵活性数据模型等优势，已经在许多行业得到广泛应用。传统的关系型数据库在处理海量数据时可能会…
数智化，如何驱动高校的产教融合
高校数智驱动是指通过运用先进的技术和智能化的手段，推动高校的发展和创新。这包括利用大数据分析、人工智能、物联网等技术来提高高校的管理效率、教学质量和科研水平。 高校实施数智驱动考虑的几个方面
（1）建立数据驱动的决策机制…
电商商品的前后台类目设计思路，小本本记下来（提供获取京东淘宝商品类目信息API 免费测试）
今天，我们来聊聊商品类目的设计思路。
商品是电商的根基，核心目标是销，也就是卖货。卖货可以多层理解，卖给谁，怎么卖，什么货，其实就是人货场的概念。
我理解的货，不仅是商品层面&a…
机器学习（8）---数据预处理
文章目录 一、数据预处理1.1 数据无量纲化1.2 数据归一化1.3 数据标准化1.4 处理选择 二、缺失值2.1 填补的类和参数2.2 用Pandas和Numpy进行填补 三、处理分类型特征：编码与哑变量3.1 编码3.2 哑变量（独热编码） 一、数据预处理
1.1 数据无量…
通常用哪些软件做数据可视化大屏？
一般就两种，一种是可视化大屏编辑软件，另一种则是BI系统（BI数据可视化工具）。考虑到数据来源多、数据量大以及数据分析效率、直观易懂性等实实在在的客观问题，建议采用BI系统来制作数据可视化大屏。
BI系统做可视化大…
教育领域数据可视化：点亮知识之路
教育领域一直以来都在不断进步和演变，而数据可视化技术正在为这一领域带来一场革命。在过去的几年里，教育者们越来越意识到，通过将教育数据转化为可视化图表和图形，可以更好地理解学生的表现、需求和趋势，从而提供更好…
ChatGPT AIGC 实现Excel行列多条件交叉查找
查找函数在Excel中一直是非常重要的知识点，我们让ChatGPT AIGC来总结一下关于查找函数的优点与了处。 Excel中的查找函数是一种非常强大且多用途的工具，具有以下优点和作用：
1. 数据定位：查找函数可以帮助我们在大量数据中快速定位某个特定的数据或信息。 2. 数据整理：如…
2022年全国研究生数学建模竞赛华为杯D题PISA架构芯片资源排布问题求解全过程文档及程序
2022年全国研究生数学建模竞赛华为杯
D题 PISA架构芯片资源排布问题
原题再现： 一、背景介绍 芯片是电子行业的基础，在当前日益复杂的国际形势下，芯片成了各个大国必争的高科技技术。本课题关注网络通信领域的交换芯片，传统的交…
Python中数据去重的重要性、技巧和实现代码
在数据处理和分析的过程中，数据去重是数据处理和分析的关键步骤之一。重复的数据会导致分析结果的偏差，影响决策的准确性。通过数据去重，我们可以确保分析所使用的数据集是干净、准确的，从而提高分析结果的可靠性，Pyth…
ChatGPT高级数据分析功能
目录 只需要上传数据集就可以自动化分析，我们测试以下，首先我找了一份数据，主要是关于二手车的，格式如下： 接下来调用，GPT中的高级数据分析功能，上传数据，并要求进行分析 第一步：自动对数据字段进行详细的解释： 第二步，对数据进行预处理，比如缺失值，基本的描述…
提升数学效率：导航 Numpy 数组操作
推荐：使用 NSDT场景编辑器 快速搭建3D应用场景 什么是 Numpy？
Numpy、Scipy 和 Matplotlib 是数据科学项目中使用的 Python 库，它们提供类似 MATLAB 的功能。 图片来自维基百科
主要是，Numpy具有以下功能：
类型化多…
IT运维：使用数据分析平台监控Windows Eventlog
TIPS：本文鸿鹄版本：2.10.0及以上版本 概述 本文基于《IT运维：利用鸿鹄采集Windows event log数据》（以下简称原文）文章进行了细化与延伸。主要包括细化了安装步骤，增加了仪表板。 鸿鹄端配置 创建数据集与数…
数据分析及治理工程师
背景
企业的信息化建设需要数据，那么数据是很重要的，数据分析的目的在于为业务服务，而为了更好的达成这一目的。对于元数据的采集和主数据的分析，以及数据标准的制定，和数据质量的保证是非常重要的。
主数据管理面临…
曝光量近400万，小红书入秋玩出九件套，数据解析如何运用仪式感？
今年秋冬，品牌种草怎么做？最近，有两个季节关键词火了…… 入秋九件套，季节仪式感又增加了 继“秋天的第一杯奶茶”成为入秋固定仪式后，这届年轻人又扒拉出更多的入秋仪式。先是入秋三件套内容在各大社媒平台发酵&#…
关于电子商务电商供应链项目，不得不说的开放平台电商API接口
B2B电商开放平台的设计需要从以下几面去思考： 开放平台API接口的设计，主要是从功能需求的角度，设计满足业务需求的接口及对应的字段； 平台与商家之间信息的对接，对接的方法有哪些？对接过程中需要可能会遇到…
点击、拖曳，15分钟搞定BI零售数据分析
早几年做数据分析还很依赖IT，过程复杂、耗时长、灵活性差，但这几年随着BI智能数据分析技术的成长，零售数据分析发生了翻天覆地的变化，其中最直观的一点就是：点击、拖曳，15分钟内就能搞定BI零售数据分析。
…
和鲸 ModelWhale 与华为 OceanStor 2910 计算型存储完成兼容性测试
数智化时代，数据总量的爆炸性增长伴随着人工智能、云计算等技术的发展，加速催化了公众对于数据存储与应用的多元化需求。同时，数据也是重要的基础资源和战略资源，需要严格保障其安全性、完整性。搭建国产数据基础设施底座…
京东数据平台：2023年京东营养保健品市场销售数据分析
随着十一长假结束，市场端也开始了一系列的消费数据回顾和复盘。从现有数据表现来看，营养保健品市场的增长备受关注。
近日，京东消费及产业发展研究院与《经济日报》联合整合了相关数据。数据显示，2023年中秋福利采购季期间&#…
虾皮商品评论数据接口，shopee商品评论API接口，虾皮API接口
虾皮商品评论数据接口的申请步骤如下：
在开放平台注册账号，申请API调用权限。登录开放平台，进入API管理界面，在接口列表中找到“商品详情”API接口，点击“申请使用”。填写API申请表格，包括API调用用途、申…
个性化精准推送服务：Mobpush引领用户深度参与度的新纪元
在当今这个日新月异的世界，用户群体的兴趣爱好和消费倾向呈现多元化、宽领域、不断细分的特点，此时传统的广而告之式的信息推送和宣传往往无法取得理想效果，这是因为用户的需求和兴趣各不相同，“千人一面”的消息无法适用于所有用…
数据仓库的基本概述之扫盲系列
数据仓库的诞生原因
随着互联网的普及，信息技术已经深入到各行各业，并逐步融入到企业的日常运营中。然而，当前企业在信息化建设过程中遇到了一些困境与挑战。
1、历史数据积存。
过去企业的业务系统往往是在较长时间内建设的，很…
亿发连锁商超新零售解决方案提供商，提供定制新零售管理系统
时代的发展带动了经济环境的变化，为迎合市场经济的发展需求，数字化收银逐渐融入到大中生活中，中小型商铺都倾向于使用智慧收银系统取代传统收银模式。新零售系统成为了商家在竞争激烈的市场中立足的关键。但随之也带来了数不尽的竞争压力&…
SQL数据分析极简入门——SQL简介与基础知识
《SQL数据分析极简入门》第1节 SQL简介与基础知识 做数据分析的，为什么要写SQL？ 没有数据的情况下，我们分析数据就像是巧妇难为无米之炊。因此，为了进行数据分析，我们必须获取数据。而大多数情况下，数据都存…
点击、拖拉拽，BI系统让业务掌握数据分析主动权
在今天的商业环境中，数据分析已经成为企业获取竞争优势的关键因素之一。然而，许多企业在面对复杂的数据分析工具时，却常常感到困扰。这些工具往往需要专业的技术人员操作，而且界面复杂，难以理解和使用。对业务人员来说…
循环问答机，存储txt
问题
写个问答 存储txt
input输入：提问。
回答
循环下去用两个回车代表下个循环，记录数量 打上时间戳按照以下步骤进行操作：
运行代码后，程序会提示您输入问题。
您输入问题后，程序会提示您输入答案。
输入完答案后&…
二、机器学习基础知识：Python数据处理基础
文章目录 1、基本数据类型1.1 数字类型（Number）1.2 字符串类型（String）1.3 列表类型（List）1.4 元组类型（Tuple）1.5 字典类型（Dictionary）1.6 集合类型&#x…
pandas_datareader读取yahoo金融数据超时问题timeout解决方案
在《Python金融数据挖掘》一书中，学习到网络数据源这一章节，利用书中的方法安装了pandas_datareader包，但在获取雅虎数据（get_data_yahoo）时会出现以下问题： 经过仔细分析和尝试，无法访问的原因…
数据分析：人工智能篇
文章目录 第三章 数据可视化库matplotlib3.1 matplotlib基本绘图操作3.2 plot的线条和颜色3.3 条形图分析3.4 箱型图分析3.5 直方图分析3.6 散点图分析3.7 图表的美化 第四章 数据预测库Sklearn4.1 sklearn预测未来4.2 回归数据的预测4.2.1 回归数据的切分4.2.2 线性回归数据模…
![【数据科学】Scikit-learn[Scikit-learn、加载数据、训练集与测试集数据、创建模型、模型拟合、拟合数据与模型、评估模型性能、模型调整]](https://img-blog.csdnimg.cn/71420b26359a4e3a984a3277316156f7.png)
【数据科学】Scikit-learn[Scikit-learn、加载数据、训练集与测试集数据、创建模型、模型拟合、拟合数据与模型、评估模型性能、模型调整]
这里写目录标题 一、Scikit-learn二、加载数据三、训练集与测试集数据四、创建模型4.1 有监督学习评估器4.1.1 线性回归4.1.2 支持向量机(SVM)4.1.3 朴素贝叶斯4.1.4 KNN 4.2 无监督学习评估器4.2.1 主成分分析(PCA)4.2.2 K Means 五、模型拟合5.1 有监督学习5.2 无监督学习 六…
零基础入门初学 Python 需要安装哪些软件？
Python是近年来备受热门的编程语言，其简明易读、开源免费、跨平台等特点，使得Python倍受喜爱，成为初学者及开发者心中的首选。
如果你是第一次接触Python，又不想繁琐地安装各种软件，可以尝试在线运行Python代码&#…
关于Python数据分析，这里有一条高效的学习路径
无处不在的数据分析
谷歌的数据分析可以预测一个地区即将爆发的流感，从而进行针对性的预防；淘宝可以根据你浏览和消费的数据进行分析，为你精准推荐商品；口碑极好的网易云音乐，通过其相似性算法，为不同的人…
数据分析视角中的商业分析学习笔记
数据分析一大堆，结果却是大家早就知道的结论？是工具和方法出问题了吗？真正原因可能是你的思维有误区。
为什么分析的这么辛苦，得出的结论大家早知道，谁谁都不满意？核心原因有3个：
分析之前&am…
【已解决】Pyecharts折线图，只有坐标轴没有折线数据
【已解决】Pyecharts折线图，只有坐标轴没有折线数据 1、问题复现2、原因3、问题解决 1、问题复现
在做简单的数据通过 Pyecharts 生成折现图的时候，一直只有坐标轴没有折线数据，但是代码一直看不出问题，代码如下：
im…
Quarto 入门教程 (1)：简单介绍和资料汇总
本推文是 “手把手教你使用 Quarto 构建文档” 教程的第一部分，本文先介绍
Quarto 构建文档的原理；可创建的文档类型；对应的参考资源分享。
下一部分，会手把手介绍如何使用它（下次推文吧～）。 …
机器学习基础-数据分析：房价预测
mac设置中文字体
#要设置下面两行才能显示中文 Arial Unicode MS 为字体
plt.rcParams[font.sans-serif] [Arial Unicode MS]
#设置图片大小
plt.figure(figsize(20, 11), dpi200)pie官方文档 总体代码
python
import pandas as pd
import numpy as np
import matplotlib.…
异步爬虫实战：实际应用asyncio和aiohttp库构建异步爬虫
在网络爬虫的开发中，异步爬虫已经成为一种非常流行的技术。它能够充分利用计算机的资源，提高爬虫效率，并且能够处理大量的运算请求。Python中的asyncio和aiohttp库提供了强大的异步爬虫支持，使得开发者能够轻松构建高效的异步爬虫…
模板学堂｜DataEase协助电商企业开展用户运营
DataEase开源数据可视化分析平台于2022年6月正式发布模板市场（https://dataease.io/templates/）。模板市场旨在为DataEase用户提供专业、美观、拿来即用的仪表板模板，方便用户根据自身的业务需求和使用场景选择对应的仪表板模板，并…
京东数据平台（京东数据分析）2023年9月京东冰箱行业品牌销售排行榜！
鲸参谋监测的京东平台9月份冰箱市场销售数据已出炉！ 9月份，大家电行业整体下滑，而冰箱作为大家电市场中的重点品类，受行业趋势变动的影响，冰箱销售市场也同样下滑。鲸参谋数据显示，9月在京东平台上…
virtualbox 下载安装
virtualbox 下载安装
下载 virtualbox
官网下载 virtualbox virtualbox 官网地址：https://www.virtualbox.org/ 1. 进入官网 2. 点击左侧 Downloads 下载 3. 点击右侧 Windows hosts 开始下载 安装 virtualbox 虚拟机软件 选择 虚拟机软件 virtualbox 安装包 右键…
敲敲云—免费的零代码平台功能介绍
敲敲云零代码平台无需任何代码，即可搭建出符合企业业务需求的个性化应用。敲敲云拥有完善的表单设计引擎、流程引擎、仪表盘设计器、大屏设计器，可满足企业的正常需求。 下面我们来看一下，敲敲云都有哪些功能吧 表单引擎 可视化拖拽设计&…
京东店铺所有商品数据接口及店铺商品数据分析
获取京东店铺所有商品数据的接口是京东开放平台提供的接口，通过该接口可以获取店铺所有商品数据。
通过京东开放平台接口获取店铺所有商品数据的方法如下：
在开放平台注册成为开发者并创建一个应用，获取到所需的 App Key 和 App Secret 等信…
DevExpress WPF Pivot Grid组件，可轻松实现多维数据分析！（二）
在上文中（点击这里回顾>>）我们主要为大家介绍了DevExpress WPF Pivot Grid组件的超快速枢轴分析功能、Microsoft分析服务等，本文将继续介绍图表透视数据的处理、MVVM支持等。欢迎持续关注我们，探索更多新功能哦~
P.S&#…
震坤行、西域和京东工业三大工业电商平台API接口详解和说明
一、震坤行
震坤行是中国领先的B2B电子商务平台之一，主要面向全国的制造商、供应商和采购商，提供物流、供应链等。万邦科技联手震坤行，全面拓展电商业务。电商数据API接口平台新增震坤行接口，可帮助客户轻松查询震坤行网站上的商…
京东运营数据分析：2023年8月京东宠物主粮行业品牌销售排行榜
鲸参谋监测的京东平台8月份宠物主粮市场销售数据已出炉！
随着养宠人群的逐渐增多，宠物经济规模也进一步庞大。宠物生活市场中，宠物主粮作为养宠人群的刚需品，其市场规模也在进一步扩大。鲸参谋数据显示，今年8月份&…
什么是指标体系，怎么搭建一套完整的指标体系？（附PDF素材）
什么是指标体系，怎么搭建一套完整的指标体系？数字化转型过程中，这个问题一直困扰着数据分析师。主要体现在：
各部门根据业务需求，都有一部分量化指标，但不够全面，对企业整体数据分析应用能力提…
【赠书活动】python自动售货机销售数据分析
👉博__主👈：米码收割机 👉技__能👈：C/Python语言 👉公众号👈：测试开发自动化【获取源码商业合作】 👉荣__誉👈：阿里云博客专家博主、5…
基于vue小红书平台用户数据分析与可视化
目 录 摘 要 I ABSTRACT II 目 录 II 第1章 绪论 1 1.1背景及意义 1 1.2 国内外研究概况 1 1.3 研究的内容 1 第2章 相关技术 3 2.1 nodejs简介 4 2.2 express框架介绍 6 2.4 MySQL数据库 4 第3章 系统分析 5 3.1 需求分析 5 3.2 系统可行性分析 5 3.2.1技术可行性：…
零售数据分析模板鉴赏-品类销售结构报表
不管是服装零售，还是连锁超市或者其他，只要是零售行业就绕不过商品数据分析，那么商品数据分析该怎么做？奥威BI的零售数据分析方案早早就预设好相关报表模板，点击应用后，一键替换数据源，立得新报…
如何做好数据分析中的数据可视化?
数据可视化在数据分析中扮演着重要的角色，它帮助我们更好地理解和传达数据的特征、趋势和规律。以下是关于如何做好数据分析中的数据可视化的详细介绍。 一、准备工作
1. 理解数据
在进行数据可视化之前，首先要对数据有一个清晰的理解。了解数据的来源…
Python数据挖掘：入门、进阶与实用案例分析——自动售货机销售数据分析与应用
文章目录 摘要01 案例背景02 分析目标03 分析过程04 数据预处理1. 清洗数据1.1 合并订单表并处理缺失值1.2 增加“市”属性1.3 处理订单表中的“商品详情”属性1.4 处理“总金额（元）”属性 2.属性选择3.属性规约 05 销售数据可视化分析1.销售额和自动售货…
Python数据挖掘 | 升级版自动查核酸
📕作者简介：热爱跑步的恒川，致力于C/C、Java、Python等多编程语言，热爱跑步，喜爱音乐的一位博主。 📗本文收录于恒川的日常汇报系列，大家有兴趣的可以看一看 📘相关专栏C语言初阶、C…
浅谈关于数据仓库的理解，聊聊数据仓库到底是什么？
不知不觉间，我们的生活中已经充满了数据，各种岗位例如运营、市场、营销上也都喜欢在职位要求加上一条利用数据、亦或是懂得数据分析。事实上，数据已经成为了构建现代社会的基本生产要素，并且因为不受自然环境的限制，已…
数据分析和机器学习的11个高级可视化图表介绍
可视化是一种强大的工具，用于以直观和可理解的方式传达复杂的数据模式和关系。它们在数据分析中发挥着至关重要的作用，提供了通常难以从原始数据或传统数字表示中辨别出来的见解。
可视化对于理解复杂的数据模式和关系至关重要，我们将介绍11…
Java基于API接口爬取商品数据
随着互联网技术的发展，越来越多的电商平台开始提供API接口，以便开发者可以更方便地获取商品数据。Java作为一种流行的编程语言，可以用于编写程序来调用这些API接口，从而获取商品数据。本文将介绍如何使用Java基于API接口爬取商品数…
Excel宏（VBA）自动化标准流程代码
自动化流程
我们对一个报表进行自动化改造会经历的固定流程，这里称为“流水线”，通常包含以下流程：
打开一个表格选择打开的表格选择表格中的Sheet选择Sheet中的单元格区域 （有时候需要按条件筛选）复制某个区域 粘贴…
电影评分数据分析案例-Spark SQL
# cording:utf8from pyspark.sql import SparkSession
from pyspark.sql.types import IntegerType, StringType, StructType
import pyspark.sql.functions as Fif __name__ __main__:# 0.构建执行环境入口对象SparkSessionspark SparkSession.builder.\appName(movie_demo)…
2023进销存业财一体化ERP系统，解决云南中小企业财务管理难题-亿发
业财融合的核心目的在于优化财务数据的状态，实现财务和业务数据的整合。相较于传统的财务管理软件，后者主要注重事后核算，而在管理控制和决策支持方面相对较弱。相反，ERP系统的业财一体化管理则能高度整合资金流和物流，…
爬虫爬取数据时怎么配置代理IP来精准导航分析大数据？
在这个数字盛宴中，每一刹那都充满了无数的信息流转。就像瀑布中的水滴，每一滴都承载着可能性。爬虫代理IP与穿云API就像是这场盛宴中的精准导航仪，帮助我们捕捉那些最有价值的信息滴点，确保在这个时代的快速迭代中，我们…
Python 金融大数据分析
第一章 为什么将python用于金融
python编程语言
python是一种高级的多用途编程语言，广泛用于各种非技术和技术领域。
python是一种具备动态语义、面向对象的解释型高级编程语言。它的高级内建数据结构与动态类型及动态绑定相结合，使其在快速应用开发上…
关于Python爬虫就业与兼职方向
Python是一种强大的编程语言，可用于各种应用，如数据分析、机器学习、Web开发等。因此，越来越多的人开始学习Python，同时也有越来越多的Python引流兼职和就业机会出现。本文将探讨Python引流兼职和就业的情况。
Python引流兼职
P…
Python 读取.tsv文件
TSV（Tab Separated Values）和CSV（Comma Separated Values）都是常见的文本文件格式，用于存储表格数据。它们之间的主要区别在于字段之间的分隔符。 CSV（逗号分隔值）: 使用逗号作为字段之间的分隔…
三、机器学习基础知识：Python常用机器学习库（Numpy第二部分）
文章目录 5、其他创建数组的方式5.1 空数组5.2 全零数组5.3 全一数组5.4 数列5.5 随机数组5.6 数组转换 6、索引、切片和迭代7、Numpy计算7.1 基本数组运算7.2 条件运算7.3 统计运算 8、Numpy存取文件 前序内容： 三、机器学习基础知识：Python常用机器学习…
性能超越 Clickhouse | 物联网场景中的毫秒级查询案例
1 物联网应用场景简介
物联网（Internet of Things，简称 IoT）是指通过各种信息传感、通信和 IT 技术来实时连接、采集、监管海量的传感设备，从而实现对现实世界的精确感知和快速响应，继而实现自动化、智能化管理。在查…
推动产业升级及创新，Doris Summit Asia 2023 先进智造与电信论坛提前揭秘
峰会官网已上线，最新议程请关注：doris-summit.org.cn
即刻报名
Doris Summit 是 Apache Doris 社区一年一度的技术盛会，由飞轮科技联合 Apache Doris 社区的众多开发者、企业用户和合作伙伴共同发起，专注于传播推广开源 OLAP 与…
如何开始从事数据分析工作——初学者的路线图
欢迎来到数据分析的世界！如果您正在考虑从事于此，可算是找对地方了。数据分析作为一个迅猛发展、令人心潮澎湃的领域，在当今数据社会下愈发重要。
面对现实，我们已经被海量的数据淹没了。从社交媒体，到金融交易&#…
2016年亚太杯APMCM数学建模大赛A题基于光学信息数据的温度及关键元素含量预测求解全过程文档及程序
2016年亚太杯APMCM数学建模大赛
A题 基于光学信息数据的温度及关键元素含量预测
原题再现 光含有能量，在一定条件下可以转化为热。燃烧是一种常见的现象，既能发光又能发热。光和热通常是同时存在的，一般来说，光强度越高…
太好上手了!10款常用的可视化工具你一定要知道!
当谈到可视化工具时，有许多常用的工具可供选择。这些工具可以帮助我们将数据转化为易于理解和具有视觉吸引力的图表、图形和仪表板。
以下是10款常用的可视化工具，它们在不同领域和用途中广泛使用。
1. Datainside：
Datainside是一款功能强…
2020年亚太杯APMCM数学建模大赛B题美国总统的经济影响分析求解全过程文档及程序
2020年亚太杯APMCM数学建模大赛
B题 美国总统的经济影响分析
原题再现： 美国总统选举每四年举行一次。 2020年是美国总统大选年，共和党候选人唐纳德特朗普和民主党对手乔拜登竞选总统。 甲乙双方候选人在金融贸易，经济金融治理，…
【temu】分析拼多多跨境电商Temu数据分析数据采集
Temu是拼多多旗下跨境电商平台，于2022年9月1日在美国、加拿大、新加坡、中国台湾、中国香港等市场上线。本文作者从销售额、销量、产品分布等方面，对Temu产品进行了分析，一起来看一下吧。 item_get获得商品详情item_review获得商品评论列表it…
使用bisect模块进行二分查找操作 bisect.bisect()
【小白从小学Python、C、Java】 【计算机等级考试500强双证书】 【Python-数据分析】 使用bisect模块 进行二分查找操作 bisect.bisect() 选择题 请问bisect.bisect(c,2)的结果是： import bisect print("【执行】c [1,2,2,6,7]") c [1,2,2,6,7] print(c…
数据可视化素材分享 | 数十图表、无数模板
很多人在后台求分享报表、源代码，其实何必这么麻烦，在奥威BI数据可视化平台上点击即可获得大量的可视化素材，如数十种可视化图表，适用于不同分析场景；又如大量不同主题的BI数据可视化报表模板，套用后替换数…
如何破解企业数字化转型的焦虑
在今年整体的大环境下，焦虑的不仅是个人，还有数字化转型中的企业。
01 焦虑中的企业数字化
焦虑往往不是来源于无知，而是未知！
现阶段还未采取行动的企业会焦虑：现在开始是否会落后，市场红利是否会错过&…
数据结构：一篇拿捏十大排序(超详细版)
排序的概念： 排序：所谓排序，就是使一串记录，按照其中的某个或某些关键字的大小，递增或递减的排列起来的操作。稳定性：假定在待排序的记录序列中，存在多个具有相同的关键字的记录，若经…
将输入对象转换为数组数组的维度大于等于1numpy.atleast_1d()
【小白从小学Python、C、Java】 【计算机等考500强证书考研】 【Python-数据分析】 将输入对象转换为数组 数组的维度大于等于1 numpy.atleast_1d()
选择题 使用numpy.atleast_1d()函数,下列正确的是？ import numpy as np a1 1 a2 ((1,2,3),(4,5,6)) print("…
【智能大数据分析】实验1 MapReduce实验：单词计数
【智能大数据分析】实验1 MapReduce实验：单词计数 文章目录 【智能大数据分析】实验1 MapReduce实验：单词计数一、实验目的二、实验要求三、实验原理1 MapReduce编程2 Java API解析 四、实验步骤1 启动Hadoop2 验证HDFS上没有wordcount的文件夹3 上传数据…
MATLAB-自动批量读取文件，并按文件名称或时间顺序进行数据处理
我在处理文件数据时，发现一个一个文件处理效率太低，因此学习了下MATLAB中自动读取特定路径下文件信息的程序，并根据读取信息使用循环进行数据处理，提高效率，在此分享给大家这段代码并给予一些说明，希望能为…
改善游戏体验：数据分析与可视化的威力
当今，电子游戏已经超越了娱乐，成为一种文化现象，汇聚了全球数十亿的玩家。游戏制作公司正采用越来越复杂的技术来提高游戏质量，同时游戏数据分析和可视化工具变得不可或缺。 数据的力量：解析游戏体验
游戏制作涉及到大…
举个栗子！Quick BI 技巧（3）：创建趋势分析表
上一期举个栗子为数据粉们分享了如何简单几步创建柱线图，有一些数据想了解如何在 Quick BI 中制作趋势分析表。
趋势分析表由趋势分析图和趋势分析明细表组成，可以通过趋势分析图查看指标的宏观趋势，通过趋势分析表查看指标详情，…
人脸识别测试数据分析
一个人脸识别研究小组对若干名学生做了人脸识别的测试，将测试结果写入到一个文件 dir_50.txt 中，每一行是一张照片的识别结果“_照片编号”“.jpg”的字符串组合，示例如下：
[1709020621, 0]_116.jpg
[1709020621]_115.jpg
[17706…
传奇服务端M2报错如何解决
M2提示无法找到LIST文件的解决办法
出现报错时，首先提示无法找到城堡信息文件，然后再提示具体错误信息如：StartTimer exception: Cannot create file "D:\Mirserver\mir200\Castle\List.txt".系统找不到指定的路径。出现这种情况是…
BI是什么？想要了解BI需要从哪些方面入手？
企业为了执行数字化战略，实行数字化转型，实现数据价值，除了需要相关数字化技术及理念、人才等，还需要借助数字化相关应用，例如商业世界中广受企业欢迎的ERP、OA、CRM等业务信息系统，以及上升势头非常迅猛的…
在职场上有多少人输在了不会用Python数据分析
在职场上有多少人输在了不会用Python数据分析 在职场上有多少人输在了不会用Python数据分析引言方向一：学了Python能做什么？方向二：Python的应用领域1. Web开发：2. 自动化和脚本编写：3. 数据科学和分析：4. …
nodejs+vue+elementui社区居民信息管理及数据分析与可视化系统设计
其中用户登录中，通过HTML访问该社区居民信息管理及数据分析与可视化系统，选择登录界面，进行登录。登录成功进入到系统，登录失败，提示用户不存在， 流入人口管理中，启动社区居民信息管理及数据分…
公司oa是什么?一般公司oa有什么样功能?
公司OA（Office Automation）是指通过计算机和信息技术来实现办公自动化的系统。
它提供了一系列的功能和工具，用于协调、管理和处理公司内部的日常事务和流程。OA系统旨在提高工作效率、加强信息交流与共享、简化业务流程，并提供便…
京东平台数据分析（京东销量）：2023年9月京东吸尘器行业品牌销售排行榜
鲸参谋监测的京东平台9月份吸尘器市场销售数据已出炉！ 根据鲸参谋电商数据分析平台的相关数据显示，今年9月，京东吸尘器的销量为19万，环比下滑约12%，同比下滑约25%；销售额为1.2亿，环比下滑约11%&…
【SPSS】基于RFM+Kmeans聚类的客户分群分析（文末送书）
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
数据分析在程序员职业中的重要性及实践应用
一、引言
在当今信息化社会的快速发展中，数据分析已经成为一项重要的职业技能。不论是从事哪个行业，都需要具备一定的数据分析能力。对于程序员而言，掌握数据分析技能不仅能够提升自身在职场中的竞争力，更能够在职业生涯中获得更…
【数据分析】上市公司半年报数据分析
前言
前文介绍过使用网络技术获取上市公司半年报数据的方法，本文将对获取到的数据进行简要的数据分析。
获取数据的代码介绍在下面的两篇文章中
【java爬虫】使用selenium获取某交易所公司半年报数据-CSDN博客
【java爬虫】公司半年报数据展示-CSDN博客
全量数…
三、机器学习基础知识：Python常用机器学习库（Matplotlib）
文章目录 1、Matplotlib2、基本结构3、pyplot模块3.1 pyplot.plot()函数的使用3.2 其他常见属性设置3.3 子图的绘制 4、其他类型的图表4.1 竖向条形图4.2 散点图4.3 饼图 1、Matplotlib
matplotib库中有非常多的可视化绘图类，内部结构复杂。受 MATLAB 提供的绘图功…
生物信息学分析-blast序列比对及结果详细说明
1. 软件说明
Blast是一种基于序列比对的分析工具，可以用于寻找生物序列之间的同源性，它的全称是Basic Local Alignment Search Tool。
Blast有多种版本和用途，最常见的是基于Web的Blast和本地安装的Blast程序。Web版Blast可以直接在NCBI网站…
数聚数据BI合作杭锅集团：系统设计方案
杭锅集团是一家主要从事锅炉、压力容器、环保设备等产品的咨询、研发、生产、销售、安装及其它工程服务的大型综合性集团企业。一直以来，杭锅集团贯彻节能减排理念，充分整合资源坚持绿色发展之路，为中国的节能减排事业做出应有的贡献。 杭锅集…
Power BI 实现日历图，在一张图中展示天、周、月数据变化规律
《数据可视化》这本书里介绍了一个时间可视化的案例（如下图所示），以日历图的形式展示数据的变化，可以在一张图上同时观察到：（1）每一天的数据变化；（2）随周变化…
【PCA降维】在人脸识别中的应用
首先导入人脸数据集和相关的模块：
from sklearn.datasets import fetch_lfw_people # 人脸数据集
import matplotlib.pyplot as plt
from sklearn.decomposition import PCA
import numpy as np
加载sklearn自带的数据集：
faces fetch_lfw_people(mi…
Shopee店铺ID是什么？Shopee店铺id怎么看？——站斧浏览器
Shopee店铺ID和产品ID是Shopee网站上两个非常重要的标识符，可以用来方便地查找店铺和商品。，因此掌握了如何查看Shopee店铺ID和产品ID的方法是很有必要的。
Shopee店铺ID是什么？
首先，我们需要了解Shopee店铺ID是什么࿰…
PostPreSql 数据库的一些用法
1、varchar 类型转换成数字 select sum(CAST(order_num AS NUMERIC)) from ads_port_cli_cons_freq_rpt where yr2023 and mon 08
关键词搜索1688商品数据接口(标题|主图|SKU|价格|优惠价|掌柜昵称|店铺链接|店铺所在地）
1688商品列表接口是一个用于获取1688网站上商品列表信息的接口。通过该接口，您可以获取到1688网站上不同类别的商品列表，包括商品的名称、价格、图片等信息。
要使用1688商品列表接口，您需要按照以下步骤进行操作：
登录1688网站…
时间序列预测实战(十五)PyTorch实现GRU模型长期预测并可视化结果
往期回顾：时间序列预测专栏——包含上百种时间序列模型带你从入门到精通时间序列预测 一、本文介绍
本文讲解的实战内容是GRU(门控循环单元)，本文的实战内容通过时间序列领域最经典的数据集——电力负荷数据集为例，深入的了解GRU的基本原理和…
毕业论文问卷分析思路
很多同学会通过收集问卷的方式获取论文研究需要的数据，但是收集到的问卷应该如何分析呢？问卷一般可以分为两类：非量表类与量表类问卷。不同类型的问卷有不同的分析思路，今天和大家探讨一下拿到一份问卷后，一般的分析思…
面向制造企业的持续发展，2023数字化工单管理系统创新篇章-亿发
面向制造企业的持续发展，2023数字化工单管理系统开创新篇章-亿发
随着制造业的持续发展，运维工单管理日益成为关键环节，它设计客户管理、设备维护、服务商合作等多个业务领域，对运营效率和服务质量有着重要影响。然而，…
实时检测并识别视频中的汽车车牌
对于基于摄像头监控的安全系统来说，识别汽车牌照是一项非常重要的任务。我们可以使用一些计算机视觉技术从图像中提取车牌，然后我们可以使用光学字符识别来识别车牌号码。在这里，我将引导您完成此任务的整个过程。 要求：
import cv2import numpy as npfrom skimage impor…
相关性网络图 |显著性标记
一边学习，一边总结，一边分享！
本期教程 写在前面
此图是一位同学看到后，想出的一期教程。
最近，自己的事情比较多，会无暇顾及社群和公众号教程。
1 安装和加载相关的R包
library(ggraph)
library(tidy…
如何调用API获取你想要的数据
在现代软件开发中，API（应用程序编程接口）已经成为了连接不同系统和服务的桥梁。通过调用API，我们可以从各种数据源中获取所需的数据，并将其集成到我们的应用程序中。本文将介绍如何调用API获取你想要的数据，…
有色金属冶炼VR虚拟场景互动教学有何优势
真实模拟：VR虚拟现实技术可以提供一个真实的虚拟环境，模拟钢铁制造现场，包括设备、工艺流程、操作规程等，使学员获得直观、真实的体验。 安全可靠：钢铁制造技能培训可以在虚拟环境中进行，不会对人员或设备造…
如何估计池塘里鱼的数目，周边有多少车辆？
如何估计池塘里鱼的数目？
老李想估计一下自己池塘里鱼的数量，第一天他捕捞了50条鱼做好标记，然后全放回池塘。过了几天带标记的鱼完全混合于鱼群中，他又去捕捞了168条，发现做标记的鱼有8条。帮老李估算一下池塘里的鱼…
开源的网站数据分析统计平台——Matomo
Matomo 文章目录 Matomo前言一、环境准备1. 整体安装流程2.安装PHP 7.3.303.nginx配置4.安装matomo4.1 访问安装页面 http://192.168.10.45:8088/index.php4.2 连接数据库4.3 设置管理员账号4.4 生成js跟踪代码4.5 安装完成4.6 警告修改4.7 刷新页面，就可以看到登陆…
Excel自学三部曲_Part3：Excel工作场景实战（二）
文章目录 二、基础概念、表格结构与常用函数1. 业务背景、字段含义2. 筛选、排序、冻结窗格3. 状态栏数据提示、调整数据显示格式4. 公式、引用、溢出5. 连接和提取函数、时间函数、IF和IFS函数、SUMIF和SUMIFS函数（1）每个业务组的成交额有多少ÿ…
Excel自学三部曲_Part3：Excel工作场景实战（四）
文章目录 四、高级函数与数据连接1. 多窗口操作2. VLOOKUP函数3. XLOOKUP函数4. CSV数据格式 四、高级函数与数据连接
1. 多窗口操作 如何将两张子表数据（战区信息、城市信息）连接到主表数据（成交数据），增加主要数据的…
京东大数据平台-第三方京东平台数据查询分析软件系统
对于电商商家来说，做好电商数据分析是电商运营中的重要一环，且能为电商商家带来诸多好处，例如：
1、提高销售额：通过数据分析可以更好地把握消费者的购买行为，从而更好地推出营销活动，提高销售额…
干货分享：10个行业可视化大屏模板（附 Python 源码）
大家好，数据大屏是一种用于展示和分析数据的可视化工具，通常用于监控、分析和报告数据。大屏可以帮助组织更好地理解和管理其数据，支持数据驱动决策，提高业务效率和决策的质量。
本文的所有大屏都是基于Python开发，因…
【市场分析】Temu数据采集销售额商品量占比分析数据分析接口Api
引言
temu电商平台是一个充满活力的电商平台，拥有多种商品类别和数万家店铺。在这个项目中我的任务是采集平台上的大量公开数据信息。通过数据采集，我旨在深入了解temu电商平台的产品分布、销售趋势和文本描述，以揭示有趣的见解。
数据采集…
2021年电工杯数学建模B题光伏建筑一体化板块指数发展趋势分析及预测求解全过程论文及程序
2021年电工杯数学建模
B题 光伏建筑一体化板块指数发展趋势分析及预测
原题再现： 国家《第十四个五年规划和 2035 年远景目标纲要》中提出，将 2030 年实现“碳达峰”与 2060 年实现“碳中和”作为我国应对全球气候变暖的一个重要远景目标。光伏建筑一体…
数据分析实战 | 关联规则分析——购物车分析
目录
一、数据及分析对象
二、目的及分析任务
三、方法及工具
四、数据读入
五、数据理解
六、数据预处理
七、生成频繁项集
八、计算关联度
九、可视化 一、数据及分析对象
数据集链接：Online Retail.xlsx
该数据集记录了2010年12月01日至2011年12月09日…
Pandas数据清洗_Python数据分析与可视化
Pandas数据清洗 删除缺失值检测缺失值填充缺失值拉格朗日插值线性插值 在处理数据的时候，需要对数据进行一个清洗过程。清洗操作包括：空白行的删除、数据完整性检验、数据填充、插值等内容。
下面是数据清洗过程中使用的具体方法
删除缺失值
DataFram…
创建日期时间类型对象 pendulum.datetime()
【小白从小学Python、C、Java】 【计算机等考500强证书考研】 【Python-数据分析】 创建日期时间类型对象 pendulum.datetime()
选择题 请问pdl.datetime(2023,10,1,12,0,0)的结果是： import pendulum as pdl print("【执行】pdl.datetime(2023,10,1)") …
京东数据分析：2023年Q3户外鞋服市场分析报告（冲锋衣行业销售数据分析）
从露营、骑行、徒步、桨板、垂钓、飞盘、滑雪到如今的city walk，近两年户外运动已经成为了年轻人新的生活方式。户外运动的爆发也刺激了人们对于鞋服在穿搭、场景化、专业性功能等方向的需求，户外鞋服市场迎来增长。
而全国性的降温则带给目前的户外鞋服…
使用Python调用API接口获取拼多多商品数据：一篇详细说明文章
一、引言
拼多多是中国著名的电商平台之一，提供了丰富的商品信息和购物服务。为了更好地利用拼多多的数据资源，我们可以使用Python编程语言调用拼多多的API接口，获取商品数据并进行处理和分析。本文将详细介绍如何使用Python完成这一任务&am…
内网如何使用Python第三方库包（举例JustinScorecardPy）
内网如何使用Python第三方库包
一、下载python whl文件(官网有的)
1、第一种方法
要直接下载whl文件，你可以按照以下步骤操作： 首先，访问 https://pypi.org/ 或 https://www.lfd.uci.edu/~gohlke/pythonlibs/ 网站。这两个都是Python的官方…
数据分析 - 数据案例流程分析
有这样的一个案例：外卖骑手的未接单率上升
1：分析有哪些因素会造成这种后果
骑手和订单的一个占比情况订单配送距离的情况平台补贴情况和收入情况时间段的订单和骑手的需求比
2：清理错误数据，或者无用的数据，确保数…
数据处理：Exce怎么用公式把文本型日期转为日期型日期
1、可以使用Excel的DATE函数来将文本型日期转换为日期型日期
假设文本型日期为"2022/02/14"，可以使用以下公式将其转换为日期型日期：
DATE(YEAR(A1),MONTH(A1),DAY(A1))
其中，A1为包含文本型日期的单元格。该公式将会返回2022年…
变化分析：同比和环比
1、同比
同比务必考虑数据周期性波动。因为同比忽略了两个对比数据之间的据变化，即忽略了数据周期性的影响，故同比适用于对周期性不敏感的业务或对比时间段内包含至少一个完整的周期性波动。如果对比周期内未能添至少一个周期，则不适用同比分…
数字孪生智慧园区：大数据驱动下的运营管理革新
随着物联网、大数据、云计算等技术的飞速发展，数字孪生技术应运而生，它将物理世界与数字世界紧密连接起来，为各行各业提供了前所未有的解决方案。智慧园区作为城市的重要组成部分，通过数字孪生技术，可以实现更加高效、…
100天精通Python（可视化篇）——第107天：Pyecharts绘制多种炫酷旭日图参数说明+代码实战
文章目录 专栏导读一、旭日图介绍1. 旭日图是什么？2. 旭日图的应用场景？3. 旭日图和饼图的区别？二、参数说明1. 导包2. add函数三、旭日图实战1. 普通旭日图2. 家庭关系旭日图3. 四川省旭日图4. 烟酒茶旭日图5. 官方示例书籍推荐专栏导读
🔥🔥本文已收录于《100天精通P…
京东数据软件系统：京东销量和销额数据在哪里看？
京东平台店铺众多，行业同行也数不胜数，若想要在平台中更好的运营店铺，品牌需要做好数据分析。下面结合鲸参谋电商数据分析平台这一数据分析工具，我们来看一看品牌在做数据分析时需要注重哪些数据维度。 *行业数据
京东商家通过鲸…
Python：容器之字典
创建空字典
doc {}
doc dict()
# 以上两种方式的输出相同
{} 创建字典：在{}中放入键值对
UA{Tom:360,Jack:420}
# UA为：
{Tom: 360, Jack: 420} 合并字典
dict1 {a: 1, b: 2}dict2 {c: 3, d: 4}dict1.update(dict2)
# dict1为：
{a: 1,…
京东数据运营与分析：如何全面获取电商销售数据？
随着电商行业的快速发展，数据分析成为了电商运营中一个非常重要的环节，这一环往往能够帮助品牌方来提升销售业绩和管理效率。然而，如何获取到电商平台中详细、全面的销售数据是很多电商品牌方所关心的问题，事实上，第三…
15分钟，不，用模板做数据可视化只需5分钟
测试显示，一个对奥威BI软件不太熟悉的人来开发数据可视化报表，要15分钟，而当这个人去套用数据可视化模板做报表，只需5分钟！
数据可视化模板是奥威BI上的一个特色功能板块。用户下载后更新数据源，立即就能获…
源码级JVS低代码功能新增：动态配置、逻辑多级循环嵌套等等
低代码更新功能
新增:
1.下拉组件选项新增动态配置；
选项的内容可以根据特定的条件或数据源进行动态变化的功能，通过动态配置，用户可以灵活地设置下拉组件的选项内容，例如从数据库或其他数据源中获取选项数据，或者根…
67_Pandas将切片应用于字符串，以提取任意位置和长度的部分
67_Pandas将切片应用于字符串，以提取任意位置和长度的部分
Python 字符串（内置类型 str）方法应用于 pandas.DataFrame 列（ pandas.Series），请使用 .str（str 访问器）。
例如&#x…
在MySQL上实现间隔5分钟汇总取数及相关字符串、时间处理方法实践
1. 实践案例需求描述
查询mysql数据库，按每5分钟分组获取3个小时内的电量数据，参考SQL语句如下。
select sd.RecordTime RecordTime, sd.sddl sddl,sd.pvdl ,cap.capdl capdl from
((SELECT CONCAT(DATE_FORMAT(RecordTime,%Y-%m-%d %H:), LPAD(floor(…
2019年五一杯数学建模B题木板最优切割方案解题全过程文档及程序
2019年五一杯数学建模
B题 木板最优切割方案
原题再现 徐州某家具厂新进一批木板如表 1 所示，在家具加工的过程中，需要使用切割工具生产表 2所示的产品。假设：木板厚度和割缝宽度忽略不计。 请为该家具厂给出如下问题的木板最优切割方…
2014年亚太杯APMCM数学建模大赛A题无人机创造安全环境求解全过程文档及程序
2014年亚太杯APMCM数学建模大赛
A题 无人机创造安全环境
原题再现 20 国集团，又称 G20，是一个国际经济合作论坛。2016 年第 11 届 20 国集团峰会将在中国召开，这是继 APEC 后中国将举办的另一个大型峰会。此类大型峰会，举办城市…
Shopee选品工具软件——知虾，助您轻松把握市场趋势
在如今竞争激烈的电商市场中，了解市场趋势和数据分析是成功的关键。对于Shopee虾皮平台上的商家来说，知虾是一款强大的选品工具软件，它提供了全面的数据分析服务，帮助商家快速了解大盘走势，并挖掘潜力行业类目。本文将…
零代码复现-TCGA联合GEO免疫基因结合代谢基因生信套路（三）
前面的分析中，整理好的关键基因集表达谱矩阵，接下来就准备分子亚型的相关分析。
六、一致性聚类构建分子亚型
在6.TCGA和GEO差异基因获取和预后数据的整理\TCGA文件中获取文件 准备一个生存数据和表达谱矩阵，这里需要注意的是，…
数据分析与数据挖掘期末复习，附例题及答案
文章目录 一、概述1.数据挖掘能做什么？2.数据挖掘在哪些方面有应用？3.数据挖掘与数据分析的区别？4.数据挖掘的四大类模型5.什么是数据挖掘？6.数据挖掘的常用方法？ 二、数据1.余弦相似度、欧几里得距离2.近似中位数 三、…
网络爬虫的实战项目：使用JavaScript和Axios爬取Reddit视频并进行数据分析
概述
网络爬虫是一种程序或脚本，用于自动从网页中提取数据。网络爬虫的应用场景非常广泛，例如搜索引擎、数据挖掘、舆情分析等。本文将介绍如何使用JavaScript和Axios这两个工具，实现一个网络爬虫的实战项目，即从Reddit这个社交媒…
淘宝店铺所有商品数据接口（taobao.item_search_shop）
淘宝店铺所有商品数据接口可以使用淘宝开放平台提供的API接口获取。要使用这个接口，需要在淘宝开放平台上注册账号并申请App Key和App Secret，获取API访问权限。
使用淘宝店铺所有商品数据接口时，需要传入shop id参数来获取相应的商品信息。…
京东大数据：2023年Q3美妆行业数据分析报告
近日，珀莱雅发布三季报，今年前三季度，公司实现营收52.49亿元，同比增长32.47%。分季度看，“618大促”所在Q2业绩增长最为亮眼，营收同比增速达到46.22%，进入Q3，在电商大促缺席情况下&a…
判断两个对象是否不相等operator.ne()
【小白从小学Python、C、Java】 【计算机等级考试500强双证书】 【Python-数据分析】 判断两个对象是否不相等 operator.ne()
选择题 下列代码执行输出的结果是? import operator print("【执行】operator.ne(8,8)") print(operator.ne(8,8)) print("【执行】…
R数据分析：净重新分类(NRI)和综合判别改善（IDI）指数的理解
对于分类预测模型的表现评估我们最常见的指标就是ROC曲线，报告AUC。比如有两个模型，我们去比较下两个模型AUC的大小，进而得出两个模型表现的优劣。这个是我们常规的做法，如果我们的研究关注点放在“在原模型新引入一个预测变量&am…
SuperMap iDesktopX基于地形DEM数据做最佳路径分析
问题1: 现有某山区的DEM高程数据，以及该地区电塔位置数据(DT)、电力维护工作基地(GZJD)(电力工作人员的工作居住地)。为了安全稳定的供电，电力工程师需要随时对所有的电塔进行检查维护。为了减少工作人员在路上的耗费，我们需要根据地形、电塔和工作基地的位置点来进行路径分…
基于Python的书籍数据采集与可视化分析系统
温馨提示：文末有 CSDN 平台官方提供的学长 Wechat / QQ 名片 :) 1. 项目简介 基于Python的书籍数据采集与可视化分析系统旨在挖掘和分析海量图书数据背后的规律和趋势，为读者、出版商和数据分析师提供更深入的洞察和辅助决策。本系统依托于某瓣庞大的图书…
基于词云图的短信热词数据可视化
热词统计：短信、邮件、微信、QQ、微博、电商评价、新闻、各行业热词（旅游、世界杯、战争、考研等）、热点事件等场景。
展示模型：给定多段文本，绘制出词云图。
核心思想：根据样本集中的文本包含的高频词…
数据分析-numpy
numpy numpy numpy简介优点下载ndarray的属性输出数据类型routines 函数ndarray对象的读写操作ndarray的级联和切分级联切分 ndarray的基本运算广播机制（Broadcast）ndarry的聚合操作数组元素的操作numpy 数学函数numpy 查找和排序 写在最后面 简介
nump…
淘宝API接口成为淘宝商家及企业ERP系统不可或缺的重要因素
API全称为Application Programming Interface，中文是应用程序编程接口。它其实是一些预先定义的函数，目的是提供应用程序与开发人员基于某软件或硬件得以访问一组例程的能力，而又无需访问源码，或理解内部工作机制的细节。
那如果…
分组取每组数据的最大值和最小值的方法思路，为类似场景的数据分析提取提供思路，例如提取宗地内建筑的最高层数等可参考此方法思路
目录
一、实现效果
二、实现过程
1.读取并剔除无效数据
2.数据分组
3.提取最大值
4.提取最小值
三、总结 使用FME实现批量分组取每组数据的最大值和最小值，为类似场景的数据分析提取提供思路，例如提取宗地内建筑的最高层数等可参考此方法思路。关…
SPSS时间序列分析：序列图
前言： 本专栏参考教材为《SPSS22.0从入门到精通》，由于软件版本原因，部分内容有所改变，为适应软件版本的变化，特此创作此专栏便于大家学习。本专栏使用软件为：SPSS25.0 本专栏所有的数据文件请点击此链接下…
ChatGPT 4 OpenAI 数据分析动态可视化案例
数据分析可视化是一种将原始数据转化为图形或图像的方法，使得数据更易理解和解读。这种方法能够帮助我们更清楚地看到数据中的模式、趋势和关联性，从而更好地理解数据，并据此做出决策。
数据分析可视化的一些常见形式包括：
1. 折线图：常用于展示数据随时间的变化趋势。 …
2020年五一杯数学建模C题饲料混合加工问题解题全过程文档及程序
2020年五一杯数学建模
C题 饲料混合加工问题
原题再现 饲料加工厂需要加工一批动物能量饲料。饲料加工需要原料，如加工猪饲料需要玉米、荞麦、稻谷等。加工厂从不同的产区收购了原料，原料在收购的过程中由于运输、保鲜以及产品本身属性等原因ÿ…
我若拿出这个大数据分析工具，阁下又该如何应对？
职场信息茧房真的好可怕，还有人不知道大数据分析工具都到了能自动生成BI报表的程度了，居然还在苦哈哈地从零做分析，增加不必要的工作量。
金蝶云星空、云星辰、K3、KIS用户；用友U8、U9、NC用户：
登录奥威BI大数据分析…
【小黑送书—第九期】＞＞重磅！这本30w人都在看的Python数据分析畅销书：更新了！
想学习python进行数据分析，这本《利用python进行数据分析》是绕不开的一本书。目前该书根据Python3.10已经更新到第三版。 Python 语言极具吸引力。自从 1991 年诞生以来，Python 如今已经成为最受欢迎的解释型编程语言。
pandas 诞生于2008年。它是由韦…
利用Python进行数据分析【送书第六期：文末送书】
👨🎓博主简介 🏅云计算领域优质创作者 🏅华为云开发者社区专家博主 🏅阿里云开发者社区专家博主 💊交流社区：运维交流社区 欢迎大家的加入！ 🐋 希望大家多多支…
线性回归的正则方法：岭回归和Lasso
线性回归的正则方法包括岭回归（Ridge Regression）和Lasso回归（Least Absolute Shrinkage and Selection Operator Regression）。这两种方法都是为了解决线性回归中可能存在的过拟合问题而提出的。 选择使用岭回归还是Lasso回归通常…
知虾数据软件：电商人必备知虾数据软件，轻松掌握市场趋势
在当今数字化时代，数据已经成为了企业决策的重要依据。对于电商行业来说，数据更是至关重要。如果你想在电商领域中脱颖而出，那么你需要一款强大的数据分析工具来帮助你更好地了解市场、分析竞争对手、优化运营策略。而知虾数据软件就是这样一…
Matplotlib颜色条的配置_Python数据分析与可视化
Matplotlib颜色条配置 基本颜色颜色条选择配色方案颜色条刻度的限制与扩展功能的设置离散型颜色条 基本颜色
Matplotlib提供了8种指定颜色的方法： 在[0，1]中的浮点值的RGB或RGBA元组（例如 (0.1, 0.2, 0.5) 或（0.1， 0.…
Python爬取京东商品销售数据进行数据分析示例代码，以口红为例
文章目录 一、准备工作驱动安装模块使用与介绍 二、流程解析三、完整代码四、效果展示关于Python技术储备一、Python所有方向的学习路线二、Python基础学习视频三、精品Python学习书籍四、Python工具包项目源码合集①Python工具包②Python实战案例③Python小游戏源码五、面试资…
【深度学习】因果推断与机器学习的高级实践 | 数学建模
文章目录 因果推断因果推断的前世今生（1）潜在结果框架（Potential Outcome Framework）（2）结构因果模型（Structual Causal Model，SCM） 身处人工智能爆发式增长时代的机器学…
坚鹏：中国银联公司银行业前沿技术介绍及其数据分析方法实战培训
中国银联公司银行业前沿技术介绍及其数据分析方法实战培训圆满结束 ——借力数字化技术实现基于场景的精准化、场景化、智能化营销 中国银联公司（China UnionPay）成立于2002年3月，是经国务院同意，中国人民银行批准，在合…
用Python进行数据分析：探索性数据分析的实践与技巧（文末送书）
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
抖音生态融合：开发与抖音平台对接的票务小程序
为了更好地服务用户需求，将票务服务与抖音平台结合，成为了一个创新的方向。通过开发票务小程序，用户可以在抖音平台上直接获取相关活动的票务信息，完成购票、预订等操作，实现了线上线下的有机连接。
一、开发过程
1…
Matplotlib网格子图_Python数据分析与可视化
Matplotlib网格子图 plt.subplot()绘制子图调整子图之间的间隔plt.subplots创建网格 plt.subplot()绘制子图
若干彼此对齐的行列子图是常见的可视化任务，matplotlib拥有一些可以轻松创建它们的简便方法。最底层且最常用的方法是plt.subplot()。
这个函数在一个网格…
openEuler Linux 部署 FineBi
openEuler Linux 部署 FineBi
部署环境
环境版本openEuler Linux22.03MySQL8.0.35JDK1.8FineBi6.0
环境准备
升级系统内核和软件
yum -y updatereboot安装常用工具软件
yum -y install vim tar net-tools 安装MySQL8
将 MySQL Yum 存储库添加到系统的存储库列表中
sudo…
【送书活动】这本30w人都在看的Python数据分析畅销书：更新了！
文章目录 🍔简介🌹作译者简介🎍购书链接：🥰彩蛋 想学习python进行数据分析，这本《利用python进行数据分析》是绕不开的一本书。目前该书根据Python3.10已经更新到第三版。 🍔简介
Python 语言极…
坚鹏：中国工商银行数字化背景下银行公司业务如何快速转型培训
中国工商银行作为全球最大的银行，资产规模超过40万亿元，最近几年围绕“数字生态、数字资产、数字技术、数字基建、数字基因”五维布局，深入推进数字化转型，加快形成体系化、生态化实施路径，促进科技与业务加速融合&…
15个Pandas代码片段助力数据分析
大家好，Python的Pandas库是数据分析的基本工具，提供了强大的数据操作和分析功能。本文将探讨15个高级Pandas代码片段，这些代码片段将帮助简化数据分析任务，并从数据集中提取有价值的见解。
1. 过滤数据
import pandas as pd# 创…
2017年五一杯数学建模B题自媒体时代的消息传播问题解题全过程文档及程序
2017年五一杯数学建模
B题 自媒体时代的消息传播问题
原题再现 电视剧《人民的名义》中人物侯亮平说：“现在是自媒体时代，任何突发性事件几分钟就传播到全世界。”相对于传统媒体，以互联网技术为基础的自媒体以其信息传播的即时性、交往方式…
2016年五一杯数学建模C题二孩政策问题解题全过程文档及程序
2016年五一杯数学建模
C题 二孩政策问题
原题再现 多年来实施的严、紧计划生育政策对控制人口增长起到关键作用。在优生优育政策的指引下，我国人口质量显著提高，但也带来了不利影响，生育率偏低、男女比例失衡、人口老龄化情况严重等问题。2…
2023年亚太杯APMCM数学建模大赛B题玻璃温室小气候调控
2023年亚太杯APMCM数学建模大赛
B题 玻璃温室小气候调控
原题再现 温室作物的产量受各种气候因素的影响，包括温度、湿度和风速[1]。其中，适宜的温度和风速对植物生长至关重要[2]。为了调节玻璃温室内的温度、风速等气候因素，在温室设计中常…
深度解析异常值在数据分析中的重要性与应对策略
写在前面
在数据分析的过程中，异常值的存在常常是一个需要认真对待的问题。异常值可能影响分析的准确性，导致误导性的结论。本文将深入探讨以下异常值的应对策略，旨在为数据科学家们提供全面、易读、严谨的一些建议。
1.什么是异常值
异常…
全国各区县日照时长数据，逐月数据均有！
今天给大家分享的是全国各区县日照时长月数据，包括不同月份不同地区的日照时长。这些数据可以帮助我们了解不同地区在不同月份的日照情况，为能源利用、农业生产和气候变化研究提供参考。 基本信息
数据名称: 全国各区县日照时长月数据
数据格式: shpex…
QtiPlot for Mac v1.1.3(科学数据分析工具)
QtiPlot是一款跨平台科学绘图软件，它可以在Windows、Linux和Mac OS X等多个平台上运行。QtiPlot具有强大的数据分析和可视化功能，被广泛应用于学术界和工业界的数据处理和图形制作。
QtiPlot支持多种语言，包括但不限于英语、中文等ÿ…
数据降维：尽显多彩，更多降维方法解析
数据降维：解析常用方法及Python3.10实践
在数据分析领域，处理高维数据是一项重要的任务。为了更好地理解和利用数据，数据降维成为一种不可或缺的技术。本文将深入介绍几种常用的数据降维方法，包括它们的基本原理、应用场景、需要…
（京东大数据分析）10月运动鞋服消费数据采集：服饰销量同比增长20%
10月份，在双11大促节的加持下，消费市场中不少品类的销售成绩均呈现增长。鲸参谋发现，运动鞋服消费类目也受到了市场及消费者的特别青睐，消费数据也有了明显增长，下面我们来看一看运动鞋服市场在10月的销售详情。 首先来…
【Apache Doris】Manager极致丝滑地运维管理
【Apache Doris】Manager极致丝滑地运维管理 1.标准化VS可视化运维管理2. 环境信息2.1.硬件信息2.2.软件信息 3.前置准备3.1.安装包准备3.2.文档手册准备 4.集群初始化4.1.系统参数预设4.2.Manager部署4.3.新集群部署4.4 监控告警4.4.1 监控4.4.2 告警 5. 集群升级5.1 新包准备…
京东数据挖掘（京东运营数据分析）：2023年宠物行业数据分析报告
随着社会经济的发展，人均收入水平逐渐提高，使得宠物成为越来越多家庭的成员，宠物数量不断增长。伴随养宠人群的增多，宠物相关产业的发展也不断升温，宠物经济规模持续增长。 根据鲸参谋平台的数据显示，在宠物…
大数据可视化Echarts基础快速入门
目录
一、什么是Ehcarts？
二、如何使用Echarts
（1）引入Echarts的js文件
（2）查看文档，根据文档编写代码 一、什么是Ehcarts？
首先我们要知道什么数据可视化。什么是数据可视化？…
【咖啡品牌分析】Google Maps数据采集咖啡市场数据分析区域分析热度分布分析数据抓取瑞幸星巴克
引言
咖啡作为一种受欢迎的饮品，已经成为我们生活中不可或缺的一部分。随着国内外咖啡品牌的涌入，新加坡咖啡市场愈加多元化和竞争激烈。
本文对新加坡咖啡市场进行了全面的品牌门店数占比分析，聚焦于热门品牌的地理分布、投资价值等。通过…
长安汽车基于 Apache Doris 的车联网数据分析平台建设实践
导读：随着消费者更安全、更舒适、更便捷的驾驶体验需求不断增长，汽车智能化已成必然趋势。长安汽车智能化研究院作为长安汽车集团有限责任公司旗下的研发机构，专注于汽车智能化技术的创新与研究。为满足各业务部门的数据分析需求，…
内网穿透的应用-Jupyter Notbook+cpolar内网穿透实现公共互联网访问使用数据分析工作
文章目录 1.前言2.Jupyter Notebook的安装2.1 Jupyter Notebook下载安装2.2 Jupyter Notebook的配置2.3 Cpolar下载安装 3.Cpolar端口设置3.1 Cpolar云端设置3.2.Cpolar本地设置 4.公网访问测试5.结语 1.前言
在数据分析工作中，使用最多的无疑就是各种函数、图表、…
自动 ARIMA 超参数搜索
一、介绍 这种用于自动超参数搜索进行预测的开发方法可能会花费大量时间，但它可以带来回报，因为当您找到预测模型的最佳参数时，它将节省时间并提高预测的精度。此外，手动尝试可能会花费您最多的时间，但这种方法在某些情…
坚鹏：中国工商银行数字化转型发展现状与成功案例培训圆满结束
中国工商银行围绕“数字生态、数字资产、数字技术、数字基建、数字基因”五维布局，深入推进数字化转型，加快形成体系化、生态化实施路径，促进科技与业务加速融合，以“数字工行”建设推动“GBC”（政务、企业、个人&…
2021年全国a级景区数据，shp+csv数据均有
大家好~这周将和大家分享关于文化旅游和城乡建设相关的数据，希望大家喜欢~
今天分享的是2021年全国a级景区数据，数据格式有shpcsv，几何类型为点，已经经过清洗加工，可直接使用，以下为部分字段列表ÿ…
坚鹏：湖北银行数字化转型背景下银行运营管理创新培训圆满结束
湖北银行正式成立于2011年2月27日，总部设在武汉。现有员工5000余人。营业网点从成立之初的93家增长至241家，实现全省17个市州、59个县域营业网点全覆盖。截至2022年末，全行资产总额4026亿元，存款总额2956亿元，贷款总额…
基于情感分析+聚类分析+LDA主题分析对服装产品类的消费者评论分析（文末送书）
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
从 Elasticsearch 到 SelectDB，观测云实现日志存储与分析的 10 倍性价比提升
作者：观测云 CEO 蒋烁淼 & 飞轮科技技术团队
在云计算逐渐成熟的当下，越来越多的企业开始将业务迁移到云端，传统的监控和故障排查方法已经无法满足企业的需求。在可观测理念逐渐深入人心的当下，人们越来越意识到通过多层次、…
数学建模-基于集成学习的共享单车异常检测的研究
基于集成学习的共享单车异常检测的研究
整体求解过程概述(摘要) 近年来，共享单车的快速发展在方便了人们出行的同时，也对城市交通产生了一定的负面影响，其主要原因为单车资源配置的不合理。本文通过建立单车租赁数量的预测模型和异常检测模型…
数据分析师的学习之路-pandas篇（6）
接上篇，画图告一段落，现在学习表格的各种操作。 3.8 表格操作
3.8.1 表的校验
表里有些列的数据是有一定的要求的，比如说下面这个表，Score分数列，要求成绩只能是0到100，那如果有出现错误的数据࿰…
数据之美：数据可视化的力量与必要性
在当今信息爆炸的时代，数据量呈指数级增长，它们是我们日常生活和工作中的重要组成部分。然而，数据本身是无生命的数字和统计，若不能有效地被理解、传达和利用，其潜力就难以实现。这正是数据可视化变得越来越重要的原因…
2023年第十二届数学建模国际赛小美赛A题太阳黑子预测求解分析
2023年第十二届数学建模国际赛小美赛
A题 太阳黑子预测
原题再现： 太阳黑子是太阳光球上的一种现象，表现为比周围区域暗的暂时斑点。它们是由抑制对流的磁通量浓度引起的表面温度降低区域。太阳黑子出现在活跃区域内，通常成对出现ÿ…
校园门禁可视化系统解决方案
随着科技的持续进步，数字化校园在教育领域中的地位日益上升，各种智能门禁、安防摄像头等已遍布校园各个地方，为师生提供安全便捷的通行体验。然而数据收集分散、缺乏管理、分析困难等问题也逐渐出现，在这个数字化环境中࿰…
2023年第十二届数学建模国际赛小美赛C题雪崩防范求解分析
2023年第十二届数学建模国际赛小美赛
C题 雪崩防范
原题再现： 雪崩是极其危险的现象。现在，我们对雪崩是如何形成的已经有了很好的理解，但是我们还不能详细地预测雪崩发生的原因、时间和地点。村庄和道路可以通过各种方式防止雪崩。避免在脆…
shell 脚本计算距离最近的坐标
shell 脚本计算距离最近的坐标 坐标数据文件geo.log格式如下： beijing(116.405285,39.904989)
tinajin(117.190182,39.125596)
hebei(114.502461,38.045474)
shanxi(112.549248,37.857014)
neimenggu(111.670801,40.818311)
liaoning(123.429096,41.796767)
jilin(1…
POSTGRESQL中如何利用SQL语句快速的进行同环比？
1. 引言
在数据驱动的时代，了解销售、收入或任何业务指标的同比和环比情况对企业决策至关重要。本文将深入介绍如何利用 PostgreSQL 和 SQL 语句快速、准确地进行这两种重要分析。
2. 数据准备
为了演示，假设我们有一张 sales 表，存储了销…
【投稿优惠|检索稳定】2023年信息系统和工程与数字化经济国际会议(ICISEDE 2023)
2024年信息系统和工程与数字化经济国际会议(ICISEDE 2024) 2024 International Conference on Information Systems and Engineering and the Digital Economy(ICISEDE 2024) [会议简介] 2024 年信息系统和工程与数字化经济国际会议(ICISEDE 2024)将于 2024 年 1 月 20 日在厦门…
大数据湖项目建设方案：文档全文101页，附下载
关键词：大数据解决方案，数据湖解决方案，数据治理解决方案，数据中台解决方案
一、大数据湖建设思路
1、明确目标和定位：明确大数据湖的目标和定位是整个项目的基础，这可以帮助我们确定项目的内容、规模、所…
基于Spark对消费者行为数据进行数据分析开发案例
原创/朱季谦 本文适合入门Spark RDD的计算处理。
在日常工作当中，经常遇到基于Spark去读取存储在HDFS中的批量文件数据进行统计分析的案例，这些文件一般以csv或者txt文件格式存在。例如，存在这样一份消费者行为数据，字段包括消费…
数学建模-基于BL回归模型和决策树模型对早产危险因素的探究和预测
整体求解过程概述(摘要) 近年来，全球早产率总体呈上升趋势，在我国，早产儿以每年 20 万的数目逐年递增，目前早产已经成为重大的公共卫生问题之一。据研究,早产是威胁胎儿及新生儿健康的重要因素，可能会造成死亡或智力体…
数据探索：五款免费数据可视化工具概览
数据可视化是解读和传达数据的重要方式，而现在有许多免费的工具可供选择，让您在探索数据时更轻松、更有趣。以下是五款推荐的免费数据可视化工具：
Tableau Public： Tableau Public是一款功能强大的可视化工具，能够创建…
PyEcharts快速上手_Python数据分析与可视化
PyEcharts快速上手 导入图表类型添加数据设置图表样式输出图表链式调用 导入图表类型
和其他库的导入方法一样，在绘图之前首先要在文件开头导入所需图表类型。
from pyecharts.charts import BarBar 类型是柱状图/条形图在 pyEcharts 中的英文名。 pyEcharts 中有…
python数据分析总结(pandas)
目录
前言
df导入数据
df基本增删改查
数据清洗
编辑
索引操作
数据统计
行列操作
编辑
df->types
数据格式化
编辑
日期数据处理 前言 此篇文章为个人python数据分析学习总结，总结内容大都为表格和结构图方式，仅供参考。 df导入数…
数字化转型导师坚鹏：BLM保险公司数字化转型战略培训圆满结束
在数字化转型背景下，为了落实监管政策《关于保险公司业保险业数字化转型的指导意见》，充分认识到学习保险公司数字化转型战略的价值和重要性，特别举办《2023年保险公司数字化转型战略专题培训班》。为了改变大家的认知，为了拓宽大…
知虾数据分析软件：解密Shopee大数据，助力科学运营
在电商领域，市场竞争激烈，如何准确洞察市场动态、优化选品策略、了解竞争对手的运营情况成为了每个卖家迫切需要解决的问题。而知虾数据分析软件作为Shopee大数据采集及分析平台，以其强大的功能和精准的数据分析能力，为卖家们提供…
模板上新｜2023年10月DataEase模板市场上新动态
DataEase开源数据可视化分析平台于2022年6月正式发布模板市场（https://dataease.io/templates/）。模板市场旨在为DataEase用户提供专业、美观、拿来即用的仪表板模板，方便用户根据自身的业务需求和使用场景选择对应的仪表板模板，并…
TikTok数据分析：如何通过数字洞察提升内容质量？
引言 TikTok作为全球最热门的短视频平台之一，每天吸引着亿万用户发布和观看各类内容。在这个充满创意的舞台上，内容质量成为吸引关注和提高曝光度的关键。
而要达到这一目标，数字数据分析成为不可或缺的工具。本文将深入探讨如何通过TikTok数…
Matplotlib线形图的创建_Python数据分析与可视化
线形图的创建 绘制线形图设置颜色和风格设置坐标轴上下限设置图形标签 绘制线形图
在所有图形中，最简单的应该就是线性方程y f (x) 的可视化了。来看看如何创建这个简单的线形图。要画Matplotlib图形时，都需要先创建一个图形fig 和一个坐标轴ax。创建图…
基于Python的南京二手房数据可视化分析的设计与实现
点我完整下载：基于Python的南京二手房数据可视化分析的设计与实现.docx 基于Python的南京二手房数据可视化分析的设计与实现 "Design and Implementation of Python-based Visualization Analysis for Nanjings Second-hand Housing Data" 目录 目录 2 摘…
神器！使用 patchworklib 库进行多图排版真棒啊
如果想把多个图合并放在一个图里，如图，该如何实现 好在R语言 和 Python 都有对应的解决方案， 分别是patchwork包和patchworklib库。
推介1
我们打造了《100个超强算法模型》，特点：从0到1轻松学习，原理、…
【Python】python天气数据抓取与数据分析（源码+论文）【独一无二】
👉博__主👈：米码收割机 👉技__能👈：C/Python语言 👉公众号👈：测试开发自动化【获取源码商业合作】 👉荣__誉👈：阿里云博客专家博主、5…
深度盘点：100 个 Python 数据分析函数总结
经过一段时间的整理，本期将分享我认为比较常用的100个实用函数，这些函数大致可以分为六类，分别是统计汇总函数、数据清洗函数、数据筛选、绘图与元素级运算函数、时间序列函数和其他函数。
技术交流
技术要学会交流、分享，不建议…
数学建模-基于LightGBM和BP神经网络的互联网招聘需求分析与预测
基于LightGBM和BP神经网络的互联网招聘需求分析与预测
整体求解过程概述(摘要) 就业是民生之本，是发展之基，也是安国之策。2020 年新冠肺炎疫情的爆发，稳就业成为应对疫情、稳定社会的重要保障之一。随着数据新动能的发展，互联网…
Python爬虫遇到重定向URL问题时如何解决？
什么是重定向
重定向是指当用户请求一个URL时，服务器返回一个中断请求的URL的响应。这种情况通常发生在网站对URL进行了修改或者重定向到其他页面的情况下。其中，如果处理不当开发，可能会导致爬虫无法获取所需的数据，从而影响爬虫…
![Cytoscape软件下载、安装、插件学习[基础教程]](https://img-blog.csdnimg.cn/img_convert/39ad45a79edcb1e950eeb21a7c6164bf.png)
Cytoscape软件下载、安装、插件学习[基础教程]
写在前面
今天分享的内容是自己遇到问题后，咨询社群里面的同学，帮忙解决的总结。
关于Cytoscape，对于做组学或生物信息学的同学基本是陌生的，可能有的同学用这个软件作图是非常溜的，做出来的网络图也是十分的好看&am…
亿发专业MES制造系统，现代化MES精益制造管理，建设数字化车间
在制造业信息化进程中，车间级信息化一直是薄弱环节，要提升车间自动化水平，可以发展MES技术。 MES（制造执行系统）强调对车间级的过程进行全面的集成、控制和监控，同时要合理配置和组织所有资源，以…
京东数据产品推荐-京东数据挖掘-京东平台2023年10月滑雪装备销售数据分析
如今，滑雪正成为新一代年轻人的新兴娱乐方式，借助北京冬奥会带来的发展机遇，我国冰雪经济已逐渐实现从小众竞技运动到大众时尚生活方式的升级。由此也带动滑雪相关生意的增长，从滑雪服靴到周边设备，样样都需要消费者掏…
2022年第十一届数学建模国际赛小美赛A题翼龙如何飞行解题全过程文档及程序
2022年第十一届数学建模国际赛小美赛
A题 翼龙如何飞行
原题再现： 翼龙是翼龙目中一个已灭绝的飞行爬行动物分支。它们存在于中生代的大部分时期：从三叠纪晚期到白垩纪末期。翼龙是已知最早进化出动力飞行的脊椎动物。它们的翅膀是由皮肤、肌肉和其他组…
【玩转TableAgent 数据智能分析】-- 数据分析不再是专业人士的专利
文章目录 前言一、TableAgent介绍TableAgent 数据分析智能体融合创新应用的新成果Table Family 二、注册TableAgent访问TableAgent注册用量 三、 体验TableAgent样例数据集体验选择样例数据集样例数据集进行数据分析数据图 样例数据集进行数据分析规定图表格式数据图 自定义数据…
工业 4.0 时代的人工智能和自动化
随着科技的日新月异，工业界也在不断迎来新的变革，其中工业 4.0 作为一种智能化、数字化的生产模式更是备受关注。在工业 4.0 时代，人工智能（AI）与自动化技术成为了推动制造业前进的重要动力。本文将就工业 4.0 时代中人…
时间序列预测实战(二十五)PyTorch实现Seq2Seq进行多元和单元预测（附代码+数据集+完整解析）
一、本文介绍
本文给大家带来的时间序列模型是Seq2Seq，这个概念相信大家都不陌生了，网上的讲解已经满天飞了，但是本文给大家带来的是我在Seq2Seq思想上开发的一个模型和新的架构，架构前面的文章已经说过很多次了，其是…
全国文体设施相关情况数据，shp/excel格式数据，2020-2022年，已进行数据可视化
基本信息.
数据名称: 全国文体设施相关情况数据
数据格式: shpexcel
数据几何类型: 面
数据坐标系: WGS84
数据来源：网络公开数据
数据字段：
序号字段名称字段说明1province省级名称2city城市名称3city_dm城市代码4tsgcss2020公共图书馆图书藏量…
2021年第十届数学建模国际赛小美赛B题疾病传播的风险解题全过程文档及程序
2021年第十届数学建模国际赛小美赛
B题 疾病传播的风险
原题再现： 空气传播疾病可以通过咳嗽或打喷嚏、喷洒液体或灰尘传播。另一方面，一些常见的传染病只能通过飞沫传播。请建立一个模型，以评估密闭空间内空气传播和液滴传播疾病的可能性。…
数据清洗、特征工程和数据可视化、数据挖掘与建模的应用场景
1.5 数据清洗、特征工程和数据可视化、挖掘建模的应用场景 视频为《Python数据科学应用从入门到精通》张甜 杨维忠 清华大学出版社一书的随书赠送视频讲解1.5节内容。本书已正式出版上市，当当、京东、淘宝等平台热销中，搜索书名即可。内容涵盖数据科学应…
虾皮数据分析网站：了解Shopee市场趋势与优化运营的利器
在如今的电商时代，越来越多的人选择在虾皮购物（Shopee）平台上开设自己的店铺。然而，要在这个竞争激烈的市场中脱颖而出并取得成功，并不是一件容易的事情。为了更好地了解市场趋势、优化产品和店铺运营，了解…
大数据分析与应用实验任务十一
大数据分析与应用实验任务十一
实验目的 通过实验掌握spark Streaming相关对象的创建方法； 熟悉spark Streaming对文件流、套接字流和RDD队列流的数据接收处理方法； 熟悉spark Streaming的转换操作，包括无状态和有状态转换。 熟悉spark S…
数据可视化工具选择：功能、易用性与安全性
作为一名数据可视化大屏设计师，我深知选择一款合适的数据可视化工具对于提高工作效率和呈现效果的重要性。下面，我将从真正对我们数据可视化大屏设计师有用的角度为大家介绍选择数据可视化工具的一些必要条件和要求。
1. 功能强大与灵活定制
首先&…
数据分析实例：基于电力大数据的中小型企业运营发展分析
前不久，帆软发起了【2023BI数据分析大赛】的活动，老李我也是这个大赛的评委。 今天跟大家分享的是基于电力大数据的中小型企业运营发展分析。 当我们去解读一份数据分析报告时，首先要了解这份报告的主要目的是什么，作者通过分…
计算机毕业设计 基于大数据的心脏病患者数据分析管理系统的设计与实现 Java实战项目 附源码+文档+视频讲解
博主介绍：✌从事软件开发10年之余，专注于Java技术领域、Python人工智能及数据挖掘、小程序项目开发和Android项目开发等。CSDN、掘金、华为云、InfoQ、阿里云等平台优质作者✌ 🍅文末获取源码联系🍅 👇🏻 精…
Python数据科学视频讲解：数据挖掘与建模的注意事项
1.7 数据挖掘与建模的注意事项 视频为《Python数据科学应用从入门到精通》张甜 杨维忠 清华大学出版社一书的随书赠送视频讲解1.7节内容。本书已正式出版上市，当当、京东、淘宝等平台热销中，搜索书名即可。内容涵盖数据科学应用的全流程，包括…
单细胞个性化细胞注释
关于单细胞中级的课程内容，前面已经有了三次直播。欢迎回看～
单细胞直播一理解seurat数据结构与pbmc处理流程
单细胞直播二从GSE104154中理解seurat结构
单细胞直播三seurat数据结构与数据可视化 本期主要内容 本期指哪打哪，自己选定细胞&…
一文讲透Python机器学习中的K折交叉验证法
1.K折交叉验证法的基本原理
K折交叉验证是针对验证集法的另外一种改进方式，也广泛用于机器学习实践。具体的操作方式就是首先把样本全集采用分层抽样的方式随机划分为大致相等的K个子集，每个子集包含约1/K的样本，K的取值通常为5或者10&#…
一文讲透Python函数的创建和调用
1.Python提供了函数作为完成某项工作的标准化代码块
Python本质上是一种编程语言，通过编写运行代码的方式实现工作目标。读者可以想象，如果针对机器学习或数据统计分析的每种方法或统计量计算都要用户自行编写代码，那么显然在很多情况下是无…
探索数据之美：优雅权重计算方法与Python实践
写在开头
在数据的世界里，我们常常需要通过各种方法为不同的数据点分配合理的权重。这是数据分析中至关重要的一环，它决定了模型的准确性和结果的可信度。本文将引导您探索数据分析中常用的权重计算方法，并通过清晰的Python代码实现，让您轻松驾驭权重的奥秘。
1.常见分类…
这是我见过最好用的销售预测模型！附完整解析
以上，摘自网络，属于给了碗汤但没给勺的那种~ 下面，简单聊聊“勺”的问题~ 有个段子这么说：“掐指一算，明年多挣5000万。”听起来简单，但在真实的业务环境中，要实现高质量的销售预测却相当…
如何获取阿里巴巴中国站按图搜索1688商品（拍立淘） API接口（item_search_img-按图搜索1688商品（拍立淘））
一、背景介绍
阿里巴巴中国站作为中国领先的B2B电子商务平台，提供了大量的商品信息和交易服务。其中，按图搜索1688商品（拍立淘）是阿里巴巴中国站特有的功能之一，它可以通过上传图片来搜索与图片相似的商品，…
阶段四：数据分析与机器学习(掌握NumPy和Pandas库，用于数据处理和分析)
Python的NumPy和Pandas库是数据处理和分析的重要工具。NumPy（Numerical Python）提供了高性能的数值计算工具，适用于大规模多维数组和矩阵的运算。Pandas则提供了强大的数据结构和数据分析工具，使得数据处理和分析变得更加便捷。以下是掌握NumPy和Pandas库的一些建议： 熟悉…
十五、机器学习进阶知识：K-Means聚类算法
文章目录 1、聚类概述2、K-Means聚类算法原理3、K-Means聚类实现3.1 基于SKlearn实现K-Means聚类3.2 自编写方式实现K-Means聚类 4、算法不足与解决思路4.1 存在的问题4.2 常见K值确定方法4.3 算法评估优化思路 1、聚类概述
聚类（Clustering）是指将不同…
数据可视化0成本解决方案：你也可以拥有可视化大屏！
数据可视化大屏成为企业展示数据、决策分析的重要工具。然而，许多人认为制作这样的大屏成本高昂，其实根据我作为数据可视化设计师的经验，你可以达到这一目标却不用花一分钱。 首先，你要懂得利用免费工具和资源。在如今丰富的免费工…
探索数据之美：深入学习Plotly库的强大可视化
1. 引言：
Plotly 是一个交互性可视化库，可以用于创建各种漂亮的图表和仪表板。它支持多种编程语言，包括Python、R、JavaScript。在Python中，Plotly提供了Plotly Express和Graph Objects两个主要的绘图接口。
2. Plotly库简介&am…
坚鹏：中国工商银行内蒙古分行数字化转型发展现状与成功案例培训
中国工商银行围绕“数字生态、数字资产、数字技术、数字基建、数字基因”五维布局，深入推进数字化转型，加快形成体系化、生态化实施路径，促进科技与业务加速融合，以“数字工行”建设推动“GBC”（政务、企业、个人&…
数据可视化免费化：趋势背后的动因
在数字化浪潮的推动下，数据可视化已成为解读和利用数据的关键工具。作为一个需要经常接触各种数据可视化软件的设计师，我发现数据可视化工具的免费化进程正在加速。为何越来越多的数据可视化工具选择走向免费之路？让我们一起探讨其中的原因。…
数据分享 I 2022年淘宝村名单数据，shp/excel格式数据，共7700多条数据，已可视化处理
今天分享2022年淘宝村名单数据，shp/excel格式数据，共7700多条数据！
淘宝村认定条件为电商年销售额达1000万元及以上的行政村(不含居委会) ；村活跃网店数达100个及以上，或活跃网店数达家庭户数10%及以上，就…
京东数据分析：2023年10月京东打印机行业品牌销售排行榜
鲸参谋监测的京东平台10月份打印机市场销售数据已出炉！ 10月份，打印机市场整体销售下滑。鲸参谋数据显示，今年10月份，京东平台打印机的销量将近60万，环比降低约2%，同比降低约5%；销售额为4.4亿&a…
信息可视化在数字孪生中的应用：打造直观决策支持系统
在当今的数字化时代，数字孪生和信息可视化已成为推动各行业发展的重要力量。数字孪生为物理世界提供了一个虚拟的副本，而信息可视化则将复杂的数据以易于理解的方式呈现出来。两者之间的关系密切，相辅相成，为决策者提供了更全面、…
京东运营数据分析：2023年10月京东传统滋补行业数据分析报告
随着人们对身体健康的重视程度不断加深，滋补养生逐渐成为常态。以往关注滋补养生的大多为中老年群体，滋补类用品及保健品也大多聚焦这一用户。然而伴随“亚健康”问题的出现以及养生理念的普及、悦己消费趋势的凸显，年轻人也加入到滋补养生的…
为何开展数据清洗、特征工程和数据可视化、数据挖掘与建模？
1.2为何开展数据清洗、特征工程和数据可视化、数据挖掘与建模 视频为《Python数据科学应用从入门到精通》张甜 杨维忠 清华大学出版社一书的随书赠送视频讲解1.2节内容。本书已正式出版上市，当当、京东、淘宝等平台热销中，搜索书名即可。内容涵盖数据科学…
数据分析中的绝地反击：如何解救一个陷入困境的数据模型
写在开头
大家好，欢迎来到我的数据探险之旅！今天我要给大家分享一段关于数据分析的奇幻故事，一个关于销售量预测模型的冒险。在这次旅程中，我遇到了一个强大的对手——预测准确率的困境，而我必须通过各种招数来解救这…
【第二章】用于基因组数据分析的 R 简介
计算基因组学的目的是从高维基因组数据中提供生物学解释和见解。一般来说，它与任何其他类型的数据分析工作类似，但通常进行计算基因组学需要特定领域的知识和工具。 计算基因组学的目的是从高维基因组数据中提供生物学解释和见解。一般来说，它…
2020年第九届数学建模国际赛小美赛B题血氧饱和度的变异性解题全过程文档及程序
2020年第九届数学建模国际赛小美赛
B题 血氧饱和度的变异性
原题再现： 脉搏血氧饱和度是监测患者血氧饱和度的常规方法。在连续监测期间，我们希望能够使用模型描述血氧饱和度的模式。 我们有36名受试者的数据，每个受试者以1 Hz的频率连…
2020年第九届数学建模国际赛小美赛A题自由泳解题全过程文档及程序
2020年第九届数学建模国际赛小美赛
A题 自由泳
原题再现： 在所有常见的游泳泳姿中，哪一种最快？哪个冲程推力最大？在自由泳项目中，游泳者可以选择他们的泳姿，他们通常选择前面的爬行。然而，游泳…
《PySpark大数据分析实战》-01.关于数据
📋 博主简介 💖 作者简介：大家好，我是wux_labs。😜 热衷于各种主流技术，热爱数据科学、机器学习、云计算、人工智能。 通过了TiDB数据库专员（PCTA）、TiDB数据库专家（PCTP…
【基于PYTHON的宠物市场数据分析与可视化】
基于PYTHON的宠物市场数据分析与可视化 引言数据爬取与处理数据分析与可视化1. 品牌价格和销量对比2. 主要店铺销售额对比3. 品牌好评率和差评数4. 价格最高的商品视频5. 商品标题生成词云 创新点结语 引言
随着宠物文化的兴盛，宠物市场变得越来越庞大。本文基于Py…
精选Axure原型设计模板，RP原型组件库（PC端移动端元件库及Axure函数及运算符说明）
好的原型组件会大大的提高产品经理的工作效率，小7在陆续整理、精选Axure 8的原型设计模板，包含了原型设计的常用元素和AxureRP 8函数及运算符的说明文档，及各种设备模板框架。
本文也是基于小7另一篇文章的补充，更多更详细的资料…
深度学习 | 前馈神经网络与反向传播算法
目录
一、Logistic函数
二、前馈神经网络（FNN）
三、反向传播算法（BP算法）
四、基于前馈神经网络的手写体数字识别 一、Logistic函数
Logistic函数是学习前馈神经网络的基础。所以在介绍前馈神经网络之前，我们首…
Python房价分析（二）随机森林分类模型
目录
1 数据预处理
1.1 房价数据介绍
1.2 数据预处理
1.2.1 缺失值处理
1.2.2异常值处理
1.2.3 数据归一化
1.2.4 分类特征编码
2 随机森林模型
2.1 模型概述
2.2 建模步骤
2.3 参数搜索过程
3模型评估
3.1 模型评估结果
3.2 混淆矩阵
3.3 绘制房价类别三分类的…
数据可视化免费化的双面影响探析
近年来数据可视化的免费化也越来越明显，今天就以我作为可视化设计师的经验来和大家分析一下，数据可视化工具免费化所带来的利与弊。 先从好处入手，最明显的就是免费化可以让数据可视化工具得到更广泛的使用。 免费数据可视化工具使得更多人可…
数据分析基础之《numpy（2）—ndarray属性》
一、ndarray的属性
1、属性方法
属性名字属性解释ndarray.shape数组维度的元组（形状）ndarray.ndim数组维数ndarray.size数组中的元素数量ndarray.itemsize一个数组元素的长度（字节）ndarray.dtype数组元素的类型使用方法 数组名.…
R语言进行正态分布检验
查了很多资料，还是比较模糊 Kolmogorov-Smirnov检验（K-S检验）广泛用于正态性检验和其他分布的拟合检验。适用于中等到大样本。 Lilliefors检验是K-S检验的一种变体，专门为小样本设计。其通过使用更准确的临界值来提高对小样本的适…
Python Pandas 如何增加/插入一列数据（第5讲）
Python Pandas 如何增加/插入一列数据（第5讲） 🍹博主 侯小啾 感谢您的支持与信赖。☀️ 🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹…
【Citespace】从Citespace开始的引文可视化分析
CiteSpace 译“引文空间”，是一款着眼于分析科学分析中蕴含的潜在知识，是在科学计量学、数据可视化背景下逐渐发展起来的引文可视化分析软件。由于是通过可视化的手段来呈现科学知识的结构、规律和分布情况，因此也将通过此类方法分析得到的可…
银行数字化转型导师坚鹏：兴业生活APP运营之道
基于招商银行案例研究的兴业生活APP运营之道培训圆满结束
——线上引流平台流量经营与变现 兴业银行股份有限公司（简称“兴业银行”）成立于1988年8月，2022年总资产9.27万亿元，是经国务院、中国人民银行批准成立的首批股份制商业银…
坚鹏：广发银行梅州分行银行数字化转型战略、方法与案例培训
广发银行成立于1988年，前身为广东发展银行，经国务院和中国人民银行批准，是国内首批组建的全国性股份制商业银行之一，2016年8月，广发银行成为中国人寿团成员单位，2021年成为首批国内系统重要性银行。2022年&…
智慧城市大屏，数据可视化大屏，PSD源文件（ps大屏设计素材）
近几年智慧城市业务增多，各个业务系统承载着城市信息化建设的任务，其中用酷炫的大屏展示其业务的运营情况及城市数据情况。有助于相关人员进行运营决策。相关大屏组件也可以让设计师的工作更加便捷，使其更高效快速的完成设计任务。
这里帮大…
做数据分析为何要学统计学（10）——如何进行时间序列分析
时间序列是由随时间变化的值构成，如产品销量、气温数据等等。通过对时间序列展开分析，能够回答如下问题：
（1）被研究对象的活动特征是否有周期性（也称季节性）（2）被研究对…
新增模板中心和系统设置模块，支持飞书平台对接，DataEase开源数据可视化分析平台v2.1.0发布
这一版本的功能升级包括：新增模板中心，用户可以通过模板中心的模板快速创建仪表板和数据大屏；新增“系统设置”功能模块，该模块包含系统参数、认证设置、嵌入式管理、平台对接四个子模块。在“系统参数”子模块中，用户…
如何进行落地的数据分析，并提出落地的分析建议？
落地的数据分析是指将数据分析结果应用到实际业务中，以提供有价值的决策支持和改进方案。在进行落地的数据分析前，需要明确分析目标和需求，制定合适的分析方法和步骤，并在分析过程中不断优化和验证分析结果。以下是进行落地的数据…
打造‘产业大数据综合服务平台’，助力智慧园区建设！
随着大数据、人工智能、云计算、物联网等新一代信息技术的发展与应用，我国各类型园区正在向“智慧园区”转型升级，逐步开启数字化、智能化的运营管理模式。智慧园区的建设不仅需要基础设施的智慧化，更要实现园区规划、运营、管理、服务的智慧…
JVS物联网、低代码、智能BI本周更新功能已上线
物联网应用更新功能
新增:
1.新增驱动管理功能，可新增、编辑、修改、删除、查看驱动实例；
驱动管理功能主要负责管理物联网设备的驱动实例。这些驱动实例可以新增、编辑、修改、删除或查看。通过这些驱动实例，平台可以与设备进行通信&…
数据分享 I 全国市级商品房屋销售数据，shp/excel格式，2005-2020年数据
基本信息.
数据名称: 全国市级商品房屋销售数据
数据格式: Shp、excel
数据时间: 2005-2020年
数据几何类型: 面
数据坐标系: WGS84坐标系
数据来源：网络公开数据
数据字段：
序号字段名称字段说明1spxse商品房销售额（亿元…
数据分析基础之《numpy（3）—基本操作》
一、基本操作
1、adarray.方法()
2、np.函数名()
二、生成数组的方法
1、生成0和1的数组
为什么需要生成0和1的数组？ 我们需要占用位置，或者生成一个空的数组
（1）ones(shape[, dtype, order]) 生成一组1 shape：形…
京东大数据分析（京东数据运营软件）：10月香水市场销售数据分析报告
随着经济发展及人们生活水平的提高，香水在人们生活中的地位慢慢变化着，曾经作为奢侈品的香水，逐渐转变为人们的日常用品。不过，在如今世界香水市场低迷的情况下，中国香水市场也受到影响。 鲸参谋数据显示，今…
《PySpark大数据分析实战》-06.安装环境准备
📋 博主简介 💖 作者简介：大家好，我是wux_labs。😜 热衷于各种主流技术，热爱数据科学、机器学习、云计算、人工智能。 通过了TiDB数据库专员（PCTA）、TiDB数据库专家（PCTP…
期末总复习（重点！！！）
一、第6章异常处理
1、什么是异常、什么是异常处理异常是指程序在运行过程中发生的错误事件，影响程序的正常执行。异常并不是一定会发生，默认情况下，程序运行中遇到异常时将会终止，并在控制台打印出异常出现的堆栈信息。异常处理…
基于Python数据可视化的网易云音乐歌单分析系统
目录 《Python数据分析初探》项目报告 基于Python数据可视化的网易云音乐歌单分析系统一、项目简介（一）项目背景（二）项目过程 二、项目设计流程图（一）基于Python数据可视化的网易云音乐歌单分析系统的整体…
【玩转TableAgent数据智能分析】TableAgent全功能详解及多领域数据分析实践（下）数据分析过程及总结展望
6 TableAgent的数据分析过程解析
TableAgent的整个分析过程包括以下步骤，形成一个有机结构，让我们理清其工作原理。
6.1 Data Graph阶段
TableAgent首先绘制数据图，以解决问题。这个图形表示了问题的分解和细化，将大问题分解成…
数据可视化设计：让数据故事更有说服力
写在开头
在数字化的时代，数据如同一把锁住的宝剑，等待我们挥舞。然而，唯有通过巧妙运用数据可视化的原则和技术，我们才能真正解锁数据的力量，创造出令人信服的数据故事。本文将深入研究数据可视化设计的奥秘，揭示其中的魔法，让你在数据的海洋中游刃有余，用数据的语言…
空气污染大屏，UI可视化大屏设计（PSD源文件）
大屏组件可以让UI设计师的工作更加便捷，使其更高效快速的完成设计任务。现分享科技空气污染大数据、空气污染大数据平台、大气环境信息资源中心、大气检测大数据中心、环境信息资源中心界面的大屏Photoshop源文件，开箱即用！
若需 更多行业 相…
做数据分析为何要学统计学（2）——如何估计总体概率分布
我们可以通过手头掌握的样本来估计总体的概率分布。这个过程由以下步骤组成。
第一步，我们采用Seaborn软件的histplot函数建立核密度图（一种概率密度图）。
import numpy as np
#输入样本数据
xnp.array([2.12906357, 0.72736725, 1.0515282…
Python创建代理IP池详细教程
一、问题背景
在进行网络爬虫或数据采集时，经常会遇到目标网站对频繁访问的IP进行封禁的情况，为了规避这种封禁，我们需要使用代理IP来隐藏真实IP地址，从而实现对目标网站的持续访问。
二、代理IP池的基本概念
代理IP池是一个包…
数据分析为何要学统计学（4）——何为置信区间？它有什么作用？
置信区间是统计学中的一个重要工具，是用样本参数()估计出来的总体均值在某置信水平下的范围。通俗一点讲，如果置信度为95%（等价于显著水平a0.05），置信区间为[a,b]，这就意味着总体均值落入该区间的概率为95%…
2019年第八届数学建模国际赛小美赛B题数据中心冷出风口的设计解题全过程文档及程序
2019年第八届数学建模国际赛小美赛
B题 数据中心冷出风口的设计
原题再现： 这是数据中心空调设计面临的一个问题。在一些数据中心，计算机机柜是开放的，在一个房间里排列成三到四排。冷却后的空气通过主管进入房间，并分为三到四个…
做数据分析为何要学统计学（10）——什么是回归分析
回归分析（regression analysis)是量化两种或两种以上因素/变量间相互依赖关系的统计分析方法。回归分析根据因素的数量，分为一元回归和多元回归分析；按因素之间依赖关系的复杂程度，可分为线性回归分析和非线性回归分析。我们通过…
欧睿 × 和鲸：联合打造 AI 中台赋能企业数字化转型，大幅提升模型产品研发效率
近年来，在泛零售及快消行业，由于市场格局越发瞬息万变、消费场景愈加错综复杂，以机器学习算法、人工智能模型代替纯人脑人工完成商品计划、运营、供应链管理已逐渐成为主流。
oIBP 欧睿数据（下简称“欧睿”）是国内领先…
初识大数据应用，一文掌握大数据知识文集(1)
文章目录 🏆初识大数据应用知识🔎一、初识大数据应用知识(1)🍁 01、请用Java实现非递归二分查询？🍁 02、是客户端还是Namenode决定输入的分片？🍁 03、mapred.job.tracker命令的作用？…
数据分析为何要学统计学（7）——什么问题适合使用t检验？
t检验（Students t test），用于通过小样本（样本容量n < 30）对总体均值水平进行无差异推断。
t检验要求样本不能超过两组，且每组样本总体服从正态分布（对于三组以上样本的，要用方差…
车载导航系统UI界面，可视化大屏设计（PS源文件）
大屏组件可以让UI设计师的工作更加便捷，使其更高效快速的完成设计任务。现分享车载导航系统科技风蓝黑简约UI界面、车载系统UI主界面、车载系统科技风UI界面、首页车载系统科技感界面界面的大屏Photoshop源文件，开箱即用！
若需 更多行业 相关…
什么是数据可视化？数据可视化的优势、方法及示例
前言 在当今的数字时代，数据是企业和组织的命脉，生成的数据量呈指数级增长。这种被称为大数据的海量数据在洞察力和决策方面具有巨大的潜力。然而，如果没有一种有效的方法来分析和理解这些数据，它就会变得毫无意义和难以管理。这就…
Python数据科学视频讲解：Python序列的概念及通用操作
2.10 Python序列的概念及通用操作 视频为《Python数据科学应用从入门到精通》张甜 杨维忠 清华大学出版社一书的随书赠送视频讲解2.10节内容。本书已正式出版上市，当当、京东、淘宝等平台热销中，搜索书名即可。内容涵盖数据科学应用的全流程，…
【玩转TableAgent数据智能分析】TableAgent全功能详解及多领域数据分析实践（中）不同领域数据分析实践
3 电影点评数据分析实践
利用本身自带的电影点评数据，来具体看一下TableAgent的分析能力，选择电影点评数据，智能体会自动导入该数据DMSC20000.csv，大小为3.3 MB。在数据信息展示区，就会显示出该数据，并提供…
医学检验系统LIS源码，C# +.Net+Oracle
LIS是HIS的一个组成部分，通过与HIS的无缝连接可以共享HIS中的信息资源，使检验科能与门诊部、住院部、财务科和临床科室等全院各部门之间协同工作。
体系结构：Client/Server架构
客户端：WPFWindows Forms
服务端：C…
数据分析为何要学统计学（11）——如何进行时间序列分析
时间序列是由随时间变化的值构成，如产品销量、气温数据等等，该数据集合是个有序序列，除了数值，没有其他因素。通过对时间序列展开分析，能够回答如下问题：
（1）被研究对象的活动特征是…
Pandas中concat的用法
Pandas中concat的用法
pd.concat 是 pandas 库中的一个函数，用于将多个 pandas 对象（如 Series、DataFrame）沿指定轴进行合并连接。
pd.concat(objs, axis0, joinouter, ignore_indexFalse, keysNone, levelsNone, namesNone, verify_in…
天猫数据分析（天猫数据查询平台）：11月天猫啤酒市场销售数据分析报告
在酒类市场中，被视作“气氛担当”的啤酒，是派对聚会或者自饮场景中的常客，消费人群广泛，如今，啤酒市场已进入存量时代，市场中啤酒的销售也在稳步增长。 鲸参谋数据显示，今年11月份，天…
《PySpark大数据分析实战》-04.了解Spark
📋 博主简介 💖 作者简介：大家好，我是wux_labs。😜 热衷于各种主流技术，热爱数据科学、机器学习、云计算、人工智能。 通过了TiDB数据库专员（PCTA）、TiDB数据库专家（PCTP…
FineReport 高级教程：深入数据分析与报表设计
本人详解 作者：王文峰，参加过 CSDN 2020年度博客之星，《Java王大师王天师》 公众号：JAVA开发王大师，专注于天道酬勤的 Java 开发问题中国国学、传统文化和代码爱好者的程序人生，期待你的关注和支持！本人外号：神秘小峯 山峯 转载说明：务必注明来源（注明：作者：王文峰…
《PySpark大数据分析实战》-12.Spark on YARN配置Spark运行在YARN上
📋 博主简介 💖 作者简介：大家好，我是wux_labs。😜 热衷于各种主流技术，热爱数据科学、机器学习、云计算、人工智能。 通过了TiDB数据库专员（PCTA）、TiDB数据库专家（PCTP…
《PySpark大数据分析实战》-11.Spark on YARN模式安装Hadoop
📋 博主简介 💖 作者简介：大家好，我是wux_labs。😜 热衷于各种主流技术，热爱数据科学、机器学习、云计算、人工智能。 通过了TiDB数据库专员（PCTA）、TiDB数据库专家（PCTP…
大规模数据可视化（纯文字干货科普）
导读：探讨在处理大规模数据集时如何有效地进行数据可视化，如何在大数据分析中有效传达信息，包括交互式探索、实时仪表板和复杂数据故事讲述。
目录
大规模数据可视化的挑战
数据量问题
性能考量
实时数据
数据可视化的关键技术
数据预…
Python数据科学视频讲解：Python数据清洗基础
3.1 Python数据清洗基础 视频为《Python数据科学应用从入门到精通》张甜 杨维忠 清华大学出版社一书的随书赠送视频讲解3.1节内容。本书已正式出版上市，当当、京东、淘宝等平台热销中，搜索书名即可。内容涵盖数据科学应用的全流程，包括数据科…
数据分析为何要学统计学（10）——如何进行比率检验
比率检验是通过样本推测某种事件的总体占比水平。要求事件仅有互斥的两种情况，即，概率分别为p与1-p。
比率检验分单样本和双样本两种情况，以下我们分别介绍。
1. 单样本比率检验 形如这样的问题：“小学生近视比例日益提高&#…
天猫数据平台-淘宝天猫数据-天猫销售数据分析：11月天猫平台滑雪运动装备行业销量翻倍！
随着天气变冷、冬季来临，迎来了疫情后的首个滑雪季，加之自冬奥会结束以来，大众参与冰雪运动的热度持续攀升，因此，冰雪运动的需求正集中释放。 根据相关数据显示，11月以来，全国滑雪场门票预订量较…
天猫数据分析平台-天猫销售数据查询软件-11月天猫平台冲锋衣市场销售运营数据分析
随着气温逐渐下降，保暖服饰迎来热销，冲锋衣的需求大增。如今冲锋衣已经不仅仅是户外运动的装备，还成为很多年轻人的日常穿搭和时尚的追求。 新的穿搭趋势也带来了巨大的市场机会。据公开数据显示，中国有冲锋衣生产及经营企业超过8…
探索数据的起点：Python中的statsmodels库简介
1 引言
在当今数据驱动的世界中，数据分析成为了解决问题和做出决策的关键步骤。为了更深入地了解和探索数据，我们需要强大而灵活的工具。其中，Statsmodels库是Python中一个不可或缺的工具，它为数据分析提供了丰富的统计模型和测试…
2023陇剑杯线上线下赛数据分析
好久没打过比赛了，对于这种偏蓝方的比赛我还是很喜欢 本文首发于：先知社区：https://xz.aliyun.com/t/13177 HW
hard web_1 题目内容：服务器开放了哪些端口，请按照端口大小顺序提交答案，并以英文逗号隔开(如…
2018年第七届数学建模国际赛小美赛A题空中加油飞行计划解题全过程文档及程序
2018年第七届数学建模国际赛小美赛
A题 空中加油飞行计划
原题再现： 太平洋中部一个小岛上的居民被自然灾害困住。救援人员需要派遣一架轻型飞机运送少量急救药品到岛上，并运送一名重伤者到医疗基地求救。岛上有一个无人值守的简易机场，可以…
数据分析场景下，企业大模型选型的思路与建议
来源/作者：爱分析 随着大模型带来能力突破，让AI与数据分析相互结合，使分析结果更好支撑业务，促进企业内部数据价值释放，成为了当下企业用户尤为关注的话题。本次分享主要围绕数据分析场景下大模型底座的选型思路&#…
5行Python实现验证码识别，太稳了
很久之前，分享过一次Python代码实现验证码识别的办法。
当时采用的是pillowpytesseract，优点是免费，较为易用。但其识别精度一般，若想要更高要求的验证码识别，初学者就只能去选择使用百度API接口了。
但其实百度API接…
《PySpark大数据分析实战》-02.了解Hadoop
📋 博主简介 💖 作者简介：大家好，我是wux_labs。😜 热衷于各种主流技术，热爱数据科学、机器学习、云计算、人工智能。 通过了TiDB数据库专员（PCTA）、TiDB数据库专家（PCTP…
数字化转型导师坚鹏：中国工商银行人工智能与金融数字化转型培训
中国工商银行打造D-ICBC数字化转型战略，围绕“数字生态、数字资产、数字技术、数字基建、数字基因”五维布局，深入推进数字化转型，加快形成体系化、生态化实施路径，促进科技与业务加速融合，以“数字工行”建设推动“GB…
深入Pandas：数据分析的强大工具
文章目录 引言Pandas简介Pandas的核心功能实战示例：数据分析与可视化示例目的环境需求示例数据集示例过程及结果源代码 结语 引言
在当今快速发展的数据科学领域，Python凭借其强大的库生态系统，特别是像Pandas这样的库，已成为数据…
智慧能源：引领未来，共创绿色美好生活
随着科技的飞速发展，人类社会对能源的需求与日俱增。然而，传统的能源利用方式不仅带来了资源短缺的问题，还对环境造成了严重的污染。面对这一挑战，智慧能源应运而生，为我们的未来生活带来了无限可能。 智慧能源大屏是利…
基于sklearn实现LDA主题模型（附实战案例）
目录 LDA主题模型
1.LDA主题模型原理
2.LDA主题模型推演过程
3.sklearn实现LDA主题模型（实战）
3.1数据集介绍
3.2导入数据
3.3分词处理 3.4文本向量化
3.5构建LDA模型
3.6LDA模型可视化
3.7困惑度 LDA主题模型 1.LDA主题模型原理 其实说到LDA…
数据分析基础之《numpy（6）—合并与分割》
了解即可，用panads
一、作用 实现数据的切分和合并，将数据进行切分合并处理
二、合并
1、numpy.hstack 水平拼接
# hstack 水平拼接
a np.array((1,2,3))
b np.array((2,3,4))
np.hstack((a, b))a np.array([[1], [2], [3]])
b np.array([[2], […
2017年第六届数学建模国际赛小美赛A题飓风与全球变暖解题全过程文档及程序
2017年第六届数学建模国际赛小美赛
A题 飓风与全球变暖
原题再现： 飓风（也包括在西北太平洋被称为“台风”的风暴以及在印度洋和西南太平洋被称为“严重热带气旋”）具有极大的破坏性，往往造成数百人甚至数千人死亡。 许多气…
Flink 窗口（1）—— 基础概念
窗口：将无限数据切割成有限的“数据块”进行处理，以便更高效地处理无界流 在处理无界数据流时，把无界流进行切分，每一段数据分别进行聚合，结果只输出一次。这就相当于将无界流的聚合转化为了有界数据集的聚合 Flink “…
天猫数据分析（软件工具）-2023年11月天猫保健品行业分析报告：市场需求扩容，年轻人是主流群体
近年来，随着健康经济、颜值经济的兴起，越来越多的年轻人加入养生大军，成为保健食品市场上的一股新力量，带动市场扩容。根据鲸参谋电商数据分析平台的相关数据显示，今年11月份，天猫平台上保健食品的销量为24…
数据的个人视角：数据可视化的意义
当谈论到数据可视化对个人用户的实用价值时，很多人可能会想到它仅适用于企业或专业领域。然而，数据可视化对个人用户同样具有重要的实用价值。本文将从可视化从业者的角度出发，简单说说数据可视化对个人用户的实用价值。
首先，数…
数字化生活：数据可视化的力量
数据可视化已经逐渐渗透到我们的日常生活中，并在许多方面为我们提供了便利与启发。它不仅仅是数据的图形展示，更是一种改变我们对信息理解方式的工具。下面我就以可视化从业者的角度出发，简单聊聊如何让数据可视化为我们的生活服务。 首先&am…
数据可视化分析大屏，大数据统计UI页面源文件（信息分析平台免费PS资料）
数据可视化可以帮助数据分析者更好地理解数据，发现数据中的规律和趋势。通过图表和图形等可视化工具，数据分析者可以更快速地发现数据中的关系，比如相关性、趋势、异常值等。对于普通用户来说，理解复杂的数据可能会很困难。通过数…
scala 整合 springboot
scala 整合 springboot
新建spingboot项目 pom.xml
<?xml version"1.0" encoding"UTF-8"?>
<project xmlns"http://maven.apache.org/POM/4.0.0" xmlns:xsi"http://www.w3.org/2001/XMLSchema-instance"xsi:schemaLocati…
天猫数据分析（天猫查数据工具）：2023年天猫平台假发行业市场销售数据分析报告
如今，由于人们工作和生活的压力较大，居民脱发问题严重，且脱发群体倾向于80后和90后，逐渐向低龄化发展。除脱发外，在颜值经济的背景下，人们越来越注重外貌和形象，假发作为一种改善发型的工具&…
python画图【03】泰坦尼克号数据分析
导包
import numpy as np
import pandas as pdimport matplotlib
import matplotlib.pyplot as plt %matplotlib inlineplt.rcParams[font.sans-serif] "Microsoft YaHei"import seaborn as sns加载数据集
titanic sns.load_dataset("titanic")titanic…
数据分析-Pandas如何选择数据子集
数据分析-Pandas如何选择数据子集
Dataframe的数据中，选择某一列，某一行，或者某个子区域，该怎么办呢？
python数据分析-数据表读写到pandas
经典算法-遗传算法的python实现
经典算法-遗传算法的一个简单例子
大模型…
【Python特征工程系列】利用梯度提升（GradientBoosting）模型分析特征重要性（源码）
一、引言
应用背景介绍： 如果有一个包含数十个甚至数百个特征的数据集，每个特征都可能对你的机器学习模型的性能有所贡献。但是并不是所有的特征都是一样的。有些可能是冗余的或不相关的，这会增加建模的复杂性并可能导致过拟合。特征重…
基于协同过滤的电影评论数据分析与推荐系统
温馨提示：文末有 CSDN 平台官方提供的学长 QQ 名片 :) 1. 项目介绍 随着社会的发展，人们生活水平的提高，欣赏电影逐渐成为人们闲暇时的主要娱乐方式之一。本文电影推荐系统是为了给顾客提供方便快捷的热门电影推荐以及查询电影资讯而建立的&…
单挑力扣（LeetCode）SQL题：1077. 项目员工 III（难度：中等）
相信很多学习SQL的小伙伴都面临这样的困境，学习完书本上的SQL基础知识后，一方面想测试下自己的水平；另一方面想进一步提升，却不知道方法。
其实，对于技能型知识，我的观点一贯都是：多练习、多实…
【hacker送书第11期】Python数据分析从入门到精通
探索数据世界，揭示未来趋势
《Python数据分析从入门到精通》是你掌握Python数据分析的理想选择。本书深入讲解核心工具如pandas、matplotlib和numpy，助您轻松处理和理解复杂数据。
通过matplotlib、seaborn和创新的pyecharts，本书呈现生动直…
2023年国赛高教杯数学建模E题黄河水沙监测数据分析解题全过程文档及程序
2023年国赛高教杯数学建模
E题 黄河水沙监测数据分析
原题再现 黄河是中华民族的母亲河。研究黄河水沙通量的变化规律对沿黄流域的环境治理、气候变化和人民生活的影响，以及对优化黄河流域水资源分配、协调人地关系、调水调沙、防洪减灾等方面都具有重要的理论指导…
数据分析——数据预处理和数据管道构建
目标：对于拿到的一个任意数据集，编写类似数据加载程序，以适应深度学习的研究。 框架：
针对不同的时间序列数据集，可以总结如下关键步骤，以编写类似上述代码的深度学习数据处理流程：
1. **了解…
鸿蒙APP和Android的区别
鸿蒙（HarmonyOS）和Android是两个不同的操作系统，它们有一些区别，包括架构、开发者支持、应用生态和一些设计理念。以下是鸿蒙APP和Android APP之间的一些主要区别，希望对大家有所帮助。北京木奇移动技术有限公司&#…
Pandas十大练习题，掌握常用方法
文章目录 Pandas分析练习题1. 获取并了解数据2. 数据过滤与排序3. 数据分组4. Apply函数5. 合并数据6. 数据统计7. 数据可视化8. 创建数据框9. 时间序列10. 删除数据 代码均在Jupter Notebook上完成 Pandas分析练习题 数据集可从此获取： 链接: https://pan.baidu.co…
什么是数据可视化？数据可视化的流程与步骤
前言
数据可视化将大大小小的数据集转化为更容易被人脑理解和处理的视觉效果。可视化在我们的日常生活中非常普遍，但它们通常以众所周知的图表和图形的形式出现。正确的数据可视化以有意义和直观的方式为复杂的数据集提供关键的见解。
数据可视化定义
数据可视化…
SQL数据工程师面试题20231226
1、数据库知识: 表一:Stock(商品库存入库表) 商品编号 入库数量 描述 A 300 A B 400 B C 200 C
注: Stock 表的商品编号是唯一主键。
表二: OutStock(商品库存出库表)
商品编号 出库数量 描述 A 100 A B 40 B B 50 B
注: outStock 表同一个商品存在多次出库。 – 创建 Stoc…
Linux awk命令教程：如何有效处理文本和数据分析（附案例详解和注意事项）
Linux awk命令介绍
awk是一个强大的文本分析工具，其本质上是一个数据驱动式的脚本语言，用于处理文本，并对文本进行诸如生成报告等各种操作。这是一个强大的Linux命令行程序，用于处理和分析文本文件，特别是那些对文本格…
单挑力扣（LeetCode）SQL题：534. 游戏玩法分析 III（难度：中等）
题目：534. 游戏玩法分析 III
（通过次数23,825 | 提交次数34,947，通过率68.17%）
Table:Activity-----------------------
| Column Name | Type |
-----------------------
| player_id | int |
| device_id | int…
传统零售的巨变：新零售时代催生全新商业形态和供应链关系-亿发
智慧零售解决方案涵盖了新零售的各个方面。对于传统零售业而言，对新零售的接受是一个理解和感知的过程，而并非仅仅是技术的简单叠加。新零售的发展并非仅仅是传统零售业加入互联网或跨界混搭的模式，而是一个根本性的变革过程。
在实际发展中…
数据分析师面试必备，数据分析面试题集锦(七)
在数据分析师面试中，掌握必备的知识和技能是至关重要的，例如，统计学基础知识、常用的数据分析工具、数据分析思维等，为了帮助你更好地准备面试，本文将为你带来一份数据分析面试题集锦，涵盖了数据分析师必备…
隆道吴树贵：生成式人工智能在招标采购中的应用
12月22日，由中国招标投标协会主办的招标采购数字发展大会在北京召开，北京隆道网络科技有限公司总裁吴树贵受邀出席大会，并在“招标采购数字化交易创新成果”专题会议上发言，探讨生成式人工智能如何在招标采购业务中落地应用。 本次…
仪表盘、数据分析新增分享功能及应用服务下新增服务实例菜单
近期，博睿数据根据一体化智能可观测平台 Bonree ONE 产品本身，以及用户反馈进行持续的更新和优化。以下为 Bonree ONE 产品功能更新报告第03期内容，更多探索，未完待续。 本次迭代的更新集中在平台的仪表盘、数据分析新增分享功能&…
拓展视野：数据可视化如何助力企业实现更广阔的业务可能性
在信息时代的浪潮中，企业面临着前所未有的数据量和挑战。而在这个数据的海洋中，数据可视化如一支神奇的魔杖，为企业发展带来更多无限可能性。下面我就以可视化从业者的角度，简单聊聊数据可视化是如何为企业发展带来更多可能性的。…
数字大师：数据可视化助力企业智慧成本管理
在当今竞争激烈的商业环境中，企业要想取得成功，不仅需要不断创新，还需要高效管理资源，降低成本。数据可视化作为一项强大的工具，为企业提供了更清晰、更直观的经营洞察，从而帮助企业实现成本的有效控制和节…
探秘2D地图与数据可视化融合的创新力
在信息时代，数据可视化与2D地图的结合为我们的生活和工作带来了深刻的变革。这一强大的组合不仅为我们提供了全新的视角，更为各行各业的发展和决策提供了更为精准的指导。下面我就以可视化从业者的视角，来简单聊聊数据可视化和2D地图的结合。…
CDSP考取的价值：成为数据安全认证专家的好处
哈喽IT的朋友们👋，今天想和大家聊聊一个超级有用的专业认证：CDSP，也就是数据安全认证专家。如果你在数据安全领域或者对这方面感兴趣，这个认证绝对值得你去考取哦！ 1.🎓提升专业性：获…
Livox-Mid-360 固态激光雷达ROS格式数据分析
前言：
Livox-Mid-360 官方采用livox_ros_driver2ROS功能包发布ROS格式的数据，livox_ros_driver2可以把Livox原始雷达数据转化成ROS格式并以话题的形式发布出去。
下面列举一些雷达的基本概念：
点云帧：雷达驱动每次向外发送的一…
数据之光：乡镇企业的发展利器——数据可视化
数据可视化是一项强大的工具，它不仅在大型企业中发挥关键作用，而且在乡镇企业中也能作出显著贡献。那么，数据可视化究竟能为乡镇企业做出什么样的贡献呢？ 首先，数据可视化为乡镇企业提供了更清晰的业务洞察。通过将庞大…
数据分析-Pandas如何整合多张数据表
数据分析-Pandas如何整合多张数据表
数据表，时间序列数据在数据分析建模中很常见，例如天气预报，空气状态监测，股票交易等金融场景。数据分析过程中重新调整，重塑数据表是很重要的技巧，此处选择Titanic数据…
自然语言处理2——轻松入门情感分析 - Python实战指南
目录 写在开头1.了解情感分析的概念及其在实际应用中的重要性1.1 情感分析的核心概念1.1.1 情感极性1.1.2 词汇和上下文1.1.3 情感强度1.2 实际应用中的重要性 2. 使用情感分析库进行简单的情感分析2.1 TextBlob库的基本使用和优势2.1.1 安装TextBlob库2.1.2 文本情感分析示例2…
产品经理学习-策略产品指标
目录：
数据指标概述
通用指标介绍
Web端常用指标
移动端常用指标
如何选择一个合适的数据指标 数据指标概述
指标是衡量目标的一个参数，指一项活动中预期达到的指标、目标等，一般用数据表示，因此又称为数据指标；…
从模拟到呈现：数字孪生与数据可视化的不同侧重
在当今的数字化时代，数字孪生和数据可视化都是热门的技术话题。然而，它们各自的角色和区别常常引起混淆。作为山海鲸可视化软件的开发者，我们对这两者有着深入的理解，在此详细探讨它们的区别。
首先，数字孪生…
Python 彩虹色映射【cm.rainbow()方法】（Matplotlib篇-10）
Python 彩虹色映射【cm.rainbow()方法】（Matplotlib篇-10） 🍹博主 侯小啾 感谢您的支持与信赖。☀️ 🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ…
一文讲透SPSS判断两组数据是否有显著性差异？
可使用SPSS中的独立样本T检验，独立样本T检验用于比较两组独立样本中某一变量的均值是否显著相同。该检验方法输出的结果是每组样本的描述统计量和莱文方差相等性检验，以及按相等方差和不等方差分组列示的T值、均值差分的95%置信区间。
打开数据8.3&…
京东商品详情API：数据分析和挖掘以优化销售策略
京东商品详情API提供的数据分析和挖掘功能可以帮助商家优化销售策略，提高销售额和用户转化率。以下是一些可能的应用场景： 商品关联分析：通过分析商品之间的关联规则，商家可以发现哪些商品经常一起被购买，从而制定捆绑…
单挑力扣（LeetCode）SQL题：1949. 坚定的友谊（难度：中等）
题目：1949. 坚定的友谊
（通过次数2,221 | 提交次数4,140，通过率53.65%） 表名: Friendship
-------------------
| 列名 | 类型 |
-------------------
| user1_id | int |
| user2_id | int |
-----------------…
虾皮马来站点选品:在虾皮（Shopee）5个热门品类和市场特点
在虾皮（Shopee）马来西亚站点选择商品时，卖家应该考虑一些热门品类和市场特点，以确保他们的产品能够满足当地消费者的需求并取得良好的销售业绩。以下是在虾皮（Shopee）马来西亚站点销售商品时需要考虑的五个…
数据分析基础之《numpy（6）—IO操作与数据处理》
了解即可，用panads
一、numpy读取
1、问题 大多数数据并不是我们自己构造的，而是存在文件当中，需要我们用工具获取 但是numpy其实并不适合用来读取和处理数据，因此我们这里了解相关API，以及numpy不方便的地方即可
2…
CRM市场营销管理功能，如何进行客户细分和数据分析？
CRM管理系统中的营销管理模块，它的锋芒常被销售管理所掩盖，但对于企业的业务来说同样重要。营销部门虽然不像销售人员一样直接面对客户，却是挖掘线索、商机的重要角色。CRM在市场营销领域的关键功能包括：营销漏斗、客户细分、营销…
地理空间分析2——优化地理空间分析的关键一步：深入探讨数据清洗和预处理
写在开头
在进行地理空间分析时，数据质量是确保准确性和可靠性的关键因素。数据清洗和预处理是确保地理空间数据集合适用于分析的基本步骤。本文将深入研究数据清洗在地理空间分析中的重要性，并介绍在Python中执行数据清洗的基本流程。
1.数据清洗在地理空间分析中的重要性…
数据分析-Pandas如何用图把数据展示出来
数据分析-Pandas如何用图把数据展示出来
俗话说，一图胜千语，对人类而言一串数据很难立即洞察出什么，但如果展示图就能一眼看出来门道。数据整理后，如何画图，画出好的图在数据分析中成为关键的一环。
数据表ÿ…
如潮好评！优秀选手视角下的第二届粤港澳大湾区（黄埔）国际算法算例大赛
为发挥国家实验室作用、推动地区大数据与人工智能算法的生态体系建设，琶洲实验室（黄埔）受广州市黄埔区政府委托，于 2022 年创办粤港澳大湾区（黄埔）国际算法算例大赛，推动原始创新、赋能社会经济…
银行数据分析进阶篇：银行业零售贷款营销与风控平衡分析
上周和大家分享了银行外呼数据分析与客户精准营销的案例，得到很多朋友正向的反馈，今天再次给大家带来银行业零售贷款营销与风控平衡分析的案例，结构清晰，可直接复制套用，特地分析给大家！ 本文主要分享作者分…
JVS规则引擎和智能BI（自助式数据分析）1.3新增功能说明
规则引擎更新功能
新增:
1、数据源新增Excel数据源；
Excel数据源功能允许用户将Excel文件作为数据源导入，并进行数据清洗、转换和处理，以实现数据的集成、可视化和深度分析，为决策提供强大支持，同时保持良好的交互性…
【Python案例实战】水质安全分析及建模预测
一、引言
1.水资源的重要性
水是生命之源，是人类生存和发展的基础。它是生态系统中不可或缺的组成部分，对于维系地球上的生命、农业、工业、城市发展等方面都具有至关重要的作用。
2.水质安全与人类健康的关系
水质安全直接关系到人类的健康和生存。水中的污染物和有害物…
Python数据实战项目
本文将从多个方面详细阐述Python数据实战项目，包括数据处理、数据分析和数据可视化等方面。
一、数据处理
1、数据清洗
数据清洗是数据处理的首要步骤，它包括去除无效数据、填充缺失值和处理异常值等。以下是一个示例代码：
import pandas…
一文讲透Python数据分析可视化之直方图（柱状图）
直方图（Histogram）又称柱状图，是一种统计报告图，由一系列高度不等的纵向条纹或线段表示数据分布的情况。一般用横轴表示数据类型，纵轴表示分布情况。通过绘制直方图可以较为直观地传递有关数据的变化信息，使…
四个模型建模及数据分析整理（基于Titanic数据集）
目录
介绍： 二、数据
2.1引用数据
2.2检查缺失数据
2.2.1手动检查缺失数据
2.2.2查看某一个特征值为空数据
2.3补充缺失数据 2.3.1盒图 2.3.2手动用均值填补缺失数据
2.3.3手动用类别填补缺失数据
三、数据分析
3.1男女生存比例
3.2男女生存数
3.3船舱级…
地理空间分析1——入门Python地理空间分析
写在开头
地理空间分析是一门涉及地球表面数据处理和解释的科学，通过对地理现象的研究，我们可以更深入地了解地球各个角落的关系。Python作为一种功能强大的编程语言，在地理空间分析领域展现了强大的潜力。本文将带您深入了解入门级别的Pyth…
传感数据分析——小波滤波
传感数据分析——小波滤波 文章目录 传感数据分析——小波滤波前言一、运行环境二、Python实现总结 前言
小波滤波算法是一种基于小波变换的滤波方法，其核心思想是将信号分解成不同的频率成分，然后对每个频率成分进行独立的处理。小波滤波器的设计和应用…
数据分析基础之《pandas（1）—pandas介绍》
一、pandas介绍
1、2008年Wes McKinney（韦斯麦金尼）开发出的库
2、专门用于数据分析的开源python库
3、以numpy为基础，借力numpy模块在计算方面性能高的优势
4、基于matplotlib能够简便的画图
5、独特的数据结构
6、也是三个单词组合而…
数据分析求职-面试技巧
之前咱们已经分享了岗位介绍、求职准备思路、简历如何准备，今天咱俩聊一聊面试的技巧~
1. 面试流程
咱们先聊聊面试的基本流程：简历/笔试筛选->技术初面->技术二面->技术三面->技术交叉面->HR面。
这个过程中有几个点值得重点说说&…
《PySpark大数据分析实战》-26.数据可视化图表Seaborn介绍
📋 博主简介 💖 作者简介：大家好，我是wux_labs。😜 热衷于各种主流技术，热爱数据科学、机器学习、云计算、人工智能。 通过了TiDB数据库专员（PCTA）、TiDB数据库专家（PCTP…
机器学习：数据处理与特征工程
机器学习中的数据处理和特征工程是非常关键的步骤，它们直接影响模型的性能和泛化能力。以下是一些常见的数据处理和特征工程技术：
数据处理： 缺失值处理： 处理数据中的缺失值，可以选择删除缺失值、填充均值/中位数/众…
numpy100练习题，包含相应使用函数解释
取自github开源项目：numpy100题 文章目录 1. 导入numpy库并简写为 np (★☆☆)2. 打印numpy的版本和配置说明 (★☆☆)3. 创建一个长度为10的空向量 (★☆☆)4. 如何找到任何一个数组的内存大小？ (★☆☆)5. 如何从命令行得到numpy中add函数的说明文档?…
传感数据分析——傅里叶滤波：理论与公式
传感数据分析——傅里叶滤波：理论与公式
引言
在传感数据分析领域，傅里叶滤波是一种重要的信号处理技术，被广泛应用于各种领域，如通信、图像处理、音频处理以及生物医学等。本文将简单探讨傅里叶滤波的理论基础和相关公式&#…
用matlab解决简单的数学问题
1 微分和积分 微分和积分是数学计算中常用的手段。微积分最重要的思想就是”微元“与”逐次逼近“，一个整体的事物往往不好研究，但是通过微元分割成一下块一小块的，当做常量处理，最终加起来就能实现运行效果。在matlab中实现函数微…
基于ChatGPT4+Python近红外光谱数据分析及机器学习与深度学习建模
022年11月30日，可能将成为一个改变人类历史的日子——美国人工智能开发机构OpenAI推出了聊天机器人ChatGPT3.5，将人工智能的发展推向了一个新的高度。2023年4月，更强版本的ChatGPT4.0上线，文本、语音、图像等多模态交互方式使其在…
2013年全国矿产地分布数据，Shp、csv数据，2013年
数据名称: 全国矿产地分布数据
数据格式: Shp、csv
数据时间: 2013年
数据几何类型: 点
数据坐标系: WGS84坐标系
数据来源：网络公开数据
数据字段：
序号字段名称字段说明1mc矿产地名称2kz矿种3dz矿产地位置4kccylx矿床成因类型5gsk共生矿6b…
Python数据分析案例31——中国A股的月份效应研究(方差分析，虚拟变量回归)
案例背景
本次案例是博主本科在行为金融学课程上做的一个小项目，最近看很多经管类的学生作业都很需要，我就用python来重新做了一遍。不弄那些复杂的机器学习模型了，经管类同学就用简单的统计学方法来做模型就好。 研究目的
有效市场假说是现…
数据分析求职-知识脑图
今天和大家聊聊数据分析求职常见面试题，这是这个系列的第一篇文章，但是我不想开始就直接罗列题目，因为这样的文章实在太多了，同学们的兴趣程度肯定一般。所以，我想先和大家聊聊在准备面试题时候通常遇到的困扰…
世界人口数据分析与探索
文章目录 世界人口数据集介绍数据集 1：世界国家统计数据：数据集 2：世界人口详细信息（2023 年）：数据集 3：按年份划分的世界人口（1950-2023）： 数据分析导入必要…
遥感影像-语义分割数据集：Landsat8云数据集详细介绍及训练样本处理流程
原始数据集详情
简介：该云数据集包括RGB三通道的高分辨率图像，在全球不同区域的分辨率15米。这些图像采集自Lansat8的五种主要土地覆盖类型，即水、植被、湿地、城市、冰雪和贫瘠土地。
KeyValue卫星类型landsat8覆盖区域未知场景水、植被、…
《Pandas 简易速速上手小册》第8章：Pandas 高级数据分析技巧（2024 最新版）
文章目录 8.1 使用 apply 和 map 函数8.1.1 基础知识8.1.2 重点案例：客户数据清洗和转换8.1.3 拓展案例一：产品评分调整8.1.4 拓展案例二：地址格式化 8.2 性能优化技巧8.2.1 基础知识8.2.2 重点案例：大型销售数据分析8.2.3 拓展案…
数据分析概述2（详细介绍机器学习
目录 1.名词解释：1.1算法和模型1.2参数和超参数 2.基础算法：3.高级算法：4.数据准备5.常用python包小结： 1.名词解释：
1.1算法和模型
算法：用于训练模型的方法，分为有监督学习、无监督学习、半…
数字智慧驱动：数据可视化如何助力大企业效率飙升？
在当今信息大爆炸的时代，大型企业面临着前所未有的数据挑战。数据量庞大、多样化的信息汇聚，无疑成为企业高效运营的挑战之一。幸运的是，数据可视化作为一种强大的工具，正成为大型企业提高效率、优化决策的得力助手。 数据可视化首…
关联规则分析（Apriori算法2
目录 1.核心术语：2.强关联规则：小结： 1.核心术语：
支持度（Support）：指项集出现的频繁程度（相当于项集出现的概率） 最小支持度有绝对值和占比两种表示方式 置信度&#…
ChatGPT4+Python近红外光谱数据分析及机器学习与深度学习建模进阶应用
2022年11月30日，可能将成为一个改变人类历史的日子——美国人工智能开发机构OpenAI推出了聊天机器人ChatGPT3.5，将人工智能的发展推向了一个新的高度。2023年4月，更强版本的ChatGPT4.0上线，文本、语音、图像等多模态交互方式使其在…
【Databend】分组集：教你如何快速分组汇总
文章目录 分组集定义和数据准备group by grouping setsgroup by rollupgroup by cube总结 分组集定义和数据准备
分组集是多个分组的并集，用于在一个查询中，按照不同的分组列对集合进行聚合运算，等价于对单个分组使用"union all"&…
【Python数据分析系列】实现txt文件与列表（list）相互读写转换（源码+案例）
这是Python数据分析系列原创文章，我的第199篇原创文章。
一、问题 平时在做数据分析或者程序开发的时候，需要将中间的一些结果或最后的处理结果保存下来，比如保存为txt格式的文本文件，这就涉及列表与txt之间的一种读取和写入操作…
数据分析综合案例讲解，一文搞懂Numpy，pandas，matplotlib，seaborn技巧方法
文章目录 NBA综合案例1 基本数据介绍2.数据相关性3.球员数据分析（1）基本分析（2）薪资最高的10名运动员（3）效率值最高的10名运动员（4）出场时间最高的10名运动员 4.Seaborn常用的三个数…
用Python做数据分析之数据表清洗
对数据表中的问题进行清洗。主要内容包括对空值，大小写问题，数据格式和重复值的处理。这里不包含对数据间的逻辑验证。
处理空值(删除或填充)
我们在创建数据表的时候在 price 字段中故意设置了几个 NA 值。对于空值的处理方式有很多种，可以…
引领未来：话务数据展示大屏助力企业决策
在当今信息爆炸的时代，企业需要一个直观、高效的数据展示平台来帮助他们快速获取、分析和决策。山海鲸可视化话务数据展示大屏，就是这样一款引领企业迈向高效决策新纪元的产品。 一、什么是山海鲸可视化话务数据展示大屏？ 山海鲸可视化是一款…
各省快递量数据， shp+excel，2001-2021年，已实现数据可视化
基本信息.
数据名称: 各省快递量数据
数据格式: shpexcel
数据时间：2001-2021年
数据几何类型: 面
数据坐标系: WGS84
数据来源：网络公开数据
数据字段：
序号字段名称字段说明1a_2001快递量/万件_2001年2a_2002快递量/万件_2002年3…
《Python数据分析技术栈》第01章 02 Jupyter入门（Getting started with Jupyter notebooks）
02 Jupyter入门（Getting started with Jupyter notebooks）
《Python数据分析技术栈》第01章 02 Jupyter入门（Getting started with Jupyter notebooks）
Before we discuss the essentials of Jupyter notebooks, let us discuss…
【python数据分析基础】—dataframe中index的相关操作（添加、修改index的列名、修改index索引值等）
文章目录 前言一、添加、修改index的列名二、修改index索引值 前言
本文主要讲dataframe结构中index的相关操作，index相当于是数据表的行。 一、添加、修改index的列名
新建一个dataframe表，我们可以自定义index的值，如下：
imp…
（3）【Python数据分析进阶】Machine-Learning模型与算法应用-线性回归与逻辑回归
目录
一、Linear Regression线性回归应用
应用案例（一）——自定义数据（Custom data）
1、下载安装sklearn库
2、导入库函数
3、加载数据集
4、创建线性回归对象
5、模型训练
6、预测结果
7、绘制模型图像
8、应用模型进行…
一文梳理金融风控建模全流程(Python)
▍目录
一、简介 风控信用评分卡简介 Scorecardpy库简介
二、目标定义与数据准备 目标定义 数据准备
三、安装scorecardpy包
四、数据检查
五、数据筛选
六、数据划分
七、变量分箱 卡方分箱 手动调整分箱
八、建立模型 相关性分析 多重共线性检验VIF KS和AUC …
看书标记【R语言数据分析项目精解：理论、方法、实战 9】
看书标记——R语言 Chapter 9 文本挖掘——点评数据展示策略9.1项目背景、目标和方案9.1.1项目背景9.1.2项目目标9.1.3项目方案1.建立评论文本质量量化指标2.建立用户相似度模型3.对用户评论进行情感性分析 9.2项目技术理论简介9.2.1评论文本质量量化指标模型1.主题覆盖量2.评论…
《Python数据分析技术栈》第03章 03 可视化各级数据（Visualizing various levels of data）
03 可视化各级数据（Visualizing various levels of data）
《Python数据分析技术栈》第03章 03 可视化各级数据（Visualizing various levels of data）
Whenever you need to analyze data, first understand if the data is stru…
71_Pandas.DataFrame排名
71_Pandas.DataFrame排名
使用rank()方法对pandas.DataFrame和pandas.Series的行/列进行排名。
sort_values() 是一种按升序或降序对 pandas.DataFrame 列和 pandas.Series 进行排序的方法，但rank() 返回每个元素的排名而不对数据进行排序。
请参阅下面的文章了解…
python爬虫代码示例:爬取京东详情页图片
python爬虫代码示例:爬取京东详情页图片 一、Requests安装及示例
爬虫爬取网页内容首先要获取网页的内容，通过requests库进行获取。 GitHub: https://github.com/requests/requests PyPl: https://pypi.python.org/pypi/requests 官方文档:http://wwwpython-requ…
第二章第14节：EXCEL ：计算Excel求平均函数函数AVERAGE 、AVERAGEIF、AVERAGEIFS函数
01，计算Excel求平均函数函数AVERAGE 、AVERAGEIF、AVERAGEIFS函数
它们分别是AVERAGE 、AVERAGEIF、AVERAGEIFS函数， 它们的区别是：AVERAGE是直接求平均值； AVERAGEIF单条件求平均值； AVERAGEIFS多个条件求平均值。
…
【数据分析】matplotlib、numpy、pandas速通
教程链接：【python教程】数据分析——numpy、pandas、matplotlib 资料：https://github.com/TheisTrue/DataAnalysis
1 matplotlib
官网链接：可查询各种图的使用及代码
对比常用统计图
1.1 折线图
（1）引入
from …
第二章第12节：EXCEL ：计算统计类函数 Count/Countif/Countifs
Count/Countif/Countifs
01 Count/Countif/Countifs 解释
COUNT函数：count（计算单元格的区域），计算区域中包含数字的单元格的个数，COUNT只统计包含数字单元格的个数
COUNTIF函数：countif（计算…
独立站的客户支持体系：提高客户满意度的秘密武器
独立站的客户支持体系是提高客户满意度的重要手段，以下是构建客户支持体系的关键要素：
快速响应：客户支持团队需要快速回复客户的问题，减少客户等待时间。可以通过设置多个客服岗位，提供在线客服、电话客服等多种渠道…
网页爬虫在数据分析中的作用，代理IP知识科普
在当今信息爆炸的时代，数据分析成为洞察信息和制定决策的不可或缺的工具。而网页爬虫，作为数据收集的得力助手，在数据分析中扮演着举足轻重的角色。今天，我们将一同探讨网页爬虫在数据分析中的作用。 1. 数据收集的先锋
网页爬虫…
【python爬虫开发实战 情感分析】利用爬虫爬取城市评论并对其进行情感分析
🚀个人主页：为梦而生~ 关注我一起学习吧！ 💡专栏： python网络爬虫从基础到实战 带你学习爬虫从基础到实战 深度学习带你感受AI的魅力 💡往期推荐： ⭐️前面比较重要的基础内容： 【Py…
【数据分析】Excel中使用VBA进行宏编程
目录 0 准备工作1 VBA简介1.1 Excel VBA应用程序的构成1.2 事件驱动1.3 宏1.3.1 创建宏1.3.2 宏安全 2 VBA基础2.1 注释2.2 数据类型2.2.1 基本数据类型2.2.2 枚举类型2.2.3 用户自定义数据类型 2.2 变量2.3 常量2.4 运算符2.5 程序结构2.6 过程2.7 函数 3 Excel应用程序开发流…
【数据分析】numpy基础第二天
文章目录 前言数组的形状变换reshape的基本介绍使用reshapereshape([10, 1])运行结果reshape自动判断形状reshape([-1, 1])运行结果 合并数组使用vstack和hstackvstack和hstack的运行结果使用concatenateconcatenate运行结果 分割数组array_split运行结果 数组的条件筛选条件筛…
【数据分析】numpy基础第五天
文章目录 前言Z-Score标准化Z-Score应用示例 Min-Max归一化Min-Max应用示例 总结 前言
第五天是我们的numpy学习计划中的最后一天。
在数据处理和数据分析中，数据预处理是非常重要的一步。我们不可能完全靠肉眼来分析数据，总会有用到各种算法模型的时候…
一文掌握0基础如何体系化学习数仓
1 语数精选简介
语数精选来源于语数社区星球球友提问，主要沉淀一些大家工作和学习过程中存在的一些共性问题，希望能够更好的帮助到球友和粉丝。 欢迎关注公众号：语数 2 本期精选问题
如何校验开发好的数仓指标？如果你是公司的分…
Python综合数据分析_根据订单求RFM值
文章目录 0.导入数据1.数据可视化2.数据清洗3.特征工程4.构建User用户表5.求R值6.求F值7.求M值 0.导入数据
import pandas as pd #导入Pandas
df_sales pd.read_csv(订单.csv) #载入数据
df_sales.head() #显示头几行数据 1.数据可视化
import matplotlib.pyplot as plt #导…
Python机器学习入门必学必会：机器学习与Python基础
1.机器学习常见的基础概念
根据输入数据是否具有“响应变量”信息，机器学习被分为“监督式学习”和“非监督式学习”。“监督式学习”即输入数据中即有X变量，也有y变量，特色在于使用“特征（X变量）”来预测“响应变量&…
pythonPandas五：数据分析与统计
，Pandas提供了丰富的数据分析和统计功能，使得对数据进行摘要、统计和可视化变得更加容易。以下是一些示例说明： 数据统计和摘要： import pandas as pd# 创建一个示例DataFrame
data {Name: [Alice, Bob, Charlie],Age: [25, 30, …
第三章第10节：EXCE利用柱状图和条形图去直观数据分析 (一)
柱状图和条形图-图形简介
01,柱状图
柱状图是使用垂直的柱子显示类别之间的数值比较，其中一个轴(横轴)表示需要对比的分类维度，另一个轴(纵轴)表示相应维度下的数值。
02,条形图
条形图是柱状图的转置，工作中柱状图应用居多。
03,柱状图…
帆软MVP专访 | BI佐罗：用数据分析不断拆开商业运作的“黑盒”
大数据产业创新服务媒体 ——聚焦数据 改变商业 近日，2023帆软MVP（Fanruan Most Valuable Professional）获奖名单公布，全球知名零售集团数据分析师、自媒体大咖BI佐罗获此殊荣。 帆软最具价值专家，简称帆软MVP&#x…
银行数据仓库体系实践（14）--数据应用之内部报表及数据分析
在银行日常经营中，每个部门、分支行随时随地都需要进行数据统计和分析，才能对银行当前业务状况及时了解，以进行后续经营策略、营销活动、风险策略的调整和决策。那在平时进行数据分析时除了各数据应用系统（如各类监管报表系统、财…
大数据之水平切分用途原理
数据库的水平切分方案是一种将数据分散到多个数据库或表中的策略，以提高系统的可扩展性和性能。以下是关于水平切分方案的详细介绍： 基本原理：水平切分方案基于将数据按照一定的规则分散到多个物理独立的数据库或表中，每个数据库或…
数据分析数据 -（用数据讲故事）
书中有一句话我很喜欢- 献给大家
一个完美的设计，不是因为它没有多余的东西可以添加，而是它没有多余的部分可以删减 首先看几个对比的图形分析
处理工单和新增工单的随月份的变化趋势
这个图形的缺点就是 1: 月份对齐的情况 2：使用条形图需…
中国历年大学招生人数【1949年-2021年】-探数API数据分享
中国每年大约有多少学生被我国的高等教育机构录取呢？
在2021年，在我国普通高校被录取的学生数量达到了近1119万人，这个数字比上一年增长了40.9万人。其中，研究生的招生人数为117.65万人，普通本科（包括专科…
空间站管理的未来：可视化技术的革命性变革
随着科技的飞速发展，人类在太空探索的道路上越走越远。空间站作为人类在太空中的“家”，其管理变得尤为重要。可视化技术作为现代科技的代表，正在为空间站管理带来革命性的变革。 如图是山海鲸可视化搭建的空间站管理可视化大屏↓↓↓ 一、可…
Linux部署DataEase数据分析工具并结合内网穿透实现任意设备远程查看数据
文章目录 前言1. 安装DataEase2. 本地访问测试3. 安装 cpolar内网穿透软件4. 配置DataEase公网访问地址5. 公网远程访问Data Ease6. 固定Data Ease公网地址 前言
DataEase 是开源的数据可视化分析工具，帮助用户快速分析数据并洞察业务趋势，从而实现业务…
数字孪生产品评测：五款数字孪生产品的优劣对比
作为数据可视化领域的资深用户，我深知数字孪生产品在当今工业4.0时代的重要地位。本文将为大家介绍五款市面上的数字孪生产品，帮助大家了解各产品之间的优缺点，选择适合自己的产品。
一、山海鲸可视化
山海鲸可视化是一款强大而灵活的免费数…
机器学习 | 掌握逻辑回归在实践中的应用
目录
初识逻辑回归
逻辑回归实操
分类评估方法 初识逻辑回归
逻辑回归（LogisticRegression）是机器学习中的一种分类模型，逻辑回归是一种分类算法，虽然名字中带有回归，但是它与回归之间有一定的联系。由于算法的简单…
Python||五城P.M.2.5数据分析与可视化_使用华夫图分析各个城市的情况（上）
目录 五城P.M.2.5数据分析与可视化——北京市、上海市、广州市、沈阳市、成都市，使用华夫图分析各个城市的情况 1.北京市的空气质量 2.广州市的空气质量 【上海市和成都市空气质量情况详见下期】 五城P.M.2.5数据分析与可视化——北京市、上海市、广州市、沈阳市、成…
数据分析基础之《pandas（5）—文件读取与存储》
一、概述
1、我们的数据大部分存在于文件当中，所以pandas会支持复杂的IO操作，pandas的API支持众多文件格式，如CSV、SQL、XLS、JSON、HDF5
二、CSV
1、读取csv文件 read_csv(filepath_or_buffer, sep,, delimiterNone) 说明： fi…
2024甲级测绘名单之：百度地图的那些事儿
之前，我们分享过2023高精地图甲级测绘资质最新名单【高德地图】，没看过的小伙伴可以戳下面的链接：
2023高精地图甲级测绘资质最新名单【高德地图】-CSDN博客
今天继续介绍名单中的另外一个成员，也是地图导航业务的佼佼者&#x…
python绘图指南—Bokeh库从基础到高级打造交互式数据可视【第51篇—python：Bokeh库】
文章目录 Bokeh库深度解析：从基础到高级，打造交互式数据可视化安装Bokeh库Bokeh绘图基础基础图形绘制完善图形 实例演示案例：股票走势图 Bokeh库高级功能探索1. 工具栏和交互性2. 高级图形元素3. 数据链接和动态更新 Bokeh库与其他库的整合1.…
Python爬虫存储库安装
如果你还没有安装好MySQL、MongoDB、Redis 数据库，请参考这篇文章进行安装：
Windows、Linux、Mac数据库的安装（mysql、MongoDB、Redis）-CSDN博客
存储库的安装
上节中，我们介绍了几个数据库的安装方式，但…
零基础入门金融风控-贷款违约预测Task2 数据分析
Task2 数据分析
此部分为零基础入门金融风控的 Task2 数据分析部分，带你来了解数据，熟悉数据，为后续的特征工程做准备，欢迎大家后续多多交流。
赛题：零基础入门数据挖掘 - 零基础入门金融风控之贷款违约
目的&#…
Python 数据分析（PYDA）第三版（六）
原文：wesmckinney.com/book/ 译者：飞龙 协议：CC BY-NC-SA 4.0 十二、Python 建模库介绍 原文：wesmckinney.com/book/modeling 译者：飞龙 协议：CC BY-NC-SA 4.0 此开放访问网络版本的《Python 数据分析第三版…
CAN通信----(创芯科技)CAN分析仪----转CANTest使用
点击进入官方链接进行下载创芯科技 CAN分析仪资料包： 创芯科技的官网：https://m.zhcxgd.com/ 我使用的是至尊版红色带OBD转接头的： 所有下图是我选择…
Dataframe型数据分析技巧汇总
Kaggle 如何针对少量数据集比赛的打法。 数据降维的几种方法 HF.075 | 时间序列趋势性分析方法汇总 机器学习必须了解的7种交叉验证方法（附代码） 这个图！Python也能一键绘制了，而且样式更多.. 散点图，把散点图画出花来…
《Python 网络爬虫简易速速上手小册》第1章：Python 网络爬虫基础（2024 最新版）
文章目录 1.1 网络爬虫简介1.1.1 重点基础知识讲解1.1.2 重点案例：社交媒体数据分析1.1.3 拓展案例1：电商网站价格监控1.1.4 拓展案例2：新闻聚合服务 1.2 网络爬虫的工作原理1.2.1 重点基础知识讲解1.2.2 重点案例：股票市场数据采…
【Java万花筒】Java安全卫士：从密码学到Web应用攻击
Java安全锦囊：从Web应用攻击到加密算法，助你建立强固的开发堡垒
前言
在当今数字化时代，安全性至关重要，特别是对于Java开发者而言。本文将深入探讨Java安全与加密领域的关键库和技术，包括Bouncy Castle、Jasypt、Ke…
Python 数据可视化：配色方案
1、引言
在这篇文章中，我们将研究Python的一些配色方案，主要是Seaborn库。这将采用 Python Notebook 格式，其中包括绘图的代码。 2、实验数据
首先导入必要的库：
import pandas as pd
import seaborn as sns
import matplotlib…
Spark大数据分析与实战笔记（第二章 Spark基础-06）
文章目录 每日一句正能量2.6 IDEA开发WordCount程序2.6.1 本地模式执行Spark程序2.6.2 集群模式执行Spark程序 每日一句正能量 我们全都要从前辈和同辈学习到一些东西。就连最大的天才，如果想单凭他所特有的内在自我去对付一切，他也决不会有多大成就。 2…
《Python 网络爬虫简易速速上手小册》第8章：分布式爬虫设计（2024 最新版）
文章目录 8.1 分布式爬虫的架构8.1.1 重点基础知识讲解8.1.2 重点案例：使用 Scrapy 和 Scrapy-Redis 构建分布式爬虫8.1.3 拓展案例 1：使用 Kafka 作为消息队列8.1.4 拓展案例 2：利用 Docker 容器化工作节点 8.2 分布式任务管理8.2.1 重点基础…
Python初学者学习记录——python基础综合案例：数据可视化——动态柱状图
一、案例效果 通过pyecharts可以实现数据的动态显示，直观的感受1960~2019年世界各国GDP的变化趋势 二、通过Bar构建基础柱状图 反转x轴和y轴 标签数值在右侧 from pyecharts.charts import Bar
from pyecharts.options import LabelOpts# 构建柱状图对象
bar Bar()…
年货大数据（年货节数据/电商行业数据）：龙年再添两个黑马食品饮料品类，增长11倍！
年货零食三大件：牛奶、糖果和炒货。今年再多两大件，礼品卡券和腊味。
根据鲸参谋数据显示，今年坚果炒货、糖果、牛奶乳品、饮料等品类依然是长期的年货热门品类。1月前三周，牛奶乳品销量环比增长68%，销售额环比增长55…
龙年春节福利来了！海量数据分析视频课畅学14天
2024年龙年春节假期将至
是时候给自己充电了！
经过一年的辛勤工作 是不是觉得应该好好利用这个假期
为新的一年充电？
还在纠结假期怎么过吗？
与其宅在家里刷剧打游戏
不如安排学习数据分析技能 让假期过得更有意义。
你是否对如何快…
每天一个数据分析题（一百五十五）
关于高维数据在模型建立中的处理，以下描述正确的是：
A. 在分类模型中通常不需要进行变量选择和降维，因为算法可以处理成千上万个变量。
B. 聚类模型中剔除不相关变量主要依赖于算法而不是分析师的经验和维度分析。
C. 特征选择指的是从相关…
《Python 网络爬虫简易速速上手小册》第6章：Python 爬虫的优化策略（2024 最新版）
文章目录 6.1 提高爬虫的效率6.1.1 重点基础知识讲解6.1.2 重点案例：使用 asyncio 和 aiohttp 实现异步爬虫6.1.3 拓展案例 1：利用 Scrapy 的并发特性6.1.4 拓展案例 2：使用缓存来避免重复请求 6.2 处理大规模数据爬取6.2.1 重点基础知识讲解…
天猫平台数据查询（天猫数据分析）：床上用品市场规模达335亿，床品消费呈现功能化趋势
作为人们的生活必需品之一，床上用品的市场规模庞大。近年来，越来越多消费者购物习惯发生转变，线上客流大幅提升，面对这一变化，许多家纺企业开始借助线上平台开展销售，不断创新营销模式，通过短视…
《CSS 简易速速上手小册》第2章：CSS 布局与定位（2024 最新版）
文章目录 2.1 Flexbox：灵活的布局解决方案2.1.1 基础知识2.1.2 重点案例：创建一个响应式导航菜单2.1.3 拓展案例 1：卡片布局2.1.4 拓展案例 2：中心对齐的登录表单 2.2 Grid 布局：网格系统的魔力2.2.1 基础知识2.2.2 重…
Python爬虫之关系型数据库存储#5
关系型数据库是基于关系模型的数据库，而关系模型是通过二维表来保存的，所以它的存储方式就是行列组成的表，每一列是一个字段，每一行是一条记录。表可以看作某个实体的集合，而实体之间存在联系，这就需要表与…
信息安全认证首选CISP-PTE
🔥在信息安全领域，CISP-PTE认证正逐渐成为行业的新星。作为中国信息安全测评中心推出的专业认证，CISP-PTE为信息安全从业者提供了国内Z高标准的资质培训。 🎯为什么选择CISP-PTE？ 1️⃣业界认可：CISP-PTE是…
大数据数据流分析和处理的工具pig,从入门到精通！
介绍：Pig是一种数据流语言和运行环境，用于处理和分析大数据。 Pig由两个主要部分构成： Pig Latin语言：这是一种用于描述数据流的高级语言，它允许用户以较为简洁的方式编写数据处理和转换任务。 Pig执行环境：…
Hive实战 —— 电商数据分析(全流程详解 真实数据)
目录 前言需求概述数据清洗数据分析一、前期准备二、项目1. 数据准备和了解2.确定数据粒度和有效列3.HDFS创建用于上传数据的目录4.建库数仓分层 5.建表5.1近源层建表5.2. 明细层建表为什么要构建时间维度表？如何构建时间维度表？ 5.3 轻聚层建表6. 指标数…
2024年预制菜行业市场发展趋势分析（2021-2023年预制菜行业数据分析）
近期，老干妈被称为预制菜、预制菜国标报送稿出炉等事件再次引起大众对于预制菜市场的讨论。随着国家对预制菜审核标准的严格化，预制菜市场未来走向将会如何？鲸参谋带大家从数据角度来了解。
首先来看下预制菜市场的行业发展情况。
根据鲸参…
【MySQL】打开科技创新的第一生产力
🌈个人主页: Aileen_0v0 🔥热门专栏: 华为鸿蒙系统学习|计算机网络|数据结构与算法 💫个人格言:“没有罗马,那就自己创造罗马~” #mermaid-svg-EtRkflNU19AGWAkT {font-family:"trebuchet ms",verdana,arial,sans-serif;font-siz…
软件个性化选型：制造企业如何选择适合自身的工单管理系统-亿发
企业制造业是实体经济中非常重要和基础的组成部分，直接关系到国家经济的血脉。然而，传统制造业在生产与管理上所采用的老一套方法和经验已不再适应当下的发展需求。信息化、数字化和智能化被视为制造企业的必然趋势。要想在竞争激烈的市场中永立潮头&…
《PySpark大数据分析实战》-25.数据可视化图表Matplotlib介绍
📋 博主简介 💖 作者简介：大家好，我是wux_labs。😜 热衷于各种主流技术，热爱数据科学、机器学习、云计算、人工智能。 通过了TiDB数据库专员（PCTA）、TiDB数据库专家（PCTP…
ipyvizzu：一款可以绘制超级惊艳的可视化动图的 Python 工具包
今天我给大家介绍一款可视化模块，使用它可以绘制出十分惊艳的动图效果，那么当然第一步我们首先是要安装一下该模块，通过pip命令行来安装
pip install ipyvizzu牛刀小试
我们首先来简单地使用该模块来绘制一张动图，用Pandas导入数…
使用mysql查询当天、近一周、近一个月及近一年的数据以及各种报表查询sql
1.mysql查询当天的数据 1 select * from table where to_days(时间字段) to_days(now()); 2.mysql查询昨天的数据 1 select * from table where to_days(now( ) ) - to_days( 时间字段名) < 1 3.mysql查询近一个月的数据 1 SELECT * FROM table WHERE date(时间字段) …
数据分析---SQL(3)
目录 IF和CASE WHEN的区别IF函数示例CASE WHEN示例如何求字段整体的标准差和均值什么是笛卡尔积笛卡尔积通常的使用场景是什么rank、dense rank、row number的区别rank函数示例dense rank函数示例row number函数示例什么是窗口函数除了rank之外还有哪些窗口函数IF和CASE WHEN的…
探索Pyecharts：绘制多彩日历图的艺术与技巧
Pyecharts绘制多种炫酷日历图参数说明代码实战
导言
在数据可视化领域，日历图是一种直观展示时间和数据关系的方式。Pyecharts是一个基于Echarts的Python库，可以方便地绘制各种图表，包括炫酷的日历图。本篇博客将介绍Pyecharts中绘制多种炫…
如何用GPT进行AI绘图？
详情点击链接：如何用GPT进行AI绘图？
第一：2024年AI领域最新技术
1.OpenAI新模型-GPT-5
2.谷歌新模型-Gemini Ultra
3.Meta新模型-LLama3
4.科大讯飞-星火认知
5.百度-文心一言
6.MoonshotAI-Kimi
7.智谱AI-GLM-4
第二：Op…
数据分析之数据预处理、分析建模、可视化
数据分析的过程通常包括数据预处理、分析建模和可视化三个主要阶段。以下是每个阶段的简要说明：
数据预处理： 数据预处理是数据分析过程中的一个重要步骤，它涉及到对原始数据进行清洗、整理、转化等操作，以便更好地进行后续的分析…
从入门到精通UNet: 让你快速掌握图像分割算法
文章目录 一、UNet 算法简介1.1 什么是 UNet 算法1.2 UNet 的优缺点1.3 UNet 在图像分割领域的应用 二、准备工作2.1 Python 环境配置2.2 相关库的安装 三、数据处理3.1 数据的获取与预处理3.2 数据的可视化与分析 四、网络结构五、训练模型5.1 模型训练流程5.2 模型评估指标5.…
从零开始的 dbt 入门教程 （dbt-core 基础篇）
最近一直在处理数据分析和数据建模的事情，所以接触了 dbt 等数据分析的工具，国内目前对于 dbt 比较详细的资料不多，所以打算写四道五篇 dbt 相关的文章，本文属于 dbt 系列的第一篇，本篇主要阐述 dbt 一些基本概念&…
租房数据分析可视化大屏+58同城 Django框架 大数据毕业设计（附源码）✅
毕业设计：2023-2024年计算机专业毕业设计选题汇总（建议收藏）
毕业设计：2023-2024年最新最全计算机专业毕设选题推荐汇总
🍅感兴趣的可以先收藏起来，点赞、关注不迷路，大家在毕设选题ÿ…
数据分析 | Pandas 200道练习题，每日10道题，学完必成大神（1）
❤️ 作者简介：大家好我是小鱼干儿♛是一个热爱编程、热爱算法的大三学生，蓝桥杯国赛二等奖获得者🐟 个人主页 ：https://blog.csdn.net/qq_52007481⭐ 个人社区：【小鱼干爱编程】🔥 算法专栏：算…
如何运用R语言在生物群落生态学中的数据统计分析
R 语言作的开源、自由、免费等特点使其广泛应用于生物群落数据统计分析。生物群落数据多样而复杂，涉及众多统计分析方法。本次以生物群落数据分析中的最常用的统计方法回归和混合效应模型、多元统计分析技术及结构方程等数量分析方法为主线，通过多个来自…
30 个 Python 技巧，加速你的数据分析处理速度
又到了学习干货的季节~
今天我们就来学习一下python干货~ pandas的下载
使用命令下载：
pip install pandas 或者自行下载whl文件安装
https://www.lfd.uci.edu/~gohlke/pythonlibs/创建DataFrame数据
pd_data pd.DataFrame({"name":["小明&quo…
数据分析 | Pandas 200道练习题，每日10道题，学完必成大神（5）
文章目录前期准备1. 将create Time列设置为索引2. 生成一个和df长度相同的随机数DataFrame3. 将上一题生成的DataFrame与df合并4. 生成的新的一列new值为salary列减去之前生成的随机数列5. 检查数据中是否含有空值6. 将salary类型转换成浮点数7. 计算salary 大于10000的次数8. …
GEE——降水数据分析（半天）图表分析含（IANA（IANA Time Zone Database） 时区名称的定义）
简介
我们在进行某个时间的降水数据分析的时候，或者指定时间的数据分析，本文我们首先要明确一点就是我们可以设定时间，除了默认的时间外，我们可以选择归一化的时间，也可以选择全球任何一个时区的时间作为时间设定。
…
GPT用来润色论文\生成完整长篇论文\进行AI绘图，真的太香了！
详情点击公众号：技术科研吧 链接：GPT用来润色论文\生成完整长篇论文\进行AI绘图，真的太香了！
一：AI领域最新技术
1.OpenAI新模型-GPT-5
2.谷歌新模型-Gemini Ultra
3.Meta新模型-LLama3
4.科大讯飞-星火认知
5.百…
学会这 29 个 函数，你就是 Pandas 专家
Pandas 无疑是 Python 处理表格数据最好的库之一，但是很多新手无从下手，这里总结出最常用的 29 个函数，先点赞收藏，留下印象，后面使用的时候打开此文 CTRL F 搜索函数名称，检索其用法即可。 文章目录技术提…
数据分析：当当网书籍数据可视化分析
当当网书籍数据可视化分析 作者：i阿极 作者简介：Python领域新星作者、多项比赛获奖者：博主个人首页 😊😊😊如果觉得文章不错或能帮助到你学习，可以点赞👍收藏📁评论&…
基于五等均分法和Bob Stone法衡量RFM顾客价值
最近学习了衡量RFM模型的两种顾客价值的方法，即五等均分法和Bob Stone法。仅以此博客记录我的学习过程，后序学习到了其他方法再来补充。关于RFM实战案例可参考我的其他文章大数据分析案例-基于RFM模型对电商客户价值分析
大数据分析案例-用RFM模型对客户…
《Python 网络爬虫简易速速上手小册》第4章：Python 网络爬虫数据抓取技术（2024 最新版）
文章目录 4.1 解析 HTML 与 CSS4.1.1 重点基础知识讲解4.1.2 重点案例：使用 BeautifulSoup 解析博客文章4.1.3 拓展案例 1：使用 lxml 和 XPath 解析产品信息4.1.4 拓展案例 2：动态加载内容的抓取挑战 4.2 动态内容抓取技术4.2.1 重点基础知识…
Python~Pandas 小白避坑之常用笔记
Python~Pandas 小白避坑之常用笔记 提示：该文章仅适合小白同学，如有错误的地方欢迎大佬在评论处赐教 文章目录Python~Pandas 小白避坑之常用笔记前言一、pandas安装二、数据读取1.读取xlsx文件2.读取csv文件三、重复值、缺失值、异常值处理、按行、按列剔…
Python 数据分析（PYDA）第三版（三）
原文：wesmckinney.com/book/ 译者：飞龙 协议：CC BY-NC-SA 4.0 六、数据加载、存储和文件格式 原文：wesmckinney.com/book/accessing-data 译者：飞龙 协议：CC BY-NC-SA 4.0 此开放访问网络版本的《Python 数…
pandas reindex 方法
pandas.Series.reindex
reindex 方法会创建一个新对象，并根据给定的新 index 对原来 Series 的数据重新组织。如果新 index 中有原来 index 不存在的 label，那么这些 label 对应位置会被填充 NaN：
import pandas as pd
import numpy as nps…
pandas使用dropna函数删除dataframe数据中多个数据列的内容至少包含一个缺失值的数据行（使用subset参数指定多个数据列）
pandas使用dropna函数删除dataframe数据中多个数据列的内容至少包含一个缺失值的数据行（使用subset参数指定多个数据列） 目录
Python||五城P.M.2.5数据分析与可视化_使用复式柱状图分析各个城市的P.M.2.5月度差异情况（中）
目录 4.上海市空气质量月度差异 5.沈阳市空气质量月度差异 五城P.M.2.5数据分析与可视化_使用复式柱状图分析各个城市的P.M.2.5月度差异情况 4.上海市空气质量月度差异
import numpy as np
import pandas as pd
import matplotlib.pyplot as plt#读入文件
sh pd.read_csv(./S…
SQL在云计算中的新角色：重新定义数据分析
文章目录 1. 云计算与数据分析的融合2. SQL在云计算中的新角色3. 分布式SQL查询引擎4. SQL-on-Hadoop解决方案5. SQL与其他数据分析工具的集成6. 实时数据分析与SQL7. SQL在云数据仓库中的角色8. 安全性与隐私保护9. SQL的未来展望《SQL数据分析实战（第2版ÿ…
实战四十六：基于LightGBM的广告点击预测 代码+数据
配库：
1. 读取原始数据, 将时间信息分解为天和分钟
2. 特征工程
3. 五折交叉验证训练模型
4. 特征重要性
5. 做出最终预测
数据挖掘与数据分析的主要区别是什么
在当今数字化时代，数据已经成为了企业决策的重要依据，而数据挖掘与数据分析作为数据处理的重要工具，都在帮助企业从数据中发现价值，从而提升业务效益。然而，许多人对于数据挖掘与数据分析的区别并不清晰。数聚将从不同…
《MySQL 简易速速上手小册》第9章：高级 MySQL 特性和技巧（2024 最新版）
文章目录 9.1 使用存储过程和触发器9.1.1 基础知识9.1.2 重点案例：使用 Python 调用存储过程实现用户注册9.1.3 拓展案例 1：利用触发器自动记录数据更改历史9.1.4 拓展案例 2：使用 Python 和触发器实现数据完整性检查 9.2 管理和查询 JSON 数…
【数据分析实战】冰雪大世界携程景区评价信息情感分析采集词云
文章目录 引言数据采集数据集展示数据预处理 数据分析评价总体情况分析本人浅薄分析 各游客人群占比分析本人浅薄分析 各评分雷达图本人浅薄分析 差评词云-可视化本人浅薄分析 好评词云-可视化本人浅薄分析 综合分析写在最后 今年冬天，哈尔滨冰雪旅游"杀疯了&q…
Python综合数据分析_RFM用户分层模型
文章目录 1.数据加载2.查看数据情况3.数据合并及填充4.查看特征字段之间相关性5.聚合操作6.时间维度上看销售额7.计算用户RFM8.数据保存存储(1).to_csv(1).to_pickle 1.数据加载
import pandas as pd
dataset pd.read_csv(SupplyChain.csv, encodingunicode_escape)
dataset2…
PDF 文件操作指南
PDF 文件操作指南
PDF 文件介绍
PDF 是一种便携式文档格式（Portable Document Format）的缩写，是由 Adobe 公司创建的一种用于文档交换的文件格式。PDF 格式的文件可以跨平台、跨操作系统和跨设备进行共享和查看，其最大特点是在不…
深入解析HubSpot在线客户互动工具：提升客户体验的利器
在数字化时代，客户体验成为企业成功的关键因素之一。HubSpot作为一体化的市场营销、销售和服务平台，其在线客户互动工具扮演着提升客户体验的重要角色。本文将深入探讨HubSpot的在线客户互动工具，包括实时聊天、机器人和社交媒体监控…
数据之美：如何用数据可视化优化我们的日常生活？
在这个信息爆炸的时代，我们周围充斥着各种数据，而数据可视化正是一种强大的工具，帮助我们更好地理解和利用这些信息。那么，如何将数据可视化应用在我们的日常生活中呢？让我们一起探索这个引人入胜的话题。
数据可视化…
基于传统机器学习模型算法的项目开发详细过程
1 场景分析
1.1 项目背景
描述开发项目模型的一系列情境和因素，包括问题、需求、机会、市场环境、竞争情况等
1.2. 解决问题 传统机器学习在解决实际问题中主要分为两类： 有监督学习：已知输入、输出之间的关系而进行的学习，从而…
结构化数据，非结构化数据，半结构化数据（AI问答）
结构化数据，非结构化数据，半结构化数据，请介绍一下
结构化数据、非结构化数据和半结构化数据是按照数据组织形式和复杂度进行区分的三大类型： 结构化数据： 结构化数据是指具有固定格式和预定义模式的数据，…
六个字总结用友U8 BI方案：不加班、涨业绩
首先，聊聊不加班：用了用友U8 BI方案后，简单操作即可立即生成BI数据可视化分析报表。这些报表的特点是实用、直观、灵活分析，也是这些特点直接降低了重复性操作，提升数据分析灵活性、及时性，让上至老板&…
多云架构下的点击流数据分析
在出海的大趋势下，需要对点击流数据进行分析，以便更快的确定客户。作为多家云厂商的合作伙伴，九河云将提供点击流数据分析的改良方案。
对于这个需求可以借助aws的受众细分和定位解决方案，您可以应用基于云的分析和机器学习来减少…
山海鲸：助力企业实现内外数据整合与价值挖掘
作为山海鲸的开发者，我们深知数字化转型对于企业发展的重要性。在不断钻研如何提升山海鲸可视化这款免费产品的实用性同时，也在不断推出各行实用解决方案，本文将介绍山海鲸企业数字化转型发展解决方案，探讨如何通过数据驱动创新&a…
Power Query 中常用的数据清洗、转换操作
（一）数据筛选、保留、删除、去重 1、数据筛选 操作步骤 选中列——点击列名右侧箭头——进行筛选 可选操作 勾选文本筛选器：等于/不等于、开头是/开头不是、结尾是/结尾不是、包含/不包含数字筛选器：等于/不等于、大于/大于等于…
MessageBox：HubSpot x Facebook全方位对接！
在当今数字化营销的浪潮中，将多个业务系统高效整合成为推动企业成功的核心。HubSpot作为一体化的市场营销平台，与Facebook的整合通过强大的工具——MessageBox，为企业提供了更灵活、高效的整合方案。今天运营坛将深入探讨在HubSpot平台上整合…
从数据备份保护到完整生命周期管理平台，爱数全新发布 AnyBackup Family 8
编辑 | 宋慧
出品 | CSDN 云计算 从2003年创业，开始做数据备份技术，爱数已经走过了近20年的时间。现在，数据的价值被越来越多的业界与用户看到，数据分析应用赛道近年一直持续火热。而现在的爱数在做的，已经从数据的备…
地下停车场智慧监查系统：科技让停车更智能
随着城市化进程的加速，停车难成为了许多城市居民的痛点。而地下停车场作为解决停车难问题的重要手段，其安全性和便捷性也成为了人们关注的焦点。为了解决这一问题，山海鲸可视化搭建的地下停车场智慧监查系统应运而生，为车主们提供…
Python数据分析案例36——基于神经网络的AQI多步预测(空气质量预测)
案例背景
不知道大家发现了没，现在的神经网络做时间序列的预测都是单步预测，即(需要使用X的t-n期到X的t-1期的数据去预测X的t期的数据)，这种预测只能预测一个点，我需要预测X的t1期的数据就没办法了，有的同学说可以把预…
python微博爬虫情感分析可视化系统 舆情分析 python 大数据 TF-IDF算法 Flask框架 毕业设计（源码）✅
毕业设计：2023-2024年计算机专业毕业设计选题汇总（建议收藏）
毕业设计：2023-2024年最新最全计算机专业毕设选题推荐汇总
🍅感兴趣的可以先收藏起来，点赞、关注不迷路，大家在毕设选题ÿ…
数据分析 - python 数据处理
数据处理
去除重复数据
# 删除重复值 保留重复行 第一行的数据
data.drop_duplicates(inplaceTrue, keepfirst)数据格式转化
日期格式化
data[order_date] pd.to_datetime(data[order_dt], format%Y%m%d)data[销售时间] pd.to_datetime(data[销售时间]) # 交货时间 销售…
MiniTab的单值的变量控制图——I-MR 控制图分析
单值的变量控制图分为：I-MR 控制图、Z-MR 控制图、单值控制图、移动极差控制图4种。
I-MR 控制图
功能菜单请选择：统计>控制图>单值的变量控制图>I-MR。
使用 I-MR 控制图 可以在拥有连续数据且这些数据是不属于子组的单个观测值的情况下监视…
生信技能39 - 通过UCSC单条染色体Fasta序列构建hg19参考序列及其索引
hg19人类参考基因组的序列和BWA索引构建参考以下文章： 通过UCSC单条染色体Fasta序列构建hg19参考序列及其索引
1. UCSC hg38文件下载
# 染色体序列
wget http://hgdownload.soe.ucsc.edu/goldenPath/hg38/bigZips/hg38.chromFa.tar.gz
# 染色体长度文件
wget http://hgdownl…
Python基础知识：Python函数中的形式参数和实际参数
函数参数包括形式参数和实际参数，简称形参和实参。其中形式参数即是在定义函数时函数后面括号中的参数列表（parameterlist），比如上一个帖子的示例中的width, length；实际参数则是调用函数时函数后面括号中的参数值&…
基于Python flask MySQL 猫眼电影可视化系统设计与实现
1 绪论 1.1 设计背景及目的
猫眼电影作为国内知名的电影信息网站，拥有海量的电影信息、票房数据和用户评价数据。这些数据对于电影市场的研究和分析具有重要意义。然而，由于数据的复杂性和数据来源的多样性，如何有效地采集、存储和展示这些数…
3、创建特性(Creating Features)
使用Pandas转换特性以适合您的模型。 文章目录 1、简介2、数学变换3、计数4、构建和分解特征5、分组转换1、简介
一旦你确定了一组有潜力的特性，就可以开始开发它们了。在这节课中，你将学习如何在Pandas中进行一些常见的转换。如果你对Pandas不熟练, 请参考《从零开始的Pand…
【数据分析】numpy基础第三天
前言
本文只会讲解最常用的加、减、乘、除，点乘（或叫矩阵乘法）、还有广播机制。
本文代码
链接提取码：1024
第1部分：基础数学计算
使用NumPy进行基本的数学运算是十分直观和简单的。下面我们将展示一些基本的加、…
每天一个数据分析题（一百五十六）
在数据建模过程中，对于变量的筛选与维度归约，以下哪项描述是正确的？
A. 主成分分析适用于可解释性较强的预测模型，因为它减少了变量间的相关性。
B. 变量聚类旨在通过保留所有变量来减少信息损失，适合于所有类型的数…
如何做零售企业满意度调查
零售业满意度调研是一项至关重要的市场研究工作，它能够帮助企业深入了解消费者对零售店的整体印象、商品质量、服务质量等方面的评价。这种评价可以帮助企业了解自身的优势和不足，提高企业的市场竞争力。民安智库（第三方市场调研公司…
每天一个数据分析题（一百五十七）
当对多个连续型变量进行主成分分析（PCA）以降维并且简化数据时，以下哪项原则通常被用来决定应当保留多少个主成分？
A. 保留的主成分个数应当使得累积方差解释比例至少达到50%。
B. 保留的主成分个数应当使得每个主成分的特征值大…
EXCEL中如何调出“数据分析”的菜单
今天发现，原来WPS还是和EXCEL比，还是少了“数据分析”这个日常基本做统计的菜单，只好用EXCEL了，但奇怪发现我的EXCEL中没发现这个菜单，然后查了下，才发现，要用如下的方法打开： 1&…
GraphPad Prism 10.2.0 for Mac 强大实用的医学绘图分析工具
GraphPad Prism
GraphPad Prism是一款非常实用的统计软件，其功能非常强大，能够帮助用户进行各类科研数据的处理和分析，快速绘制出各种专业的图像和数据报告。
GraphPad Prism软件的用户界面非常友好，易于学习和操作，…
智能风控体系之逻辑回归
逻辑回归就是这样的一个过程：面对一个回归或者分类问题，建立代价函数，然后通过优化方法迭代求解出最优的模型参数，然后测试验证我们这个求解的模型的好坏。在信贷风控领域最常用的广义线性模型就是逻辑回归。其实逻辑回归线性可分…
分析Python7个爬虫小案例（附源码）
本次的7个python爬虫小案例涉及到了re正则、xpath、beautiful soup、selenium等知识点，非常适合刚入门python爬虫的小伙伴参考学习。注：若涉及到版权或隐私问题，请及时联系我删除即可。
1.使用正则表达式和文件操作爬取并保存“百度贴吧”某…
Tableau 中的逻辑函数
逻辑计算允许您确定某个特定条件为真还是假（布尔逻辑）。 函数 语法 描述 IN<expr1> IN <expr2> 如果 <expr1> 中的任何值与 <expr2> 中的任何值匹配，则返回 TRUE。 <expr1> 中的值可以是集、文本值列表或合并…
pandas 基本数据
目录
1. pandas 简介
2. pandas 基本数据结构
2.1 Series 类型
2.1.1 索引-数据的行标签 2.1.2 值 2.1.3 切片
2.1.4 索引赋值
2.2 DataFrame 类型 1. pandas 简介 一般导入的形式：import pandas as pd 2. pandas 基本数据结构
python 的数据结构：…
Pandas数据操作详解-总结
pandas简介pandas 是基于NumPy 的一种工具，该工具是为解决数据分析任务而创建的。Pandas 纳入了大量库和一些标准的数据模型，提供了高效地操作大型数据集所需的工具。pandas提供了大量能使我们快速便捷地处理数据的函数和方法。pandas 是 Python 的核心数…
用Python实现的这五个小游戏，你真的学会了嘛？
游戏名称1、五子棋 2、雷霆战机 3、贪吃蛇 4、坦克大战 5、俄罗斯方块 开发环境 Python版本：3.6.4 相关模块： pygame模块； 以及一些Python自带的模块。
环境搭建 安装Python并添加到环境变量，pip安装需要的相关模块即可。
一&am…
私藏！资深数据专家SQL效率优化技巧
💡 作者：韩信子ShowMeAI 📘 数据分析实战系列：https://www.showmeai.tech/tutorials/40 📘 本文地址：https://www.showmeai.tech/article-detail/391 📢 声明：版权所有，转…
pandas@get_dummies@ 虚拟变量@one-hot encoding
文章目录虚拟变量one-hot encodingdemodemo1demo2demo3数值化插值处理NaN数值化其他get_dummies例虚拟变量one-hot encoding pandas.get_dummies — pandas 1.5.3 documentation (pydata.org) 将分类变量转换为虚拟/指示变量。 在数据分析领域，dummies通常被翻译为…
通过DataEase行列权限设置实现数据权限管控
在企业的日常经营中，企业人数达到一定数量之后，就需要对企业的层级和部门进行细分，建立企业的树形组织架构。围绕着树形组织架构，企业能够将权限落实到个人，避免企业内部出现管理混乱等情况。而在涉及到数据分析等工作…
【python与数据分析】NumPy数值计算基础1——numpy数组及其运算
目录
前言
一、创建数组
二、测试两个数组的对应元素是否足够接近
三、修改数组中的元素值
四、数组与标量的运算
五、数组与数组的运算
六、数组排序
七、数组重复
八、数组转置
九、数组所有元素累计和与累计积
十、数据的集合运算
十一、数组的点积/内积运算
十…
2021年全国研究生数学建模竞赛华为杯C题帕金森病的脑深部电刺激治疗建模研究求解全过程文档及程序
2021年全国研究生数学建模竞赛华为杯
C题 帕金森病的脑深部电刺激治疗建模研究
原题再现： 一、背景介绍 帕金森病是一种常见的神经退行性疾病，临床表现的特征是静止性震颤，肌强直，运动迟缓，姿势步态障碍等运动症…
斩获三奖 | 国产BI行业唯一获奖，Smartbi荣获36氪、数据猿等多项荣誉
入选36氪新经济之王年度企业近日，36氪WISE2022 新经济之王盛会隆重举行，会上正式发布了“WISE2022 新经济之王年度企业”名册，思迈特软件成功斩获“WISE2022 新经济之王年度企业”荣誉，成为国产BI行业唯一获奖品牌。据了解&#x…
【阶段二】Python数据分析NumPy工具使用01篇：NumPy工具介绍、NumPy工具安装与数组的创建
本篇的思维导图： NumPy工具介绍 NumPy(Numerical Python) 是 Python 语言的一个扩展程序库，支持大量的维度数组与矩阵运算，这个包封装了多个可以用于数组间计算的函数供你直接调用，是一个运行速度非常快的数学库。 NumPy工具安装 代码 结果
巧用数据分析表达式，让数据指标创建更简单
实现数据业务一体化的指标分析
从零售系统进化史get 数据统计的需求变更
零售系统需要的数据统计需求 V1.0
只需要获取当日累计的销售额，于是店老板就用 Excel或者纸质的表格创建了一个表，表中包含销售的日期时间，销售的产品，销…
Python深入04 闭包
闭包(closure)是函数式编程的重要的语法结构。函数式编程是一种编程范式 (而面向过程编程和面向对象编程也都是编程范式)。在面向过程编程中，我们见到过函数(function)；在面向对象编程中，我们见过对象(object)。函数和对象的根本目的是以某种…
2022年度笔记本十大热门品牌销量排行榜
近年来，由于大环境的改变，线上教育、线上办公等的需求使得平板电脑出货量逐步提升。同时，5G时代来临，万物互联是未来的趋势，手机由于操作系统和交互上的局限性，笔记本电脑将会扮演更加重要的角色。未来&…
《CSS 简易速速上手小册》第4章：视觉美学（2024 最新版）
文章目录 4.1 颜色理论在 CSS 设计中的应用：网页的调色盘4.1.1 基础知识4.1.2 重点案例：创建一个具有情感设计的登录页面4.1.3 拓展案例 1：使用颜色增强信息的可视化表示4.1.4 拓展案例 2：利用颜色创建网站的品牌身份 4.2 字体与文…
使用Plotly和Python进行交互式数据可视化
使用Plotly和Python进行交互式数据可视化
Python是数据探索和数据分析的好帮手，这都要归功于numpy、pandas、matplotlib等神奇库的支持。在我们的数据探索和数据分析阶段，理解我们正在处理的数据是非常重要的，为此，数据的可视化表…
《统计学简易速速上手小册》第6章：多变量数据分析（2024 最新版）
文章目录 6.1 主成分分析（PCA）6.1.1 基础知识6.1.2 主要案例：客户细分6.1.3 拓展案例 1：面部识别6.1.4 拓展案例 2：基因数据分析 6.2 聚类分析6.2.1 基础知识6.2.2 主要案例：市场细分6.2.3 拓展案例 1&…
58_Pandas中mode获取pandas的每一行和列
58_Pandas中mode获取pandas的每一行和列
使用pandas.Series和pandas.DataFrame的mode()方法，可以得到每一列每一行的mode。
在此，对以下内容进行说明。
pandas.Series 中的mode（）pandas.DataFrame 中的mode（&#x…
《Git 简易速速上手小册》第3章：分支管理（2024 最新版）
文章目录 3.1 创建与合并分支3.1.1 基础知识讲解3.1.2 重点案例：为 Python 项目添加新功能3.1.3 拓展案例 1：使用 Pull Requests (PRs) 在团队中合作3.1.4 拓展案例 2：解决合并冲突 3.2 分支策略的最佳实践3.2.1 基础知识讲解3.2.2 重点案例&…
章节2 行走数据江湖，只需一行代码
目录8. 数据筛选、过滤，[绘图前的必备功课]8.1 excel操作8.2 Python操作http://sa.mentorx.net 蔓藤教育8. 数据筛选、过滤，[绘图前的必备功课]
8.1 excel操作
筛选，18<年龄<30的学生的分数状况，且分数>80的学生 全部…
2023年最强大的12款数据可视化工具，值得收藏
做数据分析也有年头了，好的坏的工具都用过，推荐几个觉得很好用的，避坑必看！ PS：一般比较成熟的公司里，数据分析工具不只是满足业务分析和报表制作，像我现在给我们公司选型BI工具，是做…
【编程基础之Python】1、初始Python
【编程基础之Python】1、初始Python初始Python什么是PythonPython的运行过程Python的应用领域如何学好Python初始Python
Python是一种跨平台的、开源免费的、解释型的、面向对象的高级编程语言。
Python的应用领域非常广泛，包括客户端程序、服务器程序、移动端程序…
计算最小公倍数math.lcm()
【小白从小学Python、C、Java】 【计算机等考500强证书考研】 【Python-数据分析】 计算最小公倍数 math.lcm() 请问以下代码输出的结果是？ import math print("【执行】math.lcm(2, 4)") print(math.lcm(2, 4)) print("【执行】math.lcm(1, 2, 3…
尚医通（九）数据字典模块前后端 | EasyExcel
目录一、数据字典介绍1、什么是数据字典2、页面展示效果3、数据字典表设计4、数据分析5、根据页面效果分析数据接口二、搭建数据字典模块三、数据字典列表接口1、model模块添加数据字典实体2、添加数据字典mapper3、添加数据字典service4、添加数据字典controller四、数据字典列…
虹科案例 | 对症下药，零售行业BI解决方案及实操案例！
数据源多难以整合？ 无法实时访问数据？ 数据分析难、价值共享难？ 面对大量的数据，企业愈发头疼，尤其是零售行业。虹科Domo商业智能分析工具“对症下药”，为零售企业海量数据问题提供解决方案。
一、零售行业…
世界上最大的12个超大规模自建数据中心企业
Hyperscalers 经常与托管服务提供商合作以满足需求并解决他们的需求。但随着它们变得越来越大，超大规模企业已经转向建立自己的数据中心。
规模是选择自建的关键决定因素，但其他变量也出现了，包括减少供应商、定制和控制设计以及获取可再生能…
![[数据分析] 数据指标体系搭建](https://img-blog.csdnimg.cn/1985915108284f448b45b39fb6f303c0.png)
[数据分析] 数据指标体系搭建
在数据分析的学习过程中，我们通常会要求掌握以下两点:
1.理解数据，懂得从数据中发现业务指标(学会如何去看懂数据)
2.使用相关指标去分析数据，同时使用多个指标去分析一个问题(了解常见的指标) 当我们拿到数据(通常以Excel或者数据库方式去…
爬虫Python入门好学吗？学什么？
爬虫Python入门好学吗？学爬虫需要具备一定的基础，有编程基础学Python爬虫更容易学。但要多看多练，有自己的逻辑想法。用Python达到自己的学习目的才算有价值。如果是入门学习了解，开始学习不难，但深入学习有难度&#…
02- 天池工业蒸汽量项目实战 (项目二)
忽略警告: warnings.filterwarnings("ignore")
import warnings
warnings.filterwarnings("ignore")
读取文件格式: pd.read_csv(train_data_file, sep\t) # 注意sep 是 , , 还是\ttrain_data.info() # 查看是否存在空数据及数据类型train_data.desc…
Python 之 NumPy 简介和创建数组
文章目录一、NumPy 简介1. 为什么要使用 NumPy2. NumPy 数据类型3. NumPy 数组属性4. NumPy 的 ndarray 对象二、numpy.array() 创建数组1. 基础理论2. 基础操作演示3. numpy.array() 参数详解三、numpy.arange() 生成区间数组四、numpy.linspace() 创建等差数列五、numpy.logs…
【SPSS】数据预处理基础教程（附案例实战）
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
【编程基础之Python】3、创建Python虚拟环境
【编程基础之Python】3、创建Python虚拟环境创建Python虚拟环境为什么需要虚拟环境Windows上的Anaconda创建虚拟环境conda 命令conda env 命令创建虚拟环境切换虚拟环境验证虚拟环境Linux上的Anaconda创建虚拟环境创建虚拟环境切换虚拟环境验证虚拟环境总结创建Python虚拟环境 …
B站基于缓存优化 PRESTO 集群查询性能
导读：本次分享主题为 B 站 Presto 集群查询性能的优化，首先会简单介绍 Presto以及 B 站内部 Presto 集群的架构。接下来讲解针对 Presto 做的改造，主要是 Presto 搭配 Alluxio 和 Presto 搭配 Alluxio local cache 的使用。最后会对后续计划开…
python数据清洗
数据清洗包括：空值，异常值，重复值，类型转换和数据整合这里数据清洗需要用到的库是pandas库，下载方式还是在终端运行 ： pip install pandas.首先我们需要对数据进行读取import pandas as pddata pd.read_cs…
开源大数据分析工具有几大内容？
在数据越来越重要的今天，数据管理的重要性不言而喻。引用专业的开源大数据分析工具可以为企业实现数字化办公，提升效率，提高数据管理品质和效率。我们今天就一起来了解下开源大数据分析工具的详细内容吧。 一、实现数据分析的重要性 在以前&a…
数据分析与SAS学习笔记2
SAS在企业使用的情况： SAS是一个很昂贵的商业软件。在企业中使用SAS比较多，在企业界中是比较流行，在学术界使用R比较多。 SAS简介：统计分析系统 处理生物分析数据。
SAS成为统计领域的国际标准软件，服务全球50000多家…
第十章 - 窗口函数（rank，row_number，dense_rank）
第十章 - 窗口函数（rank，row_number，dense_rank）什么是窗口函数窗口函数的基本用法：专有窗口函数rank ()dense_rank()row_number()聚合窗口函数的用法avg 移动平均数sum 累计求和max & min 指定范围内的最大/最小值…
Python爬虫 pyquery库详解#4
爬虫专栏：http://t.csdnimg.cn/WfCSx
使用 pyquery
在上一节中，我们介绍了 Beautiful Soup 的用法，它是一个非常强大的网页解析库，你是否觉得它的一些方法用起来有点不适应？有没有觉得它的 CSS 选择器的功能没有那么…
一文速学-GBDT模型算法原理以及实现+Python项目实战
目录
前言
一、GBDT算法概述
1.决策树
2.Boosting
3.梯度提升 使用梯度上升找到最佳参数
二、GBDT算法原理
1.计算原理
2.预测原理
三、实例算法实现 1.模型训练阶段
1）初始化弱学习器 2）对于建立M棵分类回归树： 四、Python实现 …
python中第三方库xlrd和xlwt的使用教程
excel文档名称为联系人.xls，内容如下：
一、xlrd模块用法
1.打开excel文件并获取所有sheet
import xlrd# 打开Excel文件读取数据
data xlrd.open_workbook(联系人.xls)sheet_name data.sheet_names() # 获取所有sheet名称
print(sheet_name) # [银…
pandas之DataFrame基础
pandas之DataFrame基础1. DataFrame定义2. DataFrame的创建形式3. DataFrame的属性4. DataFrame的运算5. pandas访问相关操作5.1 使用 loc[]显示访问5.2 iloc[] 隐式访问5.3 总结6. 单层索引和多层级索引6.1 索引种类与使用6.2 索引相关设置6.3 索引构造6.4 索引访问6.5 索引变…
每日一问-ChapGPT-20230308-关于技术与思考的问题
文章目录每日一问-ChapGPT系列起因每日一问-ChapGPT-20230308-关于技术与思考的问题matplotlib_venn 中 venn2函数调用时，subsets传入A list (or a tuple) containing two set objects，怎么理解plt.pie() 包含哪些参数，以及每个参数的意义mat…
Pandas50个高级高频操作
01、复杂查询 实际业务需求往往需要按照一定的条件甚至复杂的组合条件来查询数据,接下来为大家介绍如何发挥Pandas数据筛选的无限可能，随心所欲地取用数据。 1、逻辑运算 # Q1成绩大于36df.Q1> 36# Q1成绩不小于60分，并且是C组成员~(df.Q1< 60) &a…
数据分析简单题目分享（附答案）
不用任何公开参考资料，估算今年新生儿出生数量 解答： 1）采用两层模型（人群画像人群转化）：新生儿出生数Σ各年龄层育龄女性数量各年龄层生育比率 2）从数字到数字：如果有前几年新生儿出…
python并发编程多线程
在传统操作系统中，每个进程有一个地址空间，而且默认就有一个控制线程 线程顾名思义，就是一条流水线工作的过程，一条流水线必须属于一个车间，一个车间的工作过程是一个进程 车间负责把资源整合到一起，是一个…
Pandas的应用-1
Pandas是一个开源的数据分析工具，它提供了高性能、易于使用的数据结构和数据分析工具。其中，Series是Pandas中最基本的数据结构之一，它是一种类似于一维数组的对象，可以储存任何数据类型。在本文中，我们将介绍Series的…
我在工作中使用到的stream流【案例2 ＜List＜List＞＞结构】
文章目录介绍原始代码修改后代码讲解介绍
字段中有个 1,2,3,4 形式的varchar LocationTypeIds字段 前端携带相应的字段中的某个值typeId进行接口请求 期望获得LocationTypeId有typeId值的记录
原始代码
locationInfoDTOList是List<MdLocationInfoDTO> 类型 LabelValue…
十大Python可视化工具，太强了
今天介绍Python当中十大可视化工具，每一个都独具特色，惊艳一方。
Matplotlib
Matplotlib 是 Python 的一个绘图库，可以绘制出高质量的折线图、散点图、柱状图、条形图等等。它也是许多其他可视化库的基础。
import matplotlib.pyplot as p…
[数据分析实战][37] 基于pandasql和plotly的数据科学家薪资分析与可视化 @ShowMeAI
参考资料：
数据科学家赚多少？数据全分析与可视化-ShowMeAI
前言
代码实际跑过一遍，原文中有一些错误，都已经修改过来了。大多数修改的地方都用“修改”标注了。要查看相应内容建议使用搜索“修改”查看。
Table of Contents 1…
案例研究｜DataEase助力丹霞生物实现数据驱动的企业管理
广东丹霞生物制药有限公司（以下简称“丹霞生物”）创建于2008年，是一家专注于抗体药物研发、生产与销售的高科技生物制药公司。公司注重研发创新和质量控制，不断推进科技创新，旨在为全球患者提供高质量、创新性的生物制…
2月天猫彩妆类目销量排行榜：销额近16亿，国货品牌入围TOP3
伴随我国经济的不断发展，居民收入水平的不断提高，在欧美及日韩大牌化妆品公司对中国市场的开拓，以及国货彩妆品牌的不断崛起下，国内消费者的化妆品消费理念逐步增强，国内化妆品市场规模迅速扩大。 同时，今年…
让数据变得更直观：10款常用的可视化工具（解决99%的可视化大屏需求）
不管是跟上司汇报工作，还是向客户介绍项目，在工作中各种与【汇报】有关的事情，都离不开图表。漂亮而有视觉冲击力的图表可以给你的工作大大加分，让对方直观理解你想表达的内容，而大屏能将图表和数据展现到极致。
这篇…
数据处理时代，绕不开的数据分析
数据分析的出现是因为人类难以理解海量数据所呈现出来的信息，不能从中找到相应的规律来对现实中的事物进行对应，我们都知道数据有很高的价值，但不能利用的价值，没有任何意义。
为了解决这一问题，数据分析在长期的数据…
Python 科学计算库—NumPy
Python概述 基础语法 判断 循环 函数 数据容器 函数进阶 Jupyter notebook第2章 科学计算库—NumPyNumPy作为高性能科学计算和数据分析的基础包，它是 众多数据分析、机器学习等工具的基础架构，掌握 NumPy的功能及其用法将有助于后续其他数据分析工具的学…
零售数据分析之操作篇6：时间筛选
各位数据的朋友，大家好，我是老周道数据，和你一起，用常人思维数据分析，通过数据讲故事。
上期回顾与作业解答
上一讲讲了两种零售行业比较常见和近期相关的场景，一种是近期计算，一种是近期筛选…
2023年泰迪杯数据挖掘挑战赛B题--产品订单数据分析与需求预测（数据处理）
1. 前言
本题相对来说比较适合新手，包括针对数据的预处理，数据分析，特征提取以及模型训练等多个步骤，完整的做下来是可以学到很多东西的。
2.问题一思路分析
本题要求利用附件中的训练数据进行深入的分析，由于本题的…
python3 中 and 和 or 运算规律
一、包含一个逻辑运算符
首先从基本的概念着手，python中哪些对象会被当成 False 呢？而哪些又是 True 呢？
在Python中，None、任何数值类型中的0、空字符串“”、空元组()、空列表[]、空字典{}都被当作False，还有自定义…
零售数据分析之操作篇10：销售排名与TOP分析
各位数据的朋友，大家好，我是老周道数据，和你一起，用常人思维数据分析，通过数据讲故事。
上期回顾与作业解答
上一讲讲了如何通过历史聚合与其他聚合一起使用的场景，包括历史聚合唯一计数组合以及历史聚合…
八爪鱼采集器使用笔记
Author: Lycan
Date: 2023/3/26 22:01 八爪鱼官网：
数阔八爪鱼采集器 - 免费网络爬虫软件_网页大数据抓取工具 下载地址：
免费下载-Windows大数据采集软件下载 - 八爪鱼采集器 采集步骤简述：
1、输入待采集的网址；
2、根据需…
毕业论文常见数据格式汇总
今天将各个模块中，具有代表性的分析方法的数据格式进行一个汇总说明，本文主要介绍以下内容： 一、规范格式说明
1、原始数据格式
我们在进行数据分析时，最常见的数据格式是原始数据格式。
下图是一份常见的原始数据࿰…
银行数字化转型导师坚鹏：银行业发展趋势及对人才的需求分析
数字化转型背景下银行业发展趋势及对人才的需求分析
——洞察先机，重塑人才核心竞争力
课程背景：
数字化转型背景下，很多银行存在以下问题：
不知道银行整体发展现状与发展趋势？
不清楚金融科技对银行发展有什么影响&…
成都北大青鸟怎么样？
对于任何一个培训机构的了解大概的流程是：听说名字——网上搜索，可以看到机构官网，也会看到机构广告，当然也会看到各种有好有坏的评论，到这里会对机构形成初印象；然后如果身边有培训出身的小伙伴会去询问对…
Pandas + ChatGPT 超强组合，pandas-ai ：交互式数据分析和处理新方法
Python Pandas是一个为Python编程提供数据操作和分析功能的开源工具包。这个库已经成为数据科学家和分析师的必备工具。它提供了一种有效的方法来管理结构化数据(Series和DataFrame)。 在人工智能领域，Pandas经常用于机器学习和深度学习过程的预处理步骤。Pandas通过…
apply函数 | pandas
1、概念
apply()可以应用于Pandas中的Series和DataFrame对象。在Series对象上，apply()将会对Series中的每个元素应用指定的函数并返回一个新的Series对象；在DataFrame对象上，apply()将会对每一行或者每一列应用指定的函数并返回一个新的Data…
数据分析：麦当劳食品营养数据探索并可视化
系列文章目录 作者：i阿极 作者简介：Python领域新星作者、多项比赛获奖者：博主个人首页 😊😊😊如果觉得文章不错或能帮助到你学习，可以点赞👍收藏📁评论📒关注…
2023年天猫青团销售数据：口味更个性化，但老字号品牌依然称霸
青团本是清明时节祭祀的产物，但随着时节的推移，青团已经突破了地域与时间的限制，如今的青团已经成为地域性特色小吃的一种，并逐渐被全国消费者所接受。 随着消费回暖及内容营销的助力，今年的青团季比往年相比提高了不少…
基于dbt的机器学习：流畅的过程衔接
DBT 继承了我们在 SQL 上的工作，在数据工程师、数据分析工程师和任何数据角色之间构建了一个优雅、通用的、操作友好的环境。工具和工作流的统一在数据组织内为不同团队之间创建了互操作性。
就像在接力赛中一样，在过程的各个阶段都有明确的交接点和明确…
数据分析重要吗？成都哪里可以学数据分析？
什么是数据分析？数据的重要性
国家发展数字经济的政策提出，就是数据重要性的开端，随着数字技术、云计算的变革，尤其是在东数西算工程的落地实施，各种大型、超大型数据中心拔地而起，数据成为了这个时代最有…
数据分析05——往Pandas中导入数据
1、导入Excel：
注意这种方法可以导入xlsx和xls两种类型的数据读入的数据会以DataFrame的格式显示举例：df pd.read_excel(‘./data/demo_03.xlsx’)还可以导入excel文件中具体的某一个表格：pd.read_excel(‘./data/demo_03.xlsx’, sheet_na…
企业如何利用数据打造新的人才战略？
由于利率上升、能源价格上涨、政治不确定性、全球供应限制以及寻找和资助昂贵人才的问题，企业的优先事项，也就是人们的优先事项，正在以前所未有的速度发生转变。在数据的基础之上迅速做出正确决策，并灵活精准地向他人传达意义。
…
python天阶斗技--数据挖掘之数据探索
目录
一数据质量分析
1.缺失值分析
2.异常值分析
2.1 简单统计量分析
2.2 3编辑原则
2.3 箱型图分析
2.4 一致性分析
3.数据特征分析
3.1分布分析
3.2对比分析
3.3统计量分析
3.4周期性分析
3.5贡献度分析
3.6性关系分析 当我们收集到数据后，接…
银行数字化转型导师坚鹏：ChatGPT解密与银行应用案例
ChatGPT解密与银行应用案例
——开启人类AI新纪元 打造数字化转型新利器
课程背景：
很多企业和员工存在以下问题：
不清楚ChatGPT对我们有什么影响？
不知道ChatGPT的发展现状及作用？
不知道ChatGPT的银行业应用案例？…
数据分析08——Pandas中对数据进行数据清洗
0、前言：
使用pandas修改数据是否会改变源数据？ Pandas 对 DataFrame 的操作通常是针对原始数据本身而不是其副本的。例如，当我们使用 .loc 或 .iloc 方法选择 DataFrame 中的某行或某列并进行修改时，实际上是直接更改了原始数据…
28. Pandas的Categorical数据类型可以降低数据存储提升计算速度
import pandas as pd
import timedf pd.read_csv(./users.dat,sep::,enginepython,headerNone,namesUserID::Gender::Age::Occupation::Zip-code.split(::))
print(df.head())
print(df.info())info() 方法中常用的一些参数包括：verbose(默认值：True)&a…
20.Pandas的stack和pivot实现数据透视
20.Pandas的stack和pivot实现数据透视
经过统计得到多维度指标数据 使用unstack实现数据二维透视 使用pivot简化透视 stack、unstack、pivot的语法
经过统计得到多维度指标数据 非常常见的统计场景，指定多个维度，计算聚合后的指标
实例：统…
史上最通俗易懂的EWMA（指数加权移动平均）的参数解释以及程序代码
文章目录 一、EWMA（指数加权移动平均）是什么？二、详细的参数解释3、使用Python pandas库中的ewm()函数实现指数加权移动平均（EWMA）的示例代码总结 一、EWMA（指数加权移动平均）是什么？…
Pandas实践经验汇总
目录 DataFrame去重drop_duplicates 加载parquet文件加载XLSX文件报错 DataFrame
去重drop_duplicates
参考：官方文档-pandas.DataFrame.drop_duplicates 参数： subset：按照subset指定的列进行去重，默认为所有列； ke…
采集工具助力市场营销，让您的营销更加高效
随着市场竞争的日益激烈，企业的营销策略也在不断升级。而在这个信息爆炸的时代，采集数据成为了市场营销中不可或缺的一环。为了更好地服务客户，我们公司开发了一款高效、快捷的采集工具，为您的营销活动提供有力支持。 Msray-plus&…
数据分析时，进行数据建模该如何筛选关键特征？
1.为什么要做关键特征筛选？ 在数据量与日俱增的时代，我们收集到的数据越来越多，能运用到数据分析挖掘的数据也逐渐丰富起来，但同时，我们也面临着如何从庞大的数据中筛选出与我们业务息息相关的数据。（大背景…
数据分析11——Pandas中数据偏移/数据切分/数据结构转换
数据偏移：
1、shift函数：
在 Pandas 中，shift 函数用于将数组的数据向前或向后平移指定的步数。它可以应用于 Series 或 DataFrame 类型的数据中，并返回一个平移后的新数据结构，其中每个元素都被取代为原始序列中对应…
建议收藏！数据可视化大屏设计必备步骤
相信对于从事大数据相关的人员来说，数据的可视化大屏是最能展现自己工作价值的一个途径。可视化大屏就是数据分析的最后成果的展示，而如果能设计出更直观、更酷炫、更具有科技感的大屏，更能获得客户的青睐。 那么客户喜欢的究竟是怎样的可视化…
如何利用有限的数据发表更多的SCI论文？——利用ArcGIS探究环境和生态因子对水体、土壤和大气污染物的影响
SCI的写作和发表是科研人提升自身实力和实现自己价值的必要途径。“如何利用有限的数据发表更多的SCI论文？”是我们需要解决的关键问题。软件应用只是过程和手段，理解事件之间的内在逻辑和寻找事物之间的内在规律才是目的。如何利用有限的数据发表更多的…
什么是百分比堆积条形图？
条形图实际上范围很广，它是以横置图形展示数据的一种图表类型。百分比堆积条形图即以堆积条形图的形式来显示多个数据序列，但是每个堆积元素的累积比例始终总计为 100%。它主要用于显示一段时间内的多项数据占比情况。 百分比堆叠条形图将多个数据集的条…
TOOLS_Seaborn相关性可视化分析示例
TOOLS_Seaborn相关性可视化分析示例
相关性应用场景
如要回答 推测 网站留存、观看时长、收藏次数、转发次数、关注数之间是否存在相关性，以及相关性有多大的问题；
对于更有关注的留存，可以尝试分析一个与其相关性比较大的因素，…
【编程基础之Python】7、Python基本数据类型
【编程基础之Python】7、Python基本数据类型Python基本数据类型整数（int）基本的四则运算位运算比较运算运算优先级浮点数（float）布尔值（bool）字符串（str）Python数据类型变换隐式类型…
插上数据的翅膀，开启我升职加薪的梦想之旅
我是麦思思，大学毕业后就进入大厂工作并担任电子消费行业业务部门的数据分析师，对于一个数据分析师而言，Excel是必备技能，函数公式我能随手就来，几十M的文件处理那都是轻轻松松。但是，近几年随着企业业务发…
chatgpt赋能Python-python_penup
Python PenUp: 专业针对绘图需求而设计的Python包
在近几年Python语言的流行性大增，不仅吸引了许多新手开发者，也吸引了许多有经验的工程师，特别是针对绘图领域。Python PenUp 是一个专业针对绘图需求而设计的Python包，可以让工程…
【Python学习笔记】第二十五节 Python MySQL
Python 连接到 MySQL 数据库有几种不同的连接方法，而且不是所有的方法都能与不同的操作系统很好地配合.MySQL connector/Python模块是Oracle支持的官方驱动，用于通过Python连接MySQL。该连接器完全是Python语言，而mysqlclient是用C语言编写的…
理论上BI软件适配任何行业，但为什么有些行业做不了？
BI商业智能是一种通用的数据类技术解决方案。理论上来说，BI商业智能的核心是数据。只要企业有数据累积，就可以在BI软件上展开一系列的数据开发，获取决策所需的数据依据。但在现实中，却会发现有些BI软件对特定的行业束手无策&#…
【编程基础之Python】9、Python中的变量
【编程基础之Python】9、Python中的变量Python中的变量变量的定义和赋值变量的命名规范变量的类型变量的作用域变量的赋值特殊的变量删除变量总结Python中的变量
在Python中，变量是用来存储数据的一种方式。Python是一种动态类型语言，因此在声明变量时不…
数据分析师 ---- SQL强化(1)
文章目录数据分析师 ---- SQL强化(1)写在前面题目第一步：表连接以及表拼接第二步：新建列以及填充值总结数据分析师 ---- SQL强化(1)
写在前面 最近在找工作中发现，数据分析师的笔试多数会涉及SQL，但是笔试中SQL的难度和我们在学习…
Matlab vs Python：哪个更适合数据分析和可视化？
当谈到数据分析和可视化时，许多人会思考使用哪种编程语言来实现这一目标。在IT行业，最流行的两种编程语言是Matlab和Python。这两种语言都有广泛的应用，但是对于初学者来说，选择哪种语言可能会有些困难。在本文中，我们…
统计软件与数据分析Lesson8----HTML初识
统计软件与数据分析Lesson8----HTML初识1.什么是 HTML？2.查看HTML源代码3.HTML 标签4.HTML 文档5.编写 HTML6.HTML 标签6.1 HTML 标题6.2 HTML 段落6.3 HTML 链接7.HTML 元素7.1HTML 嵌套元素7.2 HTML空元素8.HTML 属性9. HTML <div> 元素10.其它10.1 HTML 水…
香港酒店模拟分析项目报告--使用tableau、python、matlab
转载请标记本文出处 软件：tableau、pycharm、关系型数据库：MySQL 数据大量分析考虑电脑性能的情况。 文章目录前言一、爬虫是什么？二、使用tableau数据可视化1.引入数据1.1 制作直方图-各地区酒店数量条形图1.2 各地区酒店均价1.3 价格等级堆…
使用 Python Pip 的 10 个技巧
众所周知，pip 可以安装、更新、卸载 Python 的第三方库，非常方便。你们中的许多人可能已经使用 pip 很长时间了，但不清楚它有哪些还不错的功能。希望我今天分享的技巧能让你从 Python pip 中受益。
Python pip
让我们从 Python 语言开始。P…
DataEase看中国 - 中国影星“成龙”电影票房数据分析
背景介绍 说起成龙，我们并不陌生，著名的动作明星。以武打动作片出道，凭借动作片《红番区》打入好莱坞，该片打破北美外语片票房纪录。 目前，由成龙、郭麒麟等主演的新片《龙马精神》正在公映，电影《…
可视化图表API格式要求有哪些？Sugar BI详细代码示例（2）
Sugar BI中的每个图表可以对应一个数据 API，用户浏览报表时，选定一定的过滤条件，点击「查询」按钮将会通过 API 拉取相应的数据；前面说过，为了确保用户数据的安全性，Sugar BI上的所有数据请求都在Sugar BI的…
零基础入门python好学么
python对于零基础的小伙伴算是非常友好的了~ python以简单易学著称~ Python简洁，高效的特点，大大提升了程序员的编码速度，极大的提高了程序员的办公效率，比如用其他编程语言5、6行代码才能整明白的，用Python可能1-2行就…
【SPSS】两独立样本的极端反应检验和两配对样本的非参数检验详细操作教程（附案例实战）
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
银行数字化转型导师坚鹏：宏观经济趋势与资本行业机遇和挑战
2023年宏观经济趋势与资本行业机遇和挑战 课程背景：
很多学员存在以下问题：
不知道我国目前的宏观经济形势？
不清楚宏观环境对我国经济的影响？
不知道资本行业未来主要发展趋势？
课程特色：
精彩解…
为什么 OpenAI 团队采用 Python 开发他们的后端服务？
Python，年龄可能比很多读者都要大，但是它在更新快速的编程界却一直表现出色，甚至有人把它比作是编程界的《葵花宝典》，只是Python的速成之法相较《葵花宝典》有过之而无不及。
Python简洁，高效的特点，大大…
观景台售票情况数据分析【Python】
任务1：数据预处理
表格数据资源如下百度网盘👇
链接：https://pan.baidu.com/s/1Ry8emM-daxoegF1di4FRyw 提取码：jimb author：用户名rating：消费后打的分time：消费时间year：消费年份…
【Python入门篇】——Python基础语法（数据类型与数据类型转换）
作者简介： 辭七七，目前大一，正在学习C/C，Java，Python等 作者主页： 七七的个人主页 文章收录专栏： Python入门，本专栏主要内容为Python的基础语法，Python中的选择循环语句…
Python在金融大数据分析中的AI应用实战
💂 个人网站:【 海拥】【神级代码资源网站】【办公神器】🤟 基于Web端打造的：👉轻量化工具创作平台💅 想寻找共同学习交流的小伙伴，请点击【全栈技术交流群】 随着人工智能时代的到来，Python作为…
MatPlotlib入门
Matplotlib 是一个用于创建高质量图表的 Python 库，它提供了一个类似于 MATLAB 的绘图框架。它广泛用于数据可视化、科学计算和工程领域。Matplotlib 能够生成多种格式的图形，包括 PNG、PDF、SVG、EPS 等。 以下是使用 Matplotlib 的一些基础步骤&#x…
基于物联网的实时数据分析（简单介绍）
在当今这个信息化、数字化飞速发展的时代，物联网（Internet of Things, IoT）和实时数据分析成为了技术革新的两大支柱。对于刚入行的新手来说，理解这两个概念及其相互作用不仅是迈入这一领域的第一步，更是掌握未来技术趋…
《Linux 简易速速上手小册》第8章: 安全性与加固（2024 最新版）
文章目录 8.1 防火墙与安全策略8.1.1 重点基础知识8.1.2 重点案例：配置 iptables 以保护 Web 服务器8.1.3 拓展案例 1：使用 firewalld 配置动态防御区域8.1.4 拓展案例 2：配置 ufw 以简化管理 8.2 SSH 安全最佳实践8.2.1 重点基础知识8.2.2 重…
pandas 常用操作
pandas 常用操作1.pandas列属性操作2. pandas填充值3. pandas重复值操作4. pandas根据值排序5. pandas列值操作6. pandas日期操作7. pandas 均线值8. pandas 数据统计1.pandas列属性操作
修改列名datadata.rename(columns{Dest Country:country,Dest:iata_code,index:from})修…
《区块链公链数据分析简易速速上手小册》第3章：区块链数据结构（2024 最新版）
文章目录 3.1 区块和交易的结构3.1.1 基础知识3.1.2 重点案例：构建简单的区块链3.1.3 拓展案例 1：验证交易签名生成密钥对签名交易验证签名完整的交易签名与验证演示 3.1.4 拓展案例 2：监听和解析区块链事件代币合约示例（Solidity…
数据分析案例-基于亚马逊智能产品评论的探索性数据分析
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
数据分析 | Pandas 200道练习题，每日10道题，学完必成大神（2）
文章目录前期准备1.通过DataFrame保存为EXCEL2.查看数据行列数3.提取popularity列中值大于3小于7的行4.交换两列的位置5.提取popularity列最大的行所在行6.查看最后3行数据7.删除最后一行数据8.添加一行数据9.队数据按照popularity列的值的大小进行排序10.统计grammer列每个字符…
《区块链公链数据分析简易速速上手小册》第10章：未来趋势和挑战（2024 最新版）
文章目录 10.1 区块链技术的发展方向10.1.1 基础知识10.1.2 重点案例：构建一个简单的智能合约步骤1: 创建智能合约步骤2: 部署智能合约步骤3: 使用Python与智能合约交互结语 10.1.3 拓展案例 1：探索 DeFi 应用准备工作实现步骤步骤1: 获取Compound市场数…
基于GPT一键完成数据分析全流程的AI Agent: Streamline Analyst
大型语言模型（LLM）的兴起不仅为获取知识和解决问题开辟了新的可能性，而且催生了一些新型智能系统，例如旨在辅助用户完成特定任务的AI Copilot以及旨在自动化和自主执行复杂任务的AI Agent，使得编程、创作等任务变得高效…
数据分析03——矩阵常用计算方法和函数
0、前言：
数组：计算机领域的概念矩阵：数学领域的概念对于Numpy而言，矩阵是数组的分支 1、创建矩阵：
字符串创建矩阵：mat1 np.matrix(‘1 2;3 4’)列表形式创建矩阵：mat2 np.matrix([[5, 6],…
自助式分析是数据组织的一种状态
究竟什么是自助式分析？ 为什么真正的自助式分析难以实现? 没有任何数据工具可以帮助您在公司中实现数据素养。但肯定可以确保不会妨碍我们。作为BI工具制造商，很容易反省太多，如何解决所有客户问题的方法，等等。但事实是…
![[学习笔记]PowerBI数据分析与可视化-B站数据大白](https://img-blog.csdnimg.cn/eb4d8c78adec4d5da4be08537fa2217a.png)
[学习笔记]PowerBI数据分析与可视化-B站数据大白
参考资料
B站视频-Power BI 数据分析与可视化
前言
原视频中可能的勘误在笔记中有修改。CtrlF搜索“勘误”两个字可以快速定位到勘误。 原视频中可能的差异在笔记中有提及。CtrlF搜索“差异”两个字可以快速定位到勘误。
2. 建模与DAX函数
2.01 建立关系模型 表可以分为维…
【Python入门知识】NumPy 数组排序/过滤，案例+理论讲解
前言
嗨喽~大家好呀，这里是魔王呐 ❤ ~! 数组排序
排序是指将元素按有序顺序排列。
有序序列是拥有与元素相对应的顺序的任何序列，例如数字或字母、升序或降序。
NumPy ndarray 对象有一个名为 sort() 的函数，该函数将对指定的数组进行排…
数据分析示例-python
数据分析示例-python
今天呢，博主把之前做过的一个小课题拿出来展示一下，当然这个课题呢做的工作量很大，也用到了很多可以参考的技术和代码，做数据分析工作的可以尝试学习学习。 这篇博客，我们先从数据集开始介绍。 对…
python读入excel，进行excel处理的基础操作
1.合并多个Excel文件的sheet
可以使用Python中的pandas库来读取和合并多个Excel文件的sheet。 首先需要安装pandas库，可以使用以下命令进行安装： pip install pandas 接下来，可以使用以下代码来读取和合并多个Excel文件的sheet：…
np保存数据为txt或者csv格式
目录
1、基础参数
2、参数详解
2.1、fmt
2.2、delimiter
2.3、newline
2.4、header 1、基础参数
numpy.savetxt(fname,arrry,fmt%.18e,delimiter ,newline\n,header,footer,comments# ,encodingNone,)
2、参数详解
fname:要存入的文件、文件名、或生成器。arrry:要存储…
记一次减少Pandas DataFrame在科学计算中的内存占用
代码：
废话不多说直接上代码验证这个方法。详细内容可以看后面的说明。
import pandas as pd
import psutildef mem_usage(pandas_obj):if isinstance(pandas_obj,pd.DataFrame):usage_b pandas_obj.memory_usage(deepTrue).sum()else: # 我们假设这不是一个df&a…
机器学习基础知识之数据归一化
文章目录 归一化的原因1、最大最小归一化2、Z-score标准化3、不同方法的应用 归一化的原因
在进行机器学习训练时，通常一个数据集中包含多个不同的特征，例如在土壤重金属数据集中，每一个样本代表一个采样点，其包含的特征有经度、…
【python】数据可视化，使用pandas.merge()对dataframe和geopandas类型数据进行数据对齐
目录
0.环境
1.适用场景
2.pandas.merge()函数详细介绍
3.名词解释“数据对齐”（来自chatGPT3.5）
4.本文将给出两种数据对齐的例子
1）dataframe类型数据和dataframe类型数据对齐（对齐NAME列）；
数据对…
建筑行业搭建BI数据可视化平台，已成为大势所趋
建筑行业的项目管理是一个系统而复杂的过程，其重点主要是寻求造价、质量、工期等几个方面的平衡点，并且对项目的整个过程必须要有一个清晰和直观的了解。
因此可以通过BI数据可视化分析将各个节点的系统数据、业务数据完整的呈现，将各管理层…
图可视化工具Gephi使用教程
图可视化工具Gephi使用教程 操作界面介绍在Gephi界面完成图的绘制键盘输入导入CSV文件直接在概览界面鼠标点击创建自己创建一个红楼梦关系网络图用一个Web of Science上的数据创建一个有向关系图 静态随机数据使用动态数据的使用Gephi的可视化处理节点移动节点放大&缩小单个…
python自学有什么建议
Python简洁，高效的特点，大大提升了程序员的编码速度，极大的提高了程序员的办公效率，比如用其他编程语言5、6行代码才能整明白的，用Python可能1-2行就能解决。
Python 已成利器
在大数据领域中大放异彩
Python&#…
python爬虫简述
Python爬虫是一种自动化获取互联网数据的技术，它可以通过编写程序自动访问网站并抓取所需的数据。在本文中，我们将介绍Python爬虫的基础知识、常用库和实际应用。
一、Python爬虫的基础知识
爬虫的定义
爬虫是一种自动化获取互联网数据的技术…
查询淘宝商品历史价格（用Python记录商品每天价格变化）
taobao.item_history_price-获取淘宝天猫历史价格接口
思路：
第一步抓取商品的价格存入 Python 自带的 SQLite 数据库每天定时抓取商品价格使用 pyecharts 模块绘制价格折线图，让低价一目了然
接口说明：通过接口可以拿到整个平台࿰…
【数据分析与挖掘】数据预处理
目录概述一、数据清洗1.1 缺失值处理1.1.1 拉格朗日插值法1.1.2 牛顿插值法1.2 异常值处理二、数据集成2.1 实体识别2.2 冗余属性识别三、数据变换3.1 简单函数变换3.2 规范化3.3 连续属性离散化3.4 属性构造3.5 小波变换四、数据规约4.1 属性规约4.2 数值规约概述
数据挖掘过…
「缤纷色彩的饼状图」：通过使用matplotlib库绘制饼状图，让读者期待在这个色彩缤纷的图表中探索数据的美丽。
嘿，大家好！今天我要带你们探索一个有趣的话题：使用matplotlib库绘制饼状图。虽然这听起来可能有些复杂，但我会用轻松幽默的语言给大家讲解！准备好了吗？让我们开始吧！ 首先，我们需要导…
电商平台销量查询：2023年1月牛奶乳品热门排行榜
随着人们消费能力的提升以及健康意识的增强，牛奶乳品已经成为居民日常饮食中的重要组成部分，伴随人们整体消费的增长，牛奶乳品行业也越来越成熟。 今年1月份我国牛奶乳品行业的整体趋势如何呢？结合数据我们一同来分析！…
行列转换（一）• MySQL版
欢迎来到爱书不爱输的程序猿的博客, 本博客致力于知识分享，与更多的人进行学习交流 本文收录于SQL应知应会专栏,本专栏主要用于记录对于数据库的一些学习，有基础也有进阶，有MySQL也有Oracle 行列转换 • Mysql版 1.准备操作2.行转列1.1为何进…
多输入数据集选项标记（IN=）
DATA ONE;
INPUT X Y $;
DATALINES;
1 Amy
3 Hard
5 Kart
;
RUN;DATA TWO;
INPUT X Z $;
DATALINES;
2 Chico
4 Zipper
;
RUN;DATA A;/* 定义one2变量，数据源为one，定义two2变量，数据源为two */SET ONE(INONE2) TWO(INTWO2);/* 自定义两列分别…
规定临时变量选项（NOBS=）
DATA A;SET SASHELP.CLASS;OBS_N_;
RUN;DATA B;/* 当N1时加3并赋值给LAST */DO N1 TO LAST BY 3;/* 显示第N行，下一条为LAST行 */SET A POINTN NOBSLAST;OUTPUT;END;STOP;
RUN;PROC PRINT; RUN;
jvs-rules 规则引擎-变量管理（函数式）的配置说明
JVS规则引擎变量管理
变量在规则引擎中的作用
数据存储和共享：变量配置允许在规则引擎中存储和访问数据。通过定义变量，可以将数据存储在规则引擎中，使其可供规则和决策过程使用。这样可以消除重复数据存储的需求，提高数据的共享…
Pandas简要教程
文章目录1 前言2 安装3 Series4 DataFrame5 CSV5.1 head()5.2 tail()5.3 info()6 JSON7 数据清洗7.1 清洗空值7.2 清洗格式错误数据7.3 清洗本身错误数据7.4 清洗重复数据1 前言
Pandas 是 Python 语言的一个扩展程序库，用于数据分析，其主要数据结构是 …
2021年长三角高校数学建模竞赛B题锅炉水冷壁温度曲线解题全过程文档及程序
2021年长三角高校数学建模竞赛
B题 锅炉水冷壁温度曲线
原题再现： 在燃煤发电过程中，锅炉是一种重要的热能动力设备。它通过在炉膛中燃烧煤粉释放热量，将水加热成一定温度（或压力）的蒸汽，蒸汽再推动汽轮机…
2022年长三角高校数学建模竞赛A题学在长三角解题全过程文档及程序
2022年长三角高校数学建模竞赛
A题 学在长三角
原题再现： 长三角高等教育规模和优质高等教育资源数量处于全国领先水平。从 2019年和 2013-2019 年的平均值来看，长三角地区人口数量在全国占比分别是 16.22％和 16.10％，…
Kyligence x 明道云｜低代码平台助力中小企业实现存量背景下的创新增长
国内大部分制造企业在经历疫情后，终于迎来了市场端的消费需求的恢复和增长，但如何在激烈的竞争中以更少投入，获得更高回报，在市场上获得一席生存之地，成为了悬在众多企业头上的达摩克利斯之剑。在市场野蛮生长阶段时&a…
对数组中的所有元素进行限值指定的最小值和最大值：超过最大值的元素，则改写为最大值小于最小值的元素，则改写为最小值numpy.clip()
【小白从小学Python、C、Java】 【计算机等级考试500强双证书】 【Python-数据分析】 对数组中的所有元素进行限值 指定的最小值和最大值： 超过最大值的元素，则改写为最大值 小于最小值的元素，则改写为最小值 numpy.clip()
[太阳]选择题 请问…
2023年Q1电商平台饮料行业数据分析报告
我国的饮料市场非常庞大，从碳酸饮料到茶饮料，从功能性饮料到水，各个品类都有广泛的消费者基础。加之如今饮料消费场景不断延伸，家庭囤货、户外即饮、运动健身等成为消费者饮料需求的新场景，新需求带动线上饮料市场持续…
cs109-energy+哈佛大学能源探索项目 Part-3（探索性分析）
博主前期相关的博客见下： cs109-energy哈佛大学能源探索项目 Part-1（项目背景） cs109-energy哈佛大学能源探索项目 Part-2.1（Data Wrangling） cs109-energy哈佛大学能源探索项目 Part-2.2（Data Wrangling&a…
![[SPSS] SPSS统计分析软件简介](https://img-blog.csdnimg.cn/68cd87c9c71e41ef8b166502b07f8360.png)
[SPSS] SPSS统计分析软件简介
SPSS的英文缩写来源于以下两个
① Statistical Package for Social Science(社会科学统计软件包)
② Statistical Product and Service Solutions(统计产品与服务解决方案)
SPSS是一种专业的统计分析软件。为用户提供了直观的图形化菜单界面，用户的数据管理和统计…
【 Python 全栈开发 - 语法基础篇 - 20 】数据可视化
文章目录 一、数据可视化二、pandas1. 折线图2. 散点图3. 柱状图4. 饼图 三、matplotlib1. 折线图2. 散点图3. 柱状图4. 饼图 四、seaborn1. 安装和导入Seaborn2. 加载数据集3. 绘制散点图4. 绘制直方图5. 绘制核密度图6. 绘制条形图7. 绘制热力图 五、plotly安装plotly创建图表…
2022年国赛高教杯数学建模D题气象报文信息卫星通信传输解题全过程文档及程序
2022年国赛高教杯数学建模
D题 气象报文信息卫星通信传输
原题再现 在某些紧急救援任务中，需要进行物资空投。在地面通信系统瘫痪的情形下，为了更好地获得准确完整的地面气象观测信息，通常对任务区域的重要目标点采用派遣气象分队的方式来获…
numpy知识点总结
numpy 基本介绍 ufunc 接口方法的基础 reduce，聚合方法 accumulate，累计聚合 reduceat，按指定轴向、指定切片聚合 outer：外积 ndarray 数据结构的基础 数组的创建 特定的函数结构 从特定库函数创建 random系列 特定的结构创建数…
《区块链公链数据分析简易速速上手小册》第2章：数据获取基础（2024 最新版）
文章目录 2.1 访问区块链数据2.1.1 基础知识2.1.2 重点案例：使用 Python 查询比特币交易记录2.1.3 拓展案例 1：使用 Web3.py 读取以太坊智能合约状态示例智能合约（Solidity）Python 脚本读取智能合约状态结论 2.1.4 拓展案例 2&…
数据分析——python常用函数（数分入门级框架）
Python（数据分析常用函数）
目录
Python（数据分析常用函数）
一.numpy （数字化python）
1.1数据类型
1.2 ndarry生成
1.3 类型转换
1.4 形状与行列
1.5 数组运算
1.6 逻辑运算
1.7索引与切片&#x…
1.2 数值计算的误差 （初稿）
1.2.1 误差来源与分类
近似解 与 精确解 之间的误差称为 截断误差 或 方法误差。 eg： 可微函数 f(x) 用泰勒 (Taylor) 多项式 P n ( x ) f ( 0 ) f ′ ( 0 ) 1 ! x f ′ ′ ( 0 ) 2 ! x 2 ⋯ f ( n ) ( 0 ) n ! x n P_{n}(x)f(0)\frac{f^{\prime}(0)}{1!}x\f…
Qlik Sense : 条形图
条形图
“条形图适合比较多个值。维度轴显示所比较的类别条目，度量轴显示每个类别条目的值。”
Qlik Sense中的条形图是一种数据可视化工具，用于展示不同类别或维度之间的比较。它通过水平或垂直的条形表示数据，并根据数值的大小进行排序。…
【plt.imshow显示图像】：从入门到精通，只需一篇文章！【Matplotlib】
【plt.imshow显示图像】：从入门到精通，只需一篇文章！【Matplotlib】 🚀 利用Matplotlib进行数据可视化示例 🌵文章目录🌵 📘 1. plt.imshow入门：认识并安装Matplotlib库🌈…
《Go 简易速速上手小册》第2章：控制结构与函数（2024 最新版）
文章目录 2.1 条件语句：决策的艺术2.1.1 基础知识讲解2.1.2 重点案例：用户角色权限判断实现用户角色权限判断扩展功能实现代码功能扩展：添加或删除用户 2.1.3 拓展案例 1：成绩等级判断实现成绩等级判断功能实现代码扩展功能&#…
52_Pandas处理日期和时间列（字符串转换、日期提取等）
52_Pandas处理日期和时间列（字符串转换、日期提取等）
将解释如何操作表示 pandas.DataFrame 的日期和时间（日期和时间）的列。字符串与 datetime64[ns] 类型的相互转换，将日期和时间提取为数字的方法等。
以下内容进行…
《Go 简易速速上手小册》第3章：数据结构（2024 最新版）
文章目录 3.1 数组与切片：Go 语言的动态队伍3.1.1 基础知识讲解3.1.2 重点案例：动态成绩单功能描述实现代码扩展功能 3.1.3 拓展案例 1：数据分析功能描述实现代码扩展功能 3.1.4 拓展案例 2：日志过滤器功能描述实现代码扩展功能 3…
数据分析（一） 理解数据
1. 描述性统计（summary）
对于一个新数据集，首先通过观察来熟悉它，可以打印数据相关信息来大致观察数据的常规特点，比如数据规模（行数列数）、数据类型、类别数量（变量数目、取值范围…
见智未来：数据可视化引领智慧城市之潮
在数字时代的浪潮中，数据可视化崭露头角，为打造智慧城市注入了强大的活力。不再被深奥的数据所束缚，我们通过数据可视化这一工具，可以更加接近智慧城市的未来。下面我就以可视化从业者的角度来简单聊聊这个话题。 数据可视化首先为…
CCF-A类VLDB’24 3月1日截稿！数据界的璀璨盛会等你投稿！
会议之眼 快讯 第50届VLDB( International Conference on Very Large Databases)即超大型数据库国际会议将于 2024 年 8月25日至29日在中国广州朗廷广场隆重举行！VLDB大会是数据库领域的顶级学术盛会，而SIGMOD和ICDE则是与之齐名的另外两大数据库会议。这…
《区块链公链数据分析简易速速上手小册》第8章：实战案例研究（2024 最新版）
文章目录 8.1 案例分析：投资决策支持8.1.1 基础知识8.1.2 重点案例：股票市场趋势预测准备工作实现步骤步骤1: 加载和准备数据步骤2: 特征工程步骤3: 训练模型步骤4: 评估模型结论8.1.3 拓展案例 1：基于情感分析的投资策略准备工作实现步骤
Python Selenium 爬虫淘宝案例
爬虫专栏：http://t.csdnimg.cn/WfCSx
前言
在前一章中，我们已经成功尝试分析 Ajax 来抓取相关数据，但是并不是所有页面都可以通过分析 Ajax 来完成抓取。比如，淘宝，它的整个页面数据确实也是通过 Ajax 获取的&#x…
数据分析 | Pandas 200道练习题 进阶篇（1）
文章目录前期准备DA5 牛客网用户没有补全的信息DA6 查看牛客网哪些用户使用PythonDA7 牛客网Python用户的成就值DA8 文件最后用户的部分数据好久没有更新数据分析相关的内容，大家都知道数据分析的练习题不好找，博主这些天找的一个可以在线练习的网站推荐…
业务数据分析最佳案例！旅游业数据分析！⛵
💡 作者：韩信子ShowMeAI 📘 数据分析实战系列：https://www.showmeai.tech/tutorials/40 📘 本文地址：https://www.showmeai.tech/article-detail/388 📢 声明：版权所有，转…
Pandas中你一定要掌握的时间序列相关高级功能
💡 作者：韩信子ShowMeAI 📘 数据分析实战系列：https://www.showmeai.tech/tutorials/40 📘 本文地址：https://www.showmeai.tech/article-detail/389 📢 声明：版权所有，转…
BI 数据分析，数据库，Office，可视化，数据仓库
AIGC ChatGPT 职场案例 AI 绘画 与 短视频制作 PowerBI 商业智能 68集 Mysql 8.0 54集 Oracle 21C 142集 Office 2021实战应用 Python 数据分析实战， ETL Informatica 数据仓库案例实战 51集 Excel 2021实操 100集， Excel 2021函数大全 80集 Excel 2021…
每天一个数据分析题（一百六十）
以下关于代码片段（使用sklearn）的使用和PCA（主成分分析）的描述中，哪项是正确的？
A. preprocessing.scale(data)用于对数据进行归一化处理，确保PCA分析前各特征处于同一量级。
B. PCA(n_compon…
头歌：共享单车之数据分析
第1关 统计共享单车每天的平均使用时间
package com.educoder.bigData.sharedbicycle;import java.io.IOException;
import java.text.ParseException;
import java.util.Collection;
import java.util.Date;
import java.util.HashMap;
import java.util.Locale;
import java…
【R语言】单个分类模型性能评估、两个分类模型性能对比、统计检验
单个模型评估
# install.packages("pROC")
library(pROC)calculate_metrics <- function(label, prediction) {# 加载所需的包library(pROC)# 计算ROC曲线和AUCroc_obj <- roc(label, prediction)auc_value <- auc(roc_obj)# 寻找最佳cutoffcutoff <- c…
【金蝶BI方案】做生产订单分析，要分析哪些指标？
一般来说，做生产订单分析要做量大部分的内容。一个是分析总的计划生产数据和实际完成情况、良品情况；另一个则是详细分析每种产品的订单量、计划生产数量、实际完工数量等。从而让运营管理者更加直接地了解到生产订单情况，更好地安排生产任务…
pandas drop 方法
pandas.Series.drop
Series.drop 方法可以返回一个新对象，移除指定的 index labels.
import pandas as pd
import numpy as nps pd.Series(np.arange(5.), index[a, b, c, d, e])
s
"""
a 0.0
b 1.0
c 2.0
d 3.0
e 4.0
dtype: flo…
机器学习中7种常用的线性降维技术总结
上篇文章中我们主要总结了非线性的降维技术，本文我们来总结一下常见的线性降维技术。
1、Principal Component Analysis (PCA)
Principal Component Analysis (PCA) 是一种常用的降维技术，用于将高维数据集转换为低维表示，同时保留数据集的…
当前经济环境下，企业如何落地「降本增效」？
当前经济环境下，竞争形势激烈，IT企业面临着不少的挑战，比如说实施项目利润低、用人成本高、盈利能力难预测、项目前期投入大等，导致企业整体盈利能力下降。
不少IT老板都逐渐意识到「降本增效」的重要性，那么如何真正…
Live800：挖掘客服数据价值，有关企业的钱袋子
数据是阿里最值钱的财富——马云 近几年来“大数据”一词的热度有目共睹，各行业根据自身特点和需求不断探索符合行业特性的大数据应用场景。对客服行业来说，大数据正在改变客户服务，具体来说，客服数据的应用不再停留表层ÿ…
Python可视化分析项目高分课设
今天给大家分享一个基于python的django框架结合爬虫以及数据可视化和数据库的项目，该项目总体来说还是挺不错的，下面针对这个项目做具体介绍。
1：项目涉及技术：
项目后端语言：python
项目页面布局展现：前…
百年老字号输给时代？后浪奔涌，改变与适应是永恒的主题
这是最好的时代，也是最坏的时代。——查尔斯狄更斯 随着时代的发展，很多品牌消失在历史的长河里。中国品牌研究院调查数据显示，我国的老字号企业从建国初期的16000余家，到现在只剩下了1600余家，存活下来的不超过10%。能…
牛客网专项练习Pytnon分析库（六）
1.以下哪个不是数据缺失的类型（D）。
A.随机丢失
B.完全随机丢失
C.非随机丢失
D.故意丢失
解析： 数据缺失的类型包括：随机丢失、完全随机丢失和非随机丢失；随机丢失意味着数据丢失的概率与丢失的数据本身无关&…
时间序列预测（三）基于Prophet+XGBoost的销售额预测
时间序列预测（三）基于ProphetXGBoost的销售额预测
前面我们介绍了如何使用Prophet和LSTM，不知道你们发现了没有，前者似乎太简单了，后者呢好像又很复杂。那有没有什么很好的方法能很好的中和下呢？
已知的有…
数据分析案例-BI工程师招聘岗位信息可视化分析（文末送书）
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
活动回顾｜Kyligence x 亚马逊云科技，携手加速零售电商数智化转型
5月19日，Kyligence 与亚马逊云科技联合主办的「指标驱动，加速零售电商行业数智化转型」主题沙龙在上海成功举办。来自乐高、Kyligence、亚马逊云科技的专家分享了如何以数据和指标驱动，加速零售行业的数智化转型，并与现场观众进行…
chatgpt赋能Python-python3怎么用
Python3入门指南：从基础到进阶
Python是一款简单而强大的编程语言，具有易读性、易学性和高生产性的特点。它广泛应用于数据分析、机器学习、Web开发、自动化测试等领域。Python的第三个版本（Python3）相对于第二个版本（…
智慧园区的首选：山海鲸可视化解决方案
作为一名数据可视化的资深用户，我深知在智慧园区建设中，一个高效、直观的数据可视化工具的重要性。在众多解决方案中，山海鲸可视化以其独特的优势，成为了智慧园区数字化转型的理想选择。
智慧园区作为一个集成了先进信息技术和管…
【AI大语言模型】ChatGPT在地学、GIS、气象、农业、生态、环境等领域中的应用
以ChatGPT、LLaMA、Gemini、DALLE、Midjourney、Stable Diffusion、星火大模型、文心一言、千问为代表AI大语言模型带来了新一波人工智能浪潮，可以面向科研选题、思维导图、数据清洗、统计分析、高级编程、代码调试、算法学习、论文检索、写作、翻译、润色、文献辅助…
智能表格软件-FineReport JS实现自定义按钮快速给参数赋指定范围值
1. 概述 1.1 预期效果
周报、月报、季报、年报中有参数查询时，每次都需要手动选择，比较繁琐，所以就需要一种快速筛选的方法，只需点击某个按钮，就能准确定位到合适的时间范围，如下图所示： 1.2 实…
智慧社区的魔力：数据可视化的引领之力
在迅猛发展的科技时代，数据可视化作为一种强大的工具，为智慧社区的建设提供了无限可能。它不仅改变了我们对信息的获取方式，更为社区管理、居民生活等方面注入了新的活力。下面我就以可视化从业者的角度，简单聊聊这个话题。 数据可…
职场数据汇总，数据汇报，动态大屏可视化制作与数据分析
大屏可视化模板。 动态大屏可视化的制作方法与详细操作步骤
如下操作：
AIGC ChatGPT 职场案例 AI 绘画 与 短视频制作 PowerBI 商业智能 68集 Mysql 8.0 54集 Oracle 21C 142集 Office 2021实战应用 Python 数据分析实战， ETL Informatica 数据仓库案…
大数据分析案例-基于决策树算法构建员工离职预测模型
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
Pandas.to_csv()函数及全部参数使用方法一文详解+实例代码
目录
前言
一、基础语法与功能
二、参数说明和代码演示
1.path_or_buf 选择文件/文件路径写入
2.sep 指定分隔符 3.na_rep 指定缺少数据表示
4.float_format 指定浮点型字符串输出格式
5. columns 指定要写入的列
6.header 是否需要写入列名 7.index 是否写入行名称&am…
R语言数据分析（三）
R语言数据分析（三） 文章目录 R语言数据分析（三）一、可视化步骤1.1 创建ggplot1.2 添加美学和图层1.3 简化代码 二、可视化分布2.1 分类变量2.2 数值变量 三、可视化关系3.1 数值变量和分类变量3.2 两个分类变量3.3 两个数值变量3.…
【Python百日进阶-数据分析】Day144 - plotly箱线图:go.box()实例
文章目录4.2 go.Box 箱线图4.2.1 基本箱线图4.2.2 基本水平箱线图4.2.3 显示基础数据的箱线图4.2.4 修改计算四分位数的算法4.2.5 带有预先计算的四分位数的箱线图4.2.6 彩色箱线图4.2.7 箱线图样式均值和标准差4.2.8 造型异常值4.2.9 分组箱线图4.2.10 分组水平箱线图4.2.11 彩…
2024图像处理分析与信息工程国际学术会议(IACIPIE2024)
2024图像处理分析与信息工程国际学术会议(IACIPIE2024)
会议简介
2024图像处理分析与信息工程国际学术会议（IACIPIE2024）将在中国长沙举行。
IACIPIE2024是一个年度会议，探讨图像处理分析和信息工程相关领域的发展和影响，旨在介…
一些matlab的常用用法。在MATLAB中，如何实现数据的导入和导出？
一些matlab的常用用法。 MATLAB（Matrix Laboratory）是一款广泛使用的数值计算环境和编程语言，主要用于算法开发、数据可视化、数据分析以及数值计算等。以下是一些MATLAB的常用用法：
创建矩阵： 使用方括号 [] 创建矩阵…
企业内部数据如何进行数据分析
在当今数字化时代，企业内部数据的分析已经成为了提高业务竞争力的必备手段。通过科学、系统地分析企业内部数据，企业能够更好地了解市场需求、产品质量、客户满意度等诸多关键指标，优化运营策略，提升效率和盈利能力。数聚将介绍企…
Windows+Yolo3-darknet训练自己数据集并测试
WindowsYolo3-darknet训练自己的数据集并测试
一、首要条件 Windows 7下配置好VS2015OPENCV3.4.2YOLO3CUDA10.0CUDNN7.5生成darknet.exe。具体配置可参考我的博客：https://blog.csdn.net/wszswllnzn_/article/details/100760477 二.制作数据集 1、方法1 使用软件la…
数字化转型导师坚鹏：如何制定政府数字化转型年度培训规划
如何制定政府数字化转型年度培训规划
——以推动政府数字化转型战略落地为核心，实现知行果合一 课程背景：
很多政府都在开展政府数字化转型培训工作，目前存在以下问题急需解决：
缺少针对性的政府数字化转型年度培训规划
不清…
《CSS 简易速速上手小册》第9章：CSS 最佳实践（2024 最新版）
文章目录 9.1 维护大型项目的 CSS9.1.1 基础知识9.1.2 重点案例：构建一个可复用的 UI 组件库9.1.3 拓展案例 1：优化现有项目的 CSS 结构9.1.4 拓展案例 2：实现主题切换功能 9.2 BEM、OOCSS 和 SMACSS 方法论9.2.1 基础知识9.2.2 重点案例&…
python学习笔记-查看数据结构、均值、中位数、分位数、众数、离中趋势（标准差、方差、求和、偏态系数、风险系数）正态分布pdf、cdf、ppf
①引入pandas包，命名为pd。
import pandas as pd
②读入HR.csv数据
dfpd.read_csv(“./data/HR.csv”)
③查看是什么结构
type(df)
④查看单个类别satisfaction_level的数据结构
type(df[“satisfaction_level”])
⑤查看均值的数据结构
type(df.mean())
…
智慧物流之道：数据可视化引领全局监控
在智慧物流的背景下，数据可视化催生了物流管理的全新范式。首先，通过数据可视化，物流企业可以实现对整个供应链的全景式监控。下面我就可以可视化从业者的角度，简单聊聊这个话题。 首先，图表和地图的直观展示使决策者能…
atlas200I DK使用1 jupyter lab服务器搭建
jupyter lab服务器安装： pip install jupyterlab # 安装
jupyter pip install jupyterlab-language-pack-zh-CN # 安装汉化包，需要自己选择语言，自行选择 jupyter lab --generate-config # 上面命令会生成jupyterlab配置文件，路径…
每天一个数据分析题（一百七十八）
在大样本（样本量为n）下进行某一列数据（A列）均值的区间估计时，假设点估计的值计算为a，显著性水平为0.05，z0.025为给定的显著性水平下的正态分布的临界值，则使用EXCEL的计算方法正确的…
给定具体日期 返回给定日期是星期几 calendar.weekday(year,month,day)
【小白从小学Python、C、Java】 【计算机等考500强证书考研】 【Python-数据分析】 给定具体日期 返回给定日期是星期几 calendar.weekday(year,month,day)
[太阳]选择题 如果2024年2月12日是星期一，请问最后一个print语句的运行结果是？ import calenda…
Python爬虫之Ajax数据爬取基本原理
前言
有时候我们在用 requests 抓取页面的时候，得到的结果可能和在浏览器中看到的不一样：在浏览器中可以看到正常显示的页面数据，但是使用 requests 得到的结果并没有。这是因为 requests 获取的都是原始的 HTML 文档，而浏览器中…
大数据分析技术工程师CCRC-BDATE
大数据分析技术工程师介绍 大数据始于科技之美，归于创造价值。大数据时代，“谁用好数据，谁就能把握先机、赢得主动”。当下数据驱动的电信、社交媒体、生物医疗、电子政务商务等行业都在产生着海量的数据，随着大规模数据关联、交叉…
Hive3入门至精通(基础、部署、理论、SQL、函数、运算以及性能优化)15-28章
Hive3入门至精通(基础、部署、理论、SQL、函数、运算以及性能优化)15-28章[Hive3入门至精通(基础、部署、理论、SQL、函数、运算以及性能优化)1-14章](https://blog.csdn.net/wt334502157/article/details/127489556)
Hive3入门至精通(基础、部署、理论、SQL、函数、运算以及性…
python做了个自动关机工具，再也不会耽误我下班啦
上班族经常会遇到这样情况，着急下班结果将关机误点成重启，或者临近下班又通知开会，开完会已经迟了还要去给电脑关机。
【阅读全文】
今天使用PyQt5做了个自动关机的小工具，设置好关机时间然后直接提交即可，下班就可以…
举个栗子~Tableau 技巧（242）：学做 条形图 和 桑基图 的组合图表
在应用模板：超市数据分析模型 中，产品分析仪表板（如下图）的右侧视图呈现出：各类别及其子类别产品的销售总额排列——各类别产品的销售总额、子类别的销售额占比。
许多数据粉希望学习这个图表的实现方法。其实&#…
获取DataFrame中最小值的索引 idxmin()函数
【小白从小学Python、C、Java】
【Python-计算机等级考试二级】
【Python-数据分析】
获取DataFrame中最小值的索引
idxmin()函数 [太阳]选择题 下面代码中data.idxmin()和data.idxmin(axis1)返回结果正确的是？
import pandas as pd
data pd.DataFrame({
A:…
举个栗子~Tableau 技巧（243）：创建自动排列的图表矩阵
在某些分析场景中，需要呈现多个成员的数据情况。当多个相同的图表在同一视图呈现时，默认会纵向排列（如下图），用户需要通过滑条来上下翻页，很不利于查看和对比数据。 那么，有没有办法在同一个视图…
Pyecharts | 《白蛇2:青蛇劫起》20000+数据分析可视化
文章目录🏳️🌈 1. 导入模块🏳️🌈 2. Pandas数据处理2.1 读取数据2.2 数据大小2.3 查看索引、数据类型和内存信息🏳️🌈 3. Pyecharts数据可视化3.1 评分等级分布3.2 每日评论量3.3 每小时评论量3.4…
2024年1月京东冰箱行业数据分析：TOP10品牌销量及销额排行榜
鲸参谋监测的京东平台1月份冰箱市场销售数据已出炉！
根据鲸参谋电商数据分析平台显示，今年1月份，京东平台上冰箱的销量超105万件，环比上个月增长约40%，同比去年下滑18%；销售额约30亿元，环比上个…
每天一个数据分析题（一百六十八）
在使用Python做用户画像时有如下代码： sns.boxplot(x ‘type’，y ‘trans count’，data Creditcard) sns表示seaborn,下面关于代码的描述错误的是（）。
A. data参数传入的可能是一个pandas 的dataframe对象。
B. 该…
2023年美国大学生数学建模A题:受干旱影响的植物群落建模详解+模型代码(一)
目录
前言
一、题目理解
背景
解析：
要求
二、建模
1.相关性分析
2.相关特征权重
只希望各位以后遇到建模比赛可以艾特认识一下我，我可以提供免费的思路和部分源码，以后的数模比赛只要我还有时间肯定会第一时间写出免费开源思路&…
体育赛事直播系统软件开发
体育赛事直播系统的软件开发是一个复杂的项目，需要多个方面的准备和工作。以下是开发这样一个系统可能涉及的主要步骤和考虑因素：
需求分析和规划：首先需要明确系统的功能需求，包括直播视频的流媒体处理、用户管理、直播赛事安排…
990-29产品经理:IT risk management process IT风险管理流程
IT risk management process IT风险管理流程
In business, IT risk management entails a process of identifying, monitoring and managing potential information security or technology risks with the goal of mitigating or minimising their negative impact.
Exampl…
自然语言处理之语言模型（LM）深度解析
自然语言处理（Natural Language Processing，NLP）作为人工智能的一个重要分支，近年来在学术界和工业界均取得了显著的进展。语言模型（Language Model, LM）是自然语言处理技术中的基石，它能够预测…
SQL Server ID 自增不连续、删除数据后再次插入ID不连续
背景
当我们使用SQL Server 进行数据库操作时，经常会把 Table 的 ID 设置成主键自增 PRIMARY KEY IDENTITY，但是这样做存在一个问题就是 当我们删除一行数据后，再次添加后会看到ID的顺序不连续，如下所示。
查询一下：…
100天精通Python（数据分析篇）——第76天：Pandas数据类型转换函数pd.to_numeric（参数说明+实战案例）
文章目录专栏导读一、to_numeric参数说明0. 介绍1. arg1）接收列表2）接收一维数组3）接收Series对象2. errors1）errorscoerce2）errors ignore3. downcast1）downcastinteger2）downcastsigned3&…
Python 之 Pandas DataFrame 数据类型的简介、创建的列操作
文章目录一、DataFrame 结构简介二、DataFrame 对象创建1. 使用普通列表创建2. 使用嵌套列表创建3 指定数值元素的数据类型为 float4. 字典嵌套列表创建5. 添加自定义的行标签6. 列表嵌套字典创建 DataFrame 对象7. Series 创建 DataFrame 对象三、DataFrame 列操作1. 选取数据…
物业智能水电抄表管理系统
物业智能水电抄表管理系统是物业管理行业的关键技术之一，其结合了智能化、远程监控和数据分析等功能，为物业管理公司和业主提供了高效、精准的水电抄表管理解决方案。该系统具有多项优势，能够提升物业管理效率，降低成本࿰…
2023年美国大学生数学建模A题:受干旱影响的植物群落建模详解+模型代码(二)
前言
资源放CSDN上面过不了审核，都快结束了都没过审真的麻了，订阅专栏的同学直接加我微信直接发你。我只打造优质专栏。专注建模四年，博主参与过大大小小数十来次数学建模，理解各类模型原理以及每种模型的建模流程和各类题目分析方法。此专栏的目的就是为了让零基础快速使…
水电表远程集中抄表管理系统
水电表远程集中抄表管理系统是当前水电行业智能化发展的关键技术之一，为水电企业和用户提供了便捷、高效的抄表管理解决方案。该系统结合了远程监控、自动抄表、数据分析等多种功能，实现了水电抄表的智能化和精准化，为用户节省了大量人力物力…
R数据分析：扫盲贴，什么是多重插补
好多同学跑来问，用spss的时候使用多重插补的数据集，怎么选怎么用？是不是简单的选一个做分析？今天写写这个问题。
什么时候用多重插补
首先回顾下三种缺失机制或者叫缺失类型： 上面的内容之前写过，这儿就不…
毕业设计 基于大数据的高校校园学生一卡通数据分析
文章目录0 项目简介任务 1数据导入与预处理任务 1.1 探查数据质量并进行缺失值和异常值处理1.1.2检查重复值1.1.3数据内容总览1.1.4数据分布总览1.1.5消费金额和消费次数观察消费金额和消费次数的散点图1.1.6观察 CardCount 特征的分布情况任务2 食堂就餐行为分析任务 2.2 食堂…
R语言使用names函数为dataframe数据中的所有列重命名
R语言使用names函数为dataframe数据中的所有列重命名 目录
R语言使用names函数为dataframe数据中的所有列重命名
#导入包和库
仿真数据1</
wirehark数据分析与取证misc1.pcap
什么是wireshark？wiresharekwireshark--misc1.pcap数据包wiresharek
Wireshark（前称Ethereal）是一个网络封包分析软件。网络封包分析软件的功能是检索取网络封包，并同时显示出最详细的网络封包数据。Wireshark使用WinPCAP作为接口…
纯干货解答 | ERP是什么？有什么作用呢？
这是一篇花了五天时间抠碎了写出来的文章，因为要搞清楚ERP，不能直接上概念，我们需要从“ERP从何而来、为何而来、往哪里发展”一点点讲。
大家且往下看。
说到ERP，你就会想到制造业，那是因为溯源ERP，它的…
为什么花了上百万，供应链还是一团糟？看这一篇就够了！
本文较长，不想看全文的道友可根据自己兴趣定位到对应小节阅读，目录如下：01 寒冬之下，企业如何实现新增长？02 供应链赋能的理念和价值03 如何实现供应链赋能04 标杆企业——建霖集团01 寒冬之下企业如何实现新增长&…
数据分析|概率密度函数曲线及绘制
目录前言概率密度函数曲线几类经典的概率密度函数两种绘制密度曲线的方法参考文献前言
很多数据科学家在做回归模型评估的时候，不仅会去计算模型拟合优度R2，平均绝对误差还会去看测试集的每个样本偏差的分布情况，这个时候就需要用到概率密度…
【毕业设计】天气数据分析系统 - python 大数据
文章目录1 前言2 项目简介3 开始分析3.1 海洋对当地气候的影响3.2 导入数据集3.3 温度数据分析3.4 湿度数据分析3.5 风向频率玫瑰图3.6 计算风速均值的分布情况4 最后1 前言
🔥 Hi，大家好，这里是丹成学长的毕设系列文章！
&#…
pandas 中如何按行或列的值对数据排序?
在处理表格型数据时，常会用到排序，比如，按某一行或列的值对表格排序，要怎么做呢？
这就要用到 pandas 中的 sort_values() 函数。
一、 按列的值对数据排序
先来看最常见的情况。
1.按某一列的值对数据排序
以下面…
SAS基本统计分析语句
SAS基本统计分析语句一、正态性检验(univariate)二、t检验(means univariate ttest)三、方差分析1. 完全随机设计资料的方差分析(anova)2. 随机区组设计资料的方差分析(anova)3. 两阶段交叉设计资料的方差分析(anova)4. 两因素析因设计资料的方差分析(anova)5. 正交设计资料的方…
云计算实验4 面向行业背景的大数据分析与处理综合实验
一、 实验目的
掌握分布式数据库接口Spark SQL基本操作，以及训练综合能力，包括：数据预处理、向量处理、大数据算法、预测和可视化等综合工程能力
二、 实验环境
Linux的虚拟机环境和实验指导手册
三、 实验任务
完成Spark SQL编程实验、…
pandas对某一列的种类编码
文章目录背景实现背景
如果某一列的种类特别多，想要通过映射来编码，这样非常麻烦，所以可以对一个列全部一次性进行编码。
例如我的数据如下： 我需要编码专业这个列，我们可以看到这一列很多：
实现
使用…
【python与数据分析】Matplotlib数据可视化
目录
前言
一、数据可视化库matplotlib
1.综述
2.pyplot基础语法
（1）创建画布与创建子图
（2）添加画布内容
（3）保存与展示图形
（4）设置pyplot的动态rc参数
二、绘制折线图
…
Numpy字符串数组总结
文章目录字符串函数列表函数说明numpy中的
char模块中，封装了一些处理字符串数组的函数字符串函数列表
类别方法创建array, asarray, chararray运算add, multiply填充center, ljust, rjust, zfill大小写转换lower, upper, capitalize, title, swapcase去除lstrip, …
运行写在字符串中的Python代码 exec(‘‘‘print(1)‘‘‘)
【小白从小学Python、C、Java】 【Python-计算机等级考试二级】 【Python-数据分析】 运行写在字符串中的Python代码 exec(print(1)) [太阳]选择题
请问对以下Python代码说法错误的是？ print("【执行】exec(print(1))") exec(print(1)) myFuncsumab prin…
【TFS-CLUB社区 第7期赠书活动】〖从零开始利用Excel与Python进行数据分析 自动化办公实战宝典〗等你来拿，参与评论，即可有机获得
文章目录❤️🔥 赠书活动 - 《从零开始利用Excel与Python进行数据分析 自动化办公实战宝典》❤️🔥 编辑推荐❤️🔥 抽奖方式与截止时间❤️🔥 赠书活动 → 获奖名单❤️🔥 赠书活动 - 《从零开始利用Excel与…
R语言使用rpart包拟合随机森林回归模型：rpart函数进行决策树的生长、prune函数来对决策树进行剪枝、plot函数可视化决策树结构图
R语言使用rpart包拟合随机森林回归模型：rpart函数进行决策树的生长、prune函数来对决策树进行剪枝、plot函数可视化决策树结构图 目录
Class 07 - 功能包的安装和 tidyverse 介绍
Class 07 - 功能包的安装和 tidyverse 介绍 tidyverse 简介功能包（package）的安装tidyverse 的安装 功能包（package）的加载tidyverse 的加载 功能包（package）的更新tidyverse 核心功能browseVignettes 函数…
【机器学习算法】手动Python实现KNN分类算法，并用iris数据集检验模型效果
目录一、KNN算法Python实现1、导入包2、 画图，展示不同电影在图上的分布3、训练样本和待测样本准备4、计算待测样本点到每个训练样本点的距离5、查找离待测样本点最近的K个训练样本点的类型6、找出数量最多的类7、写成自定义函数二、鸢尾花（iris…
共享单车之数据分析-统计共享单车每天的平均使用时间
第1关：统计共享单车每天的平均使用时间
任务描述相关知识 如何配置Hbase的MapReduce类如何使用Hbase的MapReduce进行数据分析编程要求测试说明 任务描述
本关任务：使用Hbase的MapReduce对已经存在 Hbase 的共享单车运行数据进行分析，统计共…
2023年认证杯SPSSPRO杯数学建模D题(第一阶段)立体车库的自动调度问题全过程文档及程序
2023年认证杯SPSSPRO杯数学建模
D题 立体车库的自动调度问题
原题再现： 随着人们生活水平的提高，汽车保有量日益增加，而城市土地资源有限，传统平面停车场土地面积利用率低, 这样便形成了交通拥挤、停车困难的现象。为解决该问题…
数据分析与预处理常用的图和代码
1.训练集和测试集统计数据描述之间的差异作图：
def diff_color(x):color red if x<0 else (green if x > 0 else black)return fcolor: {color}(train.describe() - test.describe())[features].T.iloc[:,1:].style\.bar(subset[mean, std], alignmid, colo…
用数据讲故事：十大统计学/机器学习魔法指数
统计学和机器学习为数据分析提供理论基础，入门时我看过很多统计学相关书籍，复杂的公式和推导过程让我一度陷入迷茫。对于数据科学/分析师来说，如何使用统计学知识并应用到我们的分析场景中更为重要。本文主要基于数据分析工作中的实际应用场景…
Graphpad Prism9.5.1 安装教程 (含Win/Mac版)
GraphPad Prism
GraphPad Prism是一款非常专业强大的科研医学生物数据处理绘图软件，它可以将科学图形、综合曲线拟合（非线性回归）、可理解的统计数据、数据组织结合在一起，除了最基本的数据统计分析外，还能自动生成统…
内行才知道的大数据分析平台
随着这几年来市场需求的增长以及技术的更新，大数据分析平台越来越多地出现在大家的需求采购单上，但面对大数据分析平台，又有多少人知道他们之间的优势区别？今天就从尽量用小白的语言，聊聊内行眼里的大数据分析平台。
…
数据中台建设浪费，数据分析系统如何设计，听听 Gartner 怎么说
2023 年数据分析趋势：数据即业务、从平台到生态、以人为中心 作者 | 宋慧
出品 | CSDN 云计算 数据的价值被越来越多的行业用户看到。不过各种数据系统百花齐放，前几年关于数据中台的讨论仍然众说纷纭。国际研究机构 Gartner 持续对数据分析市场做了调研…
如何入门python
欢迎大家一起分享，你是如何入门Python的~
方向一：你是如何学习/自学 Python 的？ 向您推荐一些学习Python的经验、方法、资料、工具等，希望对您有所帮助： 在线教程和书籍：Python有许多在线教程和书籍可以帮…
天猫订单之数据分析与挖掘——聚类分析
天猫订单之数据分析与挖掘——聚类分析 文章目录 天猫订单之数据分析与挖掘——聚类分析0. 写在前面1. 聚类分析1.1 聚类分组1.2 kmeans算法0. 写在前面 Windows：Windows10Python：Python3.9本次案例项目主要是采用Pandas和Numpy对天猫订单数据集进行处理、挖掘、分类和聚类分…
Python处理excel基本操作
近期因为工作需要，用Python处理excel表格数据，其中常用的命令如下： #!/usr/bin/env python
# -*- coding: utf-8 -*-
# Author : Peidong
# Site :
# File : excel_example.py
# Software: PyCharm
"""
本例为Python操…
【数据分析】大型ADCP数据集的处理和分析（Matlab代码实现）
👨🎓个人主页：研学社的博客 💥💥💞💞欢迎来到本博客❤️❤️💥💥 🏆博主优势：🌞🌞🌞博客内容尽量做到思维缜…
【Python百日进阶-数据分析】Day138 - plotly甘特图:px.timeline()
文章目录一、语法二、参数三、返回值四、实例4.1 带有 plotly.express 的甘特图和时间表4.1.1 普通甘特图4.1.2 px.timeline 的离散颜色4.1.3 px.timeline 的连续颜色4.1.4 同一水平线上有多个条4.1.5 Dash中使用甘特图一、语法
甘特图是一种条形图，用于说明项目进…
《R语言数据分析》期末试题
《R语言数据分析》期末试题
数据赋人工系统以智能。北邮《R语言数据分析》课程从问道、执具、博术三个方面，阐述机器学习/数据挖掘的方法论（道）、编程工具R语言（具）以及经典算法模型（术）。通过课程的学习，可一起领悟数据分析之哲理、掌握模型算法之要义、提升工程实践…
python实现动态柱状图
目录
一.基础柱状图 反转x轴，y轴，设置数值标签在右侧 小结
二.基础时间线柱状图
三.GDP动态柱状图绘制
1.了解列表的sort方法并配合lambda匿名函数完成列表排序
2.完成图表所需数据
3.完成GDP动态图表绘制
添加主题类型 设置动态标题 四.完整代码…
非专业人士如何完成数据采集？纯干货，一文看懂
写在前面：
本教程能够解决大部分人的数据采集及分析需求，实用、简单，尤其适合Excel大户、办公族、业务人员，或者不会编程、不懂数据分析理论的技术小白……
来不及看的可以先点赞收藏！
01 点对点的采集：…
Python基础—文件操作
Python基础—文件操作
文件操作
文件是指为了重复使用或长期使用的目的，以文本或二进制形式存放于外部存储器（硬盘、U盘、光盘等）中的数据保存形式，文件是信息交换的重要途径，也是利用程序解决实际问题的重要媒介。 …
TOOLS_Pandas groupby 分组聚合常用方法使用示例
TOOLS_Pandas groupby 分组聚合常用方法使用示例
根据给定列中的不同值对数据点（行）进行分组；分组后的数据可以计算生成组的聚合值； 注意：下文仅是常用的一些示例，实际操作时可组合使用的方式要多得多&…
28个数据可视化图表的总结和介绍
数据可视化本身就是一种通用语言。我们这里通用语言的意思是：它能够向各行各业的人表示信息。它打破了语言和技术理解的障碍。数据是一些数字和文字的组合，但是可视化可以展示数据包含的信息。
“数据可视化有助于弥合数字和文字之间的差距”——Brie E…
【阶段二】Python数据分析数据可视化工具使用05篇：统计直方图、面积图与箱型图
本篇的思维导图： 统计直方图 统计直方图（histogram）形状类似柱形图，却有着与柱形图完全不同的含义。统计直方图涉及统计学的概念，首先要从数据中找出它的最大值和最小值，然后确定一个区间，使其包含全部测量数据，将区间分成若干个小区间，统计测量结果出现在各…
世界杯数据可视化分析
目录
1.数据来源
2.字段解释
世界杯成绩信息表：WorldCupsSummary
世界杯比赛比分汇总表：WorldCupMatches.csv
世界杯球员信息表：WorldCupPlayers.csv
3.数据分析及可视化 世界杯已经告一段落，作为一个学习大数据的学生&…
数据科学必备技能：掌握Pandas序列和数据框
数据科学必备技能：掌握Pandas序列和数据框 文章目录数据科学必备技能：掌握Pandas序列和数据框一、Pandas简介二、序列1、序列创建及访问2、序列属性3、序列方法4、序列切片5、序列聚合运算三、数据框1、数据框创建2、数据框属性3、数据框方法4、数据框切…
数据分析面试题-面试话术
目录标题1，数据分析流程2，游戏内数据分析涉猎的少，如何证明自己有能力胜任？（学习话术）3，对于游戏而已，重要的指标4，数据分析的理解是什么，如何学习数据分析的…
pandas库中的read_csv函数读取数据时候的路径问题详解(ValueError: embedded null character)
read_csv()函数不仅是R语言中的一个读取csv文件的函数，也是pandas库中的一个函数。pandas是一个用于数据分析和处理的python库。它的read_csv函数可以读取csv文件里的数据，并将其转化为pandas里面的DataFrame对象。它由很多参数可以设置，例如…
数据挖掘--金融信用评分卡的制作(python)
金融风控模型之如何制作评分卡
import pandas as pd
import numpy as np
from matplotlib import pyplot as plt
from sklearn.ensemble import RandomForestRegressor
from sklearn.model_selection import train_test_split
import warnings
from imblearn.over_sampling im…
Hive中高频常用的函数和语法梳理及业务场景示例
Hive中高频常用的函数和语法梳理及业务场景示例
聚合函数
collect_list - 收集列值到一个数组
collect_list函数用于将指定列的值收集到一个数组中，并返回该数组作为结果。它通常在GROUP BY子句中使用，以将相同键的值收集到一个数组中进行聚合操作
以…
python·数据分析
python数据分析（numpy和pandas）Jupyter notebook使用pandasSeriesDataFramelociloc写入csv文件读取csv文件空值处理某列数据的字符串操作指定分隔符 数值筛选合并文件横向合并纵向合并新增列分组聚合numpyNumpy数组和Python列表性能对比：创建…
什么你还不知道招聘信息，小唐来教你——最新2021爬取拉勾网招聘信息（二）
文章目录前言一、准备我们的库二、数据清洗三、核密度图及词云制作四、完整代码五、扩展上一篇：什么你还不知道招聘信息，小唐来教你——最新2021爬取拉勾网招聘信息（一） 下一篇：没有拉！ 前言
既然我们上面…
chatgpt赋能python：Python商场打折问题详解
Python商场打折问题详解
在商场营销策略中，打折是一种常见的手段。而Python作为一种广泛应用于数据科学和机器学习的编程语言，也可以用来解决商场打折问题。本文将介绍Python实现商场打折的方法和步骤，希望能对广大商场营销人员和数据科学家…
基于某知名招聘网站的上海财务岗位数据分析（含excel可视化）
1.前言：之前博主在学习PYTHON的爬虫，正好有一个很要好的朋友向我询问上海财务岗位的招聘信息，便爬取了XX网当时上海财务岗的招聘信息。爬虫采用了PYTHON2.7。其实博主是很看好PYTHON3.4，无奈相关的包并没有全方面完美支持…
Ubuntu16.04 conda安装sklearn、panda、MNE
该博客为《Ubuntu 相关》系列博客的第十六篇，该系列博客主要对Ubuntu安装各种软件或者库进行一个记录，方便重装系统后快速恢复工作。 Ubuntu16.04 conda安装sklearn安装sklearnsklearn简介sklearn安装安装pandapanda简介panda安装安装mnemne简介mne安装安…
1行代码实现Python数据分析：图表美观清晰，自带对比功能丨开源
你是否也在朋友圈看过这样的小广告： 「你要悄悄学Python，然后惊艳所有人。」
现在，GitHub上一位博主告诉你：不用学，用sweetviz就行。
这是一个基于Python编写的数据分析软件，只要掌握3种函数用法…
发现数据异常的分析逻辑
【与数据同行】已开通综合、数据仓库、数据分析、产品经理、数据治理及机器学习六大专业群，加微信号frank61822702 为好友后入群。新开招聘微信群，请关注【与数据同行】公众号，后台回复“招聘”后获得入群方法。正文开始数据分析除了找规律、…
Live800:数据安全就是财产安全，你的在线客服系统安全吗？
数据是阿里最值钱的财富——马云 随着线上生意的风生水起，企业获客成本逐年递增，客户数据就是企业最重要的财产，数据安全则是企业的重中之重。但人员流动、行业竞争等多种因素导致企业的数据安全存在一些安全隐患。 案例一：
前段…
用Python掌握QQ群聊天记录数据分析
当你打开QQ群时，你是否想过如何用Python提取里面的数据呢？随着社交媒体的兴起，QQ群成为了人们交流的重要平台，而提取这些数据可以帮助我们了解用户喜好和行为。那么，如何使用Python提取QQ群数据呢？
这里做了一套脚本用于提取QQ群的消息并进行一些简单的处理。
其中包括…
python --生成时间序列，作为横轴的标签。时间跨越2008-2022年，生成每年的6-10月的第一天作为时间序列
python 生成制定的时间序列作为绘图时x轴的标签
问题需求
在绘图时，需要对于x轴的标签进行专门的设置，整体时间跨越2008年-2022年，将每年的6-10月的第一天生成一条时间序列，绘制成图。
解决思路
对于时间序列的生成࿰…
SAS应用入门学习笔记4
分组和排序：
By 语句：
1）使用sort过程对观测进行排序：
proc sort data输入数据集 <out输出数据集> <其他选项>; # 如果有out，那么原有数据集不变； by 变量列表; # 可以加一个变量或两个…
BI 到底是什么，看看这篇文章怎么说
随着数据价值得到了认可，数据开始成为个人、企业乃至国家的重要战略资产，但数据资产不能直接产生价值，而是需要通过数据分析、数据可视化等数据处理手段将数据转化为信息和知识，才能进行资产的价值化，这时候商业智能BI…
收藏|一文掌握数据分析在企业的实际流程
一、数据分析概念
1.1 数据分析
是指用适当的统计分析方法对收集来的大量数据进行分析，将他们加以汇总和理解并消化，以求最大化地开发数据的功能，发挥数据的作用。
1.2 数据分析包括
描述性数据分析（初级数据分析）…
2022年直播电商成交额，更是达到了24816亿元的成交额
近年来移动网络覆盖率、网速提升，直播行业不在是陌生的行业，直播也诞生了繁多的领域，游戏直播、户外直播等，当然还有今天的主题“直播带货”。直播带货是线上销售模式的一种，由衷是为了更好的把商品展示给用户观看&…
Power BI 常见数据导入错误（查询超时、找不到文件、数据类型错误、找不到表格）
本系列的文章：
《Power BI windows下载安装流程）》《Power BI 11个必学官方示例数据案例（附下载链接）》《Power BI 数据导入（SQL Server、MySQL、网页数据）》《Power BI 存储模式介绍（导入、Di…
返回数组的上三角和下三角np.triu()和np.tril()
【小白从小学Python、C、Java】 【计算机等级考试500强双证书】 【Python-数据分析】 返回数组的上三角和下三角 np.triu()和np.tril() 选择题 以下说法错误的是? import numpy as np anp.array([[1,2,3],[4,5,6],[7,8,9]]) print("【显示】a：\n",a) pri…
数据分析与SAS学习笔记4
INPUT语句：格式修饰符：
“:” 修饰符。表示从下一个非空格列读入数据，直到:1 遇到再下一个空格列； 2 读到预先定义的变量长度； 3 数据行结束。哪个先出现就在哪儿结束。
“&” 修饰符。表示从下一个非空格列读入…
统计软件与数据分析Lesson1--3 其它知识点
提示：统计软件与数据分析Lesson1至Lesson3 补充知识点 统计软件与数据分析Lesson1--3 其它知识点1.python查看数据基本信息1.1查看变量类型:type(变量名)1.2查看变量长度:len(变量名)1.3查看变量包含的属性:dir(变量名)1.4查看Numpy数组基本信息1.5查看dataframe数据…
【Python】pd.set_option()的效果与解析
【Python】pd.set_option()的效果与解析 文章目录【Python】pd.set_option()的效果与解析1. 介绍2. API3. 举例-13.1 显示所有行3.2 显示所有列3.3 显示列中单独元素的最大长度4. 举例-24.1 换行显示、每行最大显示宽度5. 参考1. 介绍
pd.set_option()这个函数主要用于设置Dat…
数字化系统使用率低的原因剖析
当“数字化变革”成为热门话题，当“数字化转型”作为主题频频出现在一个个大型会议中，我们知道数字化时代的确到来了。但是，根据Gartner的报告我们看到一个矛盾的现象——85%的企业数字化建设与应用并不理想、但对数字化系统的需求多年来持续…
《Python数据分析与挖掘实战》源码下载
《Python数据分析与挖掘实战》源码下载链接：
https://pan.baidu.com/s/1Z8RJpH5dwwbLx5KFJd5qSw?pwd6hat
本书涵盖数据分析与数据挖掘的基础知识、必备工具和有效实践方法，能让读者充分掌握数据分析与数据挖掘的基本技能。
本书共分为15章࿰…
Python数据分析基础——Excel文件——格式化日期格式
参考文献：《Python数据分析基础》 前言
在读写单个Excel文件时，常常希望输出文件的格式与原文件相同。例如在之前提到的，希望输出文件中的日期格式如之前一样，为了避免之前的问题，可以使用xlrd修改日期格式࿰…
数据分析 × 人文社科：高校交叉学科教学经验分享
随着新一轮科技革命与产业变革的加速演进，学科间的交叉融合不断升级，由数据驱动的系列交叉学科备受瞩目，然而，在实际教学与学科建设的过程中，对于数据科学引入至相关学科，高校教师还是普遍面临着比较多的问…
Aiohttp异步爬取小说排行榜
Aiohttp异步爬取小说排行榜
*** Aiohttp简介及使用 *** Aiohttp是Python的一个第三方网络编程模块， 它可以开发服务端和客户端，服务端也就是我们常说的网站服务器；客户端是访问网站的API接口，常用于接口测试，也可用…
【数据分析案例】深度分析超市零售商店数据--Python数据分析实战
前言
咳咳，又是好久不见~这不高考已经结束了 对python感兴趣的准大学生们，是打算好好玩几个月还是，继续研究学习python呢~ 🤨 我呢 还是建议大家劳逸结合哈哈 先玩再学习~ 当然啦 最重要的还是看你们自己呀
不过我以上这些都不能…
基于BG/NBD概率模型的用户CLV预测
基于BG/NBD概率模型的用户CLV预测 小P：小H，我们最近想预测下用户的生命周期价值，有没有什么好的方法啊？ 小H：简单啊， C L V 用户每月平均花费 ∗ 用户平均寿命 CLV用户每月平均花费*用户平均寿命 CLV用户每…
Microsoft EMS包含的所有功能组件列表
目录
Azure Active Directory Premium
Azure Information Protection
Microsoft Intune
Advanced Threat Analytics
Microsoft Cloud App Security
Microsoft Advanced Threat Protection
《Excel 2019 VBA入门与应用（视频教学版）》图书简介
#好书推荐##好书奇遇季#《Excel 2019 VBA入门与应用（视频教学版）》京东当当天猫都有发售。Excel VBA是Excel数据分析必须掌握的工具，学习本书能够提高Excel完成日常工作的效率，实现对复杂数据处理的简化。 Excel 2019是一款功能强…
迪赛智慧数——饼图（环形饼图）：哪个年龄段的人最爱存钱？
效果图 50岁到60岁是存钱黄金10年,你存下钱了吗?
据央行发布的2022年金融统计数据报告显示，全年人民币存款额增加26.26万亿元，其中住户存款增加17.84万亿，刷新历史记录。
2022年在全国2200名40岁以下的人中，90后这一职场主力军…
有报表工具还需不需要BI工具？
大数据时代各行各业都需要处理分析海量的数据，很多企业在多年以前就配备了报表工具。报表工具在数据展示与分析方面确实为企业提供了不少帮助，但是随着企业的发展，需要分析的数据量越来越大，一些企业在考虑是否需要再配置BI工具。…
在数组中各位置上计算该位置以前所有元素的累加结果（Nan值视为0）numpy.nancumsum()
【小白从小学Python、C、Java】 【等级考试500强双证书考研】 【Python-数据分析】 在数组中各位置上计算该位置以前 所有元素的累加结果（Nan值视为0） numpy.nancumsum() [太阳]选择题 以下说法错误的是： import numpy as np a np.array([[n…
经典：商业智能BI解读，值得收藏
关注新闻的朋友们可能注意到了，最近这段时间关于数据要素、数字经济、数字化转型的相关行动越来越多，一方面是各级政府的政策规划以及大规模的发展行动，另一方面是则是各行各业的企业开始探寻数字经济，通过数字化转型进行改革&…
物流园仓库智能综合监控系统
现代经济的不断发展，仓储物流业也在快速地发展，物流仓库作为物质资源的存储和转运，在经济生产中发挥着重大的作用，但是在此期间，随之而来的是物品丢失、被盗、损坏等一系列安全隐患事件。 物流仓库里面存储物品的多数都…
【重新定义matlab强大系列十二】利用matlab对数据进行分组和分 bin
🔗 运行环境：Matlab 🚩 撰写作者：左手の明天 🥇 精选专栏：《python》 🔥 推荐专栏：《算法研究》 #### 防伪水印——左手の明天 #### 💗 大家好🤗ᾑ…
《Unity 2020游戏开发快速上手》图书介绍
#好书推荐##好书奇遇季#《Unity 2020游戏开发快速上手》京东当当天猫都有发售。 Unity是由Unity Technologies开发互动内容的多平台综合型开发工具，不仅在游戏开发、动画制作方面应用广泛，而且越来越多地应用于增强现实、虚拟现实、数字孪生等内容的开发…
Python数据分析：NLTK
Python数据分析：NLTK
Natural Language Toolkit nlp领域中最常用的一个Python库 开源项目 自带分类、分词等功能 强大的社区支持 语料库，语言的实际使用中真实出现过的语言材料 语料库安装 import nltk nltk.download()
语料库
nltk.corpus
分…
Python数据分析：数据可视化matplotlib
Python数据分析：数据可视化matplotlib
matplotlib
用于创建出版质量图表的绘图工具库，目的是为Python构建一个matlab式的绘图接口import matplotlib.pyplot as plt pyplot 模块中包含了常用的matplotlib API函数
figure
matplotlib的图像均位于figu…
《Python数据分析与挖掘实战》示例源码免费下载
《Python数据分析与挖掘实战》 在当今大数据驱动的时代，要想从事机器学习、人工智能、数据挖掘等前沿技术，离不开数据跟踪与分析，通过NumPy、Pandas等进行数据科学计算，通过Seaborn、Matplotlib等进行数据可视化展示，…
【数据分析】数据分析在电商精准营销及效果评估中的应用
本文总结了数据分析在电商精准营销中的常用方法、分析模型，同时总结了营销活动效果评估的常用指标及分析思路，指导效果评估体系的建立。 目录精准营销精准营销的目标精准营销思路实施方案效果评估指标精准营销效果评估（建立评估指标体系&…
nba球员数据分析和可视化_可视化NBA球员统计
nba球员数据分析和可视化I haven’t written a post in a while. I had a lot to do for university and my hobbies like recreational programming and blogging have to suffer during those times. But now I have found some time and I’ll be adding smaller posts ever…
数据产品-完善DMP系统应该是什么样子的
一、价值定位
首先需要明确DMP系统的价值定位和核心功能，以此才能评估需要涵括哪些内容
✧用户刻画更清晰：能够通过数据标签化的形式，全面、精准刻画用户全貌 ✧用户触达更精准：能够沉淀不同的策略规则，精准触达不同…
和鲸社区数据分析每周挑战【第九十五期：奈飞股价预测分析】
和鲸社区数据分析每周挑战【第九十五期：奈飞股价预测分析】 文章目录 和鲸社区数据分析每周挑战【第九十五期：奈飞股价预测分析】一、前言1、背景描述2、数据说明3、数据集预览 二、数据读取和数据预处理三、历史股价数据可视化四、利用sklearn中LinearR…
一张模板替代数百Excel，这个工具让报表工作自动进行
Excel的重度用户对这个话题肯定非常感兴趣。
因为每天重复以下事情，一天两天还好，时间长了谁都受不了。 收集数据、复制、粘贴、清洗数据、转换数据， 然后用固定的处理逻辑， 输出同样的结果 我把这些工作称为常规工作，…
关于数字化转型，你需要知道这几点
随着我国经济的高速发展，人们的物质生活水平如同火箭一般得到了飞速的提升，使得市场发展形成了明显的分层、分阶段的特征，让人们在这种环境下分化成了不同的群体，也形成了不同的兴趣习惯。互联网以及后续的移动互联网更是加速了这…
自助式BI工具分享：浅析FineBI
数据大爆炸时代，企业数据爆发式增长，利用大数据分析实现精细化运营，来驱动业务增长已经是大部分企业的共识。 自助式BI相比传统BI，更强调易用性，更多的可视化交互操作界面，自动建模，业务人员无须…
失忆症crowd_完成对象属性的失忆症吗？
失忆症crowd对Chen＆Wyble的再分析，2015年 (Reanalysis of Chen & Wyble, 2015) Chen and Wyble published an interesting paper (2015) where they demonstrate that participants cannot report attributes of attended stimuli unless the partic…
设置输入开始行（POINT=）
DATA A;SET SASHELP.CLASS;/* _N_为sas内置变量 */OBS_N_;
RUN;DATA B;/* 当n3或5或7或4的时候显示结果 */DO N3,5,7,4;SET A POINTN;OUTPUT;END;/* 使用选项 point时，经常要用 stop 语句来终止 data 步的执行。因为使用 set 语句时，指针只有在遇到数据集…
论各类BI工具的“大数据”特性！
市面上的BI工具形形色色，功能性能包装得十分亮丽，但实际应用中我们往往更关注的是朴实的技术特性和解决方案。对于大数据，未来的应用趋势不可抵挡，很多企业也正存在大数据分析处理展现的需求，以下我们列举市面上主流的…
python单向认证_使用Python进行单向方差分析的四种方法
python单向认证The current post will focus on how to carry out between-subjects ANOVA using Python. As mentioned in an earlier post (Repeated measures ANOVA with Python) ANOVAs are commonly used in Psychology. 本篇文章将重点介绍如何使用Python进行对象间ANOVA…
用数据讲故事 英文版_建立数据科学产品组合：讲故事与数据
用数据讲故事 英文版This is the first in a series of posts on how to build a Data Science Portfolio. If you like this and want to know when the next post in the series is released, you can subscribe at the bottom of the page. 这是有关如何构建数据科学产品组合…
建立科学高效工作原则_建立可以为您找到工作的数据科学产品组合的关键
建立科学高效工作原则This is the fourth post in a series of posts on how to build a Data Science Portfolio. If you like this and want to know when the next post in the series is released, you can subscribe at the bottom of the page. 这是有关如何构建数据科学…
Twitter-Pandas：类似于git-pandas，但适用于twitter。
I’ve got a python library that I’ve posted here before, that people seem to like called git-pandas. The idea is to provide a pandas-centric interface to the data in a git repository. To start with, we added simple representations of common datasets (co…
【循序渐进学Python】——网络编程
Python 内置封装了很多常见的网络协议的库，因此Python成为了一个强大的网络编程工具，这里是对Python的网络方面编程的一个简单描述。
1. 常用的网络设计模块
在标准库中有很多网络设计相关的模块，除了那些明确处理网络事务的模块外…
数据分析-1.必备的三大能力
一、数据分析价值观
如何看待数据分析的价值。要想真正吃透这一点，必须在价值认同、工作定位和商业模式三点上取得突破。 数据分析的价值观
（一）数据分析的价值认同
做好数据分析，首先要认同数据的意义和价值。一个不认同数据、…
企业数智化转型在即，看看低代码软件公司如何做！
在信息爆炸的现代社会中，利用先进技术为企业提升办公协作效率，是一件事半功倍的事。当前，数字化转型升级已经是发展趋势，不少企业已经在朝着数智化转型方向迈进。作为一家低代码软件公司，流辰信息看到了市场发展前景&a…
一文速学数模-集成预测模型Boost(提升方法)原理以及框架+模型速览
目录
前言 一、Boosting算法起源
强学习
弱学习
二、Boosting算法核心思想
举例案例
类推
三、Boosting算法框架
四、Boosting算法种类
AdaBoost
GBDT
XGBoost
LighGBM
1.数据划分
2.直方图梯度提升决策树（Histogram-based Gradient Boosting Decisio…
一文速学-Adaboost模型算法原理以及实现+Python项目实战
目录
前言
一、Adaboost算法概述
二、Adaboost模型原理
类推
计算原理
特点
适应较小量数据集，训练时间长
三、Python实例运用
AdaBoostClassifier分类
参数
实例实现分类
导入数据集 划分数据集 训练模型 评估算法
模型效果 前言
集成学习的方法在全…
【产品分析】战斗民族电子商务平台OZON-美妆类目采集分析分析
平台背景
Ozon是俄罗斯最早的电子商务公司之一，有时被称为“俄罗斯的亚马逊”。Ozon成立于1998年，最初是一家在线书店，到2019年已成为该国三大在线零售平台之一。它被《福布斯》评为2020年最有价值的俄罗斯互联网公司第三名。
采集介绍
近…
【2223sW2】LOG1
写在前面
好好学习，走出宿舍，走向毕设！ 一些心路历程记录，很少有代码出现 因为鬼知道哪条代码到时候变成毕设的一部分了咧，还是不要给自己的查重挖坑罢了
23.2.27
文件批量重命名
为了给学姐先整出来一批训练数据&…
快速入门 Python 数据分析实用指南
Python 现如今已成为数据分析和数据科学使用上的标准语言和标准平台之一。那么作为一个新手小白，该如何快速入门 Python 数据分析呢？
下面根据数据分析的一般工作流程，梳理了相关知识技能以及学习指南。
数据分析一般工作流程如下ÿ…
DataGear 制作基于Vue前端框架渲染的数据可视化看板
DataGear 在4.3.0版本新增了dg-dashboard-code特性，并在4.4.0版本进行了改进和增强，结合看板API，可以很方便地制作完全由Vue、React等前端框架渲染的数据可视化看板。
本文基于Vue2、Element UI前端框架的<el-container>、<el-head…
36个数据分析方法与模型
目录一、战略与组织二、质量与生产三、营销服务四、财务管理五、人力资源六、互联网运营好的数据分析师不仅熟练地掌握了分析工具，还掌握了大量的数据分析方法和模型。这样得出的结论不仅具备条理性和逻辑性，而且还更具备结构化和体系化，并保…
3D可视化大屏制作真的那么难？没有好用的软件解决吗？
有多少人印象里的数据可视化大屏还是像这样的二维大屏？这种二维可视化大屏早就不能满足审美日益提高的大众了。
现在用的都是3D可视化大屏，这种结合了3D技术的可视化形式不仅让数据更加的清晰，也增加了美感，这观看体验ÿ…
Python 进阶小技巧：7招展开嵌套列表
大家好，今天给大家讲解一个Python的进阶知识点：如何将一个嵌套的大列表展开形成一个列表。
小编提供了7种方法供大家学习参考： for循环 列表推导式 使用第三方库itertools 使用sum函数 python自加（） 使用extend函…
千字提炼商业智能BI精髓，言简意赅
商业智能BI的发展和数据的增长有很强的关联性，而当前人工智能、大数据、云计算、物联网、互联网等技术和应用都对数据的增长有促进作用，所以商业智能BI也就伴随着数据的增长，在各行各业的企业中开始发挥作用。
商业智能（Business…
怎么通过电商数据分析选择好货源？
什么样的货源才算好货源？自然是拿货成本低、销售前景（趋势）好、利润度高、去库存快的。这就需要综合销售、库存、财务、采购等多部门环节的数据进行分析挖掘，最终才能找到符合需求的供货商以及商品清单。在这个过程中，…
python多维数据可视化
文章目录 数据数据可视化平行坐标RadViz雷达图Andrews曲线矩阵图相关系数热力图参考文献多维度（3维以上）数据的可视化，用常规的方法不太好实现。本文介绍几种用Python实现的将多维数据展示在二维平面中的方法。 数据
以经典的鸢尾花数据集为例。 以下是5条经过格式处理的数…
网络游戏防沉迷系统7月16日起正式执行
来源：北京商报 作者：罗添/文 王晓莹/图 即将来临的7月16日对于大多数人来说是个普通的日子，但是对于中国的网络游戏从业者，以及千万网游玩家或许是一个转折点——从这一天开始，中国网络游戏的防沉迷系统将强制上线。这…
闲鱼商品理解专题系列｜基于闲置市场品类决策属性的供需挖掘
背景近年来流量成本的不断提高，使得市场精细化运营变得越来越重要。在闲置二手市场，个人卖家孤品特性，使得商品品类优化成为精细化运营的核心内容。通过分析市场供需现状，挖掘机会市场，调整品类结构，从而提…
A/B 测试助力游戏业务增长
动手点关注 干货不迷路 👆随着游戏出海以及私域流量运营的挑战，游戏企业对数据分析的使用需求和依赖度进一步提高。在游戏研发立项、验证、开发、测试、上线和运营等阶段 A/B 测试均能发挥重要作用。本篇将详细解读火山引擎 A/B 测试如何助力客户游戏业务…
第1关：Pandas分组聚合
任务描述
本关任务：使用Pandas加载drinks.csv文件中的数据，根据数据信息求每个大洲红酒消耗量的最大值与最小值的差以及啤酒消耗量的和。 相关知识 *分组聚合的流程主要有三步：
分割步骤将DataFrame按照指定的键分割成若干组；应…
利用Python进行数据分析 阅读笔记 之 第一章：准备工作
《利用Python进行数据分析》
这是一本非常好的使用python语言进行数据分析的入门书，既有基本理论讲解，也有实战代码示例。
我将认真阅读此书，并为每一章内容做一个知识笔记。
我会摘录一些原书中的关键语句和代码，若有错误请为我指…
Python 时间序列（利用python 进行数据分析_11）
目录
（1）datetime.datetime
（2）datetime.timedelta 两个datetime之间的差,以天数与及秒来存储
11.1.1 字符串与datetime互相转换
（1）strftime(format) 是对datetime对象和pandas的Timestamp对象进行格…
滴滴实时数据链路建设组件选型实践篇
写在前面 随着滴滴内部技术栈的不断统一，实时相关技术组件资源的不断整合，各业务线实时数据相关开发经验的不断沉淀，基本形成了一套面向公司不同业务场景需求的最佳技术选型和具体落地方案。但同时我们也发现，大部分实时开发同学在…
打造数据驱动型组织，成长型企业最需要什么？
拉姆查兰在《求胜于未知》一书中认为，市场里种种不确定性真正可怕的是结构性不确定性，因为它源自于外部环境的根本性变化，对产业格局带来根本性影响和彻底性改变。
进入后疫情时代，日新月异的数字化浪潮、常态化的疫情以及错综复…
数据分析与SAS学习笔记6
数据集整理：
目的：对数据集中的数据进行预处理，使数据更适合统计分析过程对数据格式的要求；
常见整理要求：
1）建立新的变量，衍生变量，删除某些原变量；
2）…
【初探人工智能】2、雏形开始长成
【初探人工智能】2、雏形开始长成【初探人工智能】2、雏形开始长成安装Flask封装Web接口雏形设置接收参数功能验证聊天写代码代码补全生成图片写在后面笔者初次接触人工智能领域，文章中错误的地方还望各位大佬指正！ 【初探人工智能】2、雏形开始长成
在…
【PowerQuery】Excel的PowerQuery 数据导入界面
在Excel早期版本中，我们必须在Com组件加载后才能载入PowerQuery的页签，而在Office 2016 版本之后，默认就存在PowerQuery组件帮助我们进行数据的导入和处理。在默认的界面中，存在着一些快速导入的界面，通过快速导入界面可以实现常规的类型的快速导入，包含并不仅限于： CSV…
通过接口封装Shopee商品列表、shopee详情、shopee评论数据接口代码展示教程
业务背景：作为全球最大的 B2C 电子商务平台之一，Shopee 平台提供了丰富的商品资源，吸引了大量的全球买家和卖家。为了方便开发者接入 Shopee 平台，Shopee 平台提供了丰富的 API 接口，其中商品详情接口是非常重要的一部…
【2022.12.9】Lammps+Python 在计算g6(r)时遇到的问题
目录写在前面绘制g6( r )执行步骤【updated】如何检查图像的正确性：不是编程问题，而是数学问题的一个小bug废稿2则：写在前面
全部log： 【2022.11.16】LammpsPythonMATLAB在绘制维诺图时遇到的问题
绘制g6( r )执行步骤【updated…
Teradata 离场，企业数据分析平台如何应对变革？
近日大数据分析和数仓软件巨头 Teradata（TD）宣布基于中国商业环境的评估，退出在中国的直接运营。TD 是全球最大的专注于大数据分析、数仓和整合营销管理解决方案的供应商之一，其早在 1997 年就进入中国，巅峰期占据半数…
筛选效率直接起飞，复杂场景秒变简单丨三叠云
表单
路径
表单设计 >> 高级筛选
功能简介
筛选条件优化升级，支持多种混合条件筛选。
功能描述：
本次更新支持2个层级的条件，系统处理数据时，将会先根据第二个层级的条件关系找出数据、继而再根据第一层级即分组之间的…
商业智能软件行业发展的前世今生
作者：邓天佐越来越多的企业面临BI升级和选型的难题，尽管大众对于BI概念的了解，是近年来随着大数据、数据可视化、敏捷BI的兴起逐步加深的，但其实在2013-2014年敏捷BI爆发之前，传统BI经历了不算短暂的一个发展时期(2005…
Power BI 筛选器函数---Index实例详解
一、Index函数 语法：
INDEX ( <检索行号>, [<关系>], [<OrderBy>],[空白],[PartitionBy] )
含义：
对指定分区(PartitioinBy)中的行（关系表），按指定的列进行排序(OrderBy)后，根据&…
2022年38女神节大促美妆、珠宝、母婴、保健电商数据回顾
近期，我们陆续接收到了品牌商家朋友们对于2022年女神节大促期间部分品类的数据需求，希望能对今年的大促活动有一个更宏观的认知、更精准的预测，从而拿到更好的数据效果。 为此，在距离大促开启一个月的备货阶段，鲸参谋决…
python orm框架
python orm框架是一个数据处理框架，它提供了许多有用的工具，包括： 1、使用 pandas库对数据进行预处理，如：添加标签、删除重复值、转换为表格样式等。 2、使用 sql语句进行数据的增删改查，如：在m…
如何使用pandas提取含有指定字符串
这里写自定义目录标题name age state point0 Alice 24 NY 641 Bob 42 CA 922 Charlie 18 CA 70name age state point0 Alice 24 NY 642 Charlie 18 CA 700 False1 True2 TrueName: state, dtype: boolname age state point1 Bob 42 CA 922 Charlie 18 CA 700 True1 False2 True…
Jupyter notebook安装运行（详解）
目录 Jupyter notebook
概念
官方文档
特点
使用Anaconda安装
使用pip安装
运行Jupyter Notebook
指定端口启动
Jupyter notebook修改主目录 Jupyter notebook 概念
Jupyter Notebook是基于网页的用于交互计算的应用程序。其可被应用于全过程计算：开发…
葡萄酒数据可视化分析
葡萄酒数据可视化分析
必应壁纸供图
数据集：https://download.csdn.net/download/weixin_53742691/87982219
import pandas as pd
import seaborn as sns
import matplotlib.pyplot as pltwine pd.read_csv("wine_quality/wine_edited.csv")
wine.hea…
数据挖掘——第一章：概述
文章目录1. 数据分析与数据挖掘1.1 数据分析1.2 数据挖掘1.3 知识发现（KDD）的过程1.4 数据分析与数据挖掘的区别1.5 数据分析与数据挖掘的联系2. 分析与挖掘的数据类型2.1 数据库数据2.2 数据仓库数据2.3 事务数据2.4 数据矩阵2.5 图和网状结构2.6 其他类…
UWA GOT | 三分钟带你玩转Unity性能优化！
原文链接：https://blog.uwa4d.com/archives/uwagot_usage.html 不久前，UWA发布了本地版性能测试工具：Game Optimization Toolkit（简称：UWA GOT），它既能方便研发团队在本地直接进行真机测试&…
深度解读《互联网信息服务算法推荐管理规定（征求意见稿）》 by 傅一平
2018年的时候，自己写过一篇文章《谈谈大数据时代的《别被算法困在“信息茧房”》》，提到了推荐算法“投其所好”可能导致的社会问题。3年后的今天，国家互联网信息办公室发布《互联网信息服务算法推荐管理规定（征求意见稿ÿ…
【读书笔记-＞统计学】01-02 饼图、条形图、直方图、累计频数图、折线图概念简介
饼图
大家应该都知道饼图，饼图块的大小表示占总体的比例（频数）。下面是一个例子。 频数：“频数”表示在一个特定组，或者说在一个特定区间内的统计对象的数目，类似于数数。 饼图可以帮助我们比较各个组的比…
数据分析--Matplotlib
Matplotlib基本布局对象图表样式的修改以及图表装饰的接口基础图表绘制直方图散点图饼图柱状图折线图表格不同坐标系下的图象matplotlib3D基本布局对象
figure对象是所有图表绘制的基础 构建图标的主要步骤
准备数据生成图表传入数据调整图标的装饰
图表样式的修改以及图表装…
数据分析--NumPy
NumPy多维数组对象：ndarray对象ndarray对象的创建ndarray对象的数据类型ndarray对象的索引，切片和迭代ndarray对象的shape操作ndarray对象的基础操作不足多维数组对象：ndarray对象
ndarray对象保存同一类型的数据，访问方式类似于…
数据分析--数据分析是什么？
数据分析是什么？数据分析与数据挖掘之间的关系数据分析数据挖掘数据分析的基本步骤python和数据分析数据分析就是通过得到的数据，来发现各种规律之间的关系数据分析与数据挖掘之间的关系
数据分析
定义：简单来说，数据分析就是对…
做用户，绕不开画像！
正文开始导读：做用户，绕不开画像！画像不仅可以提升对用户的认知，还可以通过落地赋能业务。今天我们聊聊用户画像在用户生命周期中的应用，主要介绍用户画像在电商场景下如何驱动产品链路优化。将按照用户生命周期&#…
实战项目-用户评论数据情绪分析
目录1、基于词典的方法2、基于词袋或 Word2Vec 的方法2.1 词袋模型2.2 Word2Vec3、案例：用户评论情绪分析3.1 数据读取3.2 语料库分词处理3.3 Word2Vec 处理3.4 训练情绪分类模型3.5 对评论数据进行情绪判断目的：去判断一段文本、评论的情绪偏向在这里&a…
Power BI 筛选器函数---Window实例详解
一、Window函数
语法：
Window ( <起始位置>,<起始位置类型>,<结束位置>,<结束位置类型>, [<关系>], [<OrderBy>],[空白],[PartitionBy] )
含义：
对指定分区（PartitioinBy)中的行（关系表&…
一文掌握python机器学习方法解决生态、水文、气象等领域的空间模拟与时间预测问题
如何利用 python 机器学习解决空间模拟与时间预测问题专题一 、机器学习原理与概述了解机器学习的发展历史、计算原理、基本定义，熟悉机器学习方法的分类， 常用机器学习方法，以及模型的评估与选择；熟悉数据预处理的流程࿰…
【matplotlib】可视化解决方案——如何设置轴标签的透明度和大小
概述
Axes 标签对于读者理解图表非常重要，它描述了图表中展现的数据内容。通过向 axes 对象添加标签，可以有效理解图表所表达的内容。首先来了解一下 matplotlib 是如何组织图表的。最上层是一个 Figure 实例，包含绘图中所有可见和不可见的内…
【Python学习笔记】第二十九节 Python2 和Python3发生了哪些变化
Python 版本分为两大流派，一个是 Python 2.x 版本，另外一个是 Python 3.x 版本，Python 官方同时提供了对这两个版本的支持和维护。2020 年 1 月 1 日，Python 官方终止了对 Python 2.7 版本（最后一个 Python 2.x 版本&a…
Pandas 2.0 vs Polars:速度的全面对比
前几天的文章，我们已经简单的介绍过Pandas 和Polars的速度对比。刚刚发布的Pandas 2.0速度得到了显著的提升。但是本次测试发现NumPy数组上的一些基本操作仍然更快。并且Polars 0.17.0，也在上周发布，并且也提到了性能的改善，所以我…
Python GUI界面编程-初识
图形用户界面(Graphical User Interface，简称 GUI，又称图形用户接口)是指采用图形方式显示的计算机操作用户界面。与早期计算机使用的命令行界面相比，图形界面对于用户来说在视觉上更易于接受。然而这界面若要通过在显示屏的特定位置…
Biomod2 （下）：物种分布模型建模
这里写目录标题1.给出一个线性回归模型并求出因子贡献度2.biomod22.1 pseudo-absences:伪不存在点（PA）2.1.1 random2.2.2 disk2.2.3 user.defined method3.使用网格划分区域3.1 计算质心4. 完整案例1.给出一个线性回归模型并求出因子贡献度
##---------…
几款好用又不贵的BI工具值得推荐
商业智能（BusinessIntelligence，简称：BI），又称商务智能，指用现代数据仓库技术、线上分析处理技术、数据挖掘和数据展现技术组合成BI产品具备的技术进行数据分析以实现商业价值。商业智能的概念在1996年最早…
DataGear 4.5.1 发布，数据可视化分析平台
DataGear 4.5.1 发布，严重 BUG 修复，具体更新内容如下：
修复：修复SQL数据集对于DB2、SQLite等数据源预览时会报错的BUG；修复：修复系统对于MySQL、MariaDB等数据源中无符号数值类型有时报错的BUG࿱…
BI软件工具也有ChatGPT
ChatGPT最近大火，朋友圈、聊天群啊到处都在分享它、讨论它。我也凑了个热闹，先和它聊了一下孩子学习上的困惑，然后用它给孩子出了一套易错题型的练习题，缓解了我做为熊孩子家长的压力。ChatGET能做的可不止这些，还能写…
数据分析师的进阶路径
【与数据同行】已开通综合、数据仓库、数据分析、产品经理、数据治理及机器学习六大专业群，加微信号frank61822701 为好友后入群。新开招聘交流群，请关注【与数据同行】公众号，后台回复“招聘”后获得入群方法。正文开始最近好多人私信问我如…
Origin: 多因子组箱式图+分组箱式图+详细参数的设置
本期目标： 详见：Grouped Box Chart with Color Indexed Data Points.
1, 打开软件后，通过点击F11快捷键，调出学习中心（图1），打开绘图示例，找到箱线图，双击即可打开该图…
pandas 匿名函数与聚合函数的使用
1. apply() 匿名函数的使用
1.1 针对“注册日期”列计算已注册天数
备注：这种速度很慢！
# 使用apply()对某一列进行匿名函数映射
try:today datetime.datetime.today()data[reg_days] data[reg_dt].apply(lambda x: (today - datetime.datetime.str…
滴滴数据仓库指标体系建设实践
【与数据同行】已开通综合、数据仓库、数据分析、产品经理、数据治理及机器学习六大专业群，加微信号frank61822701 为好友后入群。新开招聘交流群，请关注【与数据同行】公众号，后台回复“招聘”后获得入群方法。正文开始桔妹导读：…
【数据分析与挖掘】数据分析学习及跟课学习 | csdn_Part 03 编程部分 上篇
这部分跟的课是前段时间没有电脑使用平板及纸笔记得，所以主要的目的是为了将纸质笔记转为电子版，加上适当的练习，配合回顾，争取把数据分析知识基础过一遍，能够掌握最好。
第五章 正则表达式的使用
正则表达式是指专门…
R 语言 ggplot2 PCA 主成分分析（虚拟数据集）
生成虚拟数据集
library(ggplot2)data.matrix <- matrix(nrow 100, ncol 10)colnames(data.matrix) <- c(paste("wt",1:5,sep ""),paste("ko",1:5,sep "")
)rownames(data.matrix) <- paste("gene",1:100,sep…
数据团队如何写年度总结和计划？
这是傅一平的第357篇原创【与数据同行】已开通综合、数据仓库、数据分析、产品经理、数据治理及机器学习六大专业群，加微信号frank61822702 为好友后入群。新开招聘交流群，请关注【与数据同行】公众号，后台回复“招聘”后获得入群方法。正文开…
如何使用Python进行数据可视化
数据可视化是一种将数据呈现为图形或图表的技术，它有助于理解和发现数据中的模式和趋势。Python是一种流行的编程语言，有很多库可以帮助我们进行数据可视化。在本文中，我们将介绍使用Python进行数据可视化的基本步骤。
第一步：导…
python 数据分析之 HTML文件解析
python 数据分析之 HTML文件解析一 ：Html1. Html 理解2. Html 介绍3. Html 构成3. HTML结构 介绍1> HTML文件结构A: 文档类型声明B: 根标签C: 头部 -head 元素D: title 标签E: meta 标签F: 主体-body 标签2> 各部分详解A: 标题B: 段落C: 链接D: 图像E: 表格3&…
【读书笔记】《深入浅出数据分析》第十、十一章 回归、合理误差
目录一，回归分析1，概述2、分类3，相关分析与回归分析联系二，标准差、方差、协方差、残差、均方误差、标准误差（一）区别关系1，方差(Variance)1.1 总体方差1.2 样本方差2，标准差(Standa…
解析Python编程中的包结构
假设你想设计一个模块集（也就是一个“包”）来统一处理声音文件和声音数据。通常由它们的扩展有不同的声音格式，例如：WAV，AIFF，AU），所以你可能需要创建和维护一个不断增长的各种文件格…
旋转机械设备故障诊断的轴心轨迹总结
旋转机械设备故障诊断的轴心轨迹分析 1. 转子不对中故障2. 转子不平衡2.1 文献1轨迹2.2 文献2轨迹4. 轴弯曲故障5. 转子部件松动6. 碰摩故障3. 典型转子故障的原因1. 转子不对中故障 …
数据要素化条件之一：原始性
随着技术的发展，计算机不仅成为人类处理信息的工具，而且逐渐地具有自主处理数据的能力，出现了替代人工的数据智能技术。数据智能的大规模使用需要关于同一分析对象或同一问题的、来源于不同数据源的海量数据。这种数据必须是针对特定对象的记…
Python数据挖掘-数据分析库
零、基础概念
数据分析：把大量的数据进行统计和整理得出结论为后续的决策提供数据支持。
一、matplotlib画图
作用：将数据可视化呈现
1.简单使用
from matplotlib import pyplot as pltdef print_wd():xrange(2,26,2)y[15,13,14.5,17,20,25,26,26,2…
数据治理 到底应该怎么治？
找症状，明确目标 任何企业实施数据治理都不是为了治理数据而治理数据，其背后都是管理和业务目标的驱动。企业中普遍存在的数据质量问题有：数据不一致、数据重复、数据不准确、数据不完整、数据关系混乱、数据不及时等。由于这些数据问题的存在…
【AI】数据分析-数据可视化模块
NumPy(Numerical Python) 是科学计算基础库，提供大量科学计算相关功能，比如数据统计，随机数生成等。其提供最核心类型为多维数组类型（ndarray），支持大量的维度数组与矩阵运算，Numpy 支持向量处理…
经验分享|BI数据可视化报表布局——容器
容器功能是一种用于数据可视化图表排版的功能，主要作用对图表进行有效的布局调整，或者用于巧妙在同一地方安排多个不同类型的数据可视化图表，供使用者点击切换浏览。目前，在奥威BI软件上一同有两类容器功能，通过点击BI…
数据清洗是清洗什么？
在搭建数据中台、数据仓库或者做数据分析之前，首要的工作重点就是做数据清洗，否则会影响到后续对数据的分析利用。那么数据清洗到底是做什么事情呢？今天我就来跟大家分享一下。 数据清洗的基本概念
按百度百科给出的解释，“数据清…
同步辐射GISAXS和GIWAXS的原理及应用领域
同步辐射GISAXS和GIWAXS是两种常用的同步辐射X射线衍射技术，它们在材料科学、化学、生物学、物理学等领域中广泛应用。本文将从原理、实验方法和应用三个方面，对同步辐射GISAXS和GIWAXS进行描述和比较。 一、原理
GISAXS和GIWAXS都是利用X射线与样品相互…
基于”PLUS模型+“生态系统服务多情景模拟预测
基于”PLUS模型“生态系统服务多情景模拟预测实践技术应用工业革命以来，社会生产力迅速提高，人类活动频繁，此外人口与日俱增对土地的需求与改造更加强烈，人-地关系日益紧张。此外，土地资源的不合理开发利用更是造成了水…
数据分析：我国各省家庭消费分析
1.模型的建立
本文运用数据分析方法对我国各省份不同行业的职工平均工资进行评价分析。我们采用了来自于《中国统计年鉴》2000 年到 2014 年的权威数据，通过聚类分析、因子分析、灰色相关分析预测的方法，分别依据省份和行业对平均工资水平进行了排序，做出对于相关行业和省份…
python进阶：7招展开嵌套列表
python进阶：7招展开嵌套列表 公众号：尤而小屋作者：Peter编辑：Peter 大家好，我是Peter~
今天给大家讲解一个Python的进阶知识点：如何将一个嵌套的大列表展开形成一个大列表。
小编提供了7种方法供大家学习…
R统计绘图-多元线性回归(最优子集法特征筛选及模型构建，leaps)
此文为《精通机器学习：基于R》的学习笔记，书中第二章详细介绍了线性回归分析过程和结果解读。
回归分析的一般步骤：
1. 确定回归方程中的自变量与因变量。
2. 确定回归模型，建立回归方程。
3. 对回归方程进行各种检验。
4. 利…
抓住2023年春夏服装9大流行趋势，将生意机会一网打尽
服装行业是一个竞争比较激烈的行业，除了房租、人力等较高的经营成本外，服装行业还面临以下2大挑战：一方面服装行业的消费需求易变，今年流行的衣服可能明年就过时了，需要不断推出新品，才能满足消费者不断变化…
并发提升 20+ 倍、单节点数万 QPS，Apache Doris 高并发特性解读
随着用户规模的极速扩张，越来越多用户将 Apache Doris 用于构建企业内部的统一分析平台，这一方面需要 Apache Doris 去承担更大业务规模的处理和分析——既包含了更大规模的数据量、也包含了更高的并发承载，而另一方面，也意味着需…
大数据分析工具Power BI（六）：DAX表达式简单运用
DAX表达式数据分析表达式 (DAX) 语言是一种公式语言，Data Analysis Expressions 数据分析表达式，简称DAX表达式，其允许用户定义自定义计算。DAX 包含一些在 Excel 公式中使用的函数，此外还包含其他设计用于处理关系数据和执行动态…
如何将GIS地图和可视化结合使用实现更好的数据呈现
GIS（地理信息系统）和可视化（visualization）是两个紧密相关的领域。GIS是一种用于管理、分析和展示地理空间数据的技术，而可视化则是一种用图形、图表、动画等形式展示数据的方式。GIS地图则是指基于地理信息系统技术&a…
# 机械设备故障的靶向迁移诊断与OpenAI分析
1. 靶向迁移学习概念
机械故障迁移诊断运用已学习到的设备(源域)诊断知识解决相关设备(目标域)的诊断问题，可望克服大数据下标签数据稀缺、故障信息不全的智能诊断难题。为有效地跨域迁移故障诊断知识，使智能诊断模型能够在不同设备间迁移应用ÿ…
【第十一届“泰迪杯”数据挖掘挑战赛】B题产品订单的数据分析与需求预测“解题思路“”以及“代码分享”
【第十一届泰迪杯B题产品订单的数据分析与需求预测产品订单的数据分析与需求预测 】第一大问代码分享（后续更新LSTMinformer多元预测多变量模型）
PS:
代码全写有注释，通俗易懂，包看懂！！！&…
数据标注工具，多维度体验优化｜ModelWhale 版本更新
阳春三月、草长莺飞，ModelWhale 新一轮的版本更新，期待为你带来更好的使用体验。本次更新中，ModelWhale 主要进行了以下功能迭代：优化 标注标签更新机制（专业版✓ 团队版✓ ）优化 标注任务列表（…
Python数据分析numpy学习
Python数据分析的基本技能包括： 1.Python编程语言基础知识 2.数据处理和清洗技能 3.数据可视化技能 4.数据分析和建模技能 —— Notion AI 文章目录前言一、numpy是什么二、numpy基础（一）数组对象总结前言
本文是参加新星计划Python学习方向…
padans关于数据处理的杂谈
情况：业务数据基本字段会有如下：
Index([时间, 地区, 产品, 字段, 数值], dtypeobject)这样就会引发一个经典“三角不可能定理”，如何同时简约展现分时序、分产品、分字段数据。）一般来说，
1、时序为作为单独的分类&…
用python进行excel全文词频统计，并标记是哪一分类
import pandas as pd
import jieba
from collections import Counter# 读取 Excel 文件
df pd.read_excel(your_excel_file.xlsx)# 定义函数用于分词和统计词频
def word_freq(content):# 对文章内容进行分词words jieba.cut(content)# 统计词频return Counter(words)# 创建新…
零售数据分析之操作篇12：子查询的应用
各位数据的朋友，大家好，我是老周道数据，和你一起，用常人思维数据分析，通过数据讲故事。
上期内容与作业
上一讲讲了占比相关内存计算的应用场景，包括占比、TOP占比、累计占比等，不同的占比&am…
数据分析：某电商优惠卷数据分析
数据分析：某电商优惠卷数据分析 作者：AOAIYI 专栏：python数据分析 作者简介：Python领域新星作者、多项比赛获奖者：AOAIYI首页 😊😊😊如果觉得文章不错或能帮助到你学习，可…
机器学习 - Pandas 练习, 常见功能查阅
机器学习记录
Pandas
安装 pandas 库:
conda install pandas数据
git clone https://github.com/KeithGalli/pandas.git练习
import pandas as pddata_dir "/data_dir"df pd.read_csv(f{data_dir}/pandas/pokemon_data.csv)
df.shape(800, 12)df.head()#NameT…
Python语言在地球科学交叉领域中的应用
Python是功能强大、免费、开源，实现面向对象的编程语言，Python能够运行在Linux、Windows、Macintosh、AIX操作系统上及不同平台（x86和arm），Python简洁的语法和对动态输入的支持，再加上解释性语言的本质&…
咖啡卷到现在，他们开始往里面掺北京豆汁了
咖啡卷到现在，他们开始往里面掺北京豆汁了0. 导读1. 人手一杯，果咖大势所趋2. 双倍成瘾：茶咖和酒咖被重点推荐3. 地方小吃融入咖啡，比如北京豆汁4. 炙手可热的云南咖啡豆5. 咖啡、户外和环保：绑定可持续6. 小结0. 导读…
用LDA主题模型并进行可视化
以下是一个使用Python中Gensim库实现LDA主题模型并进行可视化的代码示例： 这段代码实现了一个简单的LDA主题模型构建和可视化的过程。
方法2
首先，使用Pandas库中的read_excel()函数读取一个Excel文件data.xlsx作为数据源，然后选取其中一个…
一文速学数模-K-means聚类算法实战：信用卡用户画像聚类分析
目录
前言
一、用户画像概述
1.用户画像
2.为何用聚类算法作用户画像
二、数据质量校验
1.数据背景
2.数据说明
三、数据预处理
1.数据空缺值检验 2.数据归一化
四、K-means聚类
step1:选取K值
手肘法
step2:计算初始化K点
step3:迭代计算重新划分
五.画像分析 …
现在学习python怎么样
Python，年龄可能比很多读者都要大，但是它在更新快速的编程界却一直表现出色，甚至有人把它比作是编程界的《葵花宝典》，只是Python的速成之法相较《葵花宝典》有过之而无不及。
Python简洁，高效的特点，大大…
【Python小技巧】使用必杀技一键安装Ta-lib（其它第三方库装不上的也可以参考）
前言
最近升级了电脑系统，换了个nvme的ssd，系统装了win11。界面很清爽，心情不错。安装了最新版本的Anaconda，Python也更新到3.10版本，环境都配置好了，但新装系统后，很多都需要重新配置。由于频…
学习模式上的记录之统计篇二 Sigmaplot 非线性回归报告分析
先说下线性回归的前提假设（LINE）：
L：Linearity 线性 因变量和每个自变量都是线性关系 I：Independence 独立性 对于所有的观测值，他们的误差项相互之间是独立的 N：Normality 正态性 误差项服从正…
用python绘制多组箱线图、柱状图、簇状图
目录箱线图单组数据多组数据柱状图数据叠加显示数据分离显示簇状图箱线图
单组数据
只有一组数据时候用matplotlib就很方便实现，还可以对箱线图的格式进行调整，示例代码如下：
import matplotlib.pyplot as plt
import numpy as npdata [2…
信息可视化该怎么玩？
如您所见，信息可视化 可以产生令人难以置信的美丽图像，高效的传达信息。下面的图像是现已解散的安然集团的通信组织图。 作者/版权所有者：Kitware Inc.版权条款和许可：CC BY-ND 2.0 Ben Shneiderman说： “可视化的目的…
想要及时彻底厘清数据？快来试试BI工具
在大数据时代，数据正在以难以想象的速度增长，随着时间的增长，大量的数据将会积累起来。一般的数据分析工具不能在短时间内对海量数据进行处理分析，更不能随着分析思维和需求的变化及时改变分析字段和维度的组合，提供新…
为什么越来越多的企业选择自助式BI软件？
什么是BI？
BI，即商业智能（Business Intelligence），是对商业信息的搜集、管理和分析过程，目的是使企业的各级决策者获得知识或洞察力，促使他们做出对企业更有利的决策。商业智能一般由数据仓库、…
企业如何利用大数据做好大数据分析？
数据分析的概念对于大家来说早已司空见惯，数据分析技能目前也已成为求职者和工作场所人员的一个亮点。对于面对自身累积的庞大财务数据，业务数据和运营数据，流量数据及其他数据资产的公司，公司如何利用大数据并进行大数据分析&…
闲鱼双11全链路营销体系初体验
背景2021年的双11对于闲鱼具有特殊的意义，继之前618“节后余生”独家用户心智占位后，闲鱼期望将“大促上闲鱼卖买都赚钱”的行动号召，升级为双11全民必备的节日仪式，所以今年闲鱼史无前例地深度投入到双11大促项目中。“节前开挂摸…
数据分析的方法有哪些？常见的这4种可以看看
数据分析更多地基于业务背景来解释数据，提取和汇总数据背后的隐藏信息以及查找有价值的内容。由于数据在此过程中是客观的，因此由人来负责。由具有相同数据的不同人解释的结论可能不同，甚至完全相反，但是结论本身并没有错…
概率统计Python计算导引
教学中积攒了几十篇用Python的科学计算包numpy、sicipy、matplotlib等计算《概率论与数理统计》课程中问题的短文，写成博文。希望能为学习概率统计，入门数据分析的朋友提供参考。文中含有较多数学表达式和图表，建议用电脑浏览器浏览阅读更清晰…
Matplotlib绘制箱线图
箱线图（Box-plot）又称为盒式图或箱型图，是一种用来显示一组数据分散情况的统计图，它能显示一组数据的上界、下界、中位数、上下四分位数以及异常值等。箱线图的各部分组成及其含义如下图所示。 关键术语说明
四分位数：…
Python数据分析：beautifulsoup解析网页
Python数据分析：beautifulsoup解析网页
BeautifulSoup 用于解析HTML或XML 步骤 创建BeautifulSoup对象 查询节点 find 找到第一个满足条件的节点 find_all 找到所有满足条件的节点
创建对象 创建BeautifulSoup对象 bs BeautifulSoup( url, html_parse…
杭银消金基于 Apache Doris 的统一数据查询网关改造
导读： 随着业务量快速增长，数据规模的不断扩大，杭银消金早期的大数据平台在应对实时性更强、复杂度更高的的业务需求时存在瓶颈。为了更好的应对未来的数据规模增长，杭银消金于 2022 年 10 月正式引入 Apache Doris 1.2 对现有的风…
拼多多按关键字搜索商品 API
一、拼多多平台优势：
1、独创拼团模式
拼团拼单是拼多多独创的营销模式，其特点是基于人脉社交的裂变传播，非常具有传播性。
由于本身走低价路线，加上拼单折扣，商品的分享和人群裂变效果非常明显，电商前期…
【Python实战】一个星期练完这30个精心整理的Python项目案例，成功逆袭：靠接单月入W＋轻轻松松，拿走就用~（亲身体验，大家放心冲鸭）
导语
Python是目前最流行的语言之一，它在数据科学、机器学习、web开发、脚本编写、自动化方
面被许多人广泛使用。它的简单和易用性造就了它如此流行的原因。 所有文章完整的素材源码都在👇👇 粉丝白嫖源码福利，请移步至CSDN社区…
如何高效清洗数据？试试这款神器
在大数据时代，数据的来源具有多样性、复杂性。
针对数量庞大、渠道及格式多样的数据，数据清洗就成为刚需。
在数据分析中，数据清洗实际上是十分繁重且关键的一步。
Power Query作为数据清洗的工具，能将这些多源的数据集中并统一…
Cellchat和Cellphonedb细胞互作一些问题的解决(error和可视化）
今日的内容主要解决两个问题，一个是cellchat的代码报错问题，因为已经有很多人提出这个问题了。第二个是Cellphonedb结果的可视化，这里提供一种免费的很实用的快捷可视化方法。其实这些问题只要自己思考都是能明白的。 Cellchat和cellphonedb细…
银行数字化转型导师坚鹏：商业银行零售业务数字化风控
商业银行零售业务数字化风控课程背景：
数字化背景下，很多银行存在以下问题：
不清楚商业银行数字化风控发展现状？
不清楚对公业务数字化风控工作如何开展？
不知道零售业务数字化风控工作如何开展？
课程特…
大屏配色困难症快看过来，老板想要的方案终于被我找到了！
“一顿操作猛如虎，一看大屏还是土”，大屏的配色和设计常常让开发者们愁秃了头。今天我就给大家介绍一下我从设计师朋友那里请教来的大屏配色干货，教你三步玩转大屏。
首先我们需要意识到，大屏的特点决定了它的配色非常重要。以下…
python 时间相互转换
文章目录
写在前面datetime转timestampdatetime转时间字符串timestamp转datetimetimestamp转时间字符串时间字符串转datetime时间字符串转timestamp参考文献
写在前面
对于这三者的转换，python2和python3是不同的，因为在python3中新增一些实例方法&am…
【Nowcoder牛客刷题记录】——Python数据分析（二）
目录
五、数据清洗
DA24 去掉信息不全的用户
DA25 修补缺失的用户数据
DA26 解决牛客网用户重复的数据
DA27 统一最后刷题日期的格式
六、Json处理
DA28 将用户的json文件转换为表格形式
七、分组聚合
DA29 牛客网的每日练题量
DA30 牛客网用户练习的平均次日留存率 …
获得淘系商品详情展示
为了进行此平台API的调用，首先我们需要做下面几件事情。
1、 获取一个KEY。
2、 参考API文档里的接入方式和示例。
3、查看测试工具是否有需要的接口，响应实例的返回字段是否符合参数要求。
4、利用平台的文档中心和API测试工具，对接口进…
【建议收藏】Pandas（一）——初见Series
文章目录 📚引言📖库的安装以及一些说明📑库的安装📑一些说明 📖Series📑创建一个Series🔖从列表创建Series🔖从字典创建Series🔖标量创建Series 📑Series的特…
Python数据分析script必备知识(三)
Python数据分析script必备知识(三)
1.单个文件，双个文件，三个文件的读取方式
新建1.txt文件，2.txt文件，3.txt文件，效果如下 执行代码
"""
单文件，双文件，三文件的读取方式Python的读写
file.read() ———— 一次性读取整个文件内容，推荐使用re…
Python数据分析：爬虫基本知识
Python数据分析：爬虫基本知识
爬虫:
自动抓取互联网信息的程序利用互联网数据进行分析、开发产品
爬虫基本架构： URL管理模块 对计划爬取的或已经爬取的URL进行管理 网页下载模块 将URL管理模块中指定的URL进行访问下载 网页解析模块 解析网页下载模…
【数据可视化作业】五个优秀可视化案例整理+Kaggle数据集useTableau实践
老师用的参考书是陈为的《数据可视化的基本原理和方法》。 1、收集5个优秀可视化案例，并且用文字描述每种视化图表的含义，以及整个案例讲述故事。列出5个案例种出现过的颜色，并大概估计每种颜色的使用比例。 解答： a.标题及来源&a…
讲透大数据分析，我只需要一顿饭！
【开胃菜】
十五年前，刚开始工作，从帝都回老家。
某长辈和蔼的问我：“工作了啊，做什么的？”
我踌躇半天答曰：“挨踢（IT）。”
长辈不假思索的来了一句：“哦࿰…
深入浅出统计学读后感
哈喽，大家好，我是可乐
今天给大家推荐这本《深入浅出统计学》，文末有我总结的知识图谱。
《深入浅出统计学》这本书我看了好几遍，一直没法下笔写它的总结，因为感觉还没有征服它，每次感觉懂了的时候&#…
你真的了解参数估计和假设检验吗？
本文来自读者投稿，作者：黄同学这是一篇关于推断统计、参数估计和假设检验等概念的全面讲解以及在python中的如何实现的文章，全文共5000字，建议收藏后阅读~1、总体、个体、样本和样本容量1）总体、个体、样本和样本容量的…
Python学习笔记（5）：字典
写在前面 本系列适合0基础的人食用，这是利用Excel学习Python系列的第5篇文章，系列文章可移步：Python数据分析（点击标题可查看） 之前的列表都复习好了吗：python数据结构:列表
are u ready？另一种…
电商交易数据分析-Tableau1
1.这是一份关于某电脑平台2016年的交易数据，通过分析这份数据，我们可以知道这一整年的销售情况。 数据解读： 2.分析框架 3. 可视化分析 3.1 整体情况： 2016年度销售额90666400，订单数：104329，…
淘宝母婴商品分析-Tableau
1.项目背景： 今年来母婴的消费逐渐增加，这是一份关于淘宝天猫的一份母婴的销售数据。分析该数据集有利于了解目前市场的销售情况，便于做出运营决策，提高销售额。 数据集来自天池：https://tianchi.aliyun.com/dataset/d…
淘宝电商数据分析-Python
1.明确分析目的 1.1每天的PV 1.2每天的UV 1.3每小时的PV 1.4每小时的UV 1.5用户行为转化率和转化漏斗 1.6销售量前10的商品 1.7销售量前10的商品目录 1.8各种行为的日PV 1.9各种行为的日UV 1.10各种行为的时间段PV 1.11各种行为的时间段UV 2.获取数据，并清洗数据 2.…
商城数据分析-Python
1.导入包
# 导入包
# 设置中文字体
import pandas as pd
import matplotlib.pyplot as plt
plt.rcParams[font.sans-serif] SimHei2.读取数据
# 读取excel的数据
# 查看数据的情况（几行几列）
df pd.read_excel(商城分析_tableau.xlsx)
df.shape3.查…
NO.1食品超市经营管理的数据方案
背景 丸悦是一家日资企业，经营管理方式有着很强的日本文化风格：讲流程、重细节。丸悦2013年进入中国，沿袭固有经营管理方式，并且只选择日本供应商合作，日常经营出现诸多摩擦，最终多方原因导致年亏损3000万的…
做好公司各部门数据报表支撑的几个简单思维
越来越多的数据，越来越多的需求，越来越多的不满意 如今，大数据和数据分析的概念相当普及，从基层到管理层，从IT到业务，都深知“数据化管理”、“数据决策”的重要性。越多重视，压力也就越多&…
机器学习_01（特征工程提取）
机器学习之特征工程提取
字典类型处理：文本类型处理 ： 1 单个字符不进行统计，每篇文章中出现一次便记作一次，特征值不再重复出现，但是出现次数可以进行计算累加2 对应特征值在原来文章中不出现则计为03 对于中文字符&…
python数据处理必会 之 pandas包中DataFrame和Series的常用方法整理
文章目录PandasSeriesDataFrame叮！Pandas
pandas是python中用于处理数据的常用包，主要用于处理表格型或者异质型数据，其经常与numpy或者scipy等数值计算工具包一起使用。pandas常用的三种数据类型为logical(逻辑型)、Numeric(数值型)和Chara…
Pandas数据分析—对字符串的处理
8.Pandas对字符串的处理 文章目录8.Pandas对字符串的处理前言一、程序演示1.获取Series的str属性，然后使用各种字符串处理函数2.使用str的startwith,contains等bool类Series可以做条件查询3.需要多次str处理的链式操作4.使用正则表达式的处理总结前言
笔者最近正在…
数据分析入门 | kaggle泰坦尼克任务（四）—＞数据清洗及特征处理
系列索引：数据分析入门 | kaggle泰坦尼克任务 文章目录一、数据清洗及特征处理（1）数据清洗简述（2）观察缺失值（3）缺失值处理（4）重复值的处理（5）特征…
利用Tableau绘制各类图表
利用Tableau绘制各类图表Tableau部分Tableau下载和安装使用Tableau连接数据源连接EXCEL数据源连接CSV数据源连接PDF数据源连接MySQL数据源（Desktop功能）维度度量绘制柱状图绘制条形图数据堆叠文件本地储存饼图的绘制多饼图的绘制TreeMap数图气泡图词云图…
【自然语言处理】简单而强大的NLTK库
NLTK简介
NLTK是Python上著名的⾃然语⾔处理库。⾃带语料库，以及分词等功能。
NLTK被称为“使用Python进行教学和计算语言学工作的绝佳工具”，以及“用自然语言进行游戏的神奇图书馆”。
NLTK提供丰富的模块和功能⬇️
模块功能nltk.corpus语料库nlt…
数据分析系列 之3σ规则/依据拉依达准则来剔除异常值
1 相关原理 3σ原则为 数值分布在(μ-σ,μσ)中的概率为0.6827 数值分布在(μ-2σ,μ2σ)中的概率为0.9545 数值分布在(μ-3σ,μ3σ)中的概率为0.9973 可以认为，Y 的取值几乎全部集中在(μ-3σ,μ3σ)区间内，超出这个范围的可能性仅占不到0.3%.
2 代码…
百度智能云 × 山东物泽 | 智慧种植，“长出”放心蔬菜！
绿色水果，绿色蔬菜，随着健康理念的深入，人们对餐桌上的安全越来越重视。作为全国知名的蔬菜基地寿光，正在通过智慧种植，丰盈餐桌，让每个家庭都吃得安全，吃得放心。山东物泽生态农业科技发展有限…
视频篇：当AI遇上品牌营销内容
接上一期：图像篇，本文重点讲解视频方面的内容技术及应用。技术的持续发展，玩法的不断迭代，视频不仅是品牌营销的重要工具，也已成为一种非常占主导地位的内容形式。触达成本降低，众多需求和功能将在短视频平…
从计算思维到Spliced风格，再到海报大规模生成 ｜ 代码实验
hi～我是shadow，今天给大家分享下关于特定风格海报大规模生成的实验。我们先从计算思维聊起～～什么是计算思维？2006年，美国卡内基梅隆的周以真教授，发表了题为 《计算思维》Computational Thinkin…
数据分析师 Mysql练习题（附答案）
Mysql练习（附答案）练习一 分组、过滤、连接练习二 增改表字段、改数据、计算练习三 IF条件过滤练习四 纵向连接,日期函数,子查询练习五 时间函数，子查询，多条件查询知识扩展练习一 分组、过滤、连接
知识点：分组group…
数据分析入门 | kaggle泰坦尼克任务（三）—＞探索数据分析
系列索引：数据分析入门 | kaggle泰坦尼克任务 文章目录一、探索性数据分析（1）创建一个模拟数据（2）排序（3）利用Pandas进行算术计算一、探索性数据分析
主要介绍利用Pandas进行排序、算术计算以及…
Python数据处理之导入导出excel数据
Python的一大应用就是数据分析了，而数据分析中，经常碰到需要处理Excel数据的情况。这里做一个Python处理Excel数据的总结，基本受用大部分情况。相信以后用Python处理Excel数据不再是难事儿！
xlwt库将数据导入Excel
将数据写入一…
【图解AES加密算法】AES算法的Python实现 | Rijndael-128 | 对称加密 | 物联网安全
系列索引：【图解安全加密算法】加密算法系列索引 Python保姆级实现教程 | 物联网安全 | 信息安全 完整代码已更新 文章目录一、AES的前世今生二、AES简介三、初始变换Initial round四、字节代换SubBytes五、行移位ShiftRows六、列混合MixColumns七、轮秘钥加AddRoun…
数据分析入门 | kaggle泰坦尼克任务（二）—＞pandas基础
系列索引：数据分析入门 | kaggle泰坦尼克任务 文章目录一、pandas基础（1）数据类型（2）基本操作（3）筛选的逻辑（4）loc函数和iloc函数：一、pandas基础
ÿ…
数据分析入门 | kaggle泰坦尼克任务
这个章节主要是参加DataWhale的数据分析项目过程中的记录，希望能对感兴趣的同学有一些帮助。 目录索引一、章节导航二、其他集合一、章节导航
数据分析入门 | kaggle泰坦尼克任务（一）—＞数据加载和初步观察数据分析入门 | kaggle…
数据挖掘比赛基本框架
目录0.前言1.基本框架1.1数据探索性分析（EDA）1.1.1 查看数据基本信息1.1.2 查看缺失值情况1.1.3 查看唯一值情况并删除唯一值1.1.4 筛选出不同数据类型1.1.5 画图观察数值型数据分布情况1.2 数据特征工程1.2.1 处理缺失值1.2.2 处理时间数据1.2.3 对数据…
走上数据分析之路【三】——Pandas常用功能及函数【二】
前言
接上次Pandas常用函数，一方面为了记录，另一方面方便以后查阅复习。Pandas应该会写好几个系列。
正文
【1】DataFrame的加减乘除： 可以直接： df1 df2; df1 - df2; df1 * df2; df1 / df2; 但我觉得用df1.add(df2)更好&…
走上数据分析之路【二】——Pandas常用功能及函数【一】
前言
写给自己，方便以后查阅
正文
import numpy as np
import pandas as pd
from pandas import Series, DataFrameSeries
（1）values和index属性 【1】通过obj.values可以得到Series对象的以为ndarray数组
a Series([10, 11, 12, 13])
…
【Redis】亿级数据的收集+清洗+统计+展现
文章目录聚合统计(set->共同好友)排序统计(zset->评论排序)二值统计(bitmap->签到打卡)基数统计(hyperloglog->亿级UV统计方案)地理坐标(GEO)布隆过滤器面试题定义产生背景作用底层原理聚合统计(set->共同好友) 统计多个集合元素的聚合结果，就是前面…
![[Pandas] 构建DataFrame数据框](https://img-blog.csdnimg.cn/c01b99c1798248cfa699cc64c16557cc.png)
[Pandas] 构建DataFrame数据框
DataFrame是二维数据结构，数据以行和列的形式排列
构建DataFrame最基本的定义格式如下
df pd.DataFrame(dataNone, indexNone, columnsNone) 参数说明 data: 具体数据 index: 行索引，如果没有指定，会自动生成RangeIndex(0,1,2,...,n) colu…
大数据能力提升项目｜学生成果展系列之八
导读为了发挥清华大学多学科优势，搭建跨学科交叉融合平台，创新跨学科交叉培养模式，培养具有大数据思维和应用创新的“π”型人才，由清华大学研究生院、清华大学大数据研究中心及相关院系共同设计组织的“清华大学大数据能力提升项…
机器学习基础知识之相关性分析
文章目录 相关性分析定义1、图表相关性分析2、协方差分析3、相关系数分析4、回归分析 相关性分析定义
相关性分析一般是指通过对两种或两种以上的变量数据进行数学分析来确定两种或两种以上的变量数据之间的相关密切程度。由此定义我们可以得知相关性分析的目的在于衡量变量数…
如何选择IT培训机构？
作为学习IT技术的一种方式、平台，培训班存在已久。而作为国内培训机构的老大哥，北大青鸟于1999年成立，是IT职业教育的开创者，专注于软件、网络、营销等各个IT技术领域，为IT行业输送了奖金百万技术人才。24年以来&#…
天猫数据分析：饮料市场头部份额下滑，无糖饮料占比40%
如今，全世界减糖、控糖的大趋势已经拉开帷幕。 根据沸点测评数据，今年所有在新加坡销售的饮料，必须在包装上注明A、B、C或D的营养等级标签，列明饮料含糖分和饱和脂肪的百分比，营养等级为D的饮品则会被禁止做广告营销。…
pandas使用教程：apply函数、聚合函数agg和transform
文章目录 apply函数调用apply函数描述性统计apply函数lambda自定义 聚合函数aggregate/agg用字典实现聚合 transform函数多函数 Transform 重置索引与更换标签行重置索引行和列同时重置索引 apply函数调用
apply函数描述性统计
import numpy as np
df.loc[:,Q1:Q4].apply(np.…
为什么要建数据仓库，而不是直连数据源？
各位数据的朋友，大家好，我是老周道数据，和你一起，用常人思维数据分析，通过数据讲故事。
今天和大家聊一个话题：为什么BI软件要用构建数据仓库，而不是直连数据源的方式开发报表？&…
支持多模型数据分析探索的存算分离湖仓一体架构解析（上）
当企业需要建设独立的数据仓库系统来支撑BI和业务分析业务时，有了“数据湖数据仓库”的混合架构。但混合架构带来了更高的建设成本、管理成本和业务开发成本。随着大数据技术的发展，通过在数据湖层增加分布式事务、元数据管理、极致的SQL性能、SQL和数据…
Pandas 删除 DataFrame 列，就这么简单!
Pandas 是 Python 中最重要的数据处理库之一，使用 Pandas 我们可以高效地对二维表格型的数据进行处理与分析。在对 DataFrame 进行操作的过程中，常常需要删除某些列。本文将跟读者分享 Pandas 删除 DataFrame 列的几种简单方法。
1. 使用 drop() 方法&a…
NumPy 入门教程
文章目录NumPy 入门教程安装数组创建与操作数组索引与切片数组运算多维数组的创建与操作数组的形状和大小数组的广播数组的复制和视图矩阵运算总结NumPy 入门教程
NumPy 是一个非常流行的 Python 数值计算库，它可以帮助我们处理向量、矩阵等数学对象，还…
IT培训有靠谱的机构吗，长什么样的？
关于IT培训的问题，网上有一大波劝退的声音：现在的IT越来越卷，高校计算机专业毕业生每年那么多，作为小白转行的你竞争力又在哪里呢？而且去年互联网大厂那么多裁员，还有大幅度降薪等等，IT行业已经…
【京东】商品评价数据采集+买家评论数据+卖家评论数据采集+行业数据分析+行业数据质检分析
采集场景
京东商品详情页中的评价，有多个分类：【全部评价】、【晒图】、【视频晒单】、【追评】、【好评】、【中评】、【差评】。其中【全部评价】默认展现，其他需点击后展现。本文以按【差评】筛选采集为例讲解。实例网址：http…
数据可视化有哪些方式？【图表类型大全】
我们通常所说的数据可视化是指狭义的数据可视化，即将数据以图表的方式进行呈现，常见于PPT、报表、新闻等场景。图表是数据可视化最基础的应用，它代表图形化的数据，通常以所用的图形符号命名，例如使用圆形符号的饼图、使…
淘宝模拟登录 +淘宝商品详情数据、淘宝商品列表数据爬取
PYTHON环境：
* requests库
* time库
* re库
实现思路：
* 检查此账号需不需要验证（滑动验证/验证码）
* 浏览器/工具 获取ua和加密后的密码(一劳永逸的方法)
* post请求登录url获取st申请url
* 根据获得的st申请地址获取st…
GPT-4要革程序员的命？智能开发的理想与现实 | 爱分析调研
“生成式人工智能（AIGC）将在三年内终结编程。”
——Matt Welsh，前哈佛大学计算机科学教授、Google 工程主管 GPT-4 也许还不完美，但智能开发时代真的来了 美国时间3月14日，OpenAI 正式发布 GPT-4，在 Chat…
统计软件与数据分析Lesson7----字符串相关操作
统计软件与数据分析Lesson7----字符串相关操作利用单引号或双引号创建字符串 # Exercise 1print(hello)hello字符串不加引号会识别为变量，如果变量在此之前未定义会报错 # Exercise 2print(hello)----------------------------------------------------------------…
![[Pandas] 读取Excel文件](https://img-blog.csdnimg.cn/3112274ca9574ec4b0cc899969cbe515.png)
[Pandas] 读取Excel文件
练习数据准备 demo.xlsx demo.xlsx中的工作表Sheet1显示上述的数据，Sheet2没有数据 我们可以使用Pandas中的read_excel()方法读取Excel格式的数据文件，生成DataFrame数据框进行数据分析处理
基本语法格式
import pandas as pd
pd.read_excel(io, sheet…
NumPy的应用-1
准备工作
在Python中使用NumPy时，需要先安装NumPy。可以使用以下命令来安装NumPy：
pip install numpy安装完成后，在Python中引入NumPy：
import numpy as np安装完成并引入NumPy后，我们可以开始使用NumPy进行数据分析…
ClickHouse实现大数据探索性分析
分析数据一般会从探索性分析开始，即尝试理解数据本身的概况。通常包括中位数、平均值或分布情况，Python Numpy/Pandas很容易实现，但如果数据量为Tb级，不能简单依赖RAM工具实现。ClickHouse提供的强大的工具来挖掘数据，…
用 Python 画如此漂亮的插图 ，So easy
人生苦短，快学Python！
今天我们进行一次实战案例分享，以全球预期寿命与人均 GPD数据为例，写一篇 Python 中漂亮散点图的快速指南。除了正常的数据清洗/处理、还会进行简单的统计分析，实现数据处理-统计分析-可视化一条…
【读书笔记】《深入浅出数据分析》第四章 图像让你更精明
优秀的数据可视化，可以促使你更好地理解数据，思考数据。 目录一，为什么要做可视化？二，可视化误区——过度可视化1，所有数据指标都可视化。2，将整个数据集可视化。三，可视化一些建议1…
使用Sentieon加速甲基化WGBS数据分析
全基因组甲基化测序(WGBS)是一种研究DNA甲基化的方法，以全面了解在基因组水平上的表观遗传变化。在进行WGBS数据分析时，通常需要使用专门的比对工具，因为这些工具需要能够处理亚硫酸盐转化后的数据。
以下是四个不同的WGBS比对分析流程&…
【python】Pandas库用法详解！
pandas 是基于NumPy 的一种工具，该工具是为解决数据分析任务而创建的。Pandas 纳入了大量库和一些标准的数据模型，提供了高效地操作大型数据集所需的工具。pandas提供了大量能使我们快速便捷地处理数据的函数和方法。你很快就会发现，它是使Py…
走上数据分析之路【一】——Numpy常用函数
前言
主要是为了记录一些Numpy常用函数，方便以后自己查阅。
正文
1.创建ndarry
（1）np.array()
a np.array([1, 2, 3])
b np.array([[1, 2, 3], [4, 5, 6]])（2）np.ones()、np.eye()、np.zeros()
a np.ones((3,…
数据分析入门 | kaggle泰坦尼克任务（一）—＞数据加载和初步观察
系列索引：数据分析入门 | kaggle泰坦尼克任务 文章目录一、数据加载（1）载入数据（2）逐块读取二、初步观察一、数据加载
本次主要以实战的方式了解数据分析的流程和熟悉数据分析python的基本操作，完成kaggle…
现场+直播，【Greenplum走进深圳】大会开启数字之旅
被广泛应用于数据仓库领域的Greenplum平台，正在凭借其优秀的数据存储、处理和实时分析能力，成为全球领先的开源大数据平台。它能够提供包含实时处理、弹性扩容、弹性计算、混合负载、云原生和集成数据分析等强大功能，帮助企业在激烈的数字化市…
wirehark数据分析与取证flag.pcap
什么是wireshark？wiresharekflag.pcap数据包数据包下载 请私信博主wiresharek
Wireshark（前称Ethereal）是一个网络封包分析软件。网络封包分析软件的功能是检索取网络封包，并同时显示出最详细的网络封包数据。Wireshark使用WinPC…
【新品发布】Greenplum社区新添可视化数据洞察利器 Calliope
了解更多Greenplum相关内容，欢迎访问Greenplum中文社区网站 Greenplum作为全球首个开源、多云大数据平台，拥有完整的产品生态，可以满足用户在使用过程中监控、备份、迁移、测试等多方位需求。除了商业工具组件外，Greenplum还积极与…
Brin Index在Greenplum 7中的理论与实践 之AO表上的Brin
了解更多Greenplum相关内容，欢迎访问Greenplum中文社区网站 在上篇文章中，我们介绍了堆表上的Brin Index，包括Brin的优缺点、适用场景、Brin Scan、Brin Vacuum、Brin Storage等内容。本篇文章将为大家概述Brin在AppendOnly Table上的实现&am…
Greenplum 6.0正式发布！8大特性重塑开源大数据生态
获得技术资料内容，请访问Greenplum中文社区网站 今天（2019年9月4日），Pivotal公司Greenplum产品总监Ivan Novick在北京举办的Greenplum用户大会上宣布开源大数据平台Greenplum 6.0正式发布。 Greenplum 6 在9月4日于北京举办的2019…
PPT | Greenplum人工智能工具集—MADLib与图数据分析
获得技术资料内容，请访问Greenplum中文社区网站 2019年6月28日，第二场《Greenplum：从大数据战略到实现》读者技术沙龙在上海成功举行。今天将和大家分享的是Pivotal资深产品经理吴疆做的演讲——《Greenplum人工智能工具集—MADLib与图数据分…
手把手教你学Python之流程控制
在执行循环的过程中，如果想提前退出循环或跳过某一次循环体则可借助于流程控制关键词。Python中提供了两个流程控制关键词为：break和continue。break的含义为中断，表示退出当前循环结构，虽然此时仍然满足循环条件；cont…
【大数据基础】基于 TMDB 数据集的电影数据分析
https://dblab.xmu.edu.cn/blog/2400/
实验内容
环境搭建
pip3 install bottle数据预处理
本次项目使用的数据集来自知名数据网站 Kaggle 的 tmdb-movie-metadata 电影数据集，该数据集包含大约 5000 部电影的相关数据。本次实验使用数据集中有关电影的数据表 tm…
Pandas-如何用pandas批量删除含有某些特征数据的行
前言 本文是该专栏的第30篇，后面会持续分享python数据分析的干货知识，记得关注。
在工作上处理数据需求的时候，会通常需要你将某张数据表里面的多条特征数据进行删除，最后再保存清洗完成的数据。换言之，假设有某张csv数据表(几十万条数据)，而在这张表里面需要将几万条不…
5行代码实现新列自动生成，也许你还不知晓这么简单!
Pandas是Python中非常流行的数据分析库，它的DataFrame和Series数据结构可以方便地处理和分析大量数据。很多时候，我们需要根据DataFrame中的某些列来生成新的列，今天我们就来看一个根据两列值条件判断生成新列的例子。 假设我们有一个DataFra…
零售数据分析操作篇14：利用内存计算做销售筛选分析
各位数据的朋友，大家好，我是老周道数据，和你一起，用常人思维数据分析，通过数据讲故事。
上一讲讲了图表间联动的应用场景，即当我们点击某个图表时，会影响其他图表一起变化，而变化背…
查询淘宝商品详情页面数据（商品详情数据，商品销量数据，商品sku数据，商品视频数据，商品优惠券数据）接口代码封装教程
业务场景：作为全球最大的 B2C 电子商务平台之一，淘宝天猫平台提供了丰富的商品资源，吸引了大量的全球买家和卖家。为了方便开发者接入淘宝天猫平台，淘宝天猫平台提供了丰富的 API 接口，其中历史价格接口是非常重要的一…
零售数据分析操作篇15：用总聚合做销售分析
上一讲讲了内存计算筛选，又可称之为自定义计算成员筛选，即当某列是通过自定义计算成员得到的时候，还要想利用其作为筛选条件，就需要用到自定义计算成员筛选功能。
上一讲还给大家出了道作业，就是：想知道哪…
数据分析实战 205 ：项目分析思路 —— 某在线教育机构经营分析
版权声明：本文为博主原创文章，未经博主允许不得转载。 文章目录 一、思路分析1.1 教育行业营收转化模型1.2 某教育机构利润结构1.3 问题确认与指标拆解：业务逻辑图1.3.1 确认毛利额数据异常的问题1.3.2 提升毛利额的方案 1.4 问题解决思路 一…
京东商品评论数据爬虫，包含对数据的采集、清洗、可视化、分析等过程，作为数据库课程。
感谢大家的star和fork，为了感谢大家的关注，特意对代码进行了优化，对最新的url格式进行了更新，减少了一些冗余的参数，希望能够帮助大家入门爬虫，已经爬好的京东的商品评论数据已经存储在data目录下ÿ…
【Python_Pandas】reset_index() 函数解析
【Python_Pandas】reset_index函数解析 文章目录 【Python_Pandas】reset_index函数解析1. 介绍2. 示例2.1 参数drop2.2 参数inplace2.3 参数level2.4 参数col_level2.5 参数col_fill 参考 1. 介绍
pandas.DataFrame.reset_index
reset_index(levelNone, dropFalse, inplaceF…
Python爬虫基础之三
Python爬虫基础包括HTTP协议、HTML、CSS和JavaScript语言基础、requests库的使用、Beautiful Soup库的使用、xpath和正则表达式的使用等。此外，还应该了解反爬虫机制和爬虫的一些常见问题及解决方法。
上一篇文章讲解了有关条件判断语句、循环语句、元组、字典等相…
各大外卖平台占据共享经济市场主要份额，占比近50%
哈喽大家好，随着大量互联网用户和移动支付的普及、大量用户通过共享平台将闲置资源和服务与需求方进行匹配，实现了资源的高效利用和消费者福利的提升。在全球化驱动的新型消费需求以及政策支持下，共享经济正在向更加成熟和规范化的方向发展。…
Pandas入门必知！如何轻松设置DataFrame索引？
Pandas是Python最流行的数据分析库，其中的DataFrame是表格型数据的主要数据结构。 Pandas DataFrame默认的索引是整数索引，但是在很多场景下，我们需要设置一个更有意义的索引。 庆幸的是，Pandas提供了非常简便的方法来设置DataFra…
Python采集二手车数据信息实现数据可视化展示
前言
嗨喽，大家好呀~这里是爱看美女的茜茜呐 环境使用： Python 3.8 Pycharm 专业版是付费的 <文章下方名片可获取魔法永久用~> 社区版是免费的
模块使用：
第三方模块 需要安装的 requests >>> pip install requests p…
python 时间序列分解案例——加法分解seasonal_decompose
文章目录一、模型简介1.1 加法分解模型1.2 乘法分解模型1.3 分析步骤二、案例2.1 背景 & 数据 & python包2.2 分析过程一、模型简介
1.1 加法分解模型
加法分解模型适用于随着时间推移趋势和季节性变化不断累加，并且随机波动比较稳定的时间序列数据。该模…
Pandas中的逻辑运算符（与或非）及Python代码示例
Pandas是Python中一个非常流行的用于数据处理和分析的库，它提供了大量的函数和操作符，以便用户可以方便地对数据进行操纵。其中逻辑运算符是在Pandas中经常使用的一些操作符之一，因为它们使我们可以对数据进行逻辑上的比较和筛选。本篇博客将…
Python数据分析：Pandas入门教程
Python数据分析：Pandas入门教程 一、Python数据分析简介1. 数据分析的定义与背景2. Python在数据分析中的优势 二、Pandas简介1 Pandas库的作用和优势2 Pandas的数据结构Series和DataFrame3 Pandas库的安装和使用 三、数据读取与导出1 读取本地CSV文件2 读取Excel文…
密歇根大学Python 系列之三：Python 数据科学应用项目
Python在数据科学领域的应用已经成为了趋势，同时也在不断地发展和演化。对于从事数据科学相关工作的从业者来说，熟练掌握Python已经成为了必备技能之一。而对于其他从业者来说，了解Python在数据科学领域的应用也可以帮助他们更好地理解数据科…
Numpy方法总简单说明作用
NumPy的大部分代码都是用C语言写的，其底层算法在设计时就有着优异的性能，这使得NumPy比纯Python代码高效得多
NumPy（Numerical Python）是Python的一种开源的数值计算扩展。这种工具可用来存储和处理大型矩阵，比Python…
Databend 开源周报第 93 期
Databend 是一款现代云数仓。专为弹性和高效设计，为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务：https://app.databend.cn 。 Whats On In Databend
探索 Databend 本周新进展，遇到更贴近你心意的 Databend 。
改进 Databend …
python实战应用讲解-【numpy数组篇】实用小技巧（九）（附python示例代码）
目录
如何使用NumPy在字符串数组以后缀结束的地方返回一个布尔数组的真值
示例 1:
示例 2:
如何在NumPy中为行和列设置坐标轴
使用的方法
如何交换一个给定的NumPy数组的列
在NumPy数组中插入一个新轴
连接NumPy数组
NumPy 使用Binet公式的斐波那契数列
使用Python和机器学习进行文本情感分类
使用Python和机器学习进行文本情感分类 1. 效果图2. 原理3. 源码参考这篇博客将介绍如何使用Python进行机器学习的文本情感分类（Text Emotions Classification）。
1. 效果图
训练文本及情感分类前5条数据如下： 训练过程及测试文本情感分类效果图如下： 可以看到 对文本“S…
21.Pandas怎样快捷方便的处理日期数据
21.Pandas怎样快捷方便的处理日期数据
Pandas日期处理的作用：将2018-01-01、1/1/2018等多种日期格式映射成统一的格式对象，在该对象上提供强大的功能支持
几个概念：
pd.to_datetime：pandas的一个函数，能将字符串、列…
SAS学习第5章：方差分析之大纲及单因素试验
t检验能用来进行两个处理平均数之间的假设检验，但一般研究会出现多个处理优劣的比较，即需要进行多个处理平均数的假设检验，此时t检验不再适用，具体表现在检验量增加，如k个处理，要进行k*(k-1)/2次检验&#…
【2223sW3】LOG1
写在前面
好好学习，走出宿舍，走向毕设！ 一些心路历程记录，很少有代码出现 因为鬼知道哪条代码到时候变成毕设的一部分了咧，还是不要给自己的查重挖坑罢了
23.3.6
lammps代码修改
因为学姐要中期答辩了，…
IFFCO的完整形式是什么？
IFFCO：印度农民肥料合作社有限公司 (IFFCO: Indian Farmers Fertilizer Cooperative Limited) IFFCO is an abbreviation of Indian Farmers Fertilizer Cooperative Limited. It is one of the largest multi-state cooperative societies in the world which is c…
从B站源码里探索推荐算法的奥义
这两天闲来无事，回顾了一下前几年B站沸沸扬扬的代码泄露事件，大致翻阅了一些泄露的代码发现了一些有意思的事情，其中就包括 B站视频推荐 加权部分算法 的相关代码。 不过后期 B站官方辟谣说是老版本代码，并且已经进行相应的防御措…
强烈推荐这款数据可视化的工具
数据可视化工具现在可是必不可少的，有的还在用python和R语言作为数据可视化的工具，但像这些的数据可视化的工具存在一些问题： 门槛不低：一般入门就要花一段时间，更不用说解锁全部功能，那是要投入大量时间了…
万字长文测评：3款口碑炸裂的BI数据分析工具，最好用的其实是……
BI商业智能，这个我安利过很多次。
作为当下最广泛使用的数据分析工具，它的好处实在太多啦：
对比Excel、Python、R，不用写代码，不用写SQL，降低了数据分析的准入门槛，小白上手毫不费劲。能快速响…
太多选择——企业如何选择合适的BI工具？
在没认清现状前，企业当然不能一言不合就上BI。 BI不同于一般的企业管理软件，不能简单归类为类似用于提高管理的ERP和WMS，或用于提高企业效率的OA、BPM。BI的本质应该是通过展现数据，用于加强企业各环节的管控，帮助快速…
看大数据平台如何打造餐饮业务一体化？
传统的方式认为，餐饮业与数据应该是不着边的，但随着信息化的不断发展，餐饮企业对于数据方面的重视程度越来越高，也意识到需要通过数据来了解菜品的销售情况以及顾客的习惯和口碑爱好等信息。
关于眉州东坡集团
1996年眉州东坡酒…
python数据分析与可视化【一】python基础实例
用python做数据分析与可视化(一) python编程基础 这一块前面我写过博客，奉上链接：python基础
这篇就来看看几个小实例 后面有python很基础的知识点和例子 后面数据分析能用上 下一更上numpy与pandas的细节
实训一 1.读取csv文件
import csv
f open(&…
企业数据可视化管理下的实践
数据是企业发展的信息积累，利用好就能变成财富，不利用就会变成数据库中堆积的无用字段，甚至成为妨碍企业信息化进步的绊脚石。 随着大数据利用的火热，越来越多的成功案例警醒着企业数据利用的重要性，数据可视化作为大数…
新华社称中国经济有所降温
据新华社6月29日电 在国内外错综复杂的局面中，受经济周期等多种因素影响，今年以来中国经济增速有所降温。
中国经济增长不断加速已经八年了。然而，今年以来，中国投资、出口的实际增幅都同比有所放缓，消费比较平稳&…
关于闲鱼测试数据构造，我有几条心得
背景随着闲鱼业务的高速发展，其商品类型、交易模板以及互动玩法日趋丰富。造数常常需要耗费测试同学大量的时间，其根本问题归纳为以下几点：1. 人工成本高：商品、订单的类型与状态笛卡尔乘积后多达上百种，数据种类丰富且…
图像技术在上亿规模实拍图片中的应用（算法好文）
背景闲鱼作为一个自由的商品和内容分发市场，每天有上百万的用户图片上传，其中不乏图片重复，图片描述内容不明确、图文不符等低质量的商品；也有各种搞笑、抖机灵等倒流的内容；还有色情、黑产等违规或违法灰色地带。如果…
利用Matplotlib绘制各类图表
利用Matplotlib绘制各类图表Matplotlib部分Matplotlib安装第一次绘图标题和坐标轴命名给折线图增加更多细节marker——数据点标示绘制多条折线开启网格功能利用风格文件美化图表带阴影的折线图利用Pandas导入数据绘制折线图增加阴影设置临界线条件语句筛选阴影位置增加更多细节…
Python读取Excel非常慢，应该如何优化？
Python读取Excel文件时常常遇到性能不理想的情况,特别是在处理较大的Excel文件时。这里总结了几点优化措施,帮助提高Python读取Excel的效率。
1. Python的Excel处理包主要依赖第三方库,效率会略低于R内置的Excel处理功能。可以尝试以下优化措施: - 使用openpyxl而不是xlrd,ope…
继续打脸水货教程：关于可变对象与不可变对象
入门教程、案例源码、学习资料、读者群 请访问： python666.cn 大家好，欢迎来到 Crossin的编程教室 ！ 今天这篇我要继续来打脸互联网上各种以讹传讹的水货教程。 前阵子我们聊了下Python中有关函数参数传递以及变量赋值的一些内容：…
最新入河排污口设置论证、水质影响预测与模拟、污水处理工艺分析及建设项目入河排污口方案报告书
随着水资源开发利用量不断增大，全国废污水排放量与日俱增，部分河段已远远超出水域纳污能力。近年来,部分沿岸入河排污口设置不合理，超标排污、未经同意私设排污口等问题逐步显现，已威胁到供水安全、水环境安全和水生态安全&#x…
【数据分析】——分析方法
上司要你帮忙看看公司最近的网站运营情况怎么样？ 公司最近的网站运营情况？这个问题太宽泛了，你得要知道上司的明确需求
问题1:boss,你是想看看公司网站具体哪方面的问题？
回答：公司最近销售不太好，订单转…
【白嫖系列】教育邮箱申请最新专业绘图软件OriginPro(官方渠道)
🥑 Welcome to Aedream同学 s blog! 🥑 文章目录 预备简单介绍有效期与申请条件申请链接查看邮箱切换中文 预备 以edu结尾的邮箱，毕业也可使用校友邮箱等。 简单介绍
Origin是一款数据分析和绘图的软件，具备统计、峰值分析和曲线…
Msray-Plus采集工具帮您轻松获取目标受众的数据，让您的市场营销更加便捷
市场营销是企业推广产品和服务的重要手段之一，是企业获取客户和提高销售业绩的关键环节。然而，传统的市场营销方式存在着很多弊端，如缺乏数据支持、信息不准确、效率低下等问题，这些问题直接影响了企业的市场营销效果。而随着互联…
人人都是数据分析师-数据分析之数据图表可视化（下）
当前的BI报表、运营同学的汇报报告中数据图表大多为 表格、折线图、柱状图和饼图，但是实际上还有很多具有代表性的可视化图表，因此将对常见的可视化图表进行介绍，希望这些图表可视化方法能够更好的提供数据的可用性。
人人都是数据分析师-数…
【京东】商品详情页+商品列表数据采集
作为国内最大的电商平台之一，京东数据采集具有多个维度。 有人需要采集商品信息，包括品类、品牌、产品名、价格、销量等字段，以了解商品销售状况、热门商品属性，进行市场扩大和重要决策；
有人需要采集产品评论&…
Pyecharts | 2019_2022年全国旅游酒店数据分析可视化
文章目录🏳️🌈 1. 导入模块🏳️🌈 2.Pandas数据处理2.1 读取数据2.2 数据处理🏳️🌈 3. Pyecharts数据可视化3.1 第四季度全国星级饭店经营情况统计表3.2 2022年全国各地区酒店登记数量3.3 2019年全…
使用Statsmodel进行假设检验和线性回归
如果你使用 Python 处理数据，你可能听说过 statsmodel 库。Statsmodels 是一个 Python 模块，它提供各种统计模型和函数来探索、分析和可视化数据。该库广泛用于学术研究、金融和数据科学。在本文中，我们将介绍 statsmodel 库的基础知识、如何…
采用.Net Core技术框架开发的B/S版区域检验管理系统（云LIS）
实验室信息管理系统云LIS源码 SaaS模式运维管理系统
云LIS系统源码是一款全面的实验室信息管理系统源码，其主要功能包括样本管理、检测项目管理、质控管理、报告管理、数据分析、两癌筛查等多个方面。具有独立的配套SaaS模式运维管理系统，支持远程运维&…
以AI实训建设支持“加快构建现代职业教育体系”，培养新时代的“大国工匠”...
“优化职业教育类型定位，深化产教融合、校企合作，深入推进育人方式、办学模式，建设一批高水平职业院校和专业，推动职普融通，增强职业教育适应性，加快构建现代职业教育体系，培养更多高素质技术技…
Kaggle介绍，数据分析
集成学习总结： 案例来源：kaggle 泰坦尼克号船员获救预测项目
数据
import pandas
titanic pandas.read_csv("titanic_train.csv")
titanic# 空余的age填充整体age的中值
titanic["Age"] titanic["Age"].fillna(t…
9月28日云智技术论坛亮点来袭：百度智能云全新数据基础设施即将亮相！
数字经济正在进入智能经济的新阶段，数据资产已成为关键生产要素，更大化地发挥数据对经济社会的促进作用成为各行业创新方向。产业数字化转型与智能化升级需要怎样的数据基础设施？如何挖掘并保障数据应用价值的可持续发展？如何有效…
以技术为驱动力，百度智能云数据众包专注做好“AI赋能者”
随着数字经济时代的到来，数据正在发挥着越来越大的价值，为各行各业的智能化转型提供动能。12月25日，以“技术驱动，释放数据要素价值”为主题的百度智能云 TechDay 暨百度技术开放日—数据众包专场在北京举行。百度作为一家深耕人工…
对保险欺诈说“不”！中国人寿财险携手百度智能云开启智能反欺诈时代
车险骗保，一直以来都是困扰保险行业的难题。随着行业骗保手段越来越多，车险风控难度也越来越大。为了更好地防范与识别保险欺诈，中国人寿财险借助百度智能云的人工智能、大数据技术，成功打造车险理赔智能反欺诈平台，实…
解决数据处理的实时性难题，这款新品给你惊喜
大数据时代，业务数据沉淀和数据计算已经渗透到各行各业并创造着新的业务价值，百度智能云此次发布的实时流计算云服务就是在这一大环境下而诞生的。在介绍这款云服务之前，先来了解一下什么是实时流计算？随后，我们会重点…
通路变坦途—CRM在医药行业的应用
通路变坦途—CRM在医药行业的应用 医药作为特殊类型的行业，其企业类型较多，有着由医药行业本身特征决定的复杂运营模式，同时各类企业在经营模式上有各自的特点，在生产和销售模式上也不尽相同。 提高通路能力扩大市场占有 …
【数据分析】pandas (三)
基本功能
在这里，我们将讨论pandas数据结构中常见的许多基本功能 让我们创建一些示例对象： index pd.date_range(“1/1/2000”, periods8) s pd.Series(np.random.randn(5), index[“a”, “b”, “c”, “d”, “e”]). df pd.DataFrame(np.random.…
数据挖掘( Data Mining )和统计学：有什么联系？
数据挖掘( Data Mining )和统计学：有什么联系？ J.H.Friedman 斯坦佛大学统计系及线性加速中心 摘要：DM（数据挖掘）是揭示存在于数据里的模式及数据间的关系的学科，它强调对大量观测到的数据库的处理。它是涉…
机锋2012第一季度移动APP支付数据解析
据艾瑞网最新消息，2011年我国移动支付用户数已经达到1.87亿，与2010年相比增长26.4%。随着移动终端的进一步智能化，人们和移动互联网的关系日益密切，同时，针对移动应用的支付需求也日益强烈。为了更好的利用移动支付创造…
1.利用matlab建立符号表达式（matlab程序）
1.简述 、
1. 使用sym命令创建符号变量和表达式
语法：
sym(‘变量’,参数) %把变量定义为符号对象
说明：参数用来设置限定符号变量的数学特性，可以选择为’positive’、’real’和’unreal’， ’positive’ 表示为“正、实”符…
Decide.com进军团购业务并推“退差价计划”
电子产品或家用电器更新换代太快，价格变化也快，何时购买才是最佳时机？Decide不仅能帮你解决这个问题，如今还进军团购业务，同时实施“退差价计划”，这么一来，你不仅能低价团购，若价格…
云邮件服务商Mailjet里程碑事件：迎来10亿邮件处理量
云邮件服务商Mailjet于昨日公布了两大喜讯：首先是公司迎来了人生中第一个里程碑，目前处理邮件数量已高达10亿封，另外，公司在更新了网站之后又推出iOS及Android应用。
Mailjet为中小型企业提供云邮件解决方案，这样企业…
通过自定义 Vue 指令实现前端曝光埋点
前言互联网发展至今，数据的重要性已经不言而喻，尤其是在电商公司，数据的统计分析尤为重要，通过数据分析可以提升用户的购买体验，方便运营和产品调整销售策略等等。埋点就是网站分析的一种常用的数据采集方法。埋点按照…
Excel里关于if的9个函数，如何指定条件求和、计数、平均等
总结了一下Excel里的求满足条件的计数、求和、平均值、最大值、最小值、标准差等9个方法。01countif作用：对满足条件的区域统计个数 模板：countif(条件所在的区域，条件)实例：A/B列是广东不同地市的得分评价情况，在E2单…
精读5：讲几个其他行业的业务知识
这是精读系列的第5篇文章 哈喽大家好，我是可乐
这是精读《数据分析思维：分析方法和业务知识》系列的最后一篇文章，想回顾之前4篇的可以点下方链接：
精读4：一个和钱打交道的数据分析行业 精读3：关于电商数…
这款可视化工具也太好用了吧
↑ 点击上方 “可乐的数据分析之路” 关注 星标 ~ 大概率每天早8点25更新 哈喽大家好，我是可乐今天我们一起从0开始学习Power BIPower BIWhat什么是Power BI?由微软发布的一款商业智能（BI）软件，或者说数据分析工具。那么什么是…
商城数据分析—Tableau可视化
1.基于上篇文章商城数据做的Tableau可视化：添加链接描述 2.年度销售情况： 3.各月份销售情况： 4.日销售情况： 5.各省份的销售情况柱状图： 6.各省份销售情况地图： 7.各省份订单量分布地图： 8.各时…
商城数据分析Excel
1.获取数据：查看表数据的情况 1.1查看数据，可以将订单创建日期的.进行替换，将数据转换成日期格式，这里选中订单日期这一列，按Ctrlf,出现下图： 如下图所示，输入，点击全部替换&#…
数据可视化第二版-拓展-网约车分析案例
文章目录 数据可视化第二版-拓展-网约车分析案例竞赛介绍 1等奖作品-虾虾蟹蟹哈哈的作品引言：背景度量指标 & 结论过程数据与思考一、数据处理二、大盘存量数据一览1. 分城市关键指标变化情况2. 各项指标相关性分析 三、数量维度分析1. 城市间比较1.1 工作日 vs…
【Elasticsearch】SQL操作相关
文章目录 SQL操作数据准备查询索引下的数据SQL转化为DSL(本质)SQL与DSL混合使用查看所有索引查询指定索引查看索引(表)结构where条件过滤group by分组having 对分组后的数据进行过滤order by 排序limit 限制查询数量cursor 游标->为缓存设计聚合操作支持的函数和运算比较运算…
python数据可视化显示(附代码)
Python是一种非常流行的编程语言，具有广泛的应用领域，包括数据可视化。在数据可视化中，Python提供了多种工具来帮助用户创建各种类型的图表、图形和可视化效果。本文将介绍Python数据可视化的基本概念、工具和技术，并提供代码示例以说明如何使用Python进行数据可视化。
Py…
如何从其他ETL工具迁移到ETLCloud上?
ETL数据集成工具主要用于将来自不同数据源的数据整合到一个单一的、一致的数据存储库或将数据分发到不同的数据源中，同时也可以把数仓中的数据通过ETL反向输出给业务系统使用。它可以帮助企业解决数据共享问题，同时有效地管理和利用海量数据，…
数字化转型导师坚鹏：面向数字化转型的大数据顶层设计实践
面向数字化转型的大数据顶层设计实践
课程背景：
数字化背景下，很多企业存在以下问题：
不清楚大数据思维如何建立？
不清楚企业大数据分析方法？
不了解大数据应用成功案例？
课程特色：
…
Python统计学13——回归的多重共线性、异方差、自相关的检验
在基础统计学，或者是计量经济学里面，需要对回归问题进行一些违背经典假设的检验，例如多重共线性、异方差、自相关的检验。这些检验用stata，r，Eviews什么都很简单，但是用python很多人都不会。下面就带大家实…
同步辐射散射数据处理：从测量到分析的全流程解析
同步辐射散射数据处理：从测量到分析的全流程解析 同步辐射（Synchrotron radiation，SR）是指粒子在强磁场中受到加速或转向时所放出的辐射。这种辐射是一种非常强烈、具有非常高能量和亮度的电磁辐射。同步辐射散射（Sync…
干货 | 利用SPSS进行高级统计分析第三期
Hello，大家好！
这里是壹脑云科研圈，我是喵君姐姐~
在本期中，我们继续为大家介绍如何利用SPSS进行：单因素方差分析、多因素方差分析、重复测量方差分析等。 1. 单因素方差分析【组间实验单一因变量；进行差…
1 Python数据分析概况
1 Python数据分析概况 1.1 认识数据分析1.2 熟悉Python数据分析的工具Python数据分析常用类库 1.3 Jupyter Notebook 快捷键 1.1 认识数据分析
数据分析是指用适当的分析方法对收集来的大量数据进行分析，提取有用信息和形成结论，对数据加以详细研究和概…
新华社:信息化时代遭遇“传言危机”
近几个月来，网络、短信传言引发的公共事件多次发生，在导致全球经济减速的国际金融危机中，不实传言也成了“金融海啸”的推手之一。在今天这个信息化时代，面对海量信息，人们每天都被难辨真伪的各种传言所包围࿰…
Haddop+spark大数据分析（二）之Hadoop 集群的搭建
文章目录
前言
一、集群环境的下载及其配置
1.下载hadoop
2.配置 hadoop 环境变量
配置hadoop 核心环境
配置 core-site.xml
配置 hdfs-site.xml
配置 mapred-site.xml
配置 yarn-site.xml
配置 workers
禁用防火墙
二、克隆虚拟机及其相应设置
1. 克隆虚拟机
2.…
机器学习入门笔记 人工智能 黑马程序员
机器学习入门笔记 前言
这个是根据“黑马程序员”的一套机器学习课程编写的博客。这篇博客上的案例均为课程里面的，但并没有包含所有案例，只是记录了部分。 B站视频地址 文章目录机器学习入门笔记前言特征工程Tf-idf文本特征提取Tf-idf介绍Tf-idf的重要…
RJ Metrics数据分析：Google+活跃度下降
大约一个月前，Google公司CEO拉里佩奇（Larry Page）表示，旗下社交服务Google堪称谷歌的“社交中枢”（Social Spine），用户数已达到1.7亿。不过RJ Metrics 最新的一份报告对他的这番言论提出了质疑。…
数据分析：Windows Phone Marketplace应用总数突破5万
据国外媒体报道，Windows Phone Marketplace刚刚完成了一个里程碑事件，在比预期更短的时间内，应用总数突破5万。其中，过去3个月新增了17,276，过去1个月新增了8,010。所有这些应用来自13,002个不同发行商。 Windows Phon…
（6）所有角色数据分析-6
http://t.csdn.cn/KrurEhttp://t.csdn.cn/KrurE
（5）中的页面，倾向于向用户展示所有数据，但却没有对数据进行比较、分析，用户不能直观的感受到各种数据之间的关系与变化幅度，所以，下面将向用户提…
【PythonRS】基于Python栅格数据/遥感影像投影转换
有ENVI出现的地方，就一定会有Python的身影，为了解放双手方便批量投影转换，最近同步研究了一下如何利用Python实现遥感影像的投影转换，主打的就是一个懒。 之前还分享过矢量数据的投影转换，这样矢量栅格的全家桶不就有了…
如何写一篇数据分析报告 - (1)谁是用户(2)关键问题是什么
1 谁是用户
了解忙碌的用户：
他们的时间是有限而宝贵的他们依靠你来理清重要的东西他们需要你给出清晰的事实和透彻的分析他们使用来自受信任分析人员和分析机构的信息你只是他们信息流的众多来源之一
评估用户需求
他们的角色是什么他们的兴趣点在哪里他们专长…
wirehark数据分析与取证A.pacapng
Wireshark（前称Ethereal）是一个网络封包分析软件。网络封包分析软件的功能是检索取网络封包，并同时显示出最详细的网络封包数据。Wireshark使用WinPCAP作为接口，直接与网卡进行数据报文交换。
wireshark的介绍：
假设…
你很懂数据分析，但是真的懂数据分析的可视化吗？
为什么现在企业管理者热衷于追求数据可视化？
打一个很简单的比方，我相信每个人都有在工作或者学习中，通过绘制图形的方式来将某个概念问题的表述化繁为简。 比如，最近“乌合麒麟”致莫里森的两幅漫画，可能洋洋洒洒几万…
python根据两组GPS经纬度excel坐标数据，计算其中一组坐标点方圆1000米内另一组坐标点的个数
# -*- coding: utf-8 -*-
"""
Created on Wed Jul 7 14:57:44 2021
author: Administrator
"""
import xlrd
import math
import numpy as np
import pandas as pd
import matplotlib as mpl
import matplotlib.pyplot as plt#将excel的两列转化…
浅谈数据分析中的数据预处理
作者：邓天佐
对于接触过数据分析或者从事大数据技术开发的人员，无论你是一名业务还是技术人员，想必你都清楚数据分析过程中最花时间的并不是“分析”阶段，而是数据预处理。 从众多的调查和专家言论中，数据预处理在数据…
Python——第7章 pandas数据分析实战
7.1pandas常用数据类型
7.1.1一维数组与常用操作
import pandas as pd
import matplotlib.pyplot as plt#设置输出结果对齐方式
pd.set_option(display.unicode.ambiguous_as_wide,True)
pd.set_option(display.unicode.east_asian_width,True)#自动创建从0开始的非负整数索引…
如何通过舆情监测系统加强数据分析和舆情管控?
舆情监测系统是一种可以帮助企业、政府等机构了解并掌握公众对其关注的程度，以及对其言论和行动的态度和反应的工具。随着社交媒体的兴起，舆情监测系统也越来越重要，越来越受到各个领域的关注和应用。本文将通过分析国内的具体案例࿰…
迪赛智慧数——饼图（玫瑰饼图）：菜品味道受欢迎程度
效果图 大家最爱吃的竟是它！咸鲜占比高达23.53%！
民以食为天，你最喜欢的美食口味是什么呢？ 好吃的太多，你应该很难确切地评出你心中的第一名吧。据数据调查显示，咸鲜口味最受欢迎，其次是麻辣、…
数据集进行拆分到底什么样数据算是数据标签什么样的数据算数据样本
点击上方“Python爬虫与数据挖掘”，进行关注 回复“书籍”即可获赠Python从入门到进阶共10本电子书 今 日 鸡 汤 忽闻海上有仙山，山在虚无缥缈间。 大家好，我是皮皮。 一、前言 前几天在Python白银群【kim】问了一个Python机器学习的问题&…
Python数据分析实战【十四】：Python的三种排序方法：sort()、sorted()和sort_values()【文末源码地址】
文章目录 一、List.sort()排序案例一：按照列表中的元素进行排序案例二：按照销售额数据进行排列 二、sorted()排序案例一：sorted()对列表进行排序案例二：sorted()对字典进行排序案例三：sorted()对列表中的字典元素排序 …
被嫌弃可视化太丑？这种可视化大屏搭建方法，分分钟让老板满意
在数据可视化中，使用频率最高的展览方式一定是地图可视化。基本上现有的大屏都是以地图作为主视图来呈现的，没有一幅地图放到大屏中央，已经不好意思给同行说明自己企业数据分析有多牛了。在地图可视化中，最炫酷的一定是3D可视化大…
天猫数据分析：2023年Q1天猫净水器品牌销售TOP10排行榜
水质的好坏更是与人们的身体健康密切相关。随着社会经济的发展，居民生活水平提升，人们对饮用水质量、安全性的要求也不断提高，净水器也因此逐渐成为现代生活的必需品。 根据鲸参谋电商数据显示，2023年Q1在天猫平台上，净…
数据智能平台有哪些应用前景？
数据智能平台是一种基于大数据技术和算法模型的数据分析平台，它可以对海量、多样化、复杂性强的数据进行智能化处理和分析，进而提供数据洞察和业务决策支持。
数据智能平台通常包含以下主要功能：
1. 数据采集：从各种数据源中获取…
Class 00 - 学习编程的方法不同职业所使用的编程语言
Class 00 - 学习编程的方法&不同职业所使用的编程语言 学习编程的方法什么是编程？不同职业所使用的编程语言数据分析网页设计移动应用开发Web应用开发游戏开发 Tips：学习编程语言的技巧 从电子表格到 SQL 再到 R电子表格、SQL和R:一个比较 学习编程的…
信息化 VS 数字化，哪个更适合当代企业？
各位数据的朋友，大家好，我是老周道数据，和你一起，用常人思维数据分析，通过数据讲故事。
现在大家都在谈数字化转型升级，那到底什么是数字化，是不是新瓶装旧酒呢？今天就和大家来谈谈…
Python入门（六）if语句（一）
if语句（一） 1.概述2.一个简单的实例3. 条件测试3.1 检查是否相等3.2 数值比较3.3 检查多个条件3.4 布尔表达式 作者：xiou
1.概述
编程时经常需要检查一系列条件，并据此决定采取什么措施。在Python中，if语句让你能够检…
python计算点(5,5)方圆2单位长度范围内点的数量
#计算点(5,5)方圆2单位长度范围内点的数量
import xlrd
import math
import numpy as np
import pandas as pd
import matplotlib as mpl
import matplotlib.pyplot as plt#将excel的两列转化为列表
worksheet xlrd.open_workbook(uC:/Users/Administrator/Desktop/data.xlsx)…
souapp.com（搜应用网），我们是干啥的！
到目前为止，souapp.com已经开放出 中文，韩文，日文，英文方式浏览APP，以及Android market 上全部开发者的名单已经他们所开发APP的明细（http://www.souapp.com/mobile/developerMain）。 为了更好地…
宋立波:教你如何在Android market上注册并发布应用程序
1、账号注册 步骤很简单，到Android Market发布网站建你的帐号，要收取25美元的注册费，地址在http://market.android.com/publish。
Android Market支持的国家和地区包括巴西、印度、墨西哥、俄罗斯、韩国、中国香港以及中国台湾等，…
亚马逊云科技推动数智医疗步入深水区
作者｜沐由编辑｜阿冒埃里克 托普在《未来医疗：智能时代的个体医疗革命》一书中曾经指出，在大数据开启的智能时代下，医疗领域将发生颠覆性的变化，以患者为中心的新时代即将到来。回首科技史，我们…
思迈特软件：专注BI，把产品打造到极致
作者｜康翔编辑｜阿冒 设计｜沐由在企业服务领域，现在的BI（商业智能）无疑是妥妥的风口。不过在20多年前，BI却完全是一幅门庭冷清宾客稀的光景——小型企业高攀不起，大型企业爱答不理。…
实操演示：敏捷研发中，如何用 ONES 高质量开展测试？
测试是保障交付产品功能、性能、可靠性是否达到要求的重要手段。建立一套系统化、规范化的测试管理体系，可以对缺陷实施有效的追踪和管理，大幅降低缺陷出现的几率，提高缺陷修复效率和客户满意度。今天，我们来了解一下，…
银行数字化转型指南：《区域性银行数字化转型白皮书》完整版重磅发布
近年来，中国数字经济快速发展，数字化转型不再是停留在理论和构想阶段的一个概念性名词，而是需要实际落地推进的新时代共识性战略。以银行为代表的金融机构正在积极探索数字化转型之路。占据中国银行机构数量超过90%的区域性银行是金融数字化转…
GTLC 全球技术领导力峰会 | 渐进式的研发管理改进之路
10月17日，ONES 出席2021全球技术领导力峰会-杭州站（简称“GTLC大会”）。大会上，ONES 研发总监、ONES Core 业务中台负责人陈亮宇作了题为《渐进式的研发管理改进之路》的演讲，与各行各业的技术大咖一起，分享…
重庆人最爱汗蒸，东莞人最爱唱K？美团大数据分析
美团是中国最大的团购和线下服务公司，为用户提供衣食住行等各种生活服务，它是线下经济的一面镜子。
最近抓取了美团数据，期望通过对美团大数据的分析，发现空缺的市场，同时也发现了一些有趣的结论。
数据来源
根据国…
基于python的股票客户流失数据分析模型
目录 1.案例背景 2 2. 读取数据 2 3. 划分特征变量和目标变量 3 4. 模型的搭建和使用 3 5. 模型的使用 4 6. ROC曲线对模型的评估 7 7.总结 10 8.参考文献 10 9.致谢 10
1.案例背景 在进行一笔股票交易时候，交易者（股民）都要给其账户所在的证券公司支付一些手续费，虽然单笔…
【Go】Go数据操作 - 处理JSON文件
目录
何为JSON
编码JSON
实践时刻
解码JSON
实践时刻
延伸拓展 何为JSON JSON (JavaScript Object Notation, JS对象简谱)是一种轻量级的数据交换格式。JSON最初是JavaScript的一部分，后由于便于快速编写的特性，被开发者独立出来。基本上所有的语…
基于Echarts的大数据可视化模板：智慧园区管理
目录 引言智慧园区管理的背景和重要性大数据可视化在解决园区管理挑战中的作用Echarts与大数据可视化Echarts库以及其在大数据可视化领域的应用优势开发过程和所选设计方案模板如何满足管理的特定需求模板功能与特性深入解析模板提供的各项功能模板的创新之处，交互性、多维度展…
数据分析利器之python、IT应用架构规划详解（195页）、600多个人工智能AI工具汇总、营销革命5.0…| 本周精华...
▲点击上方卡片关注我，回复“8”，加入数据分析领地，一起学习数据分析，持续更新数据分析学习路径相关资料~（精彩数据观点、学习资料、数据课程分享、读书会、分享会等你一起来乘风破浪~）回复“小飞象”&…
【Python入门篇】——Python中循环语句（while循环的基础语法和基础案例）
作者简介： 辭七七，目前大一，正在学习C/C，Java，Python等 作者主页： 七七的个人主页 文章收录专栏： Python入门，本专栏主要内容为Python的基础语法，Python中的选择循环语句…
Python 列表切片赋值与步长操作：深入探索｜NOC Python决赛辅导
你好，我是悦创。
Python 是一种强大且易于学习的编程语言，提供了多种数据结构，如列表（list），用于存储和操作数据。在处理列表时，我们经常使用切片操作，它能让我们有效地获取列表的一…
【SPSS】因子分析详细操作教程（附案例实战）
🤵♂️ 个人主页：@艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞👍🏻 收藏 📂加关注+ 目录
因子分析
因子分析案例 因子分析
【大数据基础】淘宝双11数据分析与预测
https://dblab.xmu.edu.cn/post/8116/
问题
问题1 mysql登录需要密码
https://cloud.tencent.com/developer/beta/article/1142525 这个很神奇，我密码输1就进去了 为避免出问题，把解决方案放这里： https://blog.csdn.net/qq_34771403/ar…
牛客网专项练习Pytnon分析库（九）
1.应用matplotlib数据库绘制图像的时候，其中plt.savefig(test, dpi600)中的dpi参数代表了是什么意思（D）。
A.像素
B.图形尺寸
C.颜色
D.每英寸点数
解析： dpi为设置图形每英寸的像素点数。 2.下面选项中有关异常值检测说法错…
毫无基础的人如何入门 Python ？
说到这个就得提醒一下，python更多的是一门工具语言，大多数人是已经掌握了至少一门编程语言，才再学的python做数据分析或者人工智能。
而如果只想靠python一门语言找工作，难度非常大。
听到这番话后再找我继续问的一般就是有一份…
【集合详解】——python基础——如桃花来
目录索引 集合的特点：创建集合：集合常见操作：增加数据：*add():**update():* 删除数据：*remove():**discard():**pop():* 查找数据：*in:**not in:* 集合的特点： 没有重复元素,即使重复࿰…
数据分析真的很火吗？真的有很多企业需要这样的岗位吗？求大佬指点。
“我是去年毕业的，因为疫情影响，整个就业环境都很不好，很多企业都裁员了。加上疫情三年基本都是玩过去，也没啥一技之长，就业就更难了。听说现在做数据分析的人很多，我身边的朋友都在转行做数据分析。
其实…
银行数字化转型导师坚鹏：银行数字化转型面临的5大机遇与4大挑战
在机遇方面，主要面临以下5大机遇：
国家战略及政策机遇：乡村振兴战略、制造强国战略、绿色金融战略等战略的落实将会给银行数字化转型带来新的业务机遇，《中国银保监会关于推动银行业和保险业高质量发展的指导意见》、《关于银行业…
什么是BI ？BI 能给企业带来什么价值？
目前，社会数字化程度还在不断加深，数据量也伴随着一同高速增长，许多人预测未来将是数据处理时代，而作为数据类解决方案的商业智能BI也会持续扩张市场，朝着不同行业BI商业智能的方向发展。
利用BI工具系统，…
Python优化技巧：Cython加速实战
Python优化技巧：Cython加速实战 一、Python语言的性能瓶颈问题1 Python语言的弱点2 代码执行效率低下的常见原因 二、Cython介绍1 Cython的概念和作用2 Cython与Python的关系 三、通过Cython提升Python性能1 从Python到Cython2 Cython代码的编写和调试 四、Cython加…
【如何处理无效数据？】
对于任何一个数据分析项目，无效数据都是一个非常重要的问题。无论是在收集、清理还是分析数据时，无效数据都会对结果产生负面影响，可能导致偏差、误判、不准确和错误的结论等。
无效数据通常指数据集中不能提供有用信息或不符合研究目的的数…
python随机生成数据并用双y轴绘制两条带误差棒的折线图
python绘图系列文章目录 往期python绘图合集: python绘制简单的折线图 python读取excel中数据并绘制多子图多组图在一张画布上 python绘制带误差棒的柱状图 python绘制多子图并单独显示 python读取excel数据并绘制多y轴图像 python绘制柱状图并美化|不同颜色填充柱子 Python绘制…
【Python 统计学习】零基础也能轻松掌握的学习路线与参考资料
Python 作为一种功能强大而且易于使用的编程语言，被广泛应用于数据科学和统计学习领域。如果你想要在这个领域有所成就，下面是 Python 统计学习学习路线的建议。 Python 基础知识 如果你还没有 Python 的基础知识，那么首先需要学习 Python 的…
应征之作——你会如何处理无效数据？
应征之作——你会如何处理无效数据？
看到了C站的活动，所以谈一下对无效数据的看法。
对于数据库管理员以及数据库开发人员，以及数据分析人员来说 无效数据是时时处处都存在的，必须始终与无效数据周旋到底。
一 无效数据的概念 …
一站式数据分析学习，让你成为一名合格的数据分析师
一站式数据分析学习，让你成为一名合格的数据分析师 随着数字化时代的到来，数字经济已然成为了新的发展潮流，数据的重要性越发显著。加上大数据、人工智能、云计算等数字技术的发展，让数字化时代的步伐迈得更快，目前已经…
【Python】数据分析与可视化实践：收支日统计数据可视化的实现
Python数据分析与可视化实践：收支日统计数据可视化的实现 Author：萌狼蓝天 Date：2023-5-7 数据读入与基本处理 上图是原始数据的一部分，存放于excel中，首先使用pd读入数据。读入数据后，删除不是收入&#x…
Python-PyEcharts绘制柱状图
更多优秀文章，请关注个人微信公众号： 程序猿小杨
Python-PyEcharts绘制柱状图
一、简介 核心创建流程： 1.通过Bar()构建一个柱状图对象 2.和折线图一样，通过add xaxis()和add_yaxis()添加x和y轴数据 3.通过柱状图对象的&#x…
python 爬虫之数据清洗
Python爬虫是一项强大的工具，可用于获取大量数据并进行分析和处理。但是，爬取的数据在处理之前需要经过清洗，以消除无用或无效的信息，并确保数据可靠和可用。在本文中，我们将详细讨论Python爬虫数据清洗的过程和技巧&a…
多业务线下，IT企业如何应对市场经济下行危机？
多业务线下，IT企业如何应对市场经济下行危机？
市场经济下行就像是一辆行驶的车子遇到了坡道，速度开始变慢甚至停下来。在这个情况下，经济的增长变得较为缓慢，消费减少，投资减少，也对企业会带来…
小白量化《穿云箭集群量化》（8） 实盘核聚变氢弹策略
小白量化《穿云箭集群量化》（8） 核聚变策略 上一篇介绍了超级订单SuperOrder功能在股票上买入策略，这篇介绍MetaTrader5期货外汇的双向交易策略。 交易策略比较有名的是马丁策略，马丁策略是单向策略。 我们设计了双向策略原子弹策…
干货 | 利用SPSS进行高级统计分析第一期
Hello，大家好！
这里是壹脑云科研圈，我是喵君姐姐～
你是否还在为分析实验数据而感到头疼？你是否还在苦于自己不知道如何选择合适的模型来分析数据？
本期我们就来为大家带来了利用SPSS软件进行高级统计分析…
cs109-energy+哈佛大学能源探索项目 Part-2.1（Data Wrangling）
博主前期相关的博客见下： cs109-energy哈佛大学能源探索项目 Part-1（项目背景） 这次主要讲数据的整理。
Data Wrangling 数据整理 在哈佛的一些大型建筑中，有三种类型的能源消耗，电力，冷冻水和蒸汽。 冷冻…
![[系统安全] 五十二.DataCon竞赛 (1)2020年Coremail钓鱼邮件识别及分类详解](https://img-blog.csdnimg.cn/b71225e4e2d9432a99ab095c7cec4831.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBARWFzdG1vdW50,size_20,color_FFFFFF,t_70,g_se,x_16#pic_center)
[系统安全] 五十二.DataCon竞赛 (1)2020年Coremail钓鱼邮件识别及分类详解
您可能之前看到过我写的类似文章，为什么还要重复撰写呢？只是想更好地帮助初学者了解病毒逆向分析和系统安全，更加成体系且不破坏之前的系列。因此，我重新开设了这个专栏，准备系统整理和深入学习系统安全、逆向分析和恶意代码检测，“系统安全”系列文章会更加聚焦，更加系…
从KM到Cure Models：常用生存分析方法的优缺点
一、引言 生存分析是一种用于研究个体生命长度或事件发生时间的统计方法。在许多领域中，如医学、社会学、经济学和工程学等，生存分析被广泛应用于分析个体的生存时间，并研究相关因素对生存时间的影响。通过生存分析，我们可以评估特…
2023年加湿器市场数据分析（天猫数据分析怎么做）
随着人们生活水平提高、空调广泛使用，导致皮肤紧绷、口舌干燥、咳嗽感冒等空调病的滋生。可以看出，空气湿度与人体健康以及日常生活有着密切的联系。而加湿器作为室内空气湿度控制的重要工具，在近年来受到了越来越多的重视。根据鲸参谋电商数…
pandas数据分析39——数据透视表简单实现
案例实现
其实就是两个分类变量，组成多少种出现的情况，类似于混淆矩阵，交叉表。 代码实现
df pd.DataFrame({时间: [*AABBBA],地区: [*xxyzzz]})
df[值]np.random.randint(1,3,size(6,))
df 时间地区是我给的样例名称，还可以是…
2.利用matlab建立符号函数和符号方程(matlab程序)
1.简述 一、引言 符号函数是Matlab的一个非常重要的功能，可以用来表示数学上的函数，同时也是进行数值计算。创建符号函数的方法有多种，本文给出了四种生成符号函数的方法及求符号函数函数值的方法。 四种生成符号函数的方法：有利用…
【数据分析入门】Jupyter Notebook
目录 一、保存/加载二、适用多种编程语言三、编写代码与文本3.1 编辑单元格3.2 插入单元格3.3 运行单元格3.4 查看单元格 四、Widgets五、帮助 Jupyter Notebook是基于网页的用于交互计算的应用程序。其可被应用于全过程计算：开发、文档编写、运行代码和展示结果。 …
7.利用matlab完成 符号方阵的特征值分解和 符号矩阵的奇异值分解 （matlab程序）
1.简述 （1）特征值分解：函数eig 格式：[V,D] eig(A) %计算A的特征值对角阵D和特征向量V，使AVVD成立。
注意：特征值分解时，使用eig，矩阵A必须是方阵。
A [0 1;1 1]; [V,D] ei…
Titanic--细节记录三
目录 image
sklearn模型算法选择路径图
留出法划分数据集
‘留出’的含义
基本步骤和解释
具体例子
创造一个数据集
留出法划分
预测结果可视化
分层抽样
设置方法
划分数据集的常用方法
train_test_split
什么情况下切割数据集的时候不用进行随机选取
逻辑回归…
Python数据挖掘-RFM模型K-means聚类分析-航空公司客户价值分析
使用教材：《Python数据分析与挖掘实战》 模型：RFM模型 算法：K-means聚类；其他方法还用到了层次聚类 数据：需要数据的可以评论里call。
内容：
（1）案例: 航空公司客户价值分析
&…
IT运维：使用数据分析平台监控PowerStore存储
概述 存储在企业中一直承担着重要的角色，保证数据的安全性更是重中之重。存储的运行是否正常？我们的数据是否安全？存储管理人员的操作是否规范？这些都是企业需要关注的问题。那么该如何确保这些问题能够有效的解决？我们…
炫酷水球图：让数据可视化更生动有趣
水球图是一种独特而引人注目的数据可视化形式，通过模拟水球的形状和大小来展示数据的分布和比例关系。它以其生动的表现形式和直观的视觉效果，吸引了越来越多的关注和应用。在数据可视化领域，水球图为我们提供了一种直观、易于理解的方式来展…
数据仓库性能测试方法论与工具集
目录 文章目录 目录数据仓库 v.s. 传统数据库数据仓库性能测试案例性能指标测试方案测试场景测试数据集测试用例性能指标测试脚本工具 基准环境准备硬件环境软件环境 测试操作步骤Cloudwave 执行步骤导入数据集TestCase 1. 执行 13 条标准 SQL 测试语句TestCase 2. 执行多表联合…
![[小尘送书-第二期]《Power BI数据分析与可视化实战》数据清洗、数据建模、数据可视化设计与高级技法](https://img-blog.csdnimg.cn/8db00f7e59664a5fa80e4db1934c5666.png#pic_center)
[小尘送书-第二期]《Power BI数据分析与可视化实战》数据清洗、数据建模、数据可视化设计与高级技法
大家好，我是小尘，欢迎你的关注！大家可以一起交流学习！欢迎大家在CSDN后台私信我！一起讨论学习，讨论如何找到满意的工作！ 👨💻博主主页：小尘要自信 …
喜报！诚恒科技与赛时达科技达成BI金蝶云星空项目合作
随着全球数字化浪潮轰轰烈烈袭来，仅仅凭借手工处理的方式难以在庞大的数据海洋中精准获取信息、把握市场需求、了解目标用户，为企业创新提供强有力的支持。深圳赛时达科技有限公司（简称赛时达科技）希望通过数字化转型实现从手工处…
sql阶段之案例小记
数据：https://pan.baidu.com/s/15pV-S5vTVQrmoq5zmXDTyw 提取码：v9yp
1、首先通过jupyternotebook做下简单处理，并将数据做新的保存
import pandas as pd
#读取数据
datapd.read_excel(rC:/Users/Administrator/Downloads/20210115数据.xl…
4.利用matlab符号矩阵的四则运算（matlab程序）
1.简述 符号对象的建立 sym函数 sym函数用于建立单个符号对象，其常用调用格式为： 符号对象名sym(A) 1 将由A来建立符号对象，其中，A可以是一个数值常量、数值矩阵或数值表达式(不加单引号),此时符号对象为一个符号常量；…
Apache Flink不止于计算，数仓架构或兴起新一轮变革
作者 | 蔡芳芳 采访嘉宾 | 王峰（莫问） 维基百科的“Apache Flink”词条下，有这么一句描述：“Flink 并不提供自己的数据存储系统，但为 Amazon Kinesis、Apache Kafka、Alluxio、HDFS、Apache Cassandra 和 Elasticsearc…
63_Pandas中数字的四舍五入
63_Pandas中数字的四舍五入
要对 pandas.DataFrame、pandas.Series 的数字进行四舍五入，请使用 round() 方法。 round() 方法舍入为偶数而不是四舍五入。
如果要四舍五入，请将标准库十进制模块的 quantize() 应用于每个元素。
本示例代码中的各个版本…
（5）所有角色数据分析页面的构建-5
所有角色数据分析页面，包括一个时间轴柱状图、六个散点图、六个柱状图(每个属性角色的生命值/防御力/攻击力的max与min的对比)。
"""绘图"""
from pyecharts.charts import Timeline
from find_type import FindType
import pandas …
25 | 葡萄酒质量数据分析
基于kaggle提供的公开数据集，对全球葡萄酒分布情况和质量情况进行数据探索和分析 from kaggle： https://www.kaggle.com/zynicide/wine-reviews
分析思路： 0、数据准备 1、葡萄酒的种类 2、葡萄酒质量 3、葡萄酒价格 4、葡萄酒描述词库 5、品鉴师信息 6、总结 0、数据准备 …
特征值分解与奇异值分解SVD
https://www.imooc.com/article/267351?block_idtuijian_wz 先看这篇文章。 1.什么是矩阵 一件事情，有多个纬度影响。就像球员卡的各项指标影响一个球员的表现一样。一个指标就是一个维度。 比如一个球员跑的快，那这场比赛里面总体跑动的几率多于总体射…
数据分析与可视化（三）numpy
标题数据分析与可视化（三）
numpy pandas比较重要 东西多 下一次把 这个细节好多啊 但常用的也不太多 而且可以在用的时候找的 不过还是知道些 会一点的好 这是实例 python提供了众多可以支持数据处理的包，因而利用python进行数据分析非常简洁…
一个每周总结的产品经理，都会写点啥？【9月第二周】
- 边听边看，效果更好- - 9月第一周- 一年52周，每周都要总结反思。我之前试过365天每日记录，一段时间后觉的不合理。我们不是每天都有启发，刻意为了总结而每日就失去了意义。成长在于有感而发。我们以每周的维度记录，即…
【数学建模】--因子分析模型
因子分析有斯皮尔曼在1904年首次提出，其在某种程度上可以被看成时主成分分析的推广和扩展。 因子分析法通过研究变量间的相关稀疏矩阵，把这些变量间错综复杂的关系归结成少数几个综合因子，由于归结出的因子个数少于原始变量的个数，…
Python数据分析合辑
Jupyter Notebook的使用
Anaconda：XGBoost的安装_anaconda 安装xgboost_紫昂张的博客-CSDN博客
设置Jupyter文档的标题_jupyter怎么设置标题_紫昂张的博客-CSDN博客 Python清洗数据
Python数据分析：用rename()修改字段名_python修改字段名_紫昂张的博…
Python神器Anaconda图文安装教程
来源：投稿 作者：Fairy 编辑：学姐 Anaconda简介
Anaconda是一种数据科学和机器学习的开发环境，它包含了大量的Python包、工具和库，以及可视化界面和集成开发环境。「Anaconda可以方便地管理Python环境和安装第三方软件…
机器学习项目实战-能源利用率 Part-3（特征工程与特征筛选）
博主前期相关的博客可见下： 机器学习项目实战-能源利用率 Part-1（数据清洗） 机器学习项目实战-能源利用率 Part-2（探索性数据分析） 这部分进行的特征工程与特征筛选。
三 特征工程与特征筛选
一般情况下我们分两步走…
Python数据可视化小结
1. 引言
原始形式的数据对大多数人来说可能都是枯燥乏味的，但是如果掌握正确的可视化工具，给人的印象就会变得引人入胜。本文通过实际例子，让我们利用数据可视化工具来探索不一样的数据体验。
闲话少说，我们直接开始吧ÿ…
干货 | 利用SPSS进行高级统计第一期（更新）
Hello，大家好！
这里是壹脑云科研圈，我是喵君姐姐~
在之前的文章中，我们以此介绍了如何利用SPSS进行高级统计分析，内容包括：
(1)描述性统计表格模板、卡方&T检验、相关&回归分析
(2)中介、多重中…
【Hadoop】四、Hadoop生态综合案例 ——陌陌聊天数据分析
文章目录 四、Hadoop生态综合案例 ——陌陌聊天数据分析1、陌陌聊天数据分析案例需求1.1、背景介绍1.2、目标需求1.3、数据内容 2、基于Hive数仓实现需求开发2.1、建库建表、加载数据2.2、ETL数据清洗2.3、需求指标统计 3、FineBI实现可视化报表3.1、FineBI的介绍及安装3.2、Fi…
快速上手MATLAB：科研、工程、数据分析，MATLAB入门（上）教你基础知识！+分享MATLAB完全学习手册资料（视频+课件+代码
快速上手MATLAB：科研、工程、数据分析，MATLAB入门（上）教你基础知识！ 福利：文末有资料分享！！ 前言零基础的人学matlab，需要哪些基础知识？ 一、认识MATLAB1. MA…
Chat GPT 教您如何发现和处理无效数据
Chat GPT 教您如何发现和处理无效数据
在进行数据管理时，无论是数据分析、数据挖掘还是机器学习项目，无效数据都可能对结果造成严重的影响。因此，发现和处理无效数据变得至关重要。本文将从如何处理无效数据的角度，详细探讨数据清…
2023年京东618预售数据免费开放（往年618热门品类数据回顾）
2023年618京东平台整体的活动节奏分为五个时期： 第一时期为预售期：2023年5月23日晚8点-5月31日
第二时期为开门红：5月31日20点-6月3日
第三时期为场景期：6月4日-6月15日
第四时期为高潮期：6月15日20点-6月18日
第五…
Python数据分析案例27——PCA-K均值-轮廓系数客户聚类
本案例适合应用统计，数据科学，电商专业 K均值对客户进行分类的案例都做烂了......但我认为这个案例还是有一定的价值的，使用了pca，还有轮廓系数寻找最优的聚类个数。
下面来看看 代码准备
导入包
import numpy as np
import pa…
如何利用Smartbi电子表格进行财务常用账簿数据的联动查询
财务，是几乎所有企事业单位内部的核心组织。单位今年耗费几何，企业去年赚多少钱，平均成本在什么水平，为国家创造多少税收等等，所有这些信息，最终都通过财务账表的方式来体现。可以说，大家工作辛…
产品经理，你真的理解俞军的产品价值公式吗？
公式是思考的凝练，是底层逻辑的总结。在产品圈，最出名的公式是产品价值公式：产品价值 （新体验 - 旧体验）- 迁移成本。作为产品经理，我们该如何从公式的角度还原俞军大神的思考凝练、洞察的底层逻辑呢&…
使用requests如何实现自动登录
不知道大家有没有注意到，好多网站我们登录过后，在之后的某段时间内访问该网页时，不会给出请登录的提示，时间到期后就会提示请登录！这样在使用爬虫访问网页时还要登录，打乱我们的节奏，那么如何使…
![【深度学习】遗传算法[选择、交叉、变异、初始化种群、迭代优化、几何规划排序选择、线性交叉、非均匀变异]](https://img-blog.csdnimg.cn/9b328783005d4848ab6b2df48e8d03bd.png)
【深度学习】遗传算法[选择、交叉、变异、初始化种群、迭代优化、几何规划排序选择、线性交叉、非均匀变异]
目录 一、遗传算法二、遗传算法概述2.1 选择2.2 交叉2.3 变异 三、遗传算法的基本步骤3.1 编码3.2 初始群体的生成3.3 适应度评估3.4 选择3.5 交叉3.6 变异3.7 总结 四、遗传算法工具箱4.1 initializega4.2 ga4.3 normGeomSelect4.4 arithXover4.5 nonUnifMutation 五、遗传算法…
个人APP盈利之道：内容为王 学会适当放弃
每当接近年尾，最痛苦的工作无疑是写年终总结，经过数天奋战总算完成任务，不禁感叹这一年过得不容易阿。突然想起这一年也是自己开发Android APP的第一年，于是觉得应该给自己的APP来一个年终总结。 一、开发方面 严格来说࿰…
44 | 酒店预订及取消的数据分析
1.背景介绍
数据集来自Kaggle网站上公开的Hotel booking demand项目
该数据集包含了一家城市酒店和一家度假酒店的预订信息，包括预订时间、入住时间、成人、儿童或婴儿数量、可用停车位数量等信息。
数据集容量约为12万32
本次数据分析主要包含如下内容： 总览数据，完成对…
探索数字孪生的数据之美：实时、多源、多维的未来
在数字孪生的世界里，数据不再是孤立的数字，而是构成了一个真实、动态的虚拟映像，其独特的特点为现代社会带来了前所未有的机遇。 首先，数字孪生的数据特点之一是实时性。在制造业中，数字孪生可以通过实时传感器数据&am…
python练习18_工作实景_数据预处理自动化办公
一、业务场景
我的工作中每天需要审核两种来自于不同数据源的不同甲方公司的数据，审核内容包括数据格式和数据准确性。
两个数据源分别是邮件和系统，数据存储使用excel。
传统方法是记住规则之后用肉眼去看，或者使用excel的一些函数进行匹…
行业分析（思维逻辑）
1、
如何着手分析一个行业？ - 知乎做行业分析，很容易陷入一个误区，就是认为：我只要能找到最全的、最准的信息，就能做好行研。所以很多知…https://www.zhihu.com/question/20219092/answer/666346625
2、
3、
4、 …
企业中商业智能BI，常见的工具和技术
商业智能（Business Intelligence，简称BI）数据可视化是通过使用图表、图形和其他可视化工具来呈现和解释商业数据的过程。它旨在帮助组织更好地理解和分析他们的数据，从而做出更明智的商业决策。
常见的商业智能数据可视化工具和技…
地理数据的双重呈现：GIS与数据可视化
前一篇文章带大家了解了GIS与三维GIS的关系，本文就GIS话题带大家一起探讨一下GIS和数据可视化之间的关系。
GIS（地理信息系统）和数据可视化在地理信息科学领域扮演着重要的角色，它们之间密切相关且相互增强。GIS是一种用于采集、…
2023京东酒类市场数据分析（京东数据开放平台）
根据鲸参谋平台的数据统计，今年7月份京东平台酒类环比集体下滑，接下来我们一起来看白酒、啤酒、葡萄酒的详情数据。
首先来看白酒市场。
鲸参谋数据显示，7月份京东平台白酒的销量为210万，环比下滑约49%；销售额将近19…
4.12 Pandas中的DataFrame数据类型API函数参考手册(二) (Python)
Pandas中的DataFrame数据类型API函数参考手册 二 目录前言 一、构造函数(Constructor)二、属性和基础数据(Attributes and underlying data)三、转换(Conversion)1. DataFrame.astype(dtype[, copy, errors])2. DataFrame.convert_dtypes([infer_objects, ...])3. DataFrame.in…
Smartbi电子表格故事之用数据进行销售问题分析
天津小麦商贸有限公司（X&M）成立于2012年11月，主营业务是商贸流通业，主要是日用商品的批发销售。 2012年前，公司创始人（总经理和销售总监）一直从事外贸的生意，自从2008年金融危机…
常用数据可视化相关型图表大全
大数据时代，工作中我们可能经常会需要处理很多数据，需要在总结汇报中展示呈现，俗话说“字不如表，表不如图”，那么如何缩短数据与用户的距离?让用户一眼Get到重点?
在理解或分析大量数据时，数据可视化起着…
Smartbi电子表格故事之高效营销活动后的自助数据分析
自助数据分析是BI的潮流，但几乎都是数据可视化流派，Smartbi电子表格另辟蹊径，在Excel中提供自助分析的能力，然后通过服务器进行发布，这个功能我们称之为“Excel融合分析”，目前在免费版中即可体验。 系统数…
使用Pandas进行数据处理和分析的入门指南
摘要：本文将介绍如何使用Python的Pandas库进行数据处理和分析，包括数据导入、数据清洗、数据转换和简单分析等方面的内容。
引言
在数据科学和数据分析领域，数据处理是一个关键的步骤。Python的Pandas库提供了强大且易于使用的工具…
迪赛智慧数——饼图柱状图（基本饼图和基本柱状图）：“怒路症”数据解读
效果图 35%的司机承认自己属于“路怒族”，还有65%的人表示自己不是“路怒族”。
近日，上海两车高架上斗气碰撞差点掉落高架，上海高架出现“史诗级”斗气车。小编在此呼吁大家，开车路上减压，避免坏情绪伴随，…
面向小白的最全Python数据分析指南，超全的！
因工作需求经常会面试一些数据分析师，一些 coding 能力很强的小伙伴，当被问及数据分析方法论时一脸懵逼的，或者理所当然的认为就是写代码啊，在文章开头先来解释一下数据分析。
数据分析是通过明确分析目的，梳理并确定…
Pandas 高级操作使用技巧总结
前言
在数据分析和数据建模的过程中需要对数据进行清洗和整理等工作，有时需要对数据增删字段。下面为大家介绍Pandas对数据的复杂查询、数据类型转换、数据排序、数据的修改、数据迭代以及函数的使用。 复杂查询
实际业务需求往往需要按照一定的条件甚至复杂的组合…
【Python教学】Python兼职有哪些？给你们分享一下最适合学生党/工作党的Python兼职攻略以及接私活经验
文章目录 前言一、做兼职的优势二、兼职种类三、基本技能要求四、平台和渠道五、案例分析六、做兼职注意事项总结 前言
Python是一种高级编程语言，它具有简单易学、代码可读性高、功能强大等特点，被广泛应用于数据分析、人工智能、Web开发等领域。Pytho…
举个栗子~Tableau 技巧（255）：文本表中高亮最新日期的数据
对于需要每天查看业务数据的分析用户来说，在刷新工作簿的数据之后，如果能高亮显示当天的数据（如下图），就可以事半功倍了！ 那么，在 Tableau 中该如何高亮文本表最新的数据呢？今天的栗…
数字孪生世界建设核心能力:地理信息数据应用能力
地理信息数据是数字孪生的核心基础之一，它能够把真实世界的空间结构和关系映射到数字世界，包含了静态的地理元素和动态的时空变量，如道路、建筑、水系、交通流量、人口密度、环境质量等，它能够反映真实世界的时空特点和动态变化&a…
Python数据可视化入门教程
什么是数据可视化？ 数据可视化是为了使得数据更高效地反应数据情况，便于让读者更高效阅读，通过数据可视化突出数据背后的规律，以此突出数据中的重要因素，如果使用Python做数据可视化，建议学好如下这四个Pyt…
chatgpt赋能python：Python中如何去除NaN？-一个有10年python编程经验的工程师
Python中如何去除NaN？ - 一个有10年python编程经验的工程师
NaN即Not a Number的缩写，表示非数字，也称为缺失值。在数据分析和机器学习中，经常会遇到数据集中存在NaN的情况。
Python提供了许多实用的库和函数，可以轻…
多模块更新，助力模型训练及应用｜ModelWhale 版本更新
绿暗红稀，蝉鸣草长。本次更新中，ModelWhale 带来了一系列的功能优化，期待为你提供更好的使用体验。 本次更新中，ModelWhale 主要进行了以下功能迭代：
• 优化 模型与人工组合式数据标注（团队版✓ …
不会数据分析？无从下手？一文帮你打开数据分析思路
掌握了很多数据分析工具和技能，却依然做不好数据分析。
面对具体的业务问题，我们还是容易两眼一抹黑？除了数据和专业之外，还需要一定的方法论支撑。 文章有点长（误区解释方法论分享）但干货满满，…
python遍历一个文件夹下所有excel，读取所有sheet页，然后写入另一个文件夹下对应模板的excel中
本来想直接写入，但是我们的excel报表太麻烦了，里面表头有多处要求合并的，用python去写太要命了，想了下，设置一堆空的excel模板，这样只需要把原文件的数据读出来就可以了，简单多了 #读取文件夹下…
【2023】某python语言程序设计跟学第八周内容【完】
目录 1.从数据处理到人工智能1.1.python库之数据分析1.2.python库之数据可视化1.3.python库之文本处理1.4.python库之机器学习 2.实例：霍兰德人格分析雷达图3.从web解析到网络空间3.1.python库之网络爬虫3.2.python库之web信息提取3.3.Python库之web网站开发3.4.pyt…
2021电工杯数学建模B题解题思路（光伏建筑一体化板块指数发展趋势分析及预测）
目录
一、前言
二、问题背景
三、具体问题
四、解题思路
（一）整体思路
（二）问题一
（三）问题二
（四）问题三
（五）问题四
（六）…
一文秒懂BI是什么？
在数字化时代背景下，商业智能（Business Intelligence，简称BI）成为了信息化热词，我们经常能听到企业说“上BI”、“建设BI系统”、“构建BI决策平台”“BI数据分析”“BI可视化”等内容。
一、那么BI到底是什么呢&…
Smartbi助力航天百亿级遥测数据实现秒级查询
“Smartbi全程参与了火星探测任务、中国载人空间站建设任务，为航天任务参战单位提供专业、易用、高性能的实时数据查询分析监控平台，实现航天器飞行状态监测和预警，让咱们的科研人员专注聚焦科研工作，保障航天任务顺利进行。Smart…
构建一站式智能数据分析平台，华夏杭分数字化经营管理提质增效｜案例研究
数字经济时代，数字化趋势已然成为各行业共识。银行作为数字化转型的排头兵，积极推动数字技术与实体经济深度融合，核心目的之一即是达成数据驱动业务发展的能力。基于对金融行业数字化的观察，我们发现在银行业的领先实践中…
2022年天府杯全国大学生数学建模竞赛A题仪器故障智能诊断技术解题全过程文档及程序
2022年天府杯全国大学生数学建模竞赛
A题 仪器故障智能诊断技术
原题再现： 问题背景： 仪器设备故障诊断技术是一种了解和掌握机器在运行过程的状态，确定其整体或局部正常或异常，早期发现故障及其原因，并能预报故…
这8个NumPy函数可以解决90%的常见问题
NumPy是一个用于科学计算和数据分析的Python库，也是机器学习的支柱。可以说NumPy奠定了Python在机器学习中的地位。NumPy提供了一个强大的多维数组对象，以及广泛的数学函数，可以对大型数据集进行有效的操作。这里的“大”是指数百万行。 Nump…
如何在 Python 中检查一个字符是否为数字？
在编程中，我们经常需要检查一个字符是否为数字。这种判断对于数据验证、文本处理和输入验证等场景非常有用。Python 提供了多种方法来检查一个字符是否为数字。本文将详细介绍在 Python 中检查字符是否为数字的几种常用方法，并提供示例代码帮助你理解和应…
如何在 Python 中将数字转换为字母？
在编程中，有时我们需要将数字转换为字母，例如将数字表示的年份转换为对应的字母表示，或者将数字编码转换为字母字符。Python 提供了多种方法来实现这种转换。本文将详细介绍在 Python 中将数字转换为字母的几种常用方法，并提供示例…
chatgpt赋能python：Python内置排序：快速高效的数据处理方式
Python内置排序：快速高效的数据处理方式
作为一种非常流行的编程语言，Python提供了很多高效、易于使用的内置功能，其中之一就是排序函数。通过使用内置的排序函数，Python工程师可以快速高效地处理各种不同类型的数据，…
python数据分析学习路径
1.了解python：
1）准备工作环境（第1周）
1.1.python安装 1.2.库安装：pandas、numpy、matplotlib、scipy2）学习python语言基础知识（第2-3周）： 廖雪峰基础教程、慕课网pyth…
实时数仓中数据实时输出的思考与实现
随着数据量不断增长以及提升企业竞争力的需求增长，实时数仓已经成为了许多业务和组织的重要数据架构之一。在实时数仓中，数据实时输入和数据实时分析是关键步骤，但同样重要的是如何将处理后的数据输出到各种目标上。本文将探讨实时数仓中数据…
Power BI 如何高效管理度量值和字段
内容说明
背景需求： 当分析场景涉及大量数据和分析度量值时，为了更好的区分原始数据和用于分析的度量值，需要合理安排和管理数据字段。
本文总结了三种方法：
移动度量值位置创建字段文件夹：子文件夹和多个文件夹创建…
Python可视化分析项目
今天给大家分享一个基于python的django框架结合爬虫以及数据可视化和数据库的项目，该项目总体来说还是挺不错的，下面针对这个项目做具体介绍。
1：项目涉及技术：
项目后端语言：python
项目页面布局展现：前…
Pandas中的方法及使用示例
前言 系列文章目录 [Python]目录 视频及资料和课件 链接：https://pan.baidu.com/s/1LCv_qyWslwB-MYw56fjbDg?pwd1234 提取码：1234 文章目录前言1. Series() -- 创建 Series 对象2. DataFrame() -- 创建 DataFrame 对象3. read_csv() -- 读取 csv 文件fi…
Python 数据可视化
Python 数据可视化
Python提供了多个用于数据可视化的工具和库。其中最常用的包括：
1. Matplotlib：Matplotlib 是一个用于绘制二维图形的 Python 库。它提供了广泛的绘图选项，可以帮助您创建线图、散点图、柱状图、饼图、等高线图、3D 图形…
小红书热搜榜TOP1，多巴胺时尚爆火，怎么抄作业？
今夏时尚，明媚与简约并存。要说今年夏天什么最火？多巴胺必须拥有姓名。无论男女、老少、人宠，都被这股快乐风带飞。 “多巴胺”有多火？就只是彩色穿搭吗？各大博主、品牌若想加入，要怎么玩？今儿&…
Java小案例: 使用for循环完成矩形打印
精选30云产品，助力企业轻松上云！>>> 解释:
使用一个一个的 ”*”拼出矩形图形。
要求矩形的 高和宽 用户可以使用键盘录入指定。
效果如下: ↓打印矩形: 案例分析 接收高和宽根据高和宽进行矩形打印实现
数据分析python代码开发工程化编写逻辑-个人总结
文章目录 团队开发git提交提交方法注意细节 Byte-compiled / optimized / DLL filesC extensionsDistribution / packagingPyCharm filesJupyter NotebookUnit test / coverage reportsSphinx documentationDjangoFlask:thinking:协同开发 细节模块管理根目录train.pypred.py d…
实用技巧：数据可视化综述
作为一名数据产品经理，不仅需要了解数据产品设计与研发的流程，数据可视化更是必不可少的技能之一。
通过数据可视化，数据产品经理可以更加直观地呈现数据信息，让用户更容易理解、解读数据。
可视化图形选择
1 设计的目的
在实…
Python自动化小技巧18——自动化资产月报(word设置字体表格样式，查找替换文字)
案例背景
每月都要写各种月报，经营管理月报，资产月报.....这些报告文字目标都是高度相似的，只是需要替换为每个月的实际数据就行，如下： (打码是怕信息泄露.....)
可以看到，这个报告的都是高度模板化&…
2023年京东榨汁机行业数据分析（京东数据开放平台）
如今，随着消费不断升级，人群不断细分，使得消费需求呈现多样化，小家电市场中不少新兴品类都受到消费者的关注。其中，伴随消费者对健康生活方式的认识不断提高，以及各种蔬菜、水果的供应，榨汁机逐…
Pandas数据分析教程-数据清洗-字符串处理
pandas-02-数据清洗&预处理 D. 字符串处理1. Python自带的字符串处理函数2. 正则表达式3. Series的str属性-pandas的字符串函数文中用S代指Series，用Df代指DataFrame 数据清洗是处理大型复杂情况数据必不可少的步骤，这里总结一些数据清洗的常用方法：包括缺失值、重复值、…
2023年38页智慧水利整体解决方案PPT
导读：原文《2023年38页智慧水利整体解决方案PPT》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。
业务场景与痛点分析 业务架构图 总体目标 按照“建管并…
pandas由入门到精通-pandas的数据结构
pandas数据分析-pandas的数据结构 pandas 数据结构Series1. 创建Series数组2. 性质3. 索引4. 运算DataFrame1. 创建Df数组2. 性质3.索引4. 对列进行增删改Index Objects本文介绍pandas中一些常用的属性方法的概述，给读者提供快速学习的架构和思路。表格中提供的一些参数方法没…
【数据分析入门】Numpy进阶
目录 一、数据重塑1.1 透视1.2 透视表1.3 堆栈/反堆栈1.3 融合 二、迭代三、高级索引3.1 基础选择3.2 通过isin选择3.3 通过Where选择3.4 通过Query选择3.5 设置/取消索引3.6 重置索引3.6.1 前向填充3.6.2 后向填充 3.7 多重索引 四、重复数据五、数据分组5.1 聚合5.2 转换 六、…
8.利用matlab完成 符号微积分和极限 （matlab程序）
1.简述 一、符号微积分
微积分的数值计算方法只能求出以数值表示的近似解，而无法得到以函数形式表示的解析解。在 MATLAB 中，可以通过符号运算获得微积分的解析解。
1. 符号极限
MATLAB 中求函数极限的函数是 limit，可用来求函数在指定点的…
41 | 京东商家书籍评论数据分析
京东作为中国领先的电子商务平台，积累了大量商品评论数据，这些数据蕴含了丰富的信息。通过文本数据分析，我们可以了解用户对产品的态度、评价的关键词、消费者的需求等，从而有助于商家优化产品和服务，以及消费者作出更明智的购买决策。
本文将详细阐述如何获取京东商家评…
pandas数据分析——groupby得到分组后的数据
groupbyagg分组聚合对数据字段进行合并拼接
Pandas怎样实现groupby聚合后字符串列的合并（四十）
groupby得到分组后的数据
pandas—groupby如何得到分组里的数据
date_range补齐缺失日期
在处理时间序列的数据中，有时候会遇到有些日期的数…
机器学习 — 主成分分析(PCA)，python(sklearn)实现
文章目录机器学习 — 主成分分析(PCA)，python(sklearn)实现一、概念二、PCA算法内容三、PCA算法推导1. 问题描述2. 数据去均值处理3. 投影处理4. 寻找投影方向5. 拉格朗日求解问题6. 特征值/特征向量分解四、算法实现参考资料机器学习 — 主成分分析(PCA)࿰…
Streamlit 讲解专栏（八）：图像、音频与视频魔法
文章目录 1 前言2 st.image：嵌入图像内容2.1 图像展示与描述2.2 调整图像尺寸2.3 使用本地文件或URL 3 st.audio：嵌入音频内容3.1 播放音频文件3.2 生成音频数据播放 4 st.video：嵌入视频内容4.1 播放视频文件4.2 嵌入在线视频 5 结语&#x…
生信豆芽菜-单基因与基因集的关系
网址：http://www.sxdyc.com/panCancerGeneSet 该工具主要用于查看单基因在泛癌中与各个不同基因集的相关性
提交后等待运行成功即可，还可以关注公众号：豆芽数据分析
如何用数据资产管理，解锁数据新价值
数字经济和数字化转型的发展有什么共通点吗？这个问题的答案也很明显，数据就是数字经济数字化转型的基础，也是推动两者快速发展的核心要素。数字化时代，数据已经成为了个人、机构、企业乃至国家的重要战略资产，所以如何…
如何通过Shopee大数据选品，在3分钟选出热销爆款！
近年来，随着互联网技术的不断发展，人工智能和大数据成为越来越多人们熟知的概念。通过大数据分析进行选品，能够快速精准地预判各行业类目的变化趋势，帮助我们有效地优化选品、做出正确的销售决策。 大数据选品是指通过Shopee多品类…
商业图表工具推荐，热门商业图表工具有哪些？
在如今的商业环境下，数据分析和可视化是非常重要的一环。不仅可以帮助企业更好地了解自身情况，还能为决策提供有力支持。因此，选择一个好用的商业图表工具对于报表开发人员来说是非常重要的。下面将为大家介绍7款热门商业图表工具，…
Apache Doris 冷热分层技术如何实现存储成本降低 70%？
在数据分析的实际场景中，冷热数据往往面临着不同的查询频次及响应速度要求。例如在电商订单场景中，用户经常访问近 6 个月的订单，时间较久远的订单访问次数非常少；在行为分析场景中，需支持近期流量数据的高频查询且时效…
生存压力下，Smartbi这套方案为企业降本增效带来新的希望
在如今的经济环境下，许多IT企业都面临着困境。经济的不景气导致市场竞争更加激烈，企业的盈利能力受到了严重的冲击；高昂的成本让企业喘不上气来。为了在这个艰难的时期生存下来，降本增效成为了企业的当务之急。 l实施项目利润低&a…
面经|饿了么销售运营
岗位主要是做绩效和激励方向的，面试体验还可以，但是方向不太匹配，挂掉了 1.自我介绍 基础信息与岗位匹配的点 2.离职原因 3.日常在绩效工作中会做那些事情，以及说一个典型的项目 4.组织架构 5.怎么判断这个绩效方案是有牵引作用的…
《CDA-LEVEL-II考试大纲》解读--PART 5 数据分析模型
PART 5 数据分析模型 总体要求：领会模型基本原理，数值模型操作流程，懂得模型应用场景，能够完成数据建模分析报告。 数据分析模型 PART 5 数据分析模型1、主成分分析1.1、领会内容1.1.1、主成分分析的计算步骤1.1.2、主成分分析的…
python基础语法第2章变量和数据类型之11while循环
大家好，我是阿语，从今天开始每天更新8篇python教程从第一个基础语法开始每天更新一下基础内容，这些会分类出来，保持一天完整的python教程，有的人肯定会问 为什么最后才写爬虫了，阿语在这里声明一下…
python使用Faker库进行生成模拟mock数据（基本使用+五个小案例）
使用faker进行生成模拟(mock))数据 文章目录 使用faker进行生成模拟(mock))数据一、Faker库安装二、Faker库基本介绍三、案例1：Faker库生成核酸数据四、案例2：生成不重复的人名和地名五、案例3：生成有时间期限的低保数据六、案例4：…
python数据处理----分组和聚合（高级）
什么是聚合？
在SQL中我们经常使用 GROUP BY 将某个字段,按不同的取值进行分组, 在pandas中也有groupby函数分组之后,每组都会有至少1条数据, 将这些数据进一步处理返回单个值的过程就是聚合,比如 分组之后计算算术平均值, 或者分组之后计算频数,都属于聚合 单变量分…
平心而论，做电商数据分析还得这款大数据分析平台
各个业务系统上的数据能放一起分析了吗？根据物流周期做好库存计划了吗？广告投入分析评估报表出来吗？运营、物流、财务等部门环节间的信息脱节解决了吗？做电商数据分析不仅仅是做一两个销售分析报表，而是要综合各个部门…
Python的pandas模块的运用之数据处理
pandas之数据处理一、数据导入与导出（一）、csv文件的数据导入与导出（二）、txt和excel文件的数据导入与导出二、数据清洗（一）、数据排序（二）、去除重复数据（三）…
rolling的用法实例
在数据分析的过程中，经常用到对计算移动均值，使用rolling可以轻松实现这个功能~
rolling函数是一个用于时间序列分析的函数；
一、参数解析
首先，让我们来了解一下rolling的各个参数吧
DataFrame.rolling(window, min_periodsN…
商业智能之“道、法、器”——企业级BI能力构建指南
一个企业级BI项目看似简单，但实际建设难度却远超想象。如何从0到1搭建BI项目，有没有详细的实施步骤，有没有合适的BI工具推荐，这是很多企业在上BI系统前心中的疑问。因此，本文会详细探讨企业BI能力构建，到底…
chatgpt赋能python：Python中的figsize：使用和优化
Python中的figsize：使用和优化
在数据分析和可视化领域，Python被广泛使用。matplotlib是一个流行的Python可视化库，用于创建各种类型的图形。在matplotlib中，figsize是一个非常有用的参数，可以控制图形的大小。
什么…
爬虫数据是如何收集和整理的?
爬虫数据的收集和整理通常包括以下步骤：
确定数据需求：确定要收集的信息类型、来源和范围。
网络爬取：使用编程工具（如Python的Scrapy、BeautifulSoup等）编写爬虫程序，通过HTTP请求获取网页内容ÿ…
【SQL应知应会】分析函数的点点滴滴（一）
欢迎来到爱书不爱输的程序猿的博客, 本博客致力于知识分享，与更多的人进行学习交流 本文收录于SQL应知应会专栏,本专栏主要用于记录对于数据库的一些学习，有基础也有进阶，有MySQL也有Oracle 分析函数的点点滴滴 1.什么是分析函数：…
渠道归因（一）传统渠道归因
渠道归因（一）传统渠道归因 小P：小H，我又来了。。。最近在做ROI数据，但是有个问题。。。 小H：什么问题，不就是收入/成本吗？ 小P：是的，每个渠道的成本很容易计算…
![[建议收藏] Mysql+ETLCloud CDC+Doris实时数仓同步实战](https://img-blog.csdnimg.cn/fd2c0ab9820443faa67d994272223b70.png)
[建议收藏] Mysql+ETLCloud CDC+Doris实时数仓同步实战
一、业务需求及其痛点
随着数字化转型，企业需要对各种销售及营销数据进行实时同步分析，例如销售订单信息，库存信息，会员信息，设备状态信息等等，这些统计分析信息可以实时同步到 Doris中进行分析和统计&…
数分面试题-业务题1
目录 1、如何理解数据分析，流程2、数据分析的价值3.0、指标的异常波动异常如何分析？（例如日活下跌）3.1、销售额下降了如何分析4、注册类指标和活跃类指标，看哪个？5、Python计算圆周率6.0、估算星巴克的销售…
分享思路：Python+Spark爬虫音乐推荐系统 音乐数据分析可视化 音乐推荐app 音乐网站 大数据毕业设计(app+web+爬虫+spark+可视化)
多端设计思路 1、音乐大屏幕展示端：
用户来源分布统计，歌手排行，歌手数量，歌曲数量，用户数量，播放数量，收藏数量，下载数量，充值金额排行，歌曲排行榜…
机器学习：基于逻辑回归对航空公司乘客满意度的因素分析
机器学习：基于逻辑回归对航空公司乘客满意度的因素分析 作者：i阿极 作者简介：数据分析领域优质创作者、多项比赛获奖者：博主个人首页 😊😊😊如果觉得文章不错或能帮助到你学习，可以点…
20个互联网用户Python数据分析项目
这篇文章给大家整理了20个互联网用户数据分析的项目。所有收录的项目，进行了严格的筛选，标准有二：
1.有解说性文字，大家能知道每一步在干嘛，新手友好 2.数据集公开，保证大家可以在原文的基础上自行探索 更…
程序员，你喜欢抽哪种香烟？（python数据分析）
大家好，小笨鸟今天给大家分享一篇关于国产香烟分析的文章，主要用python爬取“烟悦网”数据，并作详细分析，带你看看香烟的种类及价格现状，放一张词云图：
1.爬取数据
1.1 网站分析
进入主页，烟…
用加持了大模型的 Byzer-Notebook 做数据分析是什么体验
Byzer-Notebook 是专门为 SQL 而研发的一款 Web Notebook。他的第一公民是 SQL，而 Jupyter 则是是以 Python 为第一公民的。 随着 Byzer 引擎对大模型能力的支持日渐完善， Byzer-Notebook 也在不自觉中变得更加强大。我和小伙伴在聊天的过程中才发现他已…
数字孪生在文物保护中的复原和展示
随着科技的迅猛发展，数字孪生技术正在逐渐引起文化遗产领域的重视。数字孪生作为一种虚拟仿真技术，不仅可以在虚拟环境中重现文物和遗产，还能为文物保护带来前所未有的创新和应用。本文带大家一起探讨数字孪生在文物保护方面的应用࿰…
生信豆芽菜-缺氧评分的计算
网址：http://www.sxdyc.com/gradeHypoxia 1、数据准备 表达谱数据，行为基因，列为样本
2、提交后，等待运行成功即可下载
当然，如果不清楚数据是什么样的，可以选择下载我们的示例数据，也可以…
数字孪生：重塑制造、医疗和能源等领域的未来
数字孪生技术，作为虚拟仿真的重要领域，正以其强大的能力在各个行业中创造前所未有的创新。本文带大家一起深入探讨数字孪生技术在不同领域的广泛应用场景，展示其在实现效率、可靠性和智能化方面的积极影响。 制造业与工业领域
数字孪生技术在…
数字的画笔：数据可视化的魅力与实用性
数据可视化是一种强大的工具，用于将复杂的数据和信息以图形化的方式呈现，以便人们更容易理解、分析和发现其中的模式和趋势。通过图表、图形和其他可视元素，数据可视化可以帮助我们将抽象的数字转化为有意义的视觉呈现，从而提升了…
2023年京东睡眠经济市场数据分析（京东商品数据）
如今，伴随快节奏的生活，越来越多的人饱受睡眠问题的影响。同时，伴随现代化的发展，睡眠障碍群体或许会达到新的体量，而日趋增加的失眠人群自然而然低催生了助眠产品的增长。随着人们对健康睡眠重视的程度不断提高&#…
Python数据分析：挖掘洞察力的强大工具
在当今数据驱动的世界中，数据分析成为了企业和组织中不可或缺的一环。Python作为一种简单易学且功能强大的编程语言，已经成为数据分析领域的热门选择。本文将深入探讨Python数据分析的基础知识、常用工具和技术，帮助读者充分利用Python来进行…
数据分析--统计学知识
描述型统计 描述统计
1.集中趋势 ：众数、平均数、分位数
2.离散趋势： 极值（max）、极差（max-min）、平均差、方差、标准差、分位差
3.分布：峰泰、偏度 推理型统计
概率分布：离散型…
统计学补充概念-17-线性决策边界
概念
线性决策边界是一个用于分类问题的线性超平面，可以将不同类别的样本分开。在二维空间中，线性决策边界是一条直线，将两个不同类别的样本分隔开来。对于更高维的数据，决策边界可能是一个超平面。 线性决策边界的一般形式可以表…
数据分析基础-数据可视化02-不同数据类型的可视化概念及原则
将数据空间映射到颜色空间。
数据空间：连续或分类
数据可以被划分为两个主要的数据空间：连续数据和分类数据。这两种数据空间有不同的特点和适用的分析方法。
连续数据（Continuous Data）：
连续数据是指可以在某个范…
数据可视化和数字孪生相互促进的关系
数据可视化和数字孪生是当今数字化时代中备受关注的两大领域，它们在不同层面和领域为我们提供了深入洞察和智能决策的机会，随着两种技术的不断融合发展，很多人会将他们联系在一起，本文就带大家浅谈一下二者之间相爱相杀的关系。
…
淘客商品字符动态商品id转数字id
{"code": 200, "data": {"itemId": "700407841432", "itemName": "安踏花苞短裤女五分裤夏季新款速干冰丝高腰宽松裤子透气工装短裤", "itemVideo": {"itemVideoThumbUrl": "//img.alic…
生信豆芽菜-oncoPredict预测药物的敏感性
网址：http://www.sxdyc.com/drugOncoPredict 1、数据准备 准备一个行为基因，列为样本的表达谱矩阵即可
2、选择训练集数据库，提交等待运行成功即可
3、结果
当然，如果不清楚数据是什么样的，可以选择下载我们的示…
excel中有哪些通配符、excel配置问题，数学函数篇1之sum系列
学习excel前需要明确的是事： 在学习excel函数之前，大家需要明确一件事，excel现在设计到了一些新函数，这些新函数只能存在于office365、office2019及更 新版本之中，所以建议大家在学习时安装较新的版本，…
机器学习实战14-在日本福岛核电站排放污水的背景下,核电站对人口影响的分析实践
大家好，我是微学AI，今天给大家介绍一下机器学习实战14-在日本福岛核电站排放污水的背景下,核电站对人口影响的分析实践。 近日，日本政府举行内阁成员会议，决定于2023年8月24日启动福岛核污染水排海。当地时间2023年8月24日13时&am…
奥威BI数据可视化工具：360度呈现数据，告别枯燥表格
随着企业数据量的不断增加，如何有效地进行数据分析与决策变得越来越重要。奥威BI数据可视化工具作为一款强大的数据分析工具，在帮助企业深入挖掘数据价值方面具有显著优势。
奥威BI数据可视化工具是一款基于数据仓库技术的数据分析工具，具有…
数据分析15——office中的Excel基础技术汇总
0、前言：
这部分总结就是总结每个基础技术的定义，在了解基础技术名称和定义后，方便对相关技术进行检索学习。笔记不会详细到所有操作都说明，但会把基础操作的名称及作用说明，可自行检索。本文对于大部分读者有以下作用…
三本书与三场发布会，和鲸社区重新定义编程类书籍从阅读到实践新体验
当 AI 开发者社区配备 AI 基础设施开发平台工具时，它还能做什么？
答案是：过去半年，和鲸社区凭借在气象、医学、社科等垂直领域的长期积累以及多方伙伴的支持，联合举办了三场新书发布会——从 Python 到 R 语言 、从气…
Streamlit 讲解专栏（十）：数据可视化-图表绘制详解（上）
文章目录 1 前言2 st.line_chart：绘制线状图3 st.area_chart：绘制面积图4 st.bar_chart：绘制柱状图5 st.pyplot：绘制自定义图表6 结语 1 前言
在数据可视化的世界中，绘制清晰、易于理解的图表是非常关键的。Streamlit…
数据分析基础-数据可视化01-数据类型
名义数据
名义数据是一种数据类型，用于标识不同的类别、群组或种类，但这些类别之间没有任何特定的顺序或等级关系。名义数据只表示不同的分类，而不提供关于类别之间差异的信息。因此，名义数据的测量单位通常是标签或名称…
Python数据分析与数据挖掘：解析数据的力量
引言：
随着大数据时代的到来，数据分析和数据挖掘已经成为许多行业中不可或缺的一部分。在这个信息爆炸的时代，如何从大量的数据中提取有价值的信息，成为了企业和个人追求的目标。而Python作为一种强大的编程语言，提供…
电商数据接口API：品牌价格监控与数据分析的重要工具
一、引言
随着电子商务的快速发展，传统品牌企业越来越重视在线销售市场。为了在竞争激烈的市场环境中取得成功，企业需要实时掌握市场动态，了解自身产品的销售情况、价格趋势以及竞品信息。为了实现这一目标，各大电商平台…
大型集团企业数字化管控平台及信息化治理服务体系建设方案PPT
导读：原文《大型集团企业数字化管控平台及信息化治理服务体系建设方案PPT》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。 喜欢文章，您可以点…
Apache Doris 入门教程33：统计信息
统计信息
统计信息简介
Doris 查询优化器使用统计信息来确定查询最有效的执行计划。Doris 维护的统计信息包括表级别的统计信息和列级别的统计信息。
表统计信息：
信息描述row_count表的行数data_size表的⼤⼩（单位 byte）update_rows收…
Seaborn数据可视化（二）
目录
1.Seaborn风格设置
1.1 主题设置
1.2 轴线设置 1.3 移除轴线 1.4 使用字典传递函数 2.设置绘图元素比例
2.1 设置绘图元素比例paper
2.2 设置绘图元素比例poster
2.3 设置绘图元素比例notebook Seaborn将Matplotlib的参数划分为两个独立的组合，第一组用于…
A 题国际旅游网络的大数据分析-详细解析与代码答案（2023 年全国高校数据统计与调查分析挑战赛
请你们进行数据统计与调查分析，使用附件中的数据，回答下列问题： ⚫ 问题 1: 请进行分类汇总统计，计算不同国家 1995 年至 2020 年累计旅游总人数，从哪个国家旅游出发的人数最多，哪个国家旅游到达的人数最多…
使用 Amazon Redshift Serverless 和 Toucan 构建数据故事应用程序
这是由 Toucan 的解决方案工程师 Django Bouchez与亚马逊云科技共同撰写的特约文章。 带有控制面板、报告和分析的商业智能（BI，Business Intelligence）仍是最受欢迎的数据和分析使用场景之一。它为业务分析师和经理提供企业的过去状态和当前状…
2023年7月京东扫地机器人行业品牌销售排行榜（京东数据产品）
伴随消费者解放双手的消费需求，我国清洁电器行业快速发展。且随着消费回暖，我国扫地机器人市场也开始慢慢走出寒冬，止跌回升。
根据鲸参谋电商数据分析平台的相关数据显示，今年7月份，京东平台扫地机器人的销量为16万&…
海外移动应用广告变现平台——AdMob特点
海外的移动互联网广告平台非常多，比如 Admob、Facebook Audience Network、Applovin MAX、Unity、Vungle、Mopub、Amazon、Pubmatic、Fyber等等。
根据《2020全球手游广告买量投放与变现报告》，各国Top收益广告平台（针对游戏产品）…
【人物访谈·03期】关于对数据分析前辈的一次行业探讨
小飞象人物访谈 做一个独立的人，不要依赖别人，独立会给你的魅力加分。 出品｜小飞象人物访谈 嘉宾｜冰冰老师 采访/整理｜木兮 排版｜木兮 背景 本期03访谈邀请到了小飞象社群特别嘉宾——冰冰（个人…
大数据扫盲(2): 数据分析BI与ETL的紧密关系——ETL是成功BI的先决条件
着业务的发展每个企业都将产生越来越多的数据，然后这些数据本身并不能直接带来洞察力并产生业务价值。为了释放数据的潜力，数据分析BI（商业智能）成为了现代企业不可或缺的一部分。然而，在数据分析的背后，有…
Seaborn数据可视化（三）
1.绘制直方图
使用displot()绘制直方图。
import seaborn as sns
import numpy as np
import matplotlib.pyplot as plt# 生成随机数据
np.random.seed(0)
data np.random.randn(1000)# 使用displot绘制直方图
sns.displot(data, bins10, kdeTrue)# 展示图形
plt.show()
结…
机器学习在大数据分析中的应用
文章目录 机器学习在大数据分析中的原理机器学习在大数据分析中的应用示例预测销售趋势客户细分和个性化营销 机器学习在大数据分析中的前景和挑战前景挑战 总结 🎉欢迎来到AIGC人工智能专栏~探索机器学习在大数据分析中的应用 ☆* o(≧▽≦)o *☆嗨~我是IT陈寒&…
基于spss的多元统计分析 之 因子分析（4/8）
实验目的： 1．掌握因子分析的基本思想； 2．熟悉掌握SPSS软件进行因子分析的基本操作； 3．利用实验指导的实例数据，上机熟悉因子分析方法。 实验内容： 附表的数据来自一次对液晶电视的调…
Python爬虫之数据解析技术
Python爬虫需要数据解析的原因是，爬取到的网页内容通常是包含大量标签和结构的HTML或XML文档。这些文档中包含所需数据的信息，但是需要通过解析才能提取出来，以便后续的处理和分析。 以下是一些使用数据解析的原因：
数据提取&…
数据处理神器tidyverse！教你如何秒速搞定数据处理！
一、前言 在R语言中，tidyverse是一个庞大的数据分析生态系统，它由一系列数据可视化和数据处理软件包组成，能够极大地提高数据分析的效率和准确性。 在使用 Tidyverse 的过程中，我们会经常用到以下几个工具： ggplot2&am…
2023年衣物洗护市场行业分析（京东天猫数据分析）
近年来，受消费者习惯的推动，衣物洗护用品市场不断发展，洗护用品行业的市场规模也不断增长。 根据鲸参谋电商数据分析平台的相关数据显示，今年1月份至4月份，天猫平台上衣物洗护相关产品的销量为7300万，产品销…
股票量化分析工具QTYX-使用攻略指南-持续更新中
前言随着知识星球《玩转股票量化交易》的小伙伴的增多，新加入的小伙伴急需一份关于股票量化分析QTYX的使用说明文档！！！由于最新版的QTYX是以V2.0版本为基础，采用逐步优化和添加功能的方式迭代更新而成，所以…
大数据应用——总结与反思
1.谈谈你对大数据行业的认识，目前对应的大数据岗位有哪些？每种岗位需要掌握哪些技能水平？目前自己的差距在哪里？ （1）概述 对于大数据行业的认识，我的理解是，大数据是指海量数据&…
Python数据分析与展示 第一章 Numpy数据存取和函数
数据的CSV文件存取
CSV（Comma-Separated Value，逗号分隔值）
CSV是一种常见的文件格式，用来存储批量数据 np.savetxt(...) np.savetxt(frame, array, fmt%.18e, delimiterNone)
frame：文件、字符串或产生器…
【Python爬虫与数据分析】初阶语法
目录
一、数据类型
二、输入输出
三、算术运算
四、逻辑与条件判断
五、循环控制
六、函数 一、数据类型
Python的数据类型分为常量、数值变量、字符串变量、布尔变量（True、False）常量可以直接参与运算与赋值，变量无需声明可直接定义…
Scrapy爬虫模拟登陆参考demo
对于一些刚入行爬虫的小伙伴来说，刚开始的时候觉得所有的网站无非就是分析HTML、json数据，很容易忽忽略掉一个很重要的问题，那就是目标网站的反爬虫策略，很多目标网站为了反爬虫经常更新反爬策略，我们想要拿到数据&…
价值驱动-数据分析价值逻辑与实践思考
月説小飞象交流会 未来是一片迷雾，令人胆怯，但不妨走下去，看看命运给我们准备了什么。 内部交流│25期 价值驱动 数据分析价值逻辑与实践思考 data analysis ●●●● 分享人：黄小伟 当今的企业，随着数字化技术日新月异…
掌握C++文件控制的基础和高级操作，可以提高程序的管理和处理文件的效率和可靠性。
C是一门拥有广泛应用的编程语言。在C中，我们可以通过控制文件的操作来读取、写入和处理文件中的数据。文件的操作可以让我们方便地对程序进行管理和数据的存储，为我们的程序功能带来更多的可能性。
C文件控制操作主要由文件的打开、读写和关闭等操作组成…
如何系统性的学习Python语言
零基础同学的福音来了，如果你对Python语言的学习感兴趣，接下来可以由浅入深的了解下Python语言，哪怕你是零基础的小白也完全可以学会的，最后也会给大家放出学习和实例相结合的教程及方法，给到各位同学系统性的教学&…
Clickhouse 用户准入控制与权限分配 附主要配置步骤细节 (主要参考 Clickhouse 官方文档)
Clickhouse 准入控制与用户权限管理
【原创文章 码字不易 转载请注明作者及出处】 Written By: Xinyao Tian (作者: 田昕峣)
摘要
本文档描述了 Clickhouse 集群准入控制与用户权限管理的建设及管理的基本方法。
主要建设步骤
根据 Clickhouse 官方文档中 Managing Users …
使用R绘制气泡图、带有显著性标记的热力图、渐变曲线图
大家好，我是带我去滑雪！ 一幅精美的科研绘图会有诸多益处，精美的图像可以更好地传达研究结果和数据分析的重要信息。通过使用清晰、直观和易于理解的图像，可以更好地向读者展示研究的发现，有助于读者理解和解释数据。还…
ChatGPT从入门到精通，一站式掌握办公自动化/爬虫/数据分析和可视
课程名称适应人群ChatGPT从入门到精通，一站式掌握办公自动化/爬虫/数据分析和可视 全面AI时代就在转角，道路已经铺好了“局外人”or“先行者”就在此刻等你决定 1、对ChatGPT感兴趣并希望有人手把手教学的新手 2、希望了解GPT各类应用抓住未来风口 3、希…
飞致云成为中国开源活跃度及影响力双TOP10企业
2023年6月15日，由中国开源软件推进联盟（COPU）牵头，联合CSDN、中国科学院软件研究所、开放原子开源基金会等多家企业、机构和开源专家联合编撰的年度开源报告《2023 中国开源发展蓝皮书》正式发布。
在《2023中国开源发展蓝皮书》…
python机器学习—— 数据预处理 算法初步
目录 数据预处理1.获取数据2.处理缺失值3.划分数据集4.数据预处理和PCA降维5.算法实现：估计器 数据预处理
1.获取数据 from sklearn.datasets import load_iris
liload_iris()
print("获取特征值")
print(li.data)
print("目标值",li.target)#…
![[数据分析与可视化] 基于matplotlib-scalebar库绘制比例尺](https://img-blog.csdnimg.cn/img_convert/e881b13a2a8148725a86e93c10834dbc.png)
[数据分析与可视化] 基于matplotlib-scalebar库绘制比例尺
matplotlib-scalebar是一个Python库，用于在matplotlib图形中添加比例尺。它允许用户指定比例尺的大小、位置、字体和颜色，以及比例尺的单位。该库支持不同的比例尺单位，例如米、英尺、英寸等。matplotlib-scalebar安装命令如下： p…
数据分析的六大黄金法则
一、遵循数据分析标准流程1）业务理解，确定目标、明确分析需求；2）数据理解，收集原始数据、描述数据、探索数据、检验数据质量；3）数据准备，选择数据、清洗数据、构造数据、整合数据、格…
Matplotlib库的介绍及pyplot子库的使用
Matplotlib库的介绍及pyplot子库的使用
Matplotlib是一个综合库，用于在Python中创建静态，动画和交互式可视化。 Matplotlib库的效果：https://matplotlib.org/gallery.html
Matplotlib库由各种可视化类构成，内部结构复杂…
基于机器学习方法校准MPU6050陀螺仪加速度计（含完整源码）
基于机器学习方法校准MPU6050陀螺仪加速度计（含源码）
最近组装了一架无人机，想要自己写一个飞控，所以一直在研究陀螺仪，我使用的是目前最常用的MPU6050六轴运动传感器，如下图所示 然而在将程序写好后发现传…
2018年北京积分落户数据分析 看这篇就够了
2018北京积分落户名单 百度网盘提取码: w7gy
话不多说，直接上代码
import numpy as np
import pandas as pd
import matplotlib.pyplot as plt# 读取文件
luohu_data pd.read_csv(./bj_luohu.csv, index_colid)# 显示前5条信息
print(luohu_data.head())# descr…
streamlit快速部署-SCADA数据分析
通过建立一个SCADA数据分析的web app，简单介绍一下streamlit的使用及部署上线。 文中代码请详见GitHub: https://github.com/SooHooLee/test 项目的web app请详见： https://share.streamlit.io/soohoolee/test/data_analysis.py Streamlit快速部署1. 什么…
pandas中describe()不采用科学计数法
在pandas中，我们采用pandas中的函数describe()来查询数据的统计信息
data.describe()对于浮点数，describe()查询到的信息往往会用科学计数法显示 为了直观显示数字，不采用科学计数法显示
# 查看数据统计信息
import numpy as np
import pa…
matplotlib初学
matplotlib初学
首先思考一个问题：matplotlib只能绘制折线图么?
其实并不是的； matplotlib能够绘制折线图,散点图,柱状图,直方图,箱线图,饼图等； 但是,我们需要知道不同的统计图到底能够表示出什么,以此来决定选择哪种统计图来更直观的呈现…
让你的 Python 代码优雅又地道
学Python最简单的方法是什么？推荐阅读：Python开发工程师成长魔法译序如果说优雅也有缺点的话，那就是你需要艰巨的工作才能得到它，需要良好的教育才能欣赏它。—— Edsger Wybe Dijkstra在Python社区文化的浇灌下，演化出…
RNAseq---Hisat2 标准输出中比对率信息解读
RNA-Seq—Hisat2 标准输出中比对率信息解读
本文具体解释部分（一）中内容复制自Biostar内容，后面附上我实际的例子，二者略有不同，整体理解上没大问题，有不合适之处可联系我。
（一）B…
PysparkNote105---udf的使用
Intro pyspark udf的使用
数据构造
from pyspark.sql import SparkSession
from pyspark.sql import functions as F
from pyspark.sql.types import DoubleType,IntegerType,StringTypedef get_or_create(app_name):spark (SparkSession.builder.appName(app_name).config(…
2020首届数字四川创新大赛_诈骗电话识别数据统计分析（一）
1.竞赛背景
近年来，通过拨打电话、群发短信实施诈骗的违法行为一直困扰着手机用户，给移动手机用户造成了困扰甚至金钱的损失，如何有效防护诈骗电话对用户隐私、财产造成的威胁，成为公安急需解决的问题，也是四川移动提…
2020首届数字四川创新大赛_诈骗电话识别baseline0.76+
偶然参加了诈骗电话识别这个比赛项目，分享一个线上0.76的baseline，本次只用了一个基础表，lgb算法采用默认参数，并采用八折取最大的方法，后期如果有时间的话就把分析过程分析出来，欢迎捧场。
import warnin…
大数据时代，商业智能BI的使用规则
商业智能BI的火热程度让很多不了解的企业也在内部部署了BI系统，怎么利用BI创造价值也就成了新的问题。
商业智能面向管理人员
很多人其实不理解，为什么说企业的管理人员想要完全了解企业的各项业务发展情况实际上是很困难的。
一家企业有这么多部门&a…
基于R语言的物种气候生态位动态量化与分布特征模拟
在全球气候快速变化的背景下，理解并预测生物种群如何应对气候变化，特别是它们的地理分布如何变化，已经变得至关重要。利用R语言进行物种气候生态位动态量化与分布特征模拟，不仅可以量化描述物种对环境的需求和适应性，预…
工作经验--产品季节性分析
产品季节性分析 1.了解季节性的重要性2.如何发现季节性产品统计方法：季节性指数法：傅里叶分析法：其他： 1.了解季节性的重要性 产品是否存在季节性变化，对于卖家来说相当重要，旺季提前备货、淡季防止库存冗余…
程序开发思路分享 计算机毕业设计PySpark+Hadoop商品评论情感分析 taobao商品推荐系统 taobao商品数据分析 电商大数据 电商可视化 大数据毕业设计 大数据毕设
开发技术
pyspark hadoop mysql 爬虫 echarts大屏
说明 整体业用户需要注册的时候通过邮箱验证码接收验证码完成注册，然后可以登陆业务流程，做个登录页，新。登录进去以后，有个爬取数据的列表分页，支持多条件查询&…
计算机毕业设计Spark+SpringBoot旅游推荐系统 旅游大数据分析大屏 旅游可视化 旅游路线规划系统 旅游推荐App小程序 旅游网站 自驾游路线规划系统 自驾游推荐系统 自驾游推荐App小程序
核心功能 购买门票保险租车业务， 规划自驾游路线百度路书 景点推荐、景点评价等 大屏实现根据销量百度热力图显示
大屏实现功能 百度热力图：调用百度地图API结合后台景点经纬度和热力数据(销量)显示热点图 热度图： 景点的销量࿰…
计算机毕业设计之吊炸天Python+Spark电影推荐系统 电影采集大数据分析 电影购票系统 电影购票小程序app 电影院管理系统 电影数据分析大屏
一 管理端
1.1 电影管理 支持excel 导入(豆瓣TOP250数据)和导出 支持手动添加 兼容豆瓣在线图片（处理防盗链） 本地图片 1.2 排片管理 选择电影厅、场次（时间段）、价格然后该电影就上线了，否则用户是只能查看电影信息…
Python+SSM懂车帝汽车数据分析平台 爬虫代码实例分析
概述
网络爬虫一直是一项比较炫酷的技术，但是业界一直是Python爬完用django flask框架进行web端展示，今天咱们换个口味。用python爬取，用java展示
开发分析
一、总体目标 本系统全称为汽车信息评价分析系统。主要目的是提高评论信息管理的…
Python网易云音乐爬虫大数据分析可视化系统——大屏数据可视化开发之路
介绍
现在比较流行的大数据数据可视化都是大屏，有钱的人会使用阿里云全家桶的DataV或者商业化的大屏解决方案，但是在国内还是小公司比较多，本人50年大数据开发经验，精通数据可视化，曾经处理过百万亿级别的数据&#x…
2022年第五届中青杯赛题浅评
本周将有两场数学建模竞赛开赛，分别是中青杯和数据统计分析竞赛，今天中青杯开赛，下面我将为大家对每个题目进行分析，分析每个题目大家再做题时可能会遇到的问题，以及处理方法，希望能够帮到大家。
AB题资料…
2023年江西省研究生数模竞赛国际“合作-冲突”的演化规律研究
2023年江西省研究生数模竞赛
国际“合作-冲突”的演化规律研究
原题再现 国家之间的“合作-冲突”行为具有复杂性和多变性，对其决策模式的研究有着重要的意义。例如，对国际冲突和危机的准确预测可以帮助决策者采取有效的措施来防止或缓解冲突ÿ…
excel文本函数篇2
本期主要介绍LEN、FIND、SEARCH以及后面加B的情况：
（1）后缀没有B：一个字节代表一个中文字符
（2）后缀有B：两个字节代表一个中文字符
1、LEN(text)：返回文本字符串中的字符个数
2、…
智慧水务建设项目可研报告WORD-222页【可研报告】
导读：原文《智慧水务建设项目可研报告WORD-222页【可研报告】》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。
部分页面：
3.3.1业务范围需求…
数字化新零售平台系统提供商，门店商品信息智慧管理-亿发进销存
传统的批发零售业务模式正面临着市场需求变化的冲击。用户日益注重个性化、便捷性和体验感，新兴的新零售模式迅速崛起，改变了传统的零售格局。如何在保持传统业务的基础上，变革发展，成为了业界亟需解决的问题。
在这一背景下&…
数据可视化与数字孪生：理解两者的区别
在数字化时代，数据技术正在引领创新，其中数据可视化和数字孪生是两个备受关注的概念。尽管它们都涉及数据的应用，但在本质和应用方面存在显著区别。本文带大探讨数据可视化与数字孪生的差异。
概念
数据可视化： 数据可视化是将复…
学习高级数据结构：探索平衡树与图的高级算法
文章目录 1. 平衡树：维护数据的平衡与高效性1.1 AVL 树：严格的平衡1.2 红黑树：近似平衡 2. 图的高级算法：建模复杂关系与优化2.1 最小生成树：寻找最优连接方式2.2 拓扑排序：解决依赖关系 拓展思考 …
【Python】应用：Python数据分析基础
😏★,:.☆(￣▽￣)/$:.★ 😏 这篇文章主要介绍Python数据分析基础。 无专精则不能成，无涉猎则不能通。——梁启超 欢迎来到我的博客，一起学习，共同进步。 喜欢的朋友可以关注一下，下次…
一个程序员眼中的API调用（淘宝/天猫/1688/拼多多API）
在程序员眼中，API调用是一种重要的编程概念，它允许开发人员通过预先定义好的接口和规范，调用其他应用程序或服务的功能。API调用是现代软件开发中不可或缺的一部分，它使得开发人员能够快速构建出复杂的应用程序，同时避…
Python数据分析实战-多进程并发处理列表（附源码和实现效果）
实现功能
有15个列表，尝试多进程并发处理，每个列表一个进程，进程数和 CPU 核数一致
实现代码
import multiprocessing有15个列表，尝试多进程并发处理，每个列表一个进程，进程数和 CPU 核数一致def sum_li…
Pyecharts教程(十三)：使用pyecharts绘制K线图并设置ItemStyle的讲解
Pyecharts教程(十三)：使用pyecharts绘制K线图并设置ItemStyle的讲解
作者：安静到无声 个人主页 目录 Pyecharts教程(十三)：使用pyecharts绘制K线图并设置ItemStyle的讲解前言代码讲解总结完整代码推荐专栏前言
K线图是用于展示股票或其他金融产品价格走势的图表之一。在本…
财务数据分析？奥威BI数据可视化工具很擅长
BI数据可视化工具通常是可以用户各行各业，用于不同主题的数据可视化分析，但面对财务数据分析这块难啃的骨头，能够好好地完成的，还真不多。接下来要介绍的这款BI数据可视化工具不仅拥有内存行列计算模型这样的智能财务指标计算功能…
【手写数据库toadb 造不一样的轮子】行列混合存储模型 就是为大模型分析准备的
行列混合存储模型 专栏内容： postgresql内核源码分析手写数据库toadb并发编程个人主页：我的主页 座右铭：天行健，君子以自强不息；地势坤，君子以厚德载物. 概述
混合模型的由来 我们虽然造轮子，但是也会造完全一样的轮子。所以toadb在选择存储模型时，行存模型已经成熟…
基于python滑动T检验的实现--结合MK突变确定突变点
文章目录滑动T检验原理python代码结果结果图： step3结果图： step2相关数据可查看滑动T检验 前面做了基于python的mk突变检验发现UF,UB曲线有较多相交点，于是通过查询相关代码，最终基于python实现了滑动T检验方法，用来检…
【Python爬虫+数据分析】采集电商平台数据信息，并做可视化演示（带视频案例）
前言
随着电商平台的兴起，越来越多的人开始在网上购物。而对于电商平台来说，商品信息、价格、评论等数据是非常重要的。因此，抓取电商平台的商品信息、价格、评论等数据成为了一项非常有价值的工作。
接下来就让我来教你 如何使用Python编写…
python ndarry和array的区别和联系，shape (,1)和(,)的区别
1 ndarry和array
import numpy as npary np.array([1, 2, 3, 4, 5, 6])
print(type(ary))输出
<class numpy.ndarray>可以看出，ndarry是python中的一个类对象，而array是numpy中用来创建数组的一种方法。我们再来看下这个类对象长什么样子。 在类…
火山引擎 A/B 测试私有化实践
动手点关注 干货不迷路 👆作为一款面向 ToB 市场的产品——火山引擎 A/B 测试（DataTester）为了满足客户对数据安全、合规问题等需求，探索私有化部署是产品无法绕开的一条路。在面向 ToB 客户私有化的实际落地中，火山引…
差分隐私技术在火山引擎的应用实践
动手点关注 干货不迷路 👆一、背景1.1 隐私泄漏场景随着用户自身隐私保护意识的提升和《数据安全法》、《个人信息保护法》等国家法律法规的陆续施行，如何在收集、使用用户数据的过程中保障用户的隐私安全、满足监管要求，成为了挑战性的问题。…
UME - 丰富的Flutter调试工具
背景目前西瓜视频作者侧 Flutter 业务场景已经覆盖了 40多个页面 (包括视频播放场景)，用户侧核心场景包括我的 Tab 也已经是 Flutter，在开发过程中，暴露了一些问题，debug 调试难、离开了 IDE 后犹如抓瞎、PM 设计 QA 验收过程中拿…
LWN：查看5.17 的开发数据！
关注了就能看到更多这么棒的文章哦～A look at some 5.17 development statisticsBy Jonathan CorbetMarch 21, 2022DeepL assisted translationhttps://lwn.net/Articles/887559/在 5.17 开发周期结束时，13038 个 non-merging changeset 已经进入 mainli…
Power bi_商品销售案例分析
背景：一共是200多家店，4种商店类型，3年的销售数据，进行分析
power bi报表展示 总览时间商店产品员工案例分析：
总览：
1、在2011-2013年，这三年的总销售额与总利润成正比，2011年11…
阿语python第三阶段第6章html+css基础-v5.0前端开发第7节表格标签
大家好，我是阿语，从今天开始每天更新8篇python教程从第一个基础语法开始每天更新一下基础内容，这些会分类出来，保持一天完整的python教程，有的人肯定会问 为什么最后才写爬虫了，阿语在这里声明一下…
一文带你搞懂pandas中的时间处理(详细)
1、pandas中6个时间相关的类在多数情况下，对时间类型数据进行分析的前提就是将原本为字符串的时间转换为标准时间类型。pandas继承了NumPy库和datetime库的时间相关模块，提供了6种时间相关的类。2、Timestamp类其中Timestamp作为时间类中最基础的&#x…
数据分析师必学第一课：构建完整的指标体系
正文开始掌握理论知识和编程知识可以被看作入职数据分析师的“敲门砖”。掌握了这些知识，表示候选人对于成为数据分析师有了良好的准备，可以说“万事俱备，欠东风”，而“东风”就是一些实际工作内容和相应的技巧。数据人员如何创造…
美团外卖离线数仓建设实践
【与数据同行】已开通综合、数据仓库、数据分析、产品经理、数据治理及机器学习六大专业群，加微信号frank61822701 为好友后入群。新开招聘交流群，请关注【与数据同行】公众号，后台回复“招聘”后获得入群方法。正文开始导读：美团…
Python的pandas模块的运用之数据分析
pandas之数据分析一、基本统计分析二、分组分析、结构分析、分布分析、交叉分析三、RFM分析四、回归分析（一）、简单线性回归分析（二）、多重线性回归分析说明：没有特殊说明的话，data都表示数据框一、基本统计…
数据分析如何提升对业务的理解
在一个企业的运营过程中沉淀了大量的生产经营数据，在这些数据中蕴涵着无尽的信息资源，通过对这些数据的挖掘整理，合理分析可以得到对企业整个的生产运营具有指导意义的有效数据，使企业的运营过程更具理性的发展，数据仓…
计算机存储单元、数据类型、内存占用、取值范围最新版
计算机存储设备最小信息单元叫bit（位），又称比特位，用小写b表示，计算机最小存储单元是字节（byte），用大写B表示，1B8bit；1kB1024B（2的十次方…
Java入门之基础篇-Java数据类型与运算符
第1章 变量与数据类型
本文大致介绍了Java数据类型与运算符供小白编程爱好者借鉴，因为我也是学习者，这只是我自己的观点，如有错误，请指出。废话不多说，开始步入正题。
1.1 变量概述
变量：常量是固定不变…
数据分析思维（分享）
今天看到一篇关于数据分析思维的文章，结合自己的理解，录一下笔记
数据分析 思维 数据
真正重要的东西，是思维和数据，其他都属于帮助我们实现自己目标的工具，工具使用的熟练度决定我们完成自己目标的完美程度和效率…
Pandas模块-数据读取和数据类型
Pandas 是一个 Python 类库，用于数据分析、数据处理、数据可视化，它具有高性能的数据结构和数据分析工具，经常与 numpy（数学计算）、scikit-learn（机器学习） 结合使用。
1. Pandas 数据读取 Pan…
怎么查找数据集_查找数据科学项目数据集的17个地方
怎么查找数据集This is the fifth post in a series of posts on how to build a Data Science Portfolio. If you like this and want to know when the next post in the series is released, you can subscribe at the bottom of the page. 这是有关如何构建数据科学产品组合…
Python数据分析基础——CSV文件——添加标题行
参考文献：《Python数据分析基础》 前言
有时，电子表格中没有标题行，但确实希望所有列都有列标题。在这种情况下，可以使用脚本添加列标题。 例如，在supplier_data_no_header_row.csv文件中，我们希望添加列标…
python内存泄漏_诊断和修复Python中的内存泄漏
python内存泄漏Fugue uses Python extensively throughout the Conductor and in our support tools, due to its ease-of-use, extensive package library, and powerful language tools. One thing we’ve learned from building complex software for the cloud is that a l…
pandas 线性回归_使用Python，pandas和statsmodels通过线性回归预测房价
pandas 线性回归This post was originally published here 这篇文章最初发表在这里 rel"stylesheet" type"text/css" href"/wp-content/themes/colormag-child/css/tim-dobbins-style.css"> rel"stylesheet" type"text/css&q…
python处理数据可视化_数据整理101：使用Python提取，处理和可视化NBA数据
python处理数据可视化由Viraj Parekh | 2017年4月6日 (by Viraj Parekh | April 6, 2017)This is a basic tutorial using pandas and a few other packages to build a simple datapipe for getting NBA data. Even though this tutorial is done using NBA data, you don’t …
【Numpy学习】第五节 Numpy大作业
综合运用了很多知识，对我来说还是有一定难度的，使用还是不够熟练。
from sklearn.datasets import load_iris
import pandas as pd
import numpy as np# T1 导入鸢尾属植物数据集，保持文本不变。
data load_iris()
print(dir(data))frame …
文本分析-使用jieba库实现TF-IDF算法提取关键词
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
一定要收藏的30套可视化大屏制作模板！升职加薪不再是梦想！
前几天和朋友吃饭聊天，他吐槽说老板让他做可视化大屏，但他不会敲代码根本做不出来，老板动动嘴巴子根本不考虑技术难度只想看到成果，他焦虑得都睡不着觉。我给他分享了一套可视化大屏模板，10分钟就制作完成了老板要求的…
添加布林带择时策略有多便捷！股票量化分析工具QTYX-V2.4.7
前言 布林带通道（Bollinger Bands）是非常经典的技术指标，常用于研判市场中长期运动趋势。 比如我们以[350， 2，2] 这组长线参数来绘制恒瑞医药、贵州茅台10年行情走势的布林带通道，如下所示: 不少星球学员向…
高速版双底形态选股关联自选股票池！股票量化分析工具QTYX-V2.3.4
前言本期我们介绍下，如何把高速版双底形态选股筛选出来的股票导入到自选股票中，这样就能把量化分析的那些好用的功能结合起来一起使用了。我们先来回顾下QTYX设计的整体选股框架！框架结构图如下所示，详细介绍可以看以下视频介绍&a…
基于多任务爬虫技术， A股实时行情数据Level1采样
实时行情数据特征实时行情数据对短线量化交易者来说非常重要，涉及到买卖点的选择。本主题提及的A股实时行情数据获取，是类似于Level1级别的更新，每间隔3秒以爬虫的方式从财经网站上实时采样获取到的。如下图所示，数据类型有“最新…
元数据是什么？举例告诉你什么是元数据
元数据，一个简单的定义是描述数据的数据。在企业中，无论哪里有数据，都有相应的元数据。只有存在完整而准确的元数据，我们才能更好地理解数据并充分利用数据的价值。为了让大家更好地了解什么是元数据，亿信华辰小编针对…
进行数据分析时如何提高留存？
一、留存与流失 用户留存率，这同样是互联网创业者们不得不共同关注的一大核心指标。互联网产品的“留存用户”是相对于“流失用户”的一个概念。归根到底，真正的用户增长就是增长与流失的差值。
造成用户留存率低的原因可能是以下几种：
1、…
数据分析的目的和意义（作用）是什么？
很多人会问数据分析目的是什么？它有什么作用？让我们看看亿信华辰如何看待数据分析的目的和意义。仅仅谈论数据分析的作用实际上并不重要，因此在谈论该作用之前，我们首先要考虑受众，打个比方：对于个人而言&a…
Apache druid Roll-up前后的数据量对比sql，见证roll-up的强大
简述
Roll-up 是Apahce druid 中重要的特性之一，在特定时间段内的数据，维度一致时可以进行压缩合并。减少数据量。 但有时为了估算压缩前后数据量如何查询呢？ 在druid 中默认提供了sum函数可以统计压缩前的数据量。 下面来看下语法如何写吧。…
手把手教你学Python之语法基础
目录
Python中的输入输出函数
Python中的注释
Python中的变量 Python中的输入输出函数 任何程序都需通过输入输出功能与用户进行交互和沟通。所谓输入就是指程序捕获用户通过键盘输入的信息或数据，而输出则是指程序向用户显示内容或打印数据。在…
2021.12.19【读书笔记】丨生物信息学与功能基因组学（第五章 高级数据库搜索 下）
5.5 用类似于BLAST的比对工具快速搜索基因组DNA 需求：随着基因组DNA数据库数量增长，对比对工具要求越来越高 能在基因组DNA中找到外显子比对时考虑基因组DNA包含的测序错误有相应的算法解决相关物种的基因组在比对中出现删除、重复、倒置或移位的问题有相…
2021.12.13【读书笔记】|对链特异性建库的理解
刚接触高通量测序的时候就知道有链特异性建库这么个概念，当时也了解可以利用加U法，但是没有思考其中的细节。最近把这个概念掰开了揉碎了好好理解，终于填上了这个坑。
正式讲之前，有几个概念是要明确的。
DNA 的正链和负链&…
2021.11.23【bug笔记】丨picard运行报错：Exception in thread “main“ java.lang.UnsupportedClassVersionError
项目场景：
RNA-seq对比对后bam文件绘制insert图片 问题描述：
执行picard命令时发生报错： JAVA报错代码： at java.lang.ClassLoader.defineClass1(Native Method)at java.lang.ClassLoader.defineClass(ClassLoader.java:800)at …
手把手教你学Python之面向对象
目录
1、类和对象
（1）Python中类的定义
（2）对象的创建
2、类中的变量
（1）实例变量
（2）类变量
（3）将方法装饰成属性
3、类中的方法
（1&am…
2021.11.22【读书笔记】丨生物信息学与功能基因组学（第五章第四节 隐马尔可夫模型）
5.4 谱搜索：隐马尔可夫模型（HMMs） 谱隐马尔可夫模型在生成用于识别远缘序列相似度的位置特异性打分系统时，比PSSMs更通用，如语音检测，声纳等一系列信号检测问题；在生信领域，HMMs已经…
2021.11.21【读书笔记】丨生物信息学与功能基因组学（第五章 高级数据库搜索 中 ）
5.3 寻找远缘相关蛋白质：位置特异性迭代BLAST（PSI-BLAST）和DELTA-BLAST PAM250矩阵给探测远缘相关蛋白质提供了一个更好的打分系统，可以改变打分矩阵来检测远缘蛋白质，但仍然有局限性： BLASTP检测到匹配蛋白…
2021.11.20【读书笔记】|差异可变剪接事件及DTU分析
一、可变剪接(Alternative Splicing) 定义： 同一前体mRNA分子，可以在不同的剪接位点发生剪接反应，生成不同的mRNA分子，最终产生不同的蛋白质分子的一种RNA剪切方式。意义： 1. AS是形成生物多样性的重要原因之一2. AS是…
117页数字化转型与产业互联网发展趋势及机会分析报告PPT
导读：原文《》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。 喜欢文章，您可以点赞评论转发本文，了解更多内容请私信：方…
VBA：按照Excel工作表中的名称列自动汇总多个工作薄中对应sheet中所需要的数据
需求如下：
B列为产品名为合并单元格，C列为供应商名，G、H列为金额数据；数据源放在同一个文件夹内，B列产品名来源于工作薄名称中间的字符串，C列供应商名来源于工作薄中的sheet名；G、H列金额数据来…
【案例+操作+演示】20分钟带你入门Pandas，掌握数据分析科学模块，附带上百个案例练习题【含答案】
二十分钟入门pandas，学不会私信教学！
有需要pyecharts资源的可以点击文章上面下载！！！
需要本项目运行源码可以点击资源进行下载
资源
#coding:utf8
%matplotlib inline这个一篇针对pandas新手的简短入门࿰…
数据可视化数据调用浅析
数据可视化是现代数据分析和决策支持中不可或缺的一环。它将数据转化为图形、图表和可视化工具，以便更直观地理解和解释数据。在数据可视化的过程中，数据的调用和准备是关键的一步。本文将探讨数据可视化中的数据调用过程，并介绍一些常用的数…
数据可视化：图表绘制详解
数据可视化是一种将抽象的数字和数据转化为直观图形的技术，使数据的模式、趋势和关系一目了然。本文将详细介绍如何绘制各种类型的图表，包括柱状图、折线图、饼图、散点图和热力图等。
第一部分：图表类型和选择 1. 柱状图 柱状图是用于比较类…
Seaborn数据可视化（一）
目录
1.seaborn简介 2.Seaborn绘图风格设置
21.参数说明：
2.2 示例： 1.seaborn简介
Seaborn是一个用于数据可视化的Python库，它是建立在Matplotlib之上的高级绘图库。Seaborn的目标是使绘图任务变得简单，同时产生美观且具有信…
excel逻辑函数篇1
1、AND(logical1,[logical2],…)：用于测试所有条件是否均为TRUE 检查所有参数均为true，如果是则返回true
2、OR(logical1,[logical2],…)：用于测试是否有为TRUE的条件 如果任意参数值为true，即返回true；只有当所有参数…
【Python数据分析】数据分析之numpy基础
实验环境：建立在Python3的基础之上
numpy提供了一种数据类型，提供了数据分析的运算基础，安装方式
pip install numpy导入numpy到python项目
import numpy as np本文以案例的方式展示numpy的基本语法，没有介绍语法的细枝末节&am…
一图胜千言！数据可视化多维讲解（Python）
数据聚合、汇总和可视化是支撑数据分析领域的三大支柱。长久以来，数据可视化都是一个强有力的工具，被业界广泛使用，却受限于 2 维。在本文中，作者将探索一些有效的多维数据可视化策略（范围从 1 维到 6 维）。…
Python 交易指南：利用 RSI
一、说明 RSI是相对强弱指数（Relative Strength Index）的缩写，是一种技术指标。该指标是用来测量股票或其他交易品种的价格波动强度和速度的，属于动量型指标。RSI常用于技术分析和交易策略中，可以帮助交易者判断市场的…
淘宝关键字API接口介绍
淘宝关键字API接口（TaobaokeywordAPIinterface）是淘宝开放业务的形式之一，接口平台与淘宝签订协议之后，通过合法渠道获取到淘宝的官方数据，然后将这些数据储存在接口的数据库当中，供开发者进行调用。企业接…
IT运维：使用数据分析平台监控奇安信
监控目标 本文基于鸿鹄2.10.0版本。 ●监控奇安信日志类型分布 ●监控奇安信攻击行为、分析攻击类型 ●监控奇安信攻击来源情况 操作步骤 数据导入 1、创建数据集，如使用已经存在的数据集，可跳过此步骤 数据集名称：qax_syslog（仪表…
数据分析三剑客之一：Pandas详解
目录 1 Pandas介绍
2 Pandas的安装与导入
2.1 Pandas模块安装
2.2 Pandas模块导入
3 pandas数据结构及函数
3.1 Series结构
3.1.1 ndarray创建Series对象
3.1.2 dict创建Series对象
3.1.3 标量创建Series对象
3.1.4 位置索引访问Series数据
3.1.5 标签索引访问Series…
【附安装包】Stata16安装教程
软件下载
软件：Stata版本：16语言：简体中文大小：338.13M安装环境：Win11/Win10/Win8/Win7硬件要求：CPU2.0GHz 内存4G(或更高）下载通道①百度网盘丨下载链接：https://pan.baidu.com/s/…
65页医院智能化弱电系统规划设计方案PPT（附500份医院医疗方案）
本资料来源公开网络，仅供个人学习，请勿商用，如有侵权请联系删除，更多浏览公众号：智慧方案文库
医院国际医疗中心智能化系统规划设计方案[81页PPT].pptx中医医院智慧一体化建设项目需求规格设计书219页[Word].docx新建…
数据分析基础-数据可视化07-用数据分析讲故事
如何构建⼀个引⼈⼊胜的故事？
⾸先：要想象什么？ 可视化什么⽐如何可视化更重要 统计分析：GIGO（垃圾输⼊，垃圾输出） 在可视化分析环境中： 吉⾼ → 您⽆法从可视化的不适当数据中获…
Pandas计算连续行为日期跨度
缺失字段日期跨度统计
我需要统计数据中缺失字段的日期跨度，并统计缺失数据条数。有的字段是连续缺失，如表中当日最高温从2019-04-19至2019-04-30缺失了12条数据，需要统计出来。
方法一、Pandas分组聚合计数
参考https://cloud.tencent.c…
植物根系基因组与数据分析
1.背景
这段内容主要是关于植物对干旱胁迫的反应，并介绍了生活在植物体内外以及根际的真菌和细菌的作用。然而，目前对这些真菌和细菌的稳定性了解甚少。作者通过调查微生物群落组成和微生物相关性的方法，对农业系统中真菌和细菌对干旱的抗性…
云存储：实现数据备份与恢复的创新方法
文章目录 云存储的基本概念数据备份的创新方法自动化备份策略增量备份和版本控制多地点备份 数据恢复的创新方法快速数据恢复弹性扩展性数据验证和一致性 案例分析：AWS S3自动化备份策略增量备份和版本控制多地点备份快速数据恢复数据验证和一致性 结论 Ἰ…
数据分析工具有哪些，哪个好学？
Tableau、帆软BI、思迈特BI、SpeedBI数据分析云……这些都是比较常见的BI数据分析工具。从学习成本、操作难度以及数据可视化分析效果来看，SpeedBI数据分析云都表现地可圈可点。
1、不需下载安装、学习成本低
SpeedBI数据分析云是一款SaaS BI数据分析工具…
Apache Linkis 与 OceanBase 集成：实现数据分析速度提升
导语：恭喜 OceanBase 生态全景图中又添一员，Apache Linkis 构建了一个计算中间件层，以促进上层应用程序和底层数据引擎之间的连接、治理和编排。 近日，计算中间件 Apache Linkis 在其新版本中通过数据源功能，支持用户通…
十二、MySQL(DQL)分组/排序/分页查询如何实现？
总括
select 字段列表 from 表名 [where 条件] (group by)/(order by)/(limit) 分组字段名
分组查询
1、分组查询
（1）基础语法：
select 字段列表 from 表名 [where 条件] group by 分组字段名 [having 分组之后的过滤条件] （…
2023年7月京东投影仪行业品牌销售排行榜（京东大数据）
鲸参谋监测的京东平台7月份投影仪行业销售数据已出炉！
7月份，投影仪市场呈现增长趋势。根据鲸参谋平台的数据可知，7月京东平台投影仪的销量将近20万，同比增长约16%；销售额将近3.8亿，同比增长约4%。 *数据…
【广州华锐互动】智慧园区3D数据可视化系统有什么作用？
随着科技的不断发展，智慧园区3D数据可视化系统已经成为了现代园区管理的重要组成部分。它通过将大量的数据进行整合、分析和展示，为企业提供了一个直观、高效的数据管理平台，帮助企业实现精细化管理，提高运营效率，降低…
数据分析之面试题目汇总
1、解释数据清洗的过程及常见的清洗方法。 数据清洗是指在数据分析过程中对数据进行检查、处理和纠正的过程；是数据预处理的一步，用于处理数据集中的无效、错误、缺失或冗余数据 常见的清洗方法包括：处理缺失值、处理异常值、去除重复值、统一…
十三、MySQL(DQL)语句执行顺序
1、DQL语句执行顺序:
（1）from来决定表 # where来指定查询的条件
（2）group by指定分组 # having指定分组之后的条件
（3）select查询要返回哪些字段
（4）order by根据字段内容&#…
生信豆芽菜-风险患者分布基因表达热图
网址：http://www.sxdyc.com/geneExpThermogram 一、使用方法 1、数据准备 第一个文件：基因表达的文件
第二个文件：风险得分的文件
2、选择划分高低风险的阈值，需要注意的是，前面在做riskscore的时候，我…
腾讯音乐基于 Apache Doris + 大模型构建全新智能数据服务平台
当前，大语言模型的应用正在全球范围内引发新一轮的技术革命与商业浪潮。腾讯音乐作为中国领先在线音乐娱乐平台，利用庞大用户群与多元场景的优势，持续探索大模型赛道的多元应用。本文将详细介绍腾讯音乐如何基于 Apache Doris 构建查询高效、…
Apache Doris 2.0 如何实现导入性能提升 2-8 倍
数据导入吞吐是 OLAP 系统性能的重要衡量标准之一，高效的数据导入能力能够加速数据实时处理和分析的效率。随着 Apache Doris 用户规模的不断扩大， 越来越多用户对数据导入提出更高的要求，这也为 Apache Doris 的数据导入能力带来了更大的挑战…
2023年天猫婴幼儿羊奶粉市场数据分析（天猫数据分析怎么做）
随着消费者健康意识的大幅度提高，婴幼儿奶粉消费需求不断细分并升级，越来越多的家庭不仅关注奶源质量、添加的营养成分，还希望通过获取羊奶、有机奶、A2蛋白奶等稀缺乳资源来提升婴幼儿健康水平。
羊乳作为三大乳品来源之一，在丰…
IT运维：使用数据分析平台监控H3C交换机
概述 在企业日常运维中，设备种类繁多，日志格式各异，日志量巨大，大量的告警，我们面临着如何统一的存放这些日志？如何对海量的日志进行查看，分析？传统的日志设备无法满足日志格式各异的…
excel数据分析常用50个函数
求和：sum（C3：C6）
平均：avage（）
最大数：max（）
small函数，large函数
求第二小数：small(C3：C6,2) 2是顺位。
if…
机器学习（10）---特征选择
文章目录 一、概述二、Filter过滤法2.1 过滤法说明2.2 方差过滤2.3 方差过滤对模型影响 三、相关性过滤3.1 卡方过滤3.2 F检验3.3 互信息法3.4 过滤法总结 四、Embedded嵌入法4.1 嵌入法说明4.2 以随机森林为例的嵌入法 五、Wrapper包装法5.1 包装法说明5.2 以随机森林为例的包…
2023年数维杯数学建模C题宫内节育器的生产求解全过程文档及程序
2023年数维杯数学建模
C题 宫内节育器的生产
原题再现： 宫内节育器（IUD）是一种相对安全、有效、经济、可逆、简便，广大妇女易接受的节育器具，目前已成为我国育龄妇女的主要避孕措施。据悉，我国约70%妇女选…
什么软件做可视化大屏最简单、最快？
做可视化大屏的工具有很多，但要说什么软件做可视化大屏最简单、最快，那必然是BI系统，特别是国产BI系统奥威BI。奥威BI系统能提供大量的模板功能，精简操作，提高效率，而且采用的是零编程，即点击、…
Python数据分析 — 数据分析概念、重要性、流程和常用工具
前言：Hello大家好，我是小哥谈。Python数据分析是利用Python编程语言进行数据处理、转换、清洗、可视化和建模的过程。Python在数据科学领域非常流行，有许多强大的库和工具可供使用，例如NumPy、Pandas、Matplotlib和Scikit-learn等…
数据分析三剑客之Matplotlib
0.Matplotlib绘图和可视化
1.简介
我的前面两篇文章介绍了 Nimpy ，Pandas 。今天来介绍一下Matplotlib。
简单来说，Matplotlib 是 Python 的一个绘图库。它包含了大量的工具，你可以使用这些工具创建各种图形，包括简单的散点图&…
手把手教你学Python之环境搭建
目录
Python简介
Python语言的发展历程
Python语言的主要特点
Python应用场景
Python环境搭建 随着人工智能和机器学习的火热，Python编程语言得到了快速发展，部分省市已将Python纳入中小学课程。Python在网络爬虫、数据处理、科学计算方面的优势使得…
Python数据分析：数据可视化案例
Python数据分析：数据可视化案例
import pandas as pd
import matplotlib.pyplot as plt
from matplotlib import stylestyle.use(ggplot) # 设置图片显示的主题样式# 解决matplotlib显示中文问题
plt.rcParams[font.sans-serif] [SimHei] # 指定默认字体
plt…
Python数据分析：爬虫框架scrapy基础知识点
Python数据分析：爬虫框架scrapy基础知识点
scrapy简介：
开源的爬虫框架快速强大，只需编写少量代码即可完成爬取任务易扩展，添加新的功能模块
scrapy抓取过程：
使用start_urls作为初始url生成Request，默…
Python数据分析：数据库多表连接（SQLite）
Python数据分析：数据库多表连接（SQLite）
多表连接： 将多个表中的记录连接并返回结果 join方式 交叉连接（cross join）内连接（inner join）外连接（outer join) cross joi…
数据分析---开发环境
数据分析开发环境介绍anacondajupyterjupyter的基本使用anaconda anaconda官网地址集成好了数据分析和机器学习中所需要的全部环境 jupyter
jupyter就是anaconda提供的一个基于浏览器的可视化开发工具
jupyter的基本使用
启动：在终端输入 jupyter notebook的指令…
Python数据分析：常用的数据分析格式文件的读写
Python数据分析：常用的数据分析格式文件的读写
常用数据分析文件格式： txt csv json xml xls,xlsx HDF
txt文件的读写
文件的打开：
f open(file_name, mode)mode:‘r’ , ‘w’
读： f.read() 读取整个文件内容 f.rea…
Prophet算法框架趋势模型、季节模型原理详解与应用实践
本文是在ChatGPT协助下完成，提高了写作速度和效率。
1. 趋势模型
1.1. 趋势模型概述
当我们谈论Prophet中的趋势模型时，我们可以将其理解为描述时间序列数据中整体趋势的一种方式。趋势模型可以告诉我们数据随着时间的推移是如何变化的，是…
Python数据分析：ipython使用技巧
Python数据分析：ipython使用技巧
1. ？和？？的使用(python对象为变量、函数等)
python对象 ？ 可显示对象基本信息
python对象 ？？ 可显示对象基本信息，对象为函数是会显示源码
x …
numpy数组的分割和元素的添加与删除
numpy数组的分割和元素的添加与删除
数组的分割：
函数描述split将一个数组分割为多个子数组hsplit将一个数组水平分割为多个子数组（按列）vsplit将一个数组垂直分割为多个子数组（按行）
numpy.split 沿特定的轴将数组分…
让数据分析极速统一,阿里云和StarRocks一起干了件大事
“过去，仅仅是管理层少数人定期查看各种数据报表；如今，哪怕基层员工都是数据消费者，日常业务中随时需要使用历史数据和实时数据做决策，这种趋势将不可阻挡。”去年一家银行数据部负责人对大数据在线如是说。
的确&…
获取并处理中文维基百科语料
获取语料
下载链接
处理语料
直接下载下来的维基百科语料是一个带有html和markdown标记的文本压缩包，基本不能直接使用。目前主流的开源处理工具主要有两个：1、Wikipedia Extractor；2、gensim的wikicorpus库。
然而，这两个主流…
因果推断what if
因果推断将进行一系列的输出，陆续进行补充。这一系列文章主要是在阅读《Causal Inference：What if》（可自行在网站下载电子书籍、R等代码以及数据）的过程中的学习总结。该书主要是以医学为背景，故涉及的指标变量及名词…
domino 惯用选项_惯用的熊猫：您可能不知道的技巧和功能
domino 惯用选项Pandas is a foundational library for analytics, data processing, and data science. It’s a huge project with tons of optionality and depth. 熊猫是用于分析，数据处理和数据科学的基础库。 这是一个庞大的项目，具有大量的可选项…
python 描述性统计_Python中的基本统计：描述性统计
python 描述性统计The field of statistics is often misunderstood, but it plays an essential role in our everyday lives. Statistics, done correctly, allows us to extract knowledge from the vague, complex, and difficult real world. Wielded incorrectly, statis…
BI数据分析方法小结
author:skate
time:2011-04-06 对于电子商务网站，我们该如何对数据分析呢？当我们拿到数据的时候该做些什么？要回答这几个问题前，先回答如下问题：
1. 数据是给谁看的？2. 看数据的人ÿ…
开源 非开源_开源DayWatch –背后的故事
开源 非开源It’s been quite a journey with DayWatch. Since 2012 we’ve been working for it as our wonder child and now it is time to let it fly even higher. Here is the story: DayWatch经历了一段漫长的旅程。 自2012年以来，我们一直是我们的神奇孩子…
如何进行BI工具的选型？2019必看的商业智能工具选型参考
作为企业的IT部门来说，如果没有好的BI工具支撑，IT部门就会陷入两难的境地。举个例子来说，业务想要做报表分析，IT就要去取数据、画报表，但业务的需求经常会变更，IT就得熬夜加班，根本疲于应对&…
主成分分析 PCA算法原理
主成分分析 PCA算法 (2010-05-11 19:59:26) 转载▼标签： 文化 分类： 系统生物学 对同一个体进行多项观察时，必定涉及多个随机变量X1，X2，…，Xp，它们都是的相关性, 一时难以综合。这时就需要借…
python 桌面备忘录_Python数据科学备忘单
python 桌面备忘录The printable version of this cheat sheet 该备忘单的可打印版本 It’s common when first learning Python for Data Science to have trouble remembering all the syntax that you need. While at Dataquest we advocate getting used to consulting th…
经典案例题：ATM取款机详细代码---复制既能跑
本文介绍了Java经典案例题供小白编程爱好者借鉴，因为我也是学习者，这是我的一点编程经验和心得，如有错误，请指出。废话不多说，开始步入正题。（ps:创作不易，有喜欢的小伙伴请点赞支持，…
百度charts_NBA Shot Charts：更新
百度chartsFor some reason I recently got it in my head that I wanted to go back and create more NBA shot charts. My previous shotcharts used colored circles to depict the frequency and effectiveness of shots at different locations. This is an extremely eff…
2023国赛数学建模E题思路代码 黄河水沙监测数据分析
E 题 黄河水沙监测数据分析 黄河是中华民族的母亲河。研究黄河水沙通量的变化规律对沿黄流域的环境治理、气候变化和人民生活的影响，以及对优化黄河流域水资源分配、协调人地关系、调水调沙、防洪减灾等方面都具有重要的理论指导意义。 附件 1 给出了位于小浪底水库…
Tableau自学四部曲_Part2：数据连接可视化原理
文章目录 一、数据连接1. 连接类型2. 连接方式3. 提取方式4. 连接筛选5. 保存类型6. 数据处理7. 理解本文的数据 二、可视化原理1. 做个小实验2. 数据是如何变成图表的？（1）数据变成图表的过程，就是用数据映射到视觉图形的过程&…
Python数据分析实战-Series转DataFrame并将index设为新的一列（附源码和实现效果）
实现功能
Series转DataFrame并将index设为新的一列
实现代码
import pandas as pd# 创创建series
series pd.Series([1, 2, 3, 4, 5])# 创建一个DataFrame对象
data {column_name: series}
df pd.DataFrame(data)# 重新设置索引，将原有的索引作为新的一列
df.r…
数据分析：数据分析篇
文章目录 第一章 科学计算库Numpy1.1 认识Ndarray1.2 Ndarray的属性1.3 Numpy中的数据类型1.4 Numpy数组1.4.1 Numpy数组的创建1.4.2 Numpy数组的基本索引和切片1.4.3 Numpy布尔索引1.4.4 数组运算和广播机制1.4.5 Numpy数组的赋值和Copy复制1.4.6 Numpy数组的形状变换1.4.7 Nu…
Python Pyecharts 制图
基本图表 - pyecharts - A Python Echarts Plotting Library built with love.
from pyecharts import options as opts
from pyecharts.charts import Pie
from pyecharts.faker import Fakerc (Pie().add("",[list(z) for z in zip(["7室1厅", "5…
e为底数的指数运算e^x，math.exp(x)
【小白从小学Python、C、Java】 【计算机等考500强证书考研】 【Python-数据分析】 e为底数的指数运算e^x math.exp(x) 选择题 关于以下代码的说法中正确的是？ import math print("【执行】math.exp(0)") print(math.exp(0)) print("【执行】math.ex…
云端AI：释放企业创新力，打造智慧企业
文章目录 1. 云端AI的基本概念1.1 云计算1.2 人工智能1.3 云端AI 2. 云端AI的重要性2.1 成本效益2.2 弹性扩展2.3 无缝整合2.4 实时更新 3. 云端AI的应用领域3.1 智能客服3.2 预测分析3.3 自动化生产 4. 云端AI的未来趋势4.1 边缘计算与云端AI的融合4.2 可解释性AI4.3 隐私和安…
“五度晟企通”企业发展服务平台正式发布，帮扶企业行稳致远！
在数字中国建设的大背景下，“五度易链”以企业实际发展需求为牵引，以帮扶企业行稳致远为目标，基于全体量产业大数据，运用NLP、AI等新一代信息技术，打造了数字化ToB企业发展服务平台“五度晟企通”，旨在以数…
探索云计算和大数据分析的崛起：API行业的机遇与挑战【电商大数据与电商API接入】
I. 引言
随着云计算和大数据分析技术的快速发展，企业和个人对数据分析和处理的需求不断增加。在这个信息爆炸的时代，数据已成为企业决策和战略规划的重要基础。云计算提供了强大的计算和存储能力，使得大规模数据的处理和分析变得更加容易和高…
工作新时代，腾讯轻联塑造高效办公未来
腾讯轻联：开启便捷、高效的集成新纪元 ⭐ 写在前面⭐ 使用模板快速起步⭐ 自定义流程初体验⭐ 无与伦比的集成强者⭐ 写在最后 ⭐ 写在前面
在当今竞争激烈的商业环境中，提高企业的办公效率和工作流程自动化变得至关重要。腾讯轻联，作为新一…
京东商品数据：8月京东环境电器行业数据分析
8月份，环境电器大盘市场整体下滑。鲸参谋数据显示，8月京东平台环境电器的大盘将近570万，环比下滑约29%，同比下滑约10%；销售额为25亿，环比下滑约23%，同比下滑约8%。 *数据源于鲸参谋-行业趋势分析…
绘制图像灰度直方图——将图像的灰度分布可视化方法总结
今天在实现图像阈值分割的时候，需要找到能将背景与物体区分开的灰度阈值，因为处理到的图像比较简单，它的直方图具有一个十分明显的特点，也就是它的直方图以双峰一谷的形式呈现，将物体与背景区分开来的阈值也就是谷所对…
Python数据分析基础——CSV文件——筛选特定的行
CSV文件——筛选特定的行 参考文献：《Python数据分析基础》《Python标准库》《Python编程从入门到实践》 一.行中的值满足某个条件 有时，当行中的值满足一个具体条件时，才需要保留这些行。在这种情况下，可以检验行中的值是否满足具…
自然语言处理——文本数据的读写及操作
目录txt 文本数据的读写CSV 及 Excel 文本数据的读写DataFrame 操作数据规模太大txt 文本数据的读写
对于 txt 文本数据，Python 中的内置函数 open() 和 write() 就可以实现读取或者写入操作。
file: 文件路径（相对或者绝对路径）。mode: 文…
数据分析之numpy(基本使用详细)
文章目录一,什么是numpy1,Numpy相关介绍：2,NumPy包的核心是ndarray对象。二,基本使用1,创建数组对象(numpy.ndarray)ndarray的方法2,创建数组根据形状构建数组构建初始数组3,数组类型数据类型的一些方法4,数组形状5.数组的计算总结:广播的原则6,常用函数数学运算浮动…
数据分析之matplotlib
matplotlib数据可视化什么是数据可视化安装matplotlib基本使用添加文字各类型图的使用折线图直方图条形图通过Axes绘图饼图箱形图泡泡图等高线（轮廓图）开发环境jupyterlab
什么是数据可视化
https://matplotlib.org/
安装matplotlib
python -m pip i…
数据可视化优秀作品欣赏
Author： Nathan Yau Translator：Jet Wong DataFocus按：数据可视化，既是一门科学，又是一门艺术。本文作者带着一颗审美之心，挑选出11个有意思的数据可视化项目，第一眼看它们，你不会感…
用Python分析上海的楼盘信息并进行数据可视化
文章目录前言运行结果分析网页拿到数据源码编程之外前言 好久不写爬虫了，深夜想买房 不~我不想。 我就是去看了一下上海的新楼盘信息，明白一个道理…“现在我买不起(╬￣皿￣)”！ 算了算了。。。 运行结果
先看一下运行…
做数据分析和数据可视化，推荐这三款BI软件
说到做数据分析和数据可视化的工具，很多人第一个想到的是Excel。确实，Excel凭借其强大的基础功能和容易上手的操作性，在数据分析和数据可视化领域占有绝对的统治地位，尤其是在处理少量数据时。但是想要精通Excel并不容易ÿ…
看大数据平台如何打造餐饮业务一体化？
传统的方式认为，餐饮业与数据应该是不着边的，但随着信息化的不断发展，餐饮企业对于数据方面的重视程度越来越高，也意识到需要通过数据来了解菜品的销售情况以及顾客的习惯和口碑爱好等信息。 关于眉州东坡集团 1996年眉州东坡酒楼…
BI工具不仅是数据可视化，数据挖掘和处理才是核心
随着数字化时代的来临，企业面临的数据处理与分析问题越来越多，近几年冒出了众多的BI工具，都着重强调其数据可视化效果有多好。诚然，数据可视化效果是很重要，清晰亮丽的各类图表，狂拽酷炫的动态大屏展示&…
盘点市面上常见的6款BI工具
随着数字化的发展，实证单位和企业需要处理分析的数据量呈指数级增长，传统的数据分析工具已不能满足一些企业的需求，越来越多的企业转而寻求BI工具的帮助。现在市面上有非常多的BI工具，质量也参差不齐，笔者特此盘点了现…
为什么Python在数据分析行业备受欢迎？优势在哪？
在今天的数据驱动世界中，数据分析已经成为各行业的核心工作之一。数据分析的应用场景非常广泛，例如金融、医疗、教育、电商、社交等领域。数据分析师是一种专门从事数据分析的职业，他们需要掌握一定的编程技能和统计知识，以及对数…
64_Pandas进行字符串和数字的相互转换和格式化
64_Pandas进行字符串和数字的相互转换和格式化
本文介绍如何在 pandas.DataFrame 和 pandas.Series 中进行字符串和数字之间的转换，以及如何更改字符串的格式。
下面对内容进行说明。
类型转换（强制转换）：astype() 将数字转换为…
淘宝双11数据分析与预测课程案例中（林子雨）错误点总结
问题一：可视化代码中男女买家各个年龄段对比散点图中数值不显示以及坐标不正确问题如下图 解决方法： 1修改坐标 2修改数值 修改后散点图 问题二：各省份的总成交量对比中地图显示不出来 有时间再写
【数据分析】Python:处理缺失值的常见方法
在数据分析和机器学习中，缺失值是一种常见的现象。在实际数据集中，某些变量的某些条目可能没有可用的值。处理缺失值是一个重要的数据预处理步骤。在本文中，我们将介绍如何在 Pandas 中处理缺失值。
我们将探讨以下内容： 什么是缺…
大数据分析案例-基于随机森林算法构建二手房价格预测模型
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
数据分析思维-分析方法（基础）
数据分析的基础方法概念理解，其关键在于在业务中锻炼数据分析思维。（将以下基础方法带有好奇心的应用在生活中练习数据分析思维 ）
例如：经典的啤酒与尿布（分析一个爸爸去超市买东西的行为，将尿布和啤酒放在…
使用Python和XPath解析动态JSON数据
JSON动态数据在Python中扮演着重要的角色，为开发者提供了处理实时和灵活数据的能力。Python作为一种强大的编程语言，提供了丰富的工具和库来处理动态JSON数据使得解析和处理动态JSON数据变得简单和高效。例如，使用内置的json模块，…
Pandas和Pyecharts带你揭秘最近热播好剧的主题和题材趋势
在电视剧领域，热播好剧的主题和题材趋势一直备受关注。为了揭秘这个秘密，我们将使用Python中的Pandas和Pyecharts库抓取爱奇艺热播剧的数据，并通过数据分析和可视化展示，带你一起探索最近热播好剧的主题和题材趋势。 在我们开始之…
用Python分析文本数据的词频并词云图可视化（文末送书）
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
PyTorch实战：实现Cifar10彩色图片分类
目录
前言
一、Cifar10数据集
class torch.utils.data.Dataset torch.utils.data.DataLoader
二、定义神经网络
普通神经网络:
定义损失函数和优化器 训练网络-Net
CPU训练
模型准确率
编辑
GPU训练
训练网络-LeNet
模型准确率
点关注，防走丢&#x…
Python语言学习实战-内置函数sorted()的使用（附源码和实现效果）
实现功能
sorted()函数是Python的内置函数之一，用于对可迭代对象进行排序操作。它可以对列表、元组、字符串等可迭代对象进行排序，并返回一个新的已排序的列表。
sorted()函数的语法如下：
sorted(iterable, keyNone, reverseFalse)其中&am…
（高阶) Redis 7 第14讲 数据统计分析 实战篇
面试题 存得进，取得出，反应快抖音电商商品评论：排序+展现+取前10条用户使用手机APP签到打卡：1天对应一系列用户签到记录，新浪微博/钉钉打卡，如何进行统计页面访问点击量：一个网页对应一系列的访问点击，淘宝网首页，多少人浏览首页公司系统上线后，UV、PV、DUV是什么亿级…
数据分析回头看2——重复值检查/元素替换/异常值筛选
0、前言：
这部分内容是对Pandas的回顾，同时也是对Pandas处理异常数据的一些技巧的总结，不一定全面，只是自己在数据处理当中遇到的问题进行的总结。 1、当数据中有重复行的时候需要检测重复行：
方法：使用p…
Python数据分析之Excel
openpyxl库 1、openpyxl概述2、Excel写入2.1、新建2.2、添加数据2.3、单元格格式 3、Excel读取4、openpyxl操作Excel之CRUD4.1、查4.2、改4.3、删 1、openpyxl概述
openpyxl是一个用于处理xlsx格式Excel表格文件的第三方python库，几乎支持Excel表格的所有操作
基本…
pandas_使用总结(1)
取值操作
常用方式
df[‘Q1’] # 选择‘Q1’列，同df.Q1，返回一个Seriesdf[[‘name’,‘Q1’]] # 选择多列，注意括号df[0:3] # 取前三行df[0:10:2] # 0到前10行中每两行取一次数据（python 切片操作： start : end : st…
Python与数据分析--Matplotlib-2
目录 1.写在文前
2.实例1--武汉新冠趋势图
3.简单散点图实例
4.灵活散点图实例
5.饼图操作实例 1.写在文前
"""
Matplotlib库我们大致已经学完了，但是缺乏一定的实战经验。
今天我们就来进行一下matplotlib的实战操作。
"""
#导…
药品销售数据分析报告（报告资源-干货篇）
药品分析报告包含了药品研究分析报告、药品审评分析报告、药品市场分析报告、药品专利分析报告、药品上市分析报告、药品原料药分析报告、药品立项分析报告、药品投融资分析报告......所以我们在写作药品分析报告之前一定要明确需求者目的，如此方能针对核心内容进行…
基于矩阵分解算法的智能Steam游戏AI推荐系统——深度学习算法应用(含python、ipynb工程源码)+数据集（四）
目录 前言总体设计系统整体结构图系统流程图 运行环境模块实现1. 数据预处理2. 模型构建1）定义模型结构2）优化损失函数 3. 模型训练及保存1）模型训练2）模型保存 4. 模型应用1）制作页面2）模型导入及调用3&am…
坚鹏：浙江农商联合银行同业核心产品解读与差异化分析培训第8期
浙江农商联合银行同业核心产品解读与差异化分析培训第8期
1952年，浙江第一家农村信用社成立。2004年4月18日，浙江省农信联社成立，承担对全省农信社的管理、指导、协调和服务职能。2021年10月，经国务院批准同意、银保监会批复&…
2023年全国研究生数学建模竞赛华为杯C题大规模创新类竞赛评审方案研究
2023年全国研究生数学建模竞赛华为杯
C题 大规模创新类竞赛评审方案研究
原题再现： 现在创新类竞赛很多，其中规模较大的竞赛，一般采用两阶段（网评、现场评审）或三阶段（网评、现场评审和答辩）评…
R读写parquet文件
什么是parquet文件
Apache Parquet是一个开源的，列存储的数据文件格式。 https://parquet.apache.org/ 在R里面，我们可以通过arrow包来读写它。
我们先安装一下arrow包，并加载它。
install.packages("arrow")
library(arrow)读写…
京东手机销售数据：2023年9月京东手机行业TOP10品牌排行榜
鲸参谋监测的京东平台9月份手机市场销售数据已出炉！ 9月份，手机市场销售整体呈现下滑。鲸参谋数据显示，今年9月，京东平台手机销量为300万，环比下降约20%，同比下降约18%；销售额为92亿，…
在Python中创建相关系数矩阵的6种方法
相关系数矩阵（Correlation matrix）是数据分析的基本工具。它们让我们了解不同的变量是如何相互关联的。在Python中，有很多个方法可以计算相关系数矩阵，今天我们来对这些方法进行一个总结
Pandas
Pandas的DataFrame对象可以使用c…
WebSocket通信安全概览
文章前言
在一次做项目的时候本来是想去点击Burpsuite的Proxy界面的HTTP History选项卡来查看HTTP历史请求记录信息并做测试的，但是在查看的时候却下意识的点击到了HTTP Proxy右侧的"WebSockets History"选项卡中，从界面的交互历史中发现网站…
数据湖在爱奇艺数据中台的应用
01 我们眼中的数据湖 作为爱奇艺的数据中台团队，我们的核心任务是管理和服务公司内的大量数据资产。在实施数据治理的过程中，我们不断吸收新的理念，引入尖端的工具，以精细化我们的数据体系管理。“数据湖”作为近年来数据领域广泛…
控价与数据分析的关系
品牌在做线上控价时，会面对许多的数据，如店铺数据、行业数据，当这些数据仅仅只是拿来做监测低价输出低价报表使用，是没有发挥其最大作用的，因为商品链接的字段较丰富，涉及的内容会包含销量、评价量、促销信…
Python数据分析实战-使用replace方法精确匹配替换某列的值（附源码和实现效果）
实现功能
将DataFrame中某一列的指定的两个值分别替换为0和1，而将其他值替换为2
实现代码
import pandas as pd# 创建一个示例DataFrame
data {A: [1, 2, 3, 4, 5],B: [a, b, c, d, e]}
df pd.DataFrame(data)# 打印替换前的DataFrame
print("替换前的Dat…
Python实战实例代码-网络爬虫-数据分析-机器学习-图像处理
Python实战实例代码-网络爬虫-数据分析-机器学习-图像处理 Python实战实例代码1. 网络爬虫1.1 爬取网页数据1.2 爬取图片1.3 爬取动态数据（使用Selenium） 2. 数据分析2.1 数据清洗2.2 数据变换2.3 数据聚合 3. 机器学习3.1 线性回归3.2 随机森林3.3 K-Me…
智能 BI 数据分析平台
智能BI平台 作者：猫十二懿 项目介绍
本项目是基于ReactSpring BootRabbitMQAIGC的智能BI数据分析平台。
访问地址：http://bi.kongshier.top AIGC ：Artificial Intelligence Generation Content(AI 生成内容) 区别于传统的BI，数据…
数据分析技能点-数据数据分析是什么？
在数字化日益普及的今天，数据已经渗透到了我们生活的各个角落。从推送的个性化广告到健康追踪应用的反馈，从社交网络的朋友推荐到在线购物的产品建议，数据分析在背后默默地影响着我们的决策和体验。
但数据分析究竟是什么？它如何工作？又应如何正确地使用数据来进行分析和…
融合之力：数字孪生、人工智能和数据分析的创新驱动
数字孪生、人工智能（AI）和数据分析是当今科技领域中的三个重要概念，它们之间存在着紧密的关联和互动，共同推动了许多领域的创新和发展。
一、概念
数字孪生是一种数字化的模拟技术，它通过复制现实世界中的物理实体、…
助力交叉学科应用型数据科学人才培养，和鲸科技携手华为发布联合解决方案
时代高速发展，智能化的浪潮奔腾而来，以“加速行业智能化”为主题，第八届华为全联接大会（HUAWEI CONNECT 2023）于 9 月 20 日正式开幕。本次大会中，华为携手生态伙伴引领智慧教育新风尚，和鲸科技…
数据分析方法：RFM模型
一、RFM基本原理
RFM是三个单词的缩写：
最近一次消费时间（Recency），取数的时候一般取最近一次消费记录到当前时间的间隔，比如：7天、30天、90天未到店消费；直观上，一个用户太久不到…
数据分析技能点-单变量分析和基础统计
在我们日常生活中，数据无处不在。无论是在购物、工作还是娱乐中都在不断地生成和消费数据。但是，如何从这些数据中获取有用的信息呢？这就是单变量分析和基础统计发挥作用的地方。 文章目录 单变量分析基础统计概念代表性数值单变量分析和基础统计总结单变量分析
单变量分析…
数据分析技能点-正态分布和其他变量分布
在数据驱动的世界里，了解和解释数据分布是至关重要的。不同类型的数据分布，如正态分布、二项分布和泊松分布，具有不同的特性和应用场景。这些分布不仅在统计学和数据科学中有广泛应用，而且在日常生活和商业决策中也起着关键作用。 文章目录 正态分布正态分布和偏差其他常见…
数据的真正价值是数据要素市场化开发
随着人工智能、互联网、物联网、大数据、云计算、区块链等新一代信息化、数字化技术的应用，各行各业都开始了新一轮的产业革命和转型升级。在这个过程中，数据伴随着信息化、数字化的推进越发变得重要，到了2020年直接成为了继土地、劳动力、资…
数据分析：利用gpt建立双11活动的分析框架
promt： 您是一名某电商平台的资深数据分析师，首先，您知道什么是双11活动吗？ output： 当然，双11活动，也称为“光棍节”购物节，是中国最大的在线购物节之一。这个活动最初由阿里巴巴集…
数据分析模型有哪些？常见的这八种来了解一下！
在进行数据分析时，那就会提及数据分析模型。在进行数据分析之前，首先要建立一个数据分析模型。根据模型的内容，将其细分为不同的数据指标以进行详细分析，最后得到所需的分析结果以及分析结论。常见的数据分析模型很多，…
数据分析（2）Matplotlib绘制2D图表
文章目录一. 线型图（一）绘制单条线型图（二）绘制多条线型图（三）绘制折线图二. 直方图与密度图（一）直方图（二）核密度曲线（三）直方图与密…
最优化--梯度下降法--牛顿法（详解）
目录
梯度下降法
梯度下降法 步骤
牛顿法
牛顿法的基本思想
牛顿法的优缺点
作用 梯度下降法
梯度下降法（Gradient Descent）是一种常用的优化算法，用于求解函数的最小值或最大值。它通过迭代的方式，不断更新参数的取值&…
大数据分析的特点有哪些？这五点很常见
在当今的大数据时代，不仅IT行业的人们需要了解与大数据相关的知识，而且传统行业的从业者和普通大学生也应了解某些大数据知识。新的基础架构计划未来，大数据技术将开始得到全面应用，大数据还将重塑整个产业结构。
要理解大数据&a…
kaggle心脏病监测分析案例(数据分析+数据可视化）适合入门新手
心脏病监测分析
数据来源：kaggle
数据获取方式： 关注公众号：YOLO的学习进阶日常 回复：心脏病 为什么想做这个分析案例？ 心脏病已经成为人类健康的三大杀手之一，为找到心脏病的病因，特此参考了…
通过数字零售的蜕变来找到推倒烟囱的方式和方法
深耕留量时代，仅仅只是依靠新零售和数字零售式的赋能与改造是不行的。我们需要的是对于传统零售的内在元素、既定流程、固定形态进行一场深度而又全面的变革，才能真正激活留量，让留量持续复购，从而达成「纵向」上的发展。 同流…
手把手教你学Python之手写数字识别（scikit-learn的应用）
目录
1、手写数字识别问题介绍
2、手写数字的可视化
3、多层感知机
4、scikit-learn实现手写数字识别 1、手写数字识别问题介绍
问题描述：手写数字识别是指给定一系列的手写数字图片以及对应的数字标签，构建模型进行学习，目标是对于一张…
手把手教你学Python之波士顿房价预测（scikit-learn的应用）
目录
1、波士顿房价预测介绍
2、线性回归算法
3、调用scikit-learn库实现房价预测 1、波士顿房价预测介绍
问题描述：波士顿房价数据集统计的是20世纪70年代中期波士顿郊区房价的中位数，统计了城镇人均犯罪率、不动产税等共计13个指标，统计…
Python探索性数据分析(EDA)语音数据建模
音频文件
时域中波形
之前我们称它为时间序列数据，但现在我们称它为波形。或者，两者兼而有之。 当我们只看这个音频文件的一小部分时，这一点变得更加清晰。 下图显示了与上面相同的内容，但这次只有 62.5 毫秒。
您可以看到一个…
手把手教你学Python之鸢尾花分类（scikit-learn的应用）
目录
1、鸢尾花分类问题介绍
2、自主实现鸢尾花分类
3、调用scikit-learn库实现鸢尾花分类 1、鸢尾花分类问题介绍
问题描述：一名植物学爱好者对发现的鸢尾花的品种很感兴趣。他收集了每朵鸢尾花的一些测量数据：花瓣的长度和宽度以及花萼的长度和宽度…
手把手教你学Python之文件操作（一文掌握文件操作）
目录
1、Python中文本文件的读写
2、Python中常用的文件与文件夹操作方法
3、Python中Excel文件的读写
4、Python读取Excel文件案例 为了保存数据，方便修改和分享，数据通常以文件的形式存储在磁盘等外部存储介质中。根据逻辑上编码不同可将文件大致…
使用Python编写一个多线程的12306抢票程序
国庆长假即将到来，大家纷纷计划着自己的旅行行程。然而，对于很多人来说，抢购火车票人们成了一个令人头疼的问题。12306网站的服务器经常因为流量高而崩溃，导致抢票变得越来越严重异常困难。 首先，让我们来了解一下1230…
Pandas数据分析系列9-数据透视与行列转换
Pandas 数据透视表 当数据量较大时，为了更好的分析数据特征，通常会采用数据透视表。数据透视表是一种对数据进行汇总和分析的工具，通过重新排列和聚合原始数据，可以快速获得更全面的数据洞察。数据透视表在Excel中也是经常使用的一个强大功能，在Pandas模块，其提供了pivot…
数据科学中的数据库简介
推荐：使用 NSDT场景编辑器 快速搭建3D应用场景 用于高效视频、AI 和图形的通用加速器
数据科学中的数据库简介
数据科学涉及从大量数据中提取价值和见解，以推动业务决策。它还涉及使用历史数据构建预测模型。数据库有助于对如此大量的数据进行有效的存…
1688-阿里巴巴批发网（获取优惠券信息）
item_get_app-获取1688app上原数据
为了进行电商平台 的API开发，首先我们需要做下面几件事情。
1）开发者注册一个账号
2）然后为每个1688 应用注册一个应用程序键（App Key) 。
3）下载1688 API的SDK并掌握基本的API基…
返回最大元素的索引 忽略数组中所有的NaN值 numpy.nanargmax()
【小白从小学Python、C、Java】 【计算机等级考试500强双证书】 【Python-数据分析】 返回最大元素的索引 忽略数组中所有的NaN值 numpy.nanargmax()
[太阳]选择题 请问代码中第一次执行语句的输出正确的是？ import numpy as np a np.array([0,np.nan,2]) print(&…
集约管控、按需分配：和鲸聚焦 AI for Science 科研算力高校调配
随着人类社会进入信息时代的智能化阶段，数据逐渐成为基础生产要素之一，而算力也因此成为重要生产力。《学习时报》9 月 3 日发文《算力为何如此重要》，文中指出，人工智能技术的突破与产业数字化应用对算力提出了更高的要求&#x…
数字孪生和元宇宙：打造未来的数字边界
数字孪生和元宇宙是近两年来被热议的两个概念，但由于技术的交叉两者也极易被混淆。本文希望带大家深入探讨一下这两者之间的关系，以及它们如何一起构建了数字时代的新格局。
1. 数字孪生的本质
数字孪生是一种虚拟模型，它通过数字手段对现实…
AdaBoost（上）：数据分析 | 数据挖掘 | 十大算法之一
⭐️⭐️⭐️⭐️⭐️欢迎来到我的博客⭐️⭐️⭐️⭐️⭐️ 🐴作者：秋无之地 🐴简介：CSDN爬虫、后端、大数据领域创作者。目前从事python爬虫、后端和大数据等相关工作，主要擅长领域有：爬虫、后端、大数据…
使用python利用merge+sort函数对excel进行连接并排序
好久没更新了，天天玩短视频了。现在发现找点学习资料真的好难。
10.1期间偶然拿到一本书 本书是2022年出版的，看了一下不错，根据上面的案例结合，公司经营整合案例，分享一下。
数据内容来源于书中内容，仅供…
TDengine OSS 与 qStudio 实现无缝协同，革新数据分析和管理方式
在数字化转型如火如荼的当下，海量爆发的时序数据处理成为转型成功的关键因素之一。为了帮助社区用户更好地进行数据分析和管理，丰富可视化解决方案的多样性，我们将开源的时序数据库（Time Series Database） TDengine OS…
手把手教你学Python之分支结构
目录
单向分支-if语句
双向分支-if...else语句
多分支-if...elif...else语句
分支结构的嵌套
条件表达式 任何一个复杂的系统都是由三种基本结构组成：顺序结构、分支结构、循环结构。其中顺序结构最简单，程序从上到下依次执行，就如同生活…
手把手教你学Python之常见运算符
目录
算术运算符
关系运算符
逻辑运算符
位运算符
成员运算符
身份运算符 前面给大家介绍了Python中的一些基本数据类型，这些数据之间如何进行运算呢？这就需要借助于一些运算符了，Python中提供了一些常见的运算符用于执行一些基本运算&…
【AI底层逻辑】——篇章3（下）：信息交换信息加密解密信息中的噪声
续：【AI底层逻辑】——篇章3（上）：数据、信息与知识&香农信息论&信息熵
目录
三、信息是如何交换的
1、互联网与信息交换
2、哈夫曼和有效编码
四、信息的加密与解密
1、密码学的发展
2、可以被公开的密钥
五、信息…
数据挖掘与数据分析之统计知识篇
1、自由度是什么？怎么确定？
统计学上，自由度是指当以样本的统计量估计总体的参数时，样本中独立或能自由变化的数据个数叫自由度。一般来说，自由度等于独立变量减掉其衍生量数。举例来说，变异数的定义是样本…
“Anscombe四重奏”数据集分析
“Anscombe四重奏”数据集线性回归分析数据组一数据组二数据组三数据组四本次分析分为四组数据，将对其分别分析 让我们先来看看这四组数据 ①
xy108.0486.95137.5898.81118.33149.9667.2444.261210.8474.8255.68
②
xy109.1488.14138.7498.77119.26148.166.1343.1…
hive基于新浪微博的日志数据分析——项目及源码
有需要本项目的全套资源资源以及部署服务可以私信博主！！！ 本系统旨在对新浪微博日志进行大数据分析，探究用户行为、内容传播、移动设备等多个方面的特征和趋势，为企业和个人的营销策略、产品设计、用户服务等提供有益的…
移动端数据可视化设计
在做APP设计的时候，难免会遇到一些需要展示数据的场景。使用传统的表格和文档展示数据不仅难看，也影响用户理解数据的含义。而数据可视化设计能将数据以更加直观的方式展现出来，使数据更加客观、更有说服力。
在移动应用中，数据可…
CentOS7 静默方式安装 Oracle19C
CentOS7 静默方式安装 Oracle19C 操作系统：CentOS7 Oracle： 19C 安装常用工具和依赖
yum -y install vim tar net-tools wget perl python3 readline* deltarpm python-deltarpm \zip unzip bc compat-libcap1* compat-libcap* binutils compat-libstdc…
《华为数字化转型之道》有什么不足之处？
读了几遍《华为数字化转型之道》，写了两篇笔记，也看了很多评论，优点就不说了，今天就来聊聊不足吧。1、总结精辟，但原创略弱华为在这本书写了很多方法论的东西，初看有点过瘾，但如果想着借鉴一下&…
数字化转型五步法与成功案例 by 傅一平
企业ERP（企业资源计划）系统是一个对企业资源进行有效共享与利用的系统，通过信息系统对信息进行充分整理、有效传递，使企业的资源在购、存、产、销、人、财、物等各个方面能够得到合理地配置与利用，从而实现企业经营效率…
自底向上，数字化转型的实践和思考 by 傅一平
现在讲数字化转型，大多是自顶向下的视角，但企业光提战略、目标是不够的，必须将任务分配到每个团队，落实到每个人每天的工作上，但这些工作会跟员工以前的工作不太一样，也就意味着团队和员工也需要跟着转型。…
数据资产治理：元数据采集那点事
正文开始一、介绍数据资产治理（详情见：数据资产，赞之治理）的前提要有数据。它要求数据类型全、量大，并尽可能多地覆盖数据流转的各个环节。元数据采集就变得尤其重要，它是数据资产治理的核心底座。在早…
女朋友嘲笑我没有艺术气息，我不服！！一气之下我用python画素描人像
女朋友嘲笑我没有艺术气息，我不服！！一气之下我用python画素描人像写在前面代码实现需要安装的库安装库命令程序源码总结写在前面
都说5月20日是网络情人节，作为程序员的李伟，平时忙着敲代码，难得有时间可以…
使用Python爬取一个网页并解析
使用Python爬取一个网页并解析1. 爬虫准备1.1. Python基础语法1.2. 爬取一个网页的整体思路1.2.1. 基础概念1.2.2. 简单思路1.2.3. 详细思路1.3. 需要安装的第三方库2. 代码示例2.1. 数据在目标url中2.2. 数据通过其他url返回3. 代码分析3.1. 数据在目标url中3.2. 数据通过其他…
转行学python前景和优势有哪些
正所谓“男怕入错行，女怕嫁错郎”，可想而知进入一个正确的行业有多重要。IT行业的高薪吸引着越来越多转行“入坑”，python作为目前的大势，是很多人转行的首选。为什么这么多的人都想转行学习python，python有哪些前景和…
Python语言前景真的很好？
自从人工智能火了以后，目前在很多行业内都在越来越多的应用Python，这就造成了大量的人才供需，也是很多人想学习Python的原因，咱们今天就先来谈谈Python主要的应用领域有哪些！话题开始之前，先来看看专业人士…
数据元、元数据、主数据、交易数据、主题数据、数据资源、大数据、数据湖等数据相关概念理解和总结
1、数据元 1.1 标准定义 [GB/T 18391.1－2002，定义3.14] ，用一组属性描述定义、标识、表示和允许值的数据单元，数据元由三部分组成：对象、特性、表示。
1.2 我的理解 数据元是组成实体数据的最小单元，或称原…
她说：千万别学Python！80%的程序员炸锅了：请正面刚！
这个时代，程序员究竟该学什么语言？
是Python 还是 Java ？还是C？
有人说应该选搭上大数据与AI的Python，但与国际技术社区上一片「形势大好」对比鲜明的是，国内技术圈却一直存在对Python，「力挺…
Python数据清洗工具之Numpy
1. Numpy(Numberical Python)
Anaconda中已经集成了NumPy，可以直接使用。如果想要自行安装的话，可以使用流行的Python 包安装程序 pip 来安装 NumPy，目前使用的是Anaconde的环境进行学习和使用这个库
1.1 这库的安装方法
CMD ：…
敏捷BI与数据驱动机制
数据驱动是一种文化 大数据这件事，整体上还是说的多一些，做的稍微少一点。大数据可以是荒凉高原上波澜壮阔的机房，也可以润物细无声般融入到日常生活和工作。换句话说，大数据应该是一种文化。 在个人层面，很多人对数字…
谈谈企业的数据工作！——企业的数据分析能力金字塔
写在前面
笔者写这篇文章的初衷源于两个故事：
故事一：一位在互联网行业做数据库架构多年的同事一起吃饭，问起我现在在说什么，我说自己在做医疗方面数据分析，同事笑，说：你有很多资源啊࿰…
一个大数据平台省了20个IT人力——敦奴数据平台建设案例分享
认识敦奴
敦奴集团创立于1987年，主营服装、酒店、地产，总部位于中国皮都-海宁。浙江敦奴联合实业股份有限公司（以下简称“敦奴”）是一家集开发、设计、生产、销售于一体的大型专业服装企业。敦奴拥有上海、海宁两个研发运营中心&…
企业构建大数据分析体系的4个层级
关于企业的大数据体系构建，可以分为4个层级，每个层级之间可以是递进的关系，虽然业务主导不同，但构建思路相通。 下面这张图，是本文的精华概括，接下来将一一展开与大家探讨。 一、数据基础平台 基础的数据平…
数据分析之Pandas的常见用法
一、生成数据表 1、首先导入pandas库，一般都会用到numpy库，
pd.read_csv(filename_path)：从CSV文件导入数据 pd.read_table(filename_path)：从限定分隔符的文本文件导入数据 pd.read_excel(filename_path)：从Excel文件…
人生抉择，“他”改变的不只是职业生涯
故事来源：帆软用户——星痕 星痕语：也许一个人最好的样子就是静一点 哪怕一个人生活 穿越一个又一个城市 走过一条又一条街道 仰望一片又一片天！ 我是星痕，22虚岁，在互联网行业已经工作两年了。或许对于我的年龄、…
人生抉择，“他”改变的不只是职业生涯
故事来源：帆软用户——星痕
星痕语：也许一个人最好的样子就是静一点 哪怕一个人生活 穿越一个又一个城市 走过一条又一条街道 仰望一片又一片天！
我是星痕，22虚岁，在互联网行业已经工作两年了。或许对于我的年龄…
BI分析受阻？FineBI推出SPA螺旋式分析新功能！
过去，企业级的数据分析通常会有这么几种场景，业务部门托信息部门分析数据，结果报表一出，唇枪舌剑争论你我高低，数据不准，指标不对。信息部门欠缺业务概念，业务部门不懂技术逻辑，数据…
十大最值得关注的国内大数据分析厂商
随着互联网和IT技术的推进，大数据的应用逐渐渗透到各行各业。尤其是数据体量大的互联网、金融、银行、制造行业。大数据正逐渐改变企业的运营模式，市场导向，进而惠及人们的生活。 “大数据”这一概念最早在国外被提及。之后国内外兴起了一系列…
数据分析平台搭建案例
如今，市场的变化越来越快，业务调整也越来越频繁，承载业务流程的信息化也在不断提升，选择一个能灵活应对需求的系统工具成了必需。 选择什么样的工具，如何应用？这里分享某保险公司的案例，从整合系…
新城控股：千亿目标下的炼数成金之道
本文是新城控股集团CIO罗艳兵在帆软2016百强地产CIO峰会上的演讲。 嘉宾介绍：罗总曾任职于日立咨询、AMT咨询和联想集团，曾作为深圳大运会赛事管理规划总设计师、上海世博会世博中心石材供料总负责人、联想集团SAP、 ERP、CRM、PLM、SCM子项目经理&#…
python数据分析：数据库基本操作（SQLite）
python数据分析：数据库基本操作（SQLite）
SQLite：
关系型数据库管理系统嵌入式数据库，适用于嵌入式设备SQLite不是C/S的数据库引擎集成在用户程序中实现了大多数SQL标准
连接数据库：
conn sqlite3.conn…
numpy常用统计方法
numpy常用统计方法
numpy常用统计方法： np.amin(), np.amax() np.ptp() np.percentile() np.median() np.mean() np.average() np.std(), np.var() np.sum()
np.amin()和np.amax()
numpy.amin() 计算数组中的元素沿指定轴的最小值
numpy.amax() 计算数组…
python量化投资（五）——从tushare读取指数信息（index_daily） 数据
具体注册tushre，获取token不多在这里介绍了，官网对操作及接口描述很清晰tushare官网地址tushare从tushare返回的数据是pandas.DataFrame数据类型，为了能够将数据写入数据库，需要使用numpy将其转换成列表，逐行写入使用n…
numpy修改数组形状
numpy修改数组形状
函数描述reshape不改变数据的条件下修改形状flat数组元素迭代器flatten返回一份数组拷贝，对拷贝所做的修改不会影响原始数组ravel返回展开数组
numpy.reshape 不改变数据条件下修改形状
numpy.reshape(arr, newshape, order‘C’)
arr 要修改形…
【数据分析与挖掘】数据分析学习及实践记录 | part 05-numpy读取本地数据和索引
有一个人，好久不更博，就没有动力学习。
今天继续，numpy的操作学习。
01numpy读取本地数据
介绍numpy之前，先介绍一下轴的概念。 我是个没有感情的截图机器吗？居然没有笔记一直放截图。
其实是因为老师就是在用图讲…
pandas 求两个文件的交集
1.
data1 pd.read_csv(aa.txt)
data1.columns [id, t1, t2]
data2 pd.read_csv(bb.txt)
data data1[data1[id].isin(data2[id])]
print(join_set_rate %.6f % (len(data) / len(data1)))
【数据分析与挖掘】数据分析学习及实践记录 | part 04-numpy数组
在跟上一小节最后一部分视频的时候，太困了。趴着睡了会儿。【41:51】第一个视频真长啊。
01数组的计算和数组的计算
老师先介绍了一下在jupyter 中，数组练习。 很快，我也跟上老师的练习，这部分之前在机器学习的课上有涉及到&…
【数据分析与挖掘】数据分析学习及实践记录 | part01-数据分析介绍和环境安装
ｐｙｔｈｏｎ入门部分学习完后，进阶部分的进度太慢了， 小姐姐还是嫌弃我的速度。分析了一下现在手头上的任务发现，需要爬取的初批数据下一步可能是手工处理，暂时进阶…
高效实现数据可视化呈现
现在数据分析越来越卷了。再也不是excel就能摆平的了。为什么，因为可视化！
举例说明一下：现在要对一家公司上半年的利润额进行分析，如果只是你分析的时候只能罗列数字的话，根本就没有办法吸引老板的注意，甚…
用什么来做用户行为分析？七个实用工具推荐给你
当企业进入数据化管理阶段之后，就不得不对用户进行行为数据分析，当然其他的包括用户画像、趋势分析等等，都是现在企业经常要进行的营销分析，因此选一个好的数据分析工具是很重要的。
而现在的数据分析工具越来越精细化࿰…
SQL进阶 - SQL的编程规范
性能优化是一个很有趣的探索方向，将耗时耗资源的查询优化下来也是一件很有成就感的事情，但既然编程是一种沟通手段，那每一个数据开发者就都有义务保证写出的代码逻辑清晰，具有很好的可读性。
目录
引子
小试牛刀
答案
引言
…
面经|快手经营分析二面
1.自我介绍 2.组织架构属于中台部门还是业务部门分析岗？ 3.组织里面有BP的角色吗？BP主要负责做什么？ 回答：分业务方向，没有BP 4.项目类和数据支持类的工作占比是都少？ 回答：项目类70%࿰…
相似与不同：数字孪生和元宇宙的对比
数字孪生和元宇宙是两个备受瞩目的概念，都在数字领域产生了巨大的影响。它们有一些相似之处，但也存在显著的不同。本文将介绍它们的相同点和不同点，以及它们在不同应用领域的前景。
1. 相同点
虚拟性质： 数字孪生和元宇宙都是虚…
京东数据平台：2023年服饰行业销售数据分析
最近看到有些消费机构分析，不少知名的运动品牌都把“主战场”放到了冲锋衣，那么羽绒服市场就比较危险了。但其实羽绒服市场也有机会点可寻。
先来说冲锋衣。的确，从今年的销售数据以及增长情况，冲锋衣的确会是今年冬天的大热门品…
Python数据分析实战-实现F检验（附源码和实现效果）
实现功能
F 检验（F-test）是一种常用的统计方法，用于比较两个或多个样本方差是否存在显著差异。它可以应用于多种场景，其中一些常见的应用场景包括： 方差分析（ANOVA）：F 检验在方差分…
【统计学概念】初学者指南：了解置信区间
一、说明 什么是置信区间？如何将概率转化成信心度？信心度如何去工作？这些初步的统计概念需要明晰，然后才能应用统计模型，然后是贝叶斯推理，我们将逐步深入这些概念。 二、总体与样本个体统计 总体是研究人…
企业网盘中支持在线编辑的有哪些选项？
企业网盘作为现代企业不可或缺的工具之一，为企业提供了便捷的文件存储和共享功能。而其中支持在线编辑的解决方案更是减少了对额外软件的依赖，使团队成员可以直接在浏览器中进行实时协作。
什么是在线编辑？
在线编辑是指用户无需下载文件&a…
Zoho WorkDrive荣获专业研究机构评定的“Leader”称号
近年，在云计算、大数据、移动互联网、社交所引领的数字化转型变革中，企业对于数字资产的保护和利用愈加重视。相较于结构化数据，企业对于非结构化数据（文档、图片、音视频等）管理的需求更强、难度更大。
同时…
虹科分享 | 智能驾驶数据融合的时间同步关键技术
文章来源：虹科自动驾驶 阅读原文：虹科分享 | 智能驾驶数据融合的时间同步关键技术 近年来，随着汽车电子系统的升级，人们对联网智能汽车的需求不断增长，高级驾驶辅助系统（ADAS）和自动驾驶技术正迅…
跬智信息（Kyligence）入选 IDC《中国数据智能市场生态图谱V4.0》
近日，IDC 咨询正式发布了《中国数据智能市场生态图谱V4.0》，该报告深入分析了当前中国数据智能市场的综合状况和市场格局。作为领先的大数据分析和指标平台供应商，跬智信息（Kyligence）凭借在 Data AI 领域的长期技术积…
【大数据实训】基于赶集网租房信息的数据分析与可视化(七)
温馨提示：文末有 CSDN 平台官方提供的博主 的联系方式，有偿帮忙部署 基于赶集网租房信息的数据分析与可视化
一、实验环境
（1）Linux： Ubuntu 16.04 （2）Python: 3.6 （3）…
从鸟瞰世界：倾斜摄影技术的地理信息之美
在当今数字时代，地理信息和地图数据的需求与应用已经成为我们生活的一部分。这些数据不仅在导航、地图应用中发挥着关键作用，还在城市规划、环境保护、农业、建筑和许多其他领域中至关重要。而倾斜摄影技术与可视化技术的结合，正为地理信息的…
Swift使用Embassy库进行数据采集：热点新闻自动生成器
概述
爬虫程序是一种可以自动从网页上抓取数据的软件。爬虫程序可以用于各种目的，例如搜索引擎、数据分析、内容聚合等。本文将介绍如何使用Swift语言和Embassy库编写一个简单的爬虫程序，该程序可以从新闻网站上采集热点信息，并生成一个简单…
BLUE引擎变量数据分析
今天跟大家说一下BLUE引擎的变量运用，以及使用中的小细节。大家在使用变量的时候，自定义变量不要以P、G、M、I、D、N、A开头。
变量与变量之间的常用格式:
SMALL M88 <$STR(G88)> ;检测私人变量M88，是否小于全局变量G88 LARGE M88 &l…
数据分析实战 - 2 订单销售数据分析（pandas 进阶）
题目来源：和鲸社区的题目推荐：
刷题源链接（用于直接fork运行 https://www.heywhale.com/mw/project/6527b5560259478972ea87ed
刷题准备
请依次运行这部分的代码（下方4个代码块），完成刷题前的数据准备
…
Smartbi携手某证券公司成功打造数据文化体系
以数据为抓手搭建数据体系，需要从业务运营的角度出发，借助工具方法，结构化、系统性地解决业务运营场景中的各种问题，不断优化和提升业务运营效率。数据体系、运营体系、工具方法和组织文化四位一体，自成体系࿰…
酷克数据发布HD-SQL-LLaMA模型，开启数据分析“人人可及”新时代
随着行业数字化进入深水区，企业的关注点正在不断从“数字”价值转向“数智”价值。然而，传统数据分析的操作门槛与时间成本成为了掣肘数据价值释放的阻力。常规的数据分析流程复杂冗长，需要数据库管理员设计数据模型，数据工程师进…
未来数字化转型发展的前景如何，企业又该怎么实现？
商业世界有一个认识，互联网只用看中国和美国，其他国家已经被远远甩在了后边，移动互联网的出现更是将互联网的跨地域、跨国、互联等属性发挥到了极致，让众多互联网巨头开启了争夺世界各国市场的脚步。
移动互联网的飞速发展以及物…
上海市道路数据，有63550条数据（shp格式和xlsx格式）
数据地址：
上海市道路https://www.xcitybox.com/datamarketview/#/Productpage?id391
基本信息.
数据名称: 上海市道路数据
数据格式: Shpxlsx
数据时间: 2020年
数据几何类型: 线
数据坐标系: WGS84坐标系
数据来源：网络公开数据
数据字段&am…
数据分析中实用的 Excel 函数，你都知道吗？
一、关联匹配类
1. VLOOKUP 功能：用于查找首列满足条件的元素。 语法：VLOOKUP（要查找的值，要在其中查找值的区域，区域中包含返回值的列号，精确匹配或近似匹配 – 指定为 0/FALSE 或 1/TRUE）。 …
B站数据分析，UP主粉丝画像如何看？
随着互联网的发展，在大数据时代的今天，越来越多的企业用它们来指导精准营销，数据资源成为各大公司竞相追逐的香饽饽，而对于短视频广告投放来说，了解账号的粉丝人群画像，就可以知道他们的喜好厌恶࿰…
Table.Group系列_第4参数为全局的情况下，利用第5参数进行分组汇总
原始数据： 部门与职位存在于同一列中 实现功能： 根据筛选条件，可对部门或职位进行统计汇总第一列列名根据筛选自动变更，显示当前统计的维度 实现方式：
1. 构建筛选器内容 在任意空白单元格内输入需要筛选的内容 2. 插入"组合框"控件，并进行相应设置 从开发工具…
天猫商品评论数据接口，天猫商品评论API接口，天猫API接口
天猫商品评论内容数据接口的步骤，但是可以提供淘宝商品评论内容数据接口的步骤：
授权获得淘宝开放平台API所需的权限。获取AppKey和AppSecret等认证信息。发送HTTP请求，获取所需评价信息。对获取到的评价信息进行处理和解析。结果处理&#…
【线下沙龙】低成本高效率构建您的业务系统
全球企业都在向数字化迈进，但在各类行业调查中表明，只有不到20％的前沿企业通过其数字化转型而获得了成功，大部分企业都将高昂的时间和成本花费在了数字化技术的实施和培训上面。很多企业在转型的过程中面临着众多挑战：…
京东运营数据分析：2023年中秋大闸蟹市场销售数据分析
双节也带不动大闸蟹市场？
早在放假前，各界消息都称今年是大闸蟹的丰收年。一方面，今年受到台风影响较少，整体气温适合大闸蟹生长；另一方面，蟹苗选育手段也在不断精进。因此今年大闸蟹产量预计会有明显提升…
BI零售数据分析：以自身视角展开分析
随着零售业务不断扩展，市场竞争不断加剧，各层级的销售管理人员都急需一张能快速查看销售数据分析报表，能从中知道自己管辖内的业务最近或过去的情况，并依次为依据科学优化销售管理措施。这就要求零售数据分析报表信息足够多、数据…
智慧应急三维电子沙盘系统
1 概述 深圳易图讯科技有限公司（www.3dgis.top）采用大数据、云计算、虚拟现实、物联网、AI等先进技术为支撑，以6博硕团队为核心，研发了智慧应急三维电子沙盘系统，成功案例100。该系统支持高清卫星影像、DEM高程数据、…
淘宝开放平台 API 获取淘宝天猫店铺订单接口
业务场景：作为全球最大的 B2C 电子商务平台之一，淘宝（天猫）平台提供了丰富的商品资源，吸引了大量的全球买家和卖家。为了方便开发者接入淘宝平台，淘宝平台提供了丰富的 API 接口，其中商品详情接…
举个栗子！Alteryx 技巧（6）：从 API 中提取数据
你听说过从 API 中提取数据吗？API 是指应用编程接口，是计算机之间或计算机程序之间的连接，它是一种软件接口，让不同的软件进行信息共享。对于很多数据分析师来说，他们常常需要从 API 中提取数据，那么如何快…
京东数据分析：2023年9月京东洗烘套装品牌销量排行榜！
鲸参谋监测的京东平台9月份洗烘套装市场销售数据已出炉！ 根据鲸参谋平台的数据显示，今年9月份，京东平台洗烘套装的销量为7100，环比下降约37%，同比增长约87%；销售额为6000万，环比下降约48%&#…
初始Pandas -＞ 数据缺失值处理
🐼
3.1初识pandas（显示excel前五条数据） 3.2创建Series对象 3.2.1手动设置索引 3.2.4Series的索引 3.3创建一个DataFrame对象 3.4导入外部数据 p59 1.使用read_csv 2.导入html时,需要网页一定具有table标签 3.5数据抽取 3.6数据的增加、修…
京东数据分析：2023厨房小电市场遇冷，空气炸锅等明星产品被抛弃
过去几年间，宅经济的爆发带火了酸奶机、煮蛋器、豆浆机、空气炸锅、养生壶等，一众外观小巧、功能丰富、价格相对便宜的厨房小家电。但随着年轻人走出家门回归工作岗位，厨房小家电们却步入了艰难时刻。 如今，厨房小家电们似乎正在经…
微店商品详情API接口(标题|主图|SKU|价格|库存..）
微店商品详情接口的应用场景有很多，以下为您推荐几种：
电商平台集成：如果想要实现商品查询、购买、支付等功能，提高自身平台的电商能力，可以将微店API接口集成到自己的电商网站或应用程序中。 第三方开发者插件&#…
阿里巴巴中国站item_search_img按图搜索1688商品（拍立淘） API 返回值说明
1. 商品API：提供了搜索、详情、评价等与商品相关的接口，可以通过关键词搜索商品，获取商品详情、销量等信息。 2. 店铺API：提供了店铺信息、店铺内商品等接口，可以查询店铺的基本信息、主营类目、评分等，还可…
三步，金蝶K3的数据可视化了
数据可视化的一大特点就是“一图胜千言”，没什么能比图表更直观展现数据的了。那，金蝶K3系统上那海量数据能不能也做成数据可视化报表？操作复杂吗，难度大吗？
换了别的软件来做，操作多、难度大是板上钉钉&a…
出海 SaaS 企业增长修炼手册2：Kyligence 落地 PLG 是如何避坑的？
在第一篇文章（点击阅读 👉 出海 SaaS 企业增长修炼手册：聊聊 PLG 的关键指标、技术栈和挑战）中，我们分享了 SaaS 企业在落地 PLG 战略中可能遇到的挑战以及相应的解决方案，今天我们将从 Kyligence 亲身实践…
大模型在数据分析场景下的能力评测
“你们能对接国产大模型吗？”
“开源的 LLaMA 能用吗，中文支持怎么样？”
“私有化部署和在线服务哪个更合适？” 自 7 月 14 日发布 AI 数智助理 Kyligence Copilot 后，我们收到了很多类似上面的咨询，尤其…
使用cannon.js创建3D物理仿真场景
本文将详细介绍使用cannon.js创建3D物理仿真场景的步骤和技巧。
一、cannon.js简介
cannon.js是一个开源的JavaScript物理库，用于实现3D物理仿真。它可以被用于游戏开发、机器人控制、交互式的3D应用以及其他需要物理交互的场景。
与其他物理库不同的是ÿ…
淘宝API接口（商品信息获取，订单管理，库存管理，数据分析和优化）
淘宝API接口可以用于许多业务场景，以下是一些常见的应用场景：
商品信息获取：通过淘宝API接口可以获取商品的详细信息，包括商品标题、价格、库存、销量、评价等数据。这些信息可以用于在自己的网站或应用程序中展示商品࿰…
京东平台数据分析：2023年9月京东空气净化器行业品牌销售排行榜
鲸参谋监测的京东平台9月份空气净化器市场销售数据已出炉！ 9月份，空气净化器的销售同比上年增长。根据鲸参谋平台的数据显示，今年9月，京东平台空气净化器的销量将近15万，同比增长约1%；销售额将近2亿元&…
洞察运营机会的数据分析利器
这套分析方法包括5个分析工具：
用“描述性统计”来快速了解数据的整体特点。用“变化分析”来寻找数据的问题和突破口。用“指标体系”来深度洞察变化背后的原因。用“相关性分析”来精确判断原因的影响程度。用“趋势预测”来科学预测未来数据的走势，
API商品数据接口调用实战：爬虫与数据获取
一、引言
在当今的数字化世界中，API（应用程序接口）已经成为获取数据的主要方式。通过调用API，我们可以轻松地获取到各种商品数据，为数据分析、商业决策等提供支持。本文将介绍如何使用爬虫技术调用API商品数据接口&am…
易点易动：引入二维码和移动技术，助力企业高效进行固定资产盘点
固定资产是企业重要的财务资源，而高效准确地进行海量固定资产盘点一直是企业管理的挑战。为了解决这一问题，易点易动固定资产管理系统引入了先进的二维码和移动技术。本文将详细介绍易点易动固定资产管理系统的二维码和移动技术，展示如何借助…
电商平台商品API接口知识小结
应用程序接口API（Application Programming Interface），是提供特定业务输出能力、连接不同系统的一种约定。这里包括外部系统与提供服务的系统（中后台系统）或后台不同系统之间的交互点。包括外部接口、内部接口…
2016年亚太杯APMCM数学建模大赛C题影视评价与定制求解全过程文档及程序
2016年亚太杯APMCM数学建模大赛
C题 影视评价与定制
原题再现 中华人民共和国成立以来，特别是政治改革和经济开放后，随着国家经济的增长、科技的发展和人民生活水平的提高，中国广播电视媒体取得了显著的成就，并得到了迅速的发展…
Crawler4j实例爬取爱奇艺热播剧案例
前言
热播剧数据在戏剧娱乐产业中扮演着着名的角色。热了解播剧的观众喜好和趋势，对于制作方和广告商来说都具有重要的参考价值。然而，手动收集和整理这些数据是在本文中，我们将介绍如何利用 Python 爬虫技术和 Crawler4j 实例来自动化爬取爱…
咕咕送书第三期 | 在网络安全(黑客)时代数据安全流通的未来趋势？
🎬 鸽芷咕：个人主页 🔥 个人专栏:《粉丝福利》 《C语言进阶篇》 ⛺️生活的理想，就是为了理想的生活! 文章目录 📋 前言数据安全流通的未来趋势？01 数据价值与产业崛起02 多数据技术融合创新发展03数字经济…
如何打破传统制造业信息孤岛，实现企业一体化决策管理
引言
如今传统制造业不再局限于单一化的产供销生产链，企业的业务系统覆盖面越来越广，为企业积累了海量的数据资产的同时，也给企业带来了许多问题。传统制造业内部人员数据整合和分析能力无法迎合瞬息万变的市场需求，给企业一体化…
玩转大数据可视化，推荐几个必学的工具！
如今，企业越来越重视数据分析给业务决策带来的有效应用，而可视化是数据分析结果呈现的重要步骤。而可视化技术/工具在国内国外也发展的相当成熟，很多都已经做成应用（比如可视化图表库，BI工具等等）ÿ…
企业如何选择数据分析架构？——谈谈3种架构的利弊
在之前的文章《讲透大数据，我只需要一顿饭》里，我用做饭这件大家身边的事情来介绍了大数据及数据分析工程，应该能够让大家对数据分析这件看上去很专业的行业有了一定的认识，很高兴的是文章也得到了很多数据圈专业人士的共鸣和互动…
秀一波酷炫可视化大屏！
开局一张图，社会人小猪佩奇镇楼！ 开局两张图，你永远无法想到的效果，竟然是用帆软大屏模板实现的！ 开局三张图，带自动播放效果及3D动画特效的数据可视化！ 开局五张图，离屏内容交互&am…
熟悉超声心动图对心脏功能的评估及超声心动图的正常值
创作者：炼丹兄（已授权）联系方式：cyx645016617
学习教材：《轻松掌握超声心动图》
1 左心室整体收缩功能评价
1.1 M型超声心动图测定
D为左心室短轴内径，假设左心室为立方体，左心室短轴为圆形…
python--Pandas高级处理
文章目录Pandas高级处理1. 高级处理-缺失值处理1.1 如何进行缺失值处理两种思路：如何处理nan不是缺失值nan，有默认标记的2. 高级处理-数据离散化one-hot编码&哑变量2.1 什么是数据的离散化2.2 为什么要离散化2.3 如何实现数据的离散化3. 高级处理-合…
Python--Pandas简单了解
文章目录Python--Pandas简单了解1. Pandas介绍1.1 Pandas介绍 - 数据处理工具1.2 为什么使用Pandas1.3 DataFrameDataFrame索引的设置2. 基本数据操作2.1 索引操作2.2 赋值2.3 排序3. DataFrame运算算术运算逻辑运算统计运算自定义运算4. Pandas画图pandas.DataFrame.plot5 文件…
特征工程：利用卡尔曼滤波器处理时间序列（快速入门+python实现）
卡尔曼滤波器
英文kalman filter这里介绍简单的，只有一个状态的滤波器卡尔曼滤波器经常用在控制系统中、机器人系统中，但是这里主要讲解如何用在AI的大数据分析预测中
为什么要用kalman filter处理时间序列
假设我们有100个时间点的数据，这…
概率统计Python计算：假设检验应用——多个总体同分布检验
设有vvv个总体X1,X2,⋯,XvX_1,X_2,\cdots,X_vX1,X2,⋯,Xv，从每个总体XjX_jXj中取得样本X1j,X2j,⋯,XnjjX_{1j},X_{2j},\cdots,X_{n_jj}X1j,X2j,⋯,Xnjj，j1,2,⋯,vj1,2,\cdots,vj1,2,⋯,v。将实数区间(−∞,∞)(-\infty,\infty)(−∞,∞)…
23个Python爬虫开源项目代码：爬取微信、淘宝、豆瓣、知乎、微博等
今天为大家整理了23个Python爬虫项目。整理的原因是，爬虫入门简单快速，也非常适合新入门的小伙伴培养信心，所有链接指向GitHub。
1、WechatSogou – 微信公众号爬虫
基于搜狗微信搜索的微信公众号爬虫接口，可以扩展成基于搜狗搜…
厉害了！20年【科比NBA】生涯|数据分析
使用工具:Ipython notebook
用到的库:Pandas,Matplotlib
1.数据来源
本次用到的数据来源于https://www.basketball-reference.com/players/b/bryanko01.html，其中可以选择多种形式，我选的是CSV格式，方便后面的数据分析,看看数据长什么样呢…
想获得网站访问者的联系方式吗，这篇文章全讲透了
随着大数据和人工智能的火爆，网络爬虫也被大家熟知起来。随之也出现一个问题，爬取隐私数据是违法的。其实，网络爬虫作为一门技术，技术本身是不违法的，且在大多数情况下，大家都可以放心的使用。但也有特殊情…
大数据辟谣：布洛芬用药不慎可能致死？如此标题党居心何在？
相信很多人看到一则“布洛芬用药不慎可能致死”的消息后，内心开始慌乱了。
（新闻来源：微博热搜排行榜）
毕竟健康是每一个人最关注的话题，而布洛芬也是很多人止痛（发烧头痛、喉咙痛、牙痛、月经痛等&#…
爬取与电话销售有关的微博
因为公司原因，需要写个微博爬虫，爬点数据做个分析来进行研究，哈哈 俗话说：360行，行行出状元 主要是我想看看微博上网友们对 电话销售 这行有什么样的评价 所以有了下面这么一个爬虫
1. 网页URL分析
这里我选择爬取的…
爬虫能做什么有意思的事？
小编最近了解到一款爬虫软件，沉迷在其中无法自拔，每天的日常就是“爬爬爬”，很多人并不了解爬虫，觉得爬虫没什么用，今天就让小编来告诉大家，爬虫能做什么有趣的事。 1、抓取各大电商网站商品销量信息及用户…
Python读取word中的图片并按照一定顺序进行命名
图片命名顺序在一张excel的第一列 先爬取word中的所有图片 接着创建图片序列名称字段 遍历文件夹中的图片进行重命名
import docx
import os, re
import xlwt
import openpyxl
from openpyxl import Workbook, workbook
from openpyxl import load_workbook
import zipfile
im…
Python对Excel中具体某几列进行数据预处理
1.利用python读取Excel中.xls文件中所有数据
#encodingutf-8
import xlrd
import xlwt
from xlwt import *fileName"test01.xls"
bkxlrd.open_workbook(fileName)
shxrangerange(bk.nsheets)
try:shbk.sheet_by_name("Sheet1")
except:print ("代码出…
Python探索性数据分析(EDA)统计数据和建模
探索性数据分析(EDA)
在统计学中，探索性数据分析是一种分析数据集以总结其主要特征的方法，通常使用统计图形和其他数据可视化方法。 可以使用或不使用统计模型，但主要是 EDA 用于查看数据可以告诉我们超出正式建模的内容，从而对比…
R数据图形分析及精神健康数据和健身数据可视化项目
R 基础知识 | 高级数据结构 | 读取数据到 R 中 | 统计图形 | 编写 R 函数 | 控制语句 | 循环到迭代 | 组处理 | 使用 dplyr 更快地进行组处理 | purrr 迭代 | 数据重塑 | Tidyverse 中重塑数据 | 处理字符串 | 概率分布 | 基础统计学 | 线性模型 | 广义线性模型 | 模型诊断 | 正…
R时间序列自回归模型和探索性数据分析
时间序列元素
对在不同时间点观察到的数据进行分析会导致经典统计数据未涵盖的独特问题。 采样数据随时间引入的依赖性限制了许多需要随机样本的传统统计方法的适用性。 对此类数据的分析通常称为时间序列分析。
为了提供描述时间序列数据元素的统计设置，数据被表…
Mixlab助力#伦敦设计周·可持续中国
1.伦敦设计周2.可持续中国线下展览3.可持续中国线上展览4.可持续中国活动4.1可持续中国4.2可持续科技艺术对谈5.伦敦设计周优质作品6.主办方WEVE20507.合作伙伴伦敦设计节是整个英国，乃至世界范围最有影响力的设计活动之一，今年是伦敦设计节 20 周年。20…
【读书笔记-＞统计学】07-01 离散型概率分布-几何分布概念简介
离散型概率分布
几何分布
一个情境：查德喜欢滑雪，但是技术并不好。从山顶滑至坡底，不出事故地概率是0.2（假设查德不会进步）。如果他打算不停尝试，直至大功告成。在取得第一次成功后，他将停止滑…
python量化投资（四）——从tushare读取股票交易信息（stock_daily ）数据
具体注册tushre，获取token不多在这里介绍了，官网对操作及接口描述很清晰tushare官网地址tushare从tushare返回的数据是pandas.DataFrame数据类型，为了能够将数据写入数据库，需要使用numpy将其转换成列表，逐行写入使用n…
python量化投资（二）——从tushare读取交易日信息（trade_cal）数据
具体注册tushre，获取token不多在这里介绍了，官网对操作及接口描述很清晰tushare官网地址tushare从tushare返回的数据是pandas.DataFrame数据类型，为了能够将数据写入数据库，需要使用numpy将其转换成列表，逐行写入使用n…
11种数据分析方法，别再说你不会了
这是精读《数据分析思维：分析方法和业务知识》的第2篇文章哈喽大家好，我是可乐，上周五的精读我们总结了常用的指标，以及如何选择指标，如何构建指标体系，如果你还没读，可以再看下：精读…
精读——数据分析思维：分析方法和业务知识（1）
今天和大家一起精读一本最近很火热的数据分析新书——《数据分析思维：分析方法和业务知识》，作者猴子数据分析学院。 全书分为两大块，第一块内容是方法论，也就是前三章，介绍了数据分析的方法、数据指标体系和一些基础…
112篇数据分析原创内容合辑
↑ 点击上方 “可乐的数据分析之路” 关注 星标 ~ 大概率每天早8点25更新 哈喽，大家好，我是可乐这是 可乐的数据分析之路 公众号112篇原创文章，内容涵盖Excel、SQL、Python、统计学、数据分析思维方法、读书笔记、笔试面试等内容࿰…
Seaborn 各种图形绘制
Seaborn是基于matplotlib的图形可视化python包。它提供了一种高度交互式界面，便于用户能够做出各种有吸引力的统计图表。
Seaborn是在matplotlib的基础上进行了更高级的API封装，从而使得作图更加容易，在大多数情况下使用seaborn能做出很具有…
SQL今日一题（21）：3个子查询
这是SQL今日一题的第21篇文章题目描述获取员工其当前的薪水比其manager当前薪水还高的相关信息，当前表示to_date9999-01-01,结果第一列给出员工的emp_no，第二列给出其manager的manager_no，第三列给出该员工当前的薪水emp_salary,第四列给该员…
python数据抓取与可视化post方法，网易云课堂人工智能
数据爬取
import json,time
from bs4 import BeautifulSoup
import requestsheaders{Content-Type: application/json,edu-script-token: 70d2f62d6584454f8b6378680f8f58fa,Host: study.163.com,Origin: https://study.163.com,Referer:https://study.163.com/category/40000…
强势回归，说说线性回归
高尔顿发现了“向平均回归”，一个总体中在某一时期具有某一极端特征的个体在未来的某一时期将减弱它的极端性，比如非常矮小的父辈倾向于有偏高的子代，而非常高大的父辈则倾向于有偏矮的子代。这些都是“回归效应”
之前也写过回归分析的文章…
大作业系列之体育课 | 从NBA中看篮球精神
文章目录【内容摘要】【关键词】【篮球运动发展史】（一）篮球运动的起源（二）篮球发展与球星【篮球精神】（一）团队精神（二）进取精神【曼巴精神】（一）科比的意志…
投资组合理论的简单介绍
现代投资组合理论有很多分支，如：投资组合理论、资本资产定价模型、套利定价模型、行为金融理论以及有效市场理论等。这些理论改变了人们对资产管理的传统认知，促使现代的资产管理更系统化和更科学化的发展。1952年，经济学家Markow…
Python的数据结构（上）
文章目录1 元组、拆分、tuple方法1.1 元组（tuple）：固定长度、不可改变的Python序列对象1.2 拆分元组，这个操作非常灵活！1.3 "舍弃”操作1.4 count：统计某个值出现频率2 列表、添加和删除、串联和组合、…
pandas中的DataFrame 的values 方法
文章目录1 DataFrame对象2 .values 属性3 .columns 列索引4 .index 行索引pandas 的DataFrame 对象，是机器学习人必备的知识！ 1 DataFrame对象
最常用的就是 pd.read_csv ， 可以返回一个 DataFrame 对象。
import pandas
data_pd pd.read_…
NLP中文数据分析干货！！！——针对Chinese分析模版、苏宁空调评论分析实战（提供数据）
NLP中文数据分析一、全套中文预处理代码去掉文本中多余的空格去除多余符号，保留指定中英文和数字繁体转简体分词去除停用词预处理封装二、统计词频词云图分析统计词频词云图分析三、情感分析SnowNLP情感分析实战四、主题分析LDA前数据预处理LDA主题模型五、实战演练…
【虹科车辆网络】logiRECORDER-谱写基于视觉的自动驾驶测试新篇章
随着人工智能技术的快速发展，自动驾驶技术也有了质的提升，尤其是基于视觉的自动驾驶技术在自动驾驶的解决方案中得到了广泛的应用，如车道线检测、车辆识别、行人识别等技术已经在自动驾驶领域逐渐普及。诸如特斯拉这种自动驾驶巨头都是极其青…
【工业数据处理】如何为您的业务融合边缘计算和云计算架构
就工业生态系统中的计算而言，企业将部署三个可用选项之一或将它们混合使用。这些计算选项是本地IT体系结构，云计算和本地云生态系统。尽管数据中心的位置将这三个选项区分开，但是它们可以处理来自集中式数据中心和网络的数据分析和计算。另一…
Python中的时间序列分析——带有许多例子的全面导读
时间序列是在一定时间间隔内被记录下来的观测值。这篇导读会带你走进python中时间序列上的特征分析的大门。
1.什么是时间序列？
时间序列是在一定时间间隔内记录下的观测值序列。
依据观测的频率，时间序列可以是按小时的，按天的࿰…
老程序员的经验分享：零基础如何更系统更轻松的学习Python
人生苦短，我用Python，为啥这么说，因为我们有个金句：“学完python，便可上天”。
废话不多说，相信很多人都听过之前的Python进入小学课本、Python进入浙江省高考等新闻，有这么多头衔加持的Python…
Python实现LRFM模型分析客户价值
作者：Dake1. 分析背景 这是一份某电商平台的销售数据，数据包含2010年4月22到2014年7月24的销售数据。分析该销售数据，可以发现客户价值。现利用KMeans聚类实现LRFM模型来分析客户的价值，便于客户分群，针对性推广&#…
Python数据分析：探索性分析
写在前面
如果你忘记了前面的文章，可以看看加深印象：Pandas数据处理Python数据分析实战：缺失值处理Python数据分析实战：获取数据
然后可以进入今天的正文
一、描述性统计分析
Excel里可以用【数据分析】功能里的【描述统计】功…
一份电商数据分析案例
作者：Dake1. 分析背景这是一份巴西Olist（2016年8月-2018年8月）电商数据平台的数据。这里只筛选了2017-2018年的数据来进行分析。分析该数据可以看出近两年的销售业绩，店铺的经营状况，客户的区域分布，客户的…
Python数据分析：缺失值处理
写在前面
上周我们读取完了数据（Python数据分析实战：获取数据），下面就要对数据进行清洗了，首先是对缺失值的处理。缺失值也就是空值，先找出来再处理。
查看缺失值
可以使用isnull方法来查看空值…
Python数据分析实战：缺失值处理
写在前面上周我们读取完了数据（Python数据分析实战：获取数据），下面就要对数据进行清洗了，首先是对缺失值的处理。缺失值也就是空值，先找出来再处理。查看缺失值可以使用isnull方法来查看空值，得…
Python数据分析实战：获取数据
这是 利用Excel学习Python 系列的第8篇文章 想用一个完整的案例讲解Python数据分析的整个流程和基础知识，实际上以一个数据集为例，数据集是天池上的一个短租数据集。
先来想一下数据分析的流程，第一步获取数据，因此本节内容就是获…
《赤裸裸的统计学》读后感
《赤裸裸的统计学》，作者[美]查尔斯韦兰，2013年出版，豆瓣评分8.1分，可以作为统计学入门读物很好的一本书，知识点浅显易懂，对小白非常友好，有统计专业知识的人可能会觉得干货略少。总的来说&…
为什么要学统计学：赤裸裸的统计学
《赤裸裸的统计学》，作者[美]查尔斯韦兰，2013年出版，豆瓣评分8.1分，可以作为统计学入门读物很好的一本书，知识点浅显易懂，对小白非常友好，有统计专业知识的人可能会觉得干货略少。总的来说&…
Python学习笔记（7）：数据框
前一篇文章提到了序列,可以理解为Excel里没有列名的一列数据,那么Excel里的由行列组成的表数据是如何对应到Python中的呢？就是今天要说的数据框：DataFrame。
它是由一组数据和一对索引（行索引和列索引）组成的二维数据结构&#x…
让图形变得精致：seaborn绘图基础
本文来自读者投稿，作者：黄同学学习Python中用seaborn绘图的技巧1、seaborn的优点它简化了复杂数据集的表示；可以轻松构建复杂的可视化，简洁的控制matplotlib图形样式与几个内置主题；seaborn不可以替代matplotlib&#…
如何制作高大上的图表
为什么你的报告中的图老板总是瞧不上，为什么我们觉得这图可以了，老板却总是不满意，不要你觉得，要老板觉得。 很多人有一个误区，就是分析很重要，展示不重要，这就好比你有满腔的热血、满腹的才华&…
数据分析，除了Excel透视表，还有什么工具？
数据分析，除了Excel透视表，还有什么工具？
就Excel而言，除了透视表，还有很多分析的利器，请听我缓缓道来 01 高级筛选
普通的筛选功能无法做到的可以使用高级筛选，高级筛选需要事先设置条件区域…
怎样绘制漂亮的统计图表｜不一样的折线图
Hello大家好，怎样绘制漂亮的统计图表系列又和大家见面啦！上一期 怎样绘制漂亮的统计图表｜柱状图的正确打开方式 讲了柱状图，这期我们来聊一聊折线图。上期在『早起python』与『可乐的数据分析之路』公众号给大家提供了本期的练习数…
Python数据结构：神奇的序列
写在前面Hello，大家好，我是可乐。这是Python数据分析系列的第5篇文章，今天要说的是数据结构中的序列（Series），Series是由一组数据和一组行索引构成的一维数组，可以理解为Excel里没有列名的一列数…
Python学习笔记（2）
写在前面
这节内容是python基础知识中的数据类型和运算符，可以回顾一下前两篇文章来复习一下：
利用Excel学习Python：变量
利用Excel学习Python：准备篇
本来想分开写的，但发现好像分不开，所幸内容也不多…
Python学习笔记（3）：列表
写在前面
这节内容是Python基础知识中的数据结构，没看过前面内容的童鞋可以复习一下：
从Excel的数据类型说Python
数据结构会分4个小节的内容来写，首先来认识第一种结构——列表。
列表（list），是用方括…
数据对比分析法，看这篇就够了！
任何事物都有对立面，站在不同的角度去分析问题，不仅是数据分析的方法，也是各行各业都会用到的思维模式。今天就来聊一下对比分析。01时间上的对比1纵比同一空间条件下，对不同时期数据的比较。如下图2018年1月到8月全国的订单数量柱…
数据分析中，为什么说Python比Excel更简单高效
在家办公的那段日子，原以为是快乐摸鱼的开始，可是问了一圈身边的朋友，基本都处于“007”的状态。好多次明明已经合上电脑了，微信上来个需求就得立马处理。
复工之后，也依然不能准时下班。有次临近下班时间，…
数据分析中的一些名词（更新中）
1. GMV：Gross Merchandise Volume，指网站的成交金额，包括付款金额和未付款。(就是下单的金额，不管有没有成功购买)
GMV 销售额 取消订单金额 拒收订单金额 退货订单金额
GMV虽然不是实际的交易数据，但同样可以作…
你还在为学什么焦虑吗？看企业级语言榜单，学最受欢迎编程语言
根据TIOBE和PYPL排行榜（反映编程语言热度）以及 Stack Overflow 开发人员调查报告，整理最受企业欢迎的十大编程语言，供想要转行编程或想学习新一门编程语言的小伙伴参考。 12月TIOBE榜单可见排名TOP 10的分别是Java、C、Python、C、…
2018年亚太杯APMCM数学建模大赛B题人才与城市发展求解全过程文档及程序
2018年亚太杯APMCM数学建模大赛
B题 人才与城市发展
原题再现 招贤纳士是过去几年来许多城市的亮点之一。北京、上海、武汉、成都、西安、深圳，实际上都在用各种吸引人的政策来争夺人才。人才代表着城市创新发展的动力，因为他们能够在更短的时间内学习…
2016年亚太杯APMCM数学建模大赛B题化学元素对变形钢筋性能的影响求解全过程文档及程序
2016年亚太杯APMCM数学建模大赛
B题 化学元素对变形钢筋性能的影响
原题再现 热轧带肋钢筋通常被称为变形钢筋，它主要用于钢筋混凝土构件的骨架，在使用中需要一定的机械强度、弯曲和变形性能、制造焊接性。钢中的化学成分是影响热轧钢最终组织性能的基…
数据分析和互联网医院小程序：提高医疗决策的准确性和效率
互联网医院小程序已经在医疗领域取得了显著的进展，为患者和医疗从业者提供了更便捷和高效的医疗服务。随着数据分析技术的快速发展，互联网医院小程序能够利用大数据来提高医疗决策的准确性和效率。本文将探讨数据分析在互联网医院小程序中的应用…
SQL中使用ROLLUP和CUBE函数轻松生成汇总行
在数据分析和报表制作中，通常需要对数据进行汇总和分组，我们常用的就是GROUP BY汇总数据，当我们想按照不同维度汇总时，往往需要编写多个GROUP BY预计，而借助ROLLUP 和 CUBE 函数可以一次性生成子总计和总计行ÿ…
SPSS两独立样本t检验
前言： 本专栏参考教材为《SPSS22.0从入门到精通》，由于软件版本原因，部分内容有所改变，为适应软件版本的变化，特此创作此专栏便于大家学习。本专栏使用软件为：SPSS25.0 本专栏所有的数据文件请点击此链接下…
2023年辽宁省数学建模竞赛B题思路详细分析
摘要略，2023年辽宁省数学建模竞赛B题代码和论文已经完成，代码为全部3问代码，论文包括摘要、问题重述、问题分享、模型假设、符号说明、模型的建立和求解（问题1无监督聚类模型的建立和求解，问题二有监督分类预测模型的建…
时间序列预测实战(十三)定制化数据集FNet模型实现滚动长期预测并可视化结果
论文地址->官方论文代码地址
官方代码地址->官方下载地址Github
个人修改代码地址-> 个人修改版本呢的下载地址CSDN
一、本文介绍
本博客将介绍一种新的时间序列预测模型——FNet，它通过使用傅里叶变换代替自注意力机制，旨在解决传统Transf…
2015年亚太杯APMCM数学建模大赛B题城市公共交通服务水平动态评价模型求解全过程文档及程序
2015年亚太杯APMCM数学建模大赛
B题 城市公共交通服务水平动态评价模型
原题再现 城市公共交通服务评价是城市公共交通系统建设和提高公共交通运营效率的重要组成部分。对于公交企业，管理和规划部门，传统公交车站、线路和换乘枢纽的规划数据只是基于主…
提高车联远控异常分析效率的设想
提高车联远控异常分析效率的设想
前言
随着汽车集成度、智能化、软件功能越来越丰富，用户车辆使用已不是传统的出行、驾驶等物理场景，更多的人与车的互动功能的场景。其中车联远控功能使用日益增多。技术人员开展排查车联远控问题时，往往需…
玩转视图变量，轻松实现动态可视化数据分析
前言
在当今数据驱动的世界中，数据分析已经成为了企业和组织中不可或缺的一部分。传统的静态数据分析方法往往无法满足快速变化的业务需求和实时决策的要求。为了更好地应对这些挑战，观测云的动态可视化数据分析应运而生。
在动态可视化数据分析中&…
时间序列预测实战(十四)Transformer模型实现长期预测并可视化结果（附代码+数据集+原理介绍）
论文地址->Transformer官方论文地址
官方代码地址->暂时还没有找到有官方的Transformer用于时间序列预测的代码地址
个人修改地址-> Transformer模型下载地址CSDN免费
一、本文介绍
这篇文章给大家带来是Transformer在时间序列预测上的应用，这种模型最…
我该如何入门Python机器学习?
我是在研一的时候开始学习机器学习的。相对于题主来说，我更是一窍不通，Python都没有一点点基础。总结一下我在学习Python的过程，以及自己在学习机器学习过程中的用到的优质资源，也总结一下我的学习心得。
一、怎么学习Python&…
python会计应用实操-企业收入与发票比对
案例：企业收入与开票
公司月底或一个季度盘点一下，收入账款与开票数额是否匹配。
使用工具：jupter lab和python
数据：
上海电子税务局已开票统计excel表
银行流水单excel表
编程思路：
两个excel对比金额&#x…
《深入浅出数据分析》读书笔记
最近看了head first系列，重读了《深入浅出数据分析》，发现这是一本很好的书，在思维上开阔的不错，通过案例培养数据思维，把思路讲的很清楚，现总结笔记如下： 一、数据分析引言：分解数据…
《谁说菜鸟不会数据分析——入门篇》读书笔记
读了《谁说菜鸟不会数据分析——入门篇》，做了一些总结如下：
一、数据分析那些事儿1、什么是数据分析数据分析指用适当的统计分析方法对收集来的大量数据进行分析，将它们加以汇总和理解并消化，以求最大化地开发数据的功能…
小于35岁是“人力资源”，大于35岁是“人力成本”？
春节过后，招聘就业市场暖流涌动。记者线下、线上探访各类招聘活动，发现不少企业招聘都要求“年龄限35岁以下”，有的甚至提出“员工90化”。 进一步调查发现，当下很多用人单位仍然热衷于收割“青春红利”，靠青壮年人力资…
是天才，也是疯子：美国14岁计算机少年不满资料收费，成为黑客
亚伦施瓦茨，一个在14岁时因电脑编程出名的天才，后来他却当了黑客，而他背后的故事让人感慨又难过。
2008年，他黑进了美国电子资料公共数据库，下载了2千万页的资料。 对于为什么下载这些资料，是因为他觉得各…
Python学还是不学？Python的前景和未来你可以拒绝吗？
前几天看到一条新闻，说是高中生课程里边开设python课程了，这小孩子都来抢占市场了，这就是打了许多人的脸，特别是已经毕业许多年或许正在学校的人，小孩子都作为标准的教材来学习了，作为过来人还有什么理由说…
pyecharts导演人物关系图
目录前言一、pyecharts是什么？二、操作步骤1.导入包2.数据预处理3.生成json数据信息4.生成json5.生成关系图数据集前言
帮别人做了一个小作业，需要根据豆瓣TOP250的电影信息，提取需要人物关联关系，并生成节点链接网格图绘制需要的…
数学建模常见的一些方法【05相关系数】
文章目录数学建模常见的一些方法1. 相关系数1.1 总体和样本1.2 总体皮尔逊Pearson相关系数1.3 样本皮尔逊Pearson相关系数1.4 相关性可视化1.5 关于皮尔逊 相关系数的一些理解误区1.6 对相关系数大小的解释1.7 描述性统计1.8 EXCEL的数据分析工具1.9 皮尔逊相关系数的计算1.10 …
如何利用大数据软件进行家政服务的选址要素收集与分析
如何利用大数据软件进行家政服务的选址要素收集与分析
家政服务系统的研究越来越受到社会的重视，具有非常重要的意义。选址是家政服务系统得以蓬勃发展的关键环节。选址中，社会效益和经济效益是非常重要的。市场上的商铺供应量持续上升，无论…
04_python数据分析之pandas
python数据分析之pandas1. 为什么要学习 pandas ？2. 什么是 pandas ？3. pandas 的常用数据类型 ？3.1 pandas之Series3.2 panda 之读取外部数据3.３ panda 之 DataFrame3.3.1 DataFrame创建3.3.2 DataFrame的基础属性和常用方法3.3.…
03_python数据分析之numpy
python数据分析之numpy1.什么是 numpy ？2. numpy 基础2.1 numpy 创建数组（矩阵）2.2 numpy 中常见的更多数据类型2.3 数据类型的操作2.4 数组的形状2.4 数组和数的计算2.5 广播原则2.6 轴（axis）2.7 numpy 读取数据2.8 n…
DevChat助手：在数据库及数据分析上面的应用实践
🏆作者简介，黑夜开发者，CSDN领军人物，全栈领域优质创作者✌，CSDN博客专家，阿里云社区专家博主，2023年6月CSDN上海赛道top4。 🏆数年电商行业从业经验，历任核心研发工程师…
C语言如何执行HTTP GET请求
在现代互联网时代，网络数据的获取和分析变得越来越重要。无论是为了研究市场趋势，还是为了收集信息进行数据分析，编写一个网络爬虫可以帮助我们自动化这一过程。在这篇文章中，我们将使用C语言和libcurl库来编写一个简单的网络爬虫…
一文详解如何从 Oracle 迁移数据到 DolphinDB
Oracle 是一个广泛使用的关系型数据库管理系统，它支持 ACID 事务处理，具有强大的安全性和可靠性，因此被广泛应用于各种企业级应用程序。但是，随着数据规模的增加和业务需求的变化，Oracle 的一些限制和缺点也逐渐暴露出…
没想到这么齐全！这份 Python 实战干货yyds
今天我分享一些Python学习神器资料，有需要的小伙文末自行免费领取。
1.200Python练手案例： 2.Python全套视频教程等： 3.浙大Python学习套装：
*
4.Python实战案例： 5.Pandas学习大礼包 6.学习手册大礼包
Python知识…
数字转型下的保险业：可视化大屏的光明未来
在当今不确定性充斥的世界中，保险行业扮演着关键的社会角色。无论是财产保险、健康保险还是生命保险，它们都提供了一种安全网，帮助个人和企业在不可预测的风险面前保护自己。然而，随着信息时代的来临，数据变得愈发重要…
2022年电工杯数学建模B题5G网络环境下应急物资配送问题求解全过程论文及程序
2022年电工杯数学建模
B题 5G网络环境下应急物资配送问题
原题再现： 一些重特大突发事件往往会造成道路阻断、损坏、封闭等意想不到的情况，对人们的日常生活会造成一定的影响。为了保证人们的正常生活，将应急物资及时准确地配送到位尤为重要…
BI零售数据分析，告别拖延症，及时掌握一线信息
在日常的零售数据分析中，经常会因为数据量太大，分析指标太多且计算组合多变而导致数据分析报表难产，零售运营决策被迫拖延症。随着BI数据可视化分析技术的发展，智能化、可视化、自助分析的BI数据分析逐渐成熟，形成一套…
python 曲线拟合应用之能量滤光片角度关系
整体应用思路 原始数据采集样本数据选取样本拟合计算，输出模型参数叠加显示原始数据，样本数据，模型曲线# This is a sample Python script.# Press Shift+F10 to execute it or replace it with your code.
# Press Double Shift to search everywhere for classes, files, …
SPSS单样本t检验
前言： 本专栏参考教材为《SPSS22.0从入门到精通》，由于软件版本原因，部分内容有所改变，为适应软件版本的变化，特此创作此专栏便于大家学习。本专栏使用软件为：SPSS25.0 本专栏所有的数据文件请点击此链接下…
CCF_A 计算机视觉顶会CVPR2024投稿指南以及论文模板
目录
CVPR2024官网：
CVPR2024投稿链接： CVPR2024 重要时间节点：
CVPR2024投稿模板:
WORD:
LATEX : CVPR2024_AuthorGuidelines
CVPR2024投稿Topics： CVPR2024官网：
https://cvpr.thecvf.com/Conferences/2024CV…
【生物信息学】单细胞RNA测序数据分析：计算亲和力矩阵（基于距离、皮尔逊相关系数）及绘制热图（Heatmap）
文章目录 一、实验介绍二、实验环境1. 配置虚拟环境2. 库版本介绍 三、实验内容0. 导入必要的库1. 读取数据集2. 质量控制（可选）3. 基于距离的亲和力矩阵4. 绘制基因表达的Heatmap5. 基于皮尔逊相关系数的亲和力矩阵6. 代码整合 一、实验介绍 计算亲和力…
Pandas数据分析开发实战博文集锦
本文为最近年来使用Pandas进行数据分析的实践笔记集锦，为了便于博主与爱好者查找相关内容，以及学习、应用过程，进行了初步简单梳理。内容包括：数据分析处理、可视化分析、数据库相关（ClickHouse、MongoDB、CSV、MySQL、…
02_python数据分析之matplotlib
python数据分析之matplotlib1、什么是matplotlib？2、matplotlib 基本要点3、matplotlib 的散点图、直方图、柱状图3.1 对比常用统计图3.2 绘制散点图3.3 绘制条形图3.4 绘制直方图4、更多的画图工具上一篇：
python数据分析基础介绍1、什么是matplotlib&a…
Python基础--数据类型
一、数据类型是什么鬼？ 计算机顾名思义就是可以做数学计算的机器，因此，计算机程序理所当然地可以处理各种数值。但是，计算机能处理的远不止数值，还可以处理文本、图形、音频、视频、网页等各种各样的数据，不…
GIS杂记（二）：Arcgis对采样点进行裁剪，获取指定区域内的采样点
有时候需要对栅格数据进行采样处理，如果采样点过多则会使得采样时间过长，今天在进行数据采样时，使用了1km*1km的渔网建立的采样点，大概有1百万个点，程序运行时间大概4个小时，但是其中有绝大部分数据都是空值…
pandas空值检测
NaN（Not-A-Number）在pandas里用作空值（NA），并且有函数 isna 和 notna 可以跨 dtypes 使用来检测 NA 值。
# 不要用是否等于None来判断pandas里值是否为空。
pd.NANone
False
pd.isna(pd.NA)
True
pd.isna(None)
True
…
概率统计Python计算：连续型自定义分布数学期望的计算（一）
对自定义的连续型随机变量XXX，设其概率密度函数为f(x)f(x)f(x)，我们可以定义一个概率密度为f(x)f(x)f(x)的rv_continuos的子类（详见博文《自定义连续型分布》）然后调用该子类对象的expect函数计算指定函数g(X)g(X)g(X)的数学期望E…
概率统计Python计算：假设检验应用——联列表中相互独立性的检验
设总体的所有个体可按两种不同的标志进行分类，常常希望通过随机抽样检验这两种标志是否相互独立。为解决此类问题，通常将取得的样本(X1,X2,⋯,Xn)(X_1,X_2,\cdots,X_n)(X1,X2,⋯,Xn)按第一种标志分成uuu个类，按第二种标志分成vvv个类&a…
利用Python+SQL，解决80%以上的数据分析问题！
如果有人问：2021年最有“钱”途的岗位是什么？数据分析一定榜上有名。2021 年起，有一件事已是不可逆的趋势 ——未来商业世界里，没有一家公司不是数据公司。任何一家公司，都需要拥有驾驭数据的能力，学会用数…
有了这个Python程序后，干完饭不用再花时间算账了
大家好，我是翔宇！ 今天带大家实现一个算账自动化，由于疫情，公司员工吃饭等着食堂送到工位，然后由我来帮大家订餐，每个周五由我来算账，再收大家的饭钱。 文章目录1.导入数据2.采用pandas处理数据…
数据分析 一文搞懂什么是RFM模型
数据分析 | 一文搞懂什么是RFM模型
想知道你在电商平台心里的地位吗？学会RFM分析法，你自然知道
大家好，我是翔宇！今天我们来了解做数据分析一定要会的分析方法之一----RFM分析法。
相信大家在前天的双十一一定也多多少少贡献了…
模型评估，混淆矩阵到底是个什么东东？
混淆矩阵到底是个什么东东？
大家如果学过机器学习的知识，应该见过这样一个东西 就是这样一个东西，用处可大了。现在我们一起探索这个框框的具体含义（仅在机器学习使用方面）。
1.预备知识
分类模型的评估
请大家回想…
三、机器学习基础知识：Python常用机器学习库（SKlearn）
文章目录 1、Scikit learn简介2、主要步骤3、数据预处理4、模型选择与算法评价 1、Scikit learn简介
Scikit learn 的简称是 SKlearn，专门提供了 Python 中实现机器学习的模块。Sklearn 是一个简单高效的数据分析算法工具，建立在 NumPy、SciPy和 Matplo…
Pandas分组聚合_Python数据分析与可视化
Pandas分组聚合 分组单列和多列分组Series 系列分组通过数据类型或者字典分组获取单个分组对分组进行迭代 聚合应用单个聚合函数应用多个聚合函数自定义函数传入 agg() 中对不同的列使用不同的聚合函数 分组聚合的流程主要有三步：
分割步骤将 DataFrame 按照指定的…
调用API接口获取淘宝关键词商品数据：详细指南与代码实践
一、前言
在电商领域，获取关键词商品数据对于市场研究、竞品分析以及营销策略的制定具有重要意义。淘宝作为中国最大的电商平台之一，提供了丰富的API接口供开发者使用。本文将详细介绍如何调用淘宝API接口来获取淘宝关键词商品数据，并给出相…
京东大数据平台（京东数据分析）：9月京东牛奶乳品排行榜
鲸参谋监测的京东平台9月份牛奶乳品市场销售数据已出炉！ 9月份，牛奶乳品市场销售呈大幅上涨。鲸参谋数据显示，今年9月，京东平台牛奶乳品市场的销量为2000万，环比增长约65%，同比增长约3%；销售额为…
利用MySQL玩转数据分析之基础篇
知识无底，学海无涯，到今天进入MySQL的学习4天了，知识点虽然简单，但是比较多，所以写一篇博客将MySQL的基础写出来，方便自己以后查找，还有就是分享给大家。
1、SQL简述 1）SQL的概述 S…
国家数据局正式揭牌，数据专业融合型人才迎来发展良机
摘要：新华社北京10月26日电 《中国证券报》26日刊发文章《国家数据局揭牌 数据要素产业进入加速发展期》。文章称，10月25日，国家数据局正式揭牌。业内人士认为，这标志着我国数字经济发展新阶段的开始，预计数据要素配套…
数据分析相关知识整理_--秋招面试版
一、关于sql语句(常问）
1）sql写过的复杂的运算
聚合函数，case when then end语句进行条件运算，字符串的截取、替换，日期的运算，排名等等；行列转换；
eg：行列转换
SELE…
SPASS教程-入门
常用的统计工具
EXCEL 严格说来并不是统计软件，但作为数据表格软件，有一定统计计算功能。对于简单分析，Excel还算方便，但随着问题的深入，Excel就不那么“傻瓜”，需要使用函数，甚至根本没有相应…
2023年辽宁省数学建模竞赛C题用科幻思维研究智能化战争指挥决策
2023年辽宁省数学建模竞赛
C题 用科幻思维研究智能化战争指挥决策
原题再现： 随着人工智能技术的迅猛发展，战争形态和作战手段的变革是军事领域智能化发展的关键。伴随着智能化战争的到来，“大狗”机器人、“捕食者”无人机、“震网”病毒攻…
领导说，效率越高的人，越擅长数据可视化
领导说效率越高的人，就越擅长数据可视化，因为他们总能找到操作简单、指标计算又快又准、分析效率极高的数据可视化工具，比如说奥威BI数据可视化工具。
奥威BI数据可视化工具，集齐一个高效BI数据可视化工具的五大使用优点…
SPASS图表的制作
基础条形图搭建
打开数据集 变量设置 点击图形->图形构建器，确认 然后设置标题 最终结果展示如图： 自我构建条形图 展示的结果如下：
各省市90米分辨率DEM数据，多图可下载
之前给大家推了30米分辨率dem数据，有些小伙伴反应也需要90米的，于是今天就给大家推荐一个新数据 —— 各省市90米分辨率DEM数据！
各省市90米分辨率DEM数据广泛应用于国土资源调查、水利水电工程、地质灾害预警、城市规划等领域，对…
指标体系：洞察变化的原因
一、指标概述
指标体系是指根据运营目标，整理出可以正确和准确反映业务运营特点的多个指标，并根据指标间的联系形成有机组合。 指标体系业务意义极强，所有指标体系都是为特定的业务经营目的而设计的。指标体系的设计应服从于这种目的&#x…
概率统计Python计算：假设检验应用——分布拟合检验
对来自总体XXX的样本X1,X2,⋯,XnX_1,X_2,\cdots,X_nX1,X2,⋯,Xn，及给定的显著水平α\alphaα检验假设H0:X的分布函数为F(x)(H1:X的分布函数不是F(x)).H_0:X\text{的分布函数为}F(x)(H_1:X\text{的分布函数不是}F(x)).H0:X的分布函数为F(x)(H1:X的分布函数…
【数据分析实战】利用python数据清洗后基于机器学习(GBDT和Xgboost算法)对房价预测
利用python数据清洗后基于机器学习GBDT和Xgboost算法对房价预测导入需要的类库导入数据简单查看数据结构数据清洗查看数据缺失情况删除缺失数量大于15%的特征维度类别型数据处理情况1用众数填充情况2用新的类别None代替数值类型数据处理情况1用0填充情况2用None代替检查是否还有…
18个常见的数据分析面试题-概率统计类
总结了一些常见的概率与统计类的数据分析面试题，不定期更新…… 随机变量的含义 一个随机事件的所有可能的值X，且每个可能值X都有确定的概率P，X就是P(X)的随机变量。比如掷骰子中出现的点数 随机变量和随机试验间有什么关系 随机试验…
泰坦尼克号数据分析案例实战
这是一个很经典的案例，很多博主都写过，对，就是它：泰坦尼克号生存率的分析，它是kaggle上的一道题，通过船上乘客的信息分析和建模，预测哪些乘客得以生还。
我们就非常粗暴地拿这个数据集做一个简…
用Excel做直方图（2）：频率分布直方图
一、什么是直方图
1、定义
直方图是一种条形图，是以组距为底边、以频数为高度的一系列连接起来的直方型矩形图 2、相关概念
组数：在统计数据时，把数据按照不同的范围分成几个组，分成的组的个数称为组数。
组距：每一…
用Excel做回归分析
Excel数据分析工具库是个很强大的工具，可以满足基本的统计分析，这里介绍用Excel数据分析工具库中的回归做回归分析。本文仅作为学习笔记之用，欢迎各位交流指正。 本节知识点： Excel数据分析工具库—回归 线性回归和非线性回归 简…
在私企有多少人能工作到退休？
你好，我是可乐
在上一篇文章中 中国月入过万的人多不多 有小伙伴留言，希望统计下员工在私企做到退休的比例。
今天就来聊聊这个问题
因为私企在我国发展壮大的时间短，企业自身寿命短，人员流动性也大，所以要系统地回…
学会就能效率翻倍的数组公式，到底怎么用？
↑ 点击上方 “可乐的数据分析之路” 关注 星标 ~ 大概率每天早8点更新 你好，我是可乐Excel的数组公式很好用，能解决很多普通公式解决不了的问题，因此这篇文章就来聊聊数组公式，也是填上篇文章的坑Excel里关于if的9个函数&#…
赋能智慧金融，百度智能云喜提五大金融奖项！
喜提五大金融奖项，Word 百度智能云，厉害了。五大奖项充分彰显了百度智能云在金融领域以客户为中心，以智能化为引擎，助力金融客户数字化转型的实力；也再次印证了百度智能云在智慧金融领域的领先地位。究竟有哪些大奖&am…
产品升级｜8月新品不断，超多惊喜来袭！
8月百度举办了 “百度世界2021”大会，展现了百度在产业智能化方面的最新成绩，并发布了百度大脑7.0。智能云“云智一体”能力再获升级，为企业数字化转型提供安全稳定、弹性灵活的数字化底座，助力企业数字化转型和智能化升级一步到位…
如何实现害虫识别和牛场24小时无人监控？AI+农业话题咱们唠一唠
写在篇头：是时候，关注智慧农业这条“难且正确”的路了。在不断变化、机遇与危机并存的商业社会中，农业一直算不上“热点”。但伴随国务院下发的关于农业的一号文件，及疫情黑天鹅引发的持续影响。农业的颠覆和重构正在形成一个产业…
13万字原创文档免费分享，可乐的数据分析学习宝典
哈喽大家好，我是可乐其实这段时间在整理自18年至今写过的数据分析文章，不整理不知道，一整理吓一跳，好家伙，13万字，都快成一本书了，于是就干脆整理成了pdf的形式，内容涵盖：…
精读4：一个和钱打交道的数据分析行业
这是精读系列的第4篇文章 哈喽，大家好，我是可乐
继前3篇精读《数据分析思维：分析方法和业务知识》 精读3：关于电商数据分析，你知道多少 精读2：11种数据分析方法，别再说你不会了 精读1ÿ…
关于电商数据分析，你知道多少
↑ 点击上方 “可乐的数据分析之路” 关注 星标 ~ 大概率每天早8点25更新 这是精读系列的第3篇文章哈喽，大家好，我是可乐，今天是精读《数据分析思维：分析方法和业务知识》的第三篇文章，对应这本书的第345章ÿ…
有哪些值得推荐的数据可视化工具？(文末送书)
↑ 点击上方 “可乐的数据分析之路” 关注 星标 ~ 大概率每天早8点25更新 哈喽，大家好，我是可乐今天来聊聊有哪些值得推荐的数据可视化工具？哦对了，今天还是圣诞节，周五，老规矩，送书ÿ…
如何进行数据图形化？
上一小节内容 简单地聊聊统计学 里提到了数据类型，那么这一节就要针对不同类型的数据说一说数据图形化的展示，对定性数据主要做分类，对定量数据则主要在分组。1、定性数据的图示方法 不管是定性数据还是定量数据，最好的整理方法都…
dataframe多级索引_多索引/多级/高级索引dataFrame | 熊猫数据框
dataframe多级索引MultiIndex dataFrame (MultiIndex dataFrame) import numpy as npimport pandas as pdfrom numpy.random import randn# create multi indexoutside [G1,G1,G1,G2,G2,G2]inside [1,2,3,1,2,3]# returns list of tupleshier_index list(zip(outside, insid…
红包抽奖+送书，快来参与！
Hello，各位小伙伴，端午节快乐呀，端午节给大家送上3本书外加一个抽奖红包。送什么书要送给大家3本书，先来看看是哪3本，后面会奉上获取的方式。NO.1 赤裸裸的统计学 先说书吧，第一本是我曾经写过的读后感&…
SQL今日一题（3）：内连接
这是SQL隔日一题的第3篇文章 题目描述
查找各个部门当前(dept_manager.to_date9999-01-01)领导当前(salaries.to_date9999-01-01)薪水详情以及其对应部门编号dept_no
(注:请以salaries表为主表进行查询，输出结果以salaries.emp_no升序排序，并且请注意输…
数据分析应关注AARRR模型的哪些指标
AARRR模型就是
Acquisition(获取)Activation(活跃)Retention(留存)Revenue(收益)Refer(传播)
这5个单词的缩写，对应用户生命周期中5个重要的环节，其实就是一个漏斗模型，每一个环节要怎么做不是我们讨论的重点，这篇文章是要来梳理…
Elastic Stack之应用系统日志结构化
系列文章目录 Elastic Stack之日志收集Logstash Elastic Stock之日志收集：优化篇 Elastic Stack之应用系统日志结构化系列文章目录前言环境Logstash filter（筛选）Grok 过滤器插件Grok 基础知识自带的grok 方法配置pipelinepipeline 配置在Kib…
《深入浅出数据分析》读后感
好久没有更新读书系列的文章了，今天推荐的这本《深入浅出数据分析》是一本非常适合数据分析行业入门的读物，以章回小说的方式由浅入深地讲述数据分析从业人员要用到的方法，从实际案例出发，告别晦涩难懂的概念。文章末尾有关于这本…
182_Power BI 使用 DAX 按照先进先出原则计算毛利润
182_Power BI 使用 DAX 按照先进先出原则计算毛利润
一、背景
在笔者以往的文章中也有先进先出的案例，可以参考(https://jiaopengzi.com/?s%E5%85%88%E8%BF%9B%E5%85%88%E5%87%BA)。
今天我们来看一个网友提出的问题，
先进先出的原则，入…
技术文章 | 大数据时代_如何利用数据来提升设计？
本文来源于阿里云-云栖社区，原文点击这里。 什么是数据？ 我们需要不拘一格的自主权，和我们考虑的数据一样。对我们来说，这不仅仅是数字，在我们看似平常的一些数据，甚至能让传统数据科学家屈服。 举个例子&a…
Python装饰器、生成器、内置函数、json
这周学习了装饰器和生成器，写下博客，记录一下装饰器和生成器相关的内容。 一、装饰器 装饰器，这个器就是函数的意思，连起来，就是装饰函数，装饰器本身也是一个函数，它的作用是用来给其他函数添加…
技术文章 | 《大数据分析原理与实践》
本文来源于阿里云-云栖社区，原文点击这里。 本书的缘起与成书过程 大数据经过分析能够产生高价值，这无疑已在大数据火爆的今天成为共识，从而使得大数据分析在 “大数据” 涉及的领域（如工业、医疗、农业、教育等）有了广…
Apriori算法与项目实战
Apriori算法与项目实战1、关联分析概述2、Apriori算法3、使用Apriori算法实现课程关联分析上一篇：
人工神经网络1、关联分析概述
关联分析 Apriori关联分析算法概述
2、Apriori算法
Apriori算法总结
3、使用Apriori算法实现课程关联分析
# -*- coding: utf-8 -…
给numpy.array增加维度
在一些数据结果的处理中，我们需要对numpy.array进行升维和缩维的处理。
利用[None] 利用numpy.expand_dims()函数
该函数需要指定扩展的坐标序号（0，1，3），其中最后一个坐标轴可以用-1表示。
利用sque…
2023年眼镜行业分析（京东眼镜销量数据分析）：市场规模同比增长26%，消费需求持续释放
随着我国经济的不断发展，电子产品不断普及，低龄及老龄人口的用眼场景不断增多，不同年龄阶段的人群有不同的视力问题，因此，视力问题人口基数也随之不断加大，由此佩戴眼镜的人群也不断增多。 同时，…
“位不配财”？程序员兼职，稳妥挣钱才是王道！
一、配不上
戏称程序员为“码农”，一年到头，像那地里的老黄牛和勤勤恳恳的老农民。
又像极了那工地上的农民工，天天搬砖，苦得嘞。 作为推动时代进步的得力干将，工作量自然是不容小觑。说程序员不加班都没人信&#x…
centos 搭建 zookeeper 高可用集群
zookeeper-ha
主机名IP地址spark01192.168.171.101spark02192.168.171.102spark03192.168.171.103
1. 升级内核和软件
yum -y update2. 安装常用软件
yum -y install gcc gcc-c autoconf automake cmake make \zlib zlib-devel openssl openssl-devel pcre-devel \rsync op…
PyGWalker ：数据分析中最优秀工具库！
假设你在 Jupyter Notebook 中有一堆数据需要分析和可视化。PyGWalker 就像一个神奇的工具，使这一切变得非常容易。它接受你的数据并将其转换成一种特殊的表格，你可以像使用 Tableau 一样与之交互。
你可以通过视觉方式探索数据，进行互动&am…
【Python】数据分析案例：世界杯数据可视化 | 文末送书
文章目录 前期数据准备导入数据 分析：世界杯中各队赢得的比赛数分析：先打或后打的比赛获胜次数分析：世界杯中的抛硬币决策分析：2022年T20世界杯的最高得分者分析：世界杯比赛最佳球员奖分析：最适合先击球或追…
【Python】重磅！这本30w人都在看的Python数据分析畅销书更新了！
Python 语言极具吸引力。自从 1991 年诞生以来，Python 如今已经成为最受欢迎的解释型编程语言。 【文末送书】今天推荐一本Python领域优质数据分析书籍，这本30w人都在看的书，值得入手。 目录 作译者简介主要变动导读视频购书链接文末送书 pan…
数据分析指标体系的构建
指标体系是什么？ （S1）为了用量化方式准确描述场景，提出一系列的指标。（S2）将指标有系统地组织起来，形成的逻辑体系 指标体系 指标 体系 单独的几个指标不能称之为指标体系
如何评价指…
从替代走向引领，永洪科技迈向全球化
对于数据分析领域而言，这是一个最好的时代。
《全球数字经济白皮书（2023年）》介绍，2016年-2022年，中国数字经济年均复合增长率为14.2%，数字经济发展增速和规模兼具。随着数字基础实施持续夯实、数字应用不…
箱线图(boxplot)
箱线图 boxplot 简述原理绘制方法python - matplotlib加载功能模块加载数据绘制boxplot python - seaborn加载功能模块加载数据绘制boxplot R - ggplot加载功能模块加载数据绘制boxplot 简述
因图形形状如箱子而得名。箱线图常用于展示一组连续型数据的分散情况。学术界普遍认…
平安人寿基于 Apache Doris 统一 OLAP 技术栈实践
导读：平安人寿作为保险行业领军企业，坚持技术创新，以数据业务双轮驱动的理念和更加开放的思路来应对不断增长的数据分析和应用需求；以深挖数据价值、保障业务用数效率为目标持续升级大数据产品体系。自 2022 年起平安人寿开始引入…
推荐这款机器学习的特征筛选神器！
大家好，特征选择是机器学习建模流程中最重要的步骤之一，特征选择的好坏直接决定着模型效果的上限，好的特征组合甚至比模型算法更重要。除了模型效果外，特征选择还有以下几点好处： 提高模型性能并降低复杂性（…
数据分析实战 | 逻辑回归——病例自动诊断分析
目录
一、数据及分析对象
二、目的及分析任务
三、方法及工具
四、数据读入
五、数据理解
六、数据准备
七、模型训练
八、模型评价
九、模型调参
十、模型预测 一、数据及分析对象
CSV文件——“bc_data.csv”
数据集链接：https://download.csdn.net/d…
Python统计分析
描述性统计偏度和峰度累计值假设检验和区间估计示例1假设检验置信区间示例2假设检验置信区间描述性统计# 导入相关的包
import pandas as pd
import numpy as np
import matplotlib.pyplot as plt均值，标准差，分位数，最大，最小值d…
Matlab数据分析与多项式计算
相关课程可以参考：中南大学《科学计算与Matlab语言》 https文章目录一 数据统计分析1.1 求最大元素与最小元素1.2 求平均值与中值1.3 求和与求积1.4 累加和与累乘积1.5 求标准差和相关系数标准差相关系数1.6 排序二 多项式计算2.1 多项式的表示2.2 多项式的四则运算…
Pandas快乐学习之上海机动车牌照拍卖
数据集，请参考： 链接：https://pan.baidu.com/s/1h-q4Nmb96rdKkYIuTEEe7Q 提取码：f8xn
一、2002 年-2018 年上海机动车拍照拍卖
问题
(1) 哪一次拍卖的中标率首次小于5%？
(2) 按年统计拍卖最低价的下列统计量&#…
快乐学习Pandas-分组
详细内容可以参考：https://github.com/datawhalechina/joyful-pandas第三章内容 本文将就可能理解起来会有问题的几个内容进行介绍。
一、SAC过程
1. 内涵 SAC指的是分组操作中的split-apply-combine过程 其中split指基于某一些规则，将数据拆成若干组&…
Windows基于WSL搭建Python数据分析环境
最近配置了一台较为不错的台式机，记录下自己配置环境的过程。
安装WSL，提供Linux环境 如果你发现后续的命令无法运行或者说软件商城中找不到，这可能意味着你的操作系统不符合要求。WSL安装要求 Windows 10 version 2004（Build 19…
pytorch 将标签转为one-hot编码
将标签转为one-hot编码
我定义为一个函数,返回为布尔值，需要类型转换
def one_hot(label, NNone): # 对标签进行独热编码label np.asarray(label) # np.asarray() 对于传入list为深拷贝， 传入array为浅拷贝，即改变传入的值&#…
总说业务，到底业务常用的指标有哪些
↑ 点击上方 “可乐的数据分析之路” 关注 星标 ~ 大概率每天早8点25更新 今天和大家一起精读一本最近很火热的数据分析新书——《数据分析思维：分析方法和业务知识》，作者猴子数据分析学院。全书分为两大块，第一块内容是方法论，…
什么是好的数据指标：精益数据分析
《精益数据分析》这本书是[加] 阿利斯泰尔克罗尔和本杰明尤科维奇著作，人民邮电出版社出版，2014年首发，如今过去6年，在数据分析行业依然畅销，同类型的“精益”系列还有《精益创业实战》、《精益客户开发》等书籍。
这…
用Excel做相关性分析
一、概念理解
相关关系：变量之间存在着的非严格的不确定的关系，对它们进行深层次的分析，观察它们的密切程度。
相关性分析：对变量之间相关关系的分析，即相关性分析。其中比较常用的是线性相关分析，用来衡…
从QC看数据分析——入门数据分析
在数据分析的道路上越走越远
阴差阳错的做了数据分析，而且一开始我还不知道自己在做的是数据分析，看了很多数据分析的书，也走了一些弯路，做了很多实践项目，突然很想把自己作为一个小白的数据分析之路的成长过程写下来…
数据分析/挖掘的六个步骤
1、明确分析的目的和思路
目的：解决什么问题
思路：搭建分析框架，把分析目的分解成若干个不同的分析要点，即从哪几个角度进行分析，采用哪些分析指标等。（数据分析方法论）
2、数据收集
3、数据…
制造业经营效益差？业务数据管理是关键
《中国制造2025》 指出，目前中国制造业整体尚处于由工业2.0向工业3.0过渡的阶段，而欧美的制造强国已提出工业4.0概念，由“制造”迈向“智造”， 实现智能工厂、 智能生产和智能物流，建立一个高度灵活的个性化和数字化的…
分析报告有样板了-奥威BI数据可视化报表模板
述职报告、月度数据分析报告、季度数据分析报告、区域数据分析报告……人在职场，数据分析报告少不了。那么，怎么才能在极短的时间内做出一张既好看又突出重点、分析逻辑在线的数据可视化分析报表？奥威BI软件的建议是采用BI数据可视化报表模板…
坚鹏：中国人寿临沂公司当下中国经济形势与寿险业发展机遇培训
中国人寿保险（集团）公司属国家大型金融保险企业，2016年中国人寿入主广发银行，开启保险、投资、银行三大板块协同发展新格局。2022年，集团公司合并营业收入站稳万亿平台；合并总资产突破6万亿元大关。中国人寿…
数据运营基础：用户场景营销
一、概述
场景营销模型是顶层模型，是站在用户经营和用户场景角度来制定经营策略的模型。本质上，场景营销模型是在用户使用产品的每个细分场景中通过分析用户需求整合功能、实体和体验等为用户提供服务的模型。 二、场景的起源和特点
数据运营体系在发展…
零代码复现-TCGA联合GEO免疫基因结合代谢基因生信套路（二）
零代码复现-TCGA联合GEO免疫基因结合代谢基因生信套路（二）-关键基因集的获取和生存数据准备
前面的分析中，下载TCGA和GEO的数据，并进行简单的处理，接下来就是相关基因集的获取和整理，为后期聚类和降维做准…
将Series中每个值v替换为v在Series中升序排列时的位置值s.rank()
【小白从小学Python、C、Java】 【计算机等考500强证书考研】 【Python-数据分析】 将Series中每个值v 替换为v在Series中 升序排列时的位置值 s.rank()
选择题 下列代码执行三次排名索引a的名次值分别为？ import pandas as pd s pd.Series([3,2,0,3],index list…
pandas教程：Techniques for Method Chaining 方法链接的技巧
文章目录 12.3 Techniques for Method Chaining（方法链接的技巧）1 The pipe Method（pipe方法） 12.3 Techniques for Method Chaining（方法链接的技巧）
对序列进行转换的时候，我们会发现会创建很…
Python | 机器学习之数据清洗
🌈个人主页：Sarapines Programmer🔥 系列专栏：《人工智能奇遇记》🔖少年有梦不应止于心动，更要付诸行动。 目录结构 1. 机器学习之数据清洗概念
1.1 机器学习
1.2 数据清洗
2. 数据清洗
2.1 实验目的…
计算机二级Office真题解析 excel减免税，订单，成绩
第一题 1.将“Excel 减免税.xlsx”文件另存为 excel.xlsx，最后提交该文件（1 分）。 2.将“对应代码.xlsx”文件中的 sheet1 工作表插入到 excel.xlsx 中，工作 表名重命名为“代码”（3 分）。 3.在"序号&…
5个用于地理空间数据分析的Python包
大家好，地理空间数据分析在城市规划、环境研究、农业和交通等行业中至关重要。不断增长的需求导致Python包在各种地理数据分析要求上的使用增加，例如分析气候模式、研究城市发展或跟踪疾病传播等，评估和选择具有快速处理、修改和可视化能力的…
JimuReport积木报表 v1.6.5 版本发布—免费报表工具
项目介绍 一款免费的数据可视化报表，含报表和大屏设计，像搭建积木一样在线设计报表！功能涵盖，数据报表、打印设计、图表报表、大屏设计等！ Web 版报表设计器，类似于excel操作风格，通过拖拽完成报…
知虾数据分析软件：了解知虾数据分析软件提升Shopee店铺运营效果
在如今电商竞争激烈的市场中，了解市场趋势和产品数据是成功经营一家Shopee店铺的重要因素之一。而知虾——Shopee生意参谋作为一款功能强大的数据分析软件，可以帮助店主深入了解行业概况、产品潜力以及市场趋势，从而制定最优的运营策略。本文…
虾皮数据参谋：助您实现最优运营策略的神奇工具
在如今竞争激烈的电商市场中，拥有准确的数据分析和市场洞察力是取得成功的关键。虾皮数据参谋（Shopee生意参谋）作为一款强大的工具，为商家提供全面的数据分析和市场情报，帮助他们做出明智的决策并实现最佳运营效果。本…
数据分析 - 分散性与变异的量度
全距 - 极差 处理变异性
方差度量 数值与均值的距离，也就是数据的差异性 标准差描述：典型值 和 均值的距离的方法，数据与均值的分散情况
AIGC ChatGPT 4 与 Python 进行数据分析与可视化
Python是数据分析的理想工具，其优势主要体现在以下几个方面：
1. 丰富的库资源：Python有大量的数据分析和科学计算库，如pandas、NumPy、SciPy和Matplotlib等，这些库提供了数据操纵、处理、可视化、建模和算法功能，大大简化了数据分析的复杂性。
2. 高级编程语言：Python…
创建数据透视表：根据表中一列作为分类的依据统计每个类别下不同子项数量cross_tab()
【小白从小学Python、C、Java】 【计算机等考500强证书考研】 【Python-数据分析】 创建数据透视表： 根据表中一列作为分类的依据 统计每个类别下不同子项数量 cross_tab() [太阳]选择题 关于以下代码的说法中正确的是? import pandas as pd data{A:[a1,a2,a1,a2,a…
从数据图表引入到最终效果呈现：全面解析JVS智能BI图表配置流程
在现今数据驱动的时代，图表是直观展现数据、洞察业务运行态势的重要工具。JVS智能BI的图表配置，具备丰富的组件类型和强大的配置功能，可以轻松实现数据的可视化和分析。 图表配置
组件的引入
1、点击新增组件按钮 2、在弹出的组件窗&#x…
通过python简单预测彩票下次是否中奖：LSTM、LogisticRegression
背景：根据往期历史中奖记录，预测下次中奖的概率！总共有日期和中奖结果两个字段，中奖为1，不中奖为0，休息日的记录删除不要！ 一：LSTM预测
import numpy as np
import pandas as pd
im…
【文末送书——数学经典著作】工科必备的数学思维培养
欢迎关注博主 Mindtechnist 或加入【智能科技社区】一起学习和分享Linux、C、C、Python、Matlab，机器人运动控制、多机器人协作，智能优化算法，滤波估计、多传感器信息融合，机器学习，人工智能等相关领域的知识和技术。关…
2018年五一杯数学建模A题徐州潘安湖风景区游览路线设计解题全过程文档及程序
2019年五一杯数学建模
A题 徐州潘安湖风景区游览路线设计
原题再现 徐州是一个老工业基地和资源型城市，煤炭开采历史长达130年。长期煤炭开采在徐州累计形成采煤塌陷区达数十万亩。位于徐州市贾汪区西南部、紧邻马庄的潘安湖湿地公园原来就是徐州最大的、塌陷最严…
个推「数据驱动运营增长」上海专场：携程智行火车票分享OTA行业的智能用户运营实践
近日，以“数据增能，高效提升用户运营价值”为主题的个推「数据驱动运营增长」城市巡回沙龙上海专场圆满举行。携程智行火车票用户运营负责人王银笛分享OTA行业的智能用户运营实践。 ▲ 王银笛 携程智行火车票用户运营负责人 负责智行业务线用户运营。从0…
2023年首届天府杯数学建模国际大赛问题A思路详解与参考代码：大地测量数据中异常现象的特征和识别
地球变形观测是固体潮汐曲线分析和地震前体研究的重要手段，也是地球观测技术的重要组成部分。基于各种精密科学仪器的变形观测点主要集中在洞穴、地下井等易的自然灾害（雷暴、强降雨、降雪等），人工维护、人工爆破等外部条件&#…
如何使用Matplotlib模块的text()函数给柱形图添加美丽的标签数据？
如何使用Matplotlib模块的text函数给柱形图添加美丽的标签数据？ 1 简单引入2 关于text()函数2.1 Matplotlib安装2.2 text()引入2.3 text()源码2.4 text()参数说明2.5 text()两个简单示例 3 柱形图绘制并添加标签3.1 目标数据3.2 读取excel数据3.3 设置窗口大小和xy轴…
模块一、任务一.数据分析概述
一、module1 预测未来-总统大选
样本偏差 二、module2 优化现状-化妆品销售 1、数据分析师从业务类型上划分 2、目标：总销量 达到 目标销量 3、固定基本流程 （1）确定
一、目标值节节升高，是否合理？根据什么定的&…
shopee地区选品：深入了解选品工具——知虾，优化您的销售策略
作为一家社交电商平台，Shopee拥有庞大的用户群体和海量的交易数据，这使得该平台的选品数据对于卖家来说非常宝贵。在这方面，知虾工具是一款强大的分析工具，可以帮助卖家深入了解用户的消费习惯、喜好和需求，从而更准确…
Python 数据舞台：交互、处理、创新
Python 交互式输入与数据处理指南
前言
Python的魅力在于其简洁而强大，而掌握数据处理的技巧是成为真正Python大师的必经之路，与用户进行交互并高效地处理输入是构建强大应用程序的关键步骤之一。本指南将深入探讨几个Python核心函数，涵盖了…
Hive 定义变量 变量赋值 引用变量
Hive 定义变量 变量赋值 引用变量
变量
hive 中变量和属性命名空间
命名空间权限描述hivevar读写用户自定义变量hiveconf读写hive相关配置属性system读写java定义额配置属性env只读shell环境定义的环境变量
语法 Java对这个除env命名空间内容具有可读可写权利； …
中国电影票房排行数据爬取及分析可视化
大家好，我是带我去滑雪！ 对中国电影票房排行数据的爬取和分析可视化具有多方面的用处：例如了解电影市场的历史趋势，包括不同类型电影的受欢迎程度、票房的季节性波动。识别观众对于不同类型电影的偏好，为电影制片方提供…
shopee跨境选品工具——知虾，助您精准选品和科学运营
在如今的电商时代，shopee跨境选品是每个卖家都面临的重要任务。而Shopee作为一家知名的跨境电商平台，为卖家提供了一系列有用的工具和功能来帮助他们进行精准选品和科学运营。其中，知虾作为Shopee的大数据采集及分析平台，为卖家提…
【读书笔记】信息架构：超越Web设计-第一章
目录 编辑 第一章-信息架构想解决的问题（The Problems That Information Architecture Addresses.） 嗨ITunes（Hello, iTunes） The Problems Information Architecture Addresses 信息架构想解决的问题 信息爆炸 更多接触信息的渠…
数据分析思维与模型：群组分析法
群组分析法，也称为群体分析法或集群分析法，是一种研究方法，用于分析和理解群体内的动态、行为模式、意见、决策过程等。这种方法在社会科学、心理学、市场研究、组织行为学等领域有广泛应用。它可以帮助研究人员或组织更好地理解特定群体的特…
SPASS-曲线估计
基本概念
曲线估计（曲线拟合、曲线回归）则是研究两变量间非线性关系的一种方法，选定一种用方程表达的曲线，使得实际数据与理论数据之间的差异尽可能地小。如果曲线选择得好，那么可以揭示因变量与自变量的内在关系&…
时间序列预测实战(十七)利用Prophet实现电力负荷长期预测（附代码+数据集+详细讲解）
一、本文介绍
Prophet是一个由Facebook开发的开源工具，用于时间序列预测。这个工具特别适合于具有强季节性影响和多个历史数据季节的业务时间序列数据。Prophet的主要思想是将数据分解为如下三个部分：趋势、季节性、节假日和特殊事件。这个模型非常适合…
解锁数据分析的神器：ChatGPT引领人工智能革命
💂 个人网站:【 海拥】【神级代码资源网站】【办公神器】🤟 基于Web端打造的：👉轻量化工具创作平台💅 想寻找共同学习交流的小伙伴，请点击【全栈技术交流群】 在当今数字化时代，数据分析成为决策…
三、机器学习基础知识：Python常用机器学习库（图像处理相关库）
文章目录 1、OpenCV1.1 窗口操作函数1.2 图像处理1.3 图像捕获与人脸检测 2、PIL2.1 主要函数2.2 表情图像合成2.3 手写数字转换2.4 滤波查找图像边缘 1、OpenCV
OpenCV Python是一个用于解决计算机视觉问题的Python库，是用基于C实现的OpenCV构成的Python包。OpenC…
机器学习模型超参数优化最常用的5个工具包
优化超参数始终是确保模型性能最佳的关键任务。通常，网格搜索、随机搜索和贝叶斯优化等技术是主要使用的方法。
今天分享几个常用于模型超参数优化的 Python 工具包，如下所示：
scikit-learn：使用在指定参数值上进行的网格搜索或…
GEE21：基于MODIS数据获取逐年GPP、EVI和FVC数据
逐年GPP、EVI和FVC获取 1. 逐年GPP获取2. 逐年EVI获取3.逐年FVC获取 1. 逐年GPP获取
// 设置感兴趣区域
var geometry table.geometry();
Map.centerObject(geometry, 5);
Map.addLayer(geometry, {color: "black"}, "ROI")// 加载 MODIS/006/MOD17A2H 数…
城市交通领域的新趋势：地铁列车可视化
随着城市化进程的不断加速，地铁作为一种便捷、快速的城市交通方式，受到了越来越多人的青睐。地铁列车可视化，作为地铁运营管理中的一项重要工作，不仅可以提高列车运行效率和安全性，还可以为乘客提供更加舒适、便捷的乘…
数字化转型导师坚鹏：数字化时代银行网点厅堂营销5大难点分析
数字化时代银行网点厅堂营销存在以下5大难点：
1、识别难。识别有效的客户比较难，传统的厅堂识别主要依据客户的衣着气质等主管感受，判断客户是否为潜在中高端客户，提供相关服务。大堂经理主管识别与智能化系统识别相结合…
用Markdown Nice写作
网址：https://www.mdnice.com/ 代码 表格 第二行用来对齐：
-表示左对齐
:-:表示居中
-:表示右对齐 数学
上下标 分数 累加 幂 对数 根式 微积分 交集、并集 格式
标题 缩进 删除线 斜体 加粗 参考文献
京东数据分析（京东数据采集）：2023年10月京东平板电视行业品牌销售排行榜
鲸参谋监测的京东平台10月份平板电视市场销售数据已出炉！ 根据鲸参谋电商数据分析平台的相关数据显示，10月份，京东平台上平板电视的销量将近77万，环比增长约23%，同比则下降约30%；销售额为21亿，环…
知虾shopee收费,多少钱一个月
在当今电商行业的竞争激烈的环境下，许多商家都在寻求更好的方式来推广和销售他们的产品。这就是为什么越来越多的商家选择使用知虾shopee这样的平台来展示和销售他们的商品。但是，对于许多商家来说，他们可能会对知虾shopee的收费情况感到好奇…
人工标签不准确的一种解决方案：PCA降维可视化筛选正样本
背景
在实际的业务场景里，用会话文本构建模型（机器学习/深度学习）来做意图分类之类的任务时，经常会出现人工打标不够准确的问题，标签都不准确的话模型当然无法学习到有效信息了。这个问题真的非常头疼…除了与业务沟通…
重磅！这本30w人都在看的Python数据分析畅销书：更新了！
文章目录 每日一句正能量前言导读作译者简介作者译者 主要变动导读视频购书链接后记赠书活动 每日一句正能量 尽量充实自己。不要停止学习。不管学习什么，语言，厨艺，各种技能。 前言
数据分析已经成为当今社会中一个非常重要的领域。随着各种…
在数组的指定位置插入指定元素值numpy.insert()
【小白从小学Python、C、Java】 【计算机等级考试500强双证书】 【Python-数据分析】 在数组的指定位置插入指定元素值 numpy.insert()
[太阳]选择题 请问以下代码中最后输出结果是？ import numpy as np arr np.array([1, 2, 3]) print("【显示】arr ",…
优化数据分析——理解与运用各类指标
写在开头
数据分析在当今信息时代扮演着至关重要的角色，而指标则是我们理解数据、揭示模式、支持决策的关键工具。本文将深入讨论各类指标的应用场景和解读方法，以帮助更全面、深入地理解数据。
1. 中心趋势指标
1.1 均值：更深层次的理解 …
如何获取item_recommend-获取推荐商品列表api接口
获取item_recommend-获取推荐商品列表API接口的步骤可能会因电商平台和具体的使用情况而有所不同。以下是一般的步骤：
了解API接口的使用规则和要求：在获取API接口之前，需要了解该API接口的使用规则和要求，包括API的调用方式、参…
判断序列Series中的值是否都不一样 PandasSeries中的方法：is_unique()
【小白从小学Python、C、Java】 【计算机等考500强证书考研】 【Python-数据分析】 判断序列Series中的值是否都不一样 PandasSeries中的方法： is_unique() 选择题 请问下列程序运行的的结果是： import pandas as pd s1 pd.Series([1,2,3]) print("…
Apache Superset数据分析平台如何实现公网实时远程访问数据【内网穿透】
文章目录 前言1. 使用Docker部署Apache Superset1.1 第一步安装docker 、docker compose1.2 克隆superset代码到本地并使用docker compose启动 2. 安装cpolar内网穿透，实现公网访问3. 设置固定连接公网地址 前言
Superset是一款由中国知名科技公司开源的“现代化的…
利用Python爬虫和Tableau分析链家网二手房信息
1、明确分析的目标和思路
目的：近年来，房价时时刻刻牵动着广大老百姓的心，尤其是急需买房的刚需族和二胎家庭的置换族。本文希望通过对上海市中心城区二手房信息的分析，能够对房价和地理位置、房龄等因素的关系有一定的掌握。
分…
数据处理之缺失值处理
缺失值产生的原因：
1、有些信息暂时无法获取，或者获取信息的代价太大；
2、有些信息是被遗漏的。如认为不重要，忘记填写等人为因素，或数据采集设备故障，存储介质故障，传输媒体故障等非人为的因…
数据处理之异常值分析、处理
异常值的分析方法
1、简单统计量分析
做一个描述性统计，进而查看哪些数据不合理。最常用的是最大值和最小值，如年龄的最大值199，则存在异常。
2、3σ原则
针对服从正态分布的数据， 3、箱形图分析（R语言）…
wirehark数据分析与取证Alpha-1.pcapng
什么是wireshark？wiresharekAlpha-1.pcapng数据包分析数据包已上传资源，有问题请私信博主wiresharek
Wireshark（前称Ethereal）是一个网络封包分析软件。网络封包分析软件的功能是检索取网络封包，并同时显示出最详细的…
数据分析领域新星DataSift融资1500万美元
北京时间5月3日早间消息，据TheNextWeb报道，数据分析行业后起之秀DataSift近日完成新一轮融资，此次融资金额为720万美元。本次融资主要来自一直支持DataSift的GRP Partners和IA Ventures两家公司，据悉此次投资将会主要用于拓展Data…
Pinterest未来路在何方
AllThingsD在6月中旬发布的分析报告表明Pinterest有望成为2012年最有价值的社交网站，并超过Facebook和Twitter等社交网站为电商贡献最多的社交推荐流量。上周最新数据分析显示，在美国，Pinterest网站的流量甚至超过了Tumblr；不过从…
Pintics创始人创立ShopInterest: Pinterest购物新体验
Pintics是一个针对Pinterest的分析服务，其CEO Francisco Guerrero花了整个周末的时间在帕洛阿尔托举行的一个名为AngelHack的黑客马拉松活动上推出了另外一款和Pinterest相关的名为ShopInterest的项目，通过ShopInterest服务每个人都可以将自己的Pinteres…
推荐几款流量统计网站，通过流量分析管理自己的网站
1、Google Analytics 谷歌分析： http://www.google.com/analytics/ 2、免费网站流量统计_商业媒体统计_广告联盟_数据专家cnzz.com CNZZ数据专家：http://www.cnzz.com/ 3、量子统计—免费网站流量统计，您的数据分析专家 量子恒道统计&#x…
编程中的2种循环控制指令，必不可少基础能力，看完三分钟上手
继流程控制之后我们现在开始循环控制了，具体怎么样操作我们废话不多说 直接开始
Python提供循环控制的能力，循环指令的作用是反复执行相同的任务，直到不满足循环条件为止。它也会经常出现在各大编程场景，因此也是必须掌握的。 本…
数字化运营：数据处理方式革新，让企业数据在可视化的关联中产生价值
对于企业来说，庞大的数据如何快速进行直接有效的处理是最基础的一个问题。
有问题就会有对策，当企业的业务流程逐渐形成定式，参与人员增多时，就有了数据工具和数据处理方式的应用。如果将此应用于企业业务当中，产生效…
重塑时尚的的五大创业公司
全球著名时尚之都，除了意大利米兰，法国巴黎，怎能少了英国伦敦，除了有全球著名的设计师Paul Smith，Stella McCartney，Alexander McQueen等以外，还有许多著名品牌。其实Net-a-Porter以及ASOS两家零…
融资侦集档案—F档案001
在过去的一周内，雷锋网报道获得融资的公司有十三家，总融资额为三亿一千万。其中最大单笔融资额为一亿，由一家医疗技术公司Castlight获得，这也是医疗技术公司有史以来获得的最大一笔融资。事实上，一些对用户直接帮助更多…
3款移动应用数据统计分析平台对比
本文由雷锋网整理自ZDnet，内容有改动，仅供各位热衷于移动应用开发推广运营的朋友参考。
目前市面上比较常见，使用比较多的移动应用统计平台大概有3、4家，国外比较流行的是Flurry，功能上非常全面；另外就是G…
如此戏剧化 Peer39融资3千万却卖了不到2千万
广告技术公司Peer39命运也太曲折离奇了，融资3000万美元却只卖了1550万美元，其中1000万现金支付，剩下的股票支付，并且其中有230万要赚了才付，收购方为数字媒体解决方案提供商DG。
Peer39在纽约及美国均有办公室&#x…
我用python扒出了室友的初恋史
我的室友王大国，一直号称自己母胎单身，但我和其他室友一致不相信，因为刚上大学的时候明明经常听到他打电话啊，还骚里骚气的 不知道是在家待傻了，还是春天来了，今天，我的室友王大国发了下面一…
Python3：只用一个装饰器，就让python的运行速度提升200倍！！
让python运行速度更快1、引言2、Numba2.1 简介2.2 安装2.3 代码实例3、 代码实战3.1 不使用Numba3.2 使用Numba4、总结1、引言
小屌丝：鱼哥，我今天被鄙视了 小鱼：因为你的颜值被鄙视了？？ 小屌丝：咱还能正常…
Python3：我低调的只用一行代码，就导入Python所有库！
一行代码导入python所有库1、引言2、Pyforest2.1 Pyforest 介绍2.2 Pyforest 安装与使用2.2.1 安装2.2.2 使用3、总结1、引言
今天我们来分享一个懒人库：Pyforest。 小屌丝：鱼哥，今天啥情况，你突然分享这个库？ 小鱼&a…
【机器学习实战】利用朴素贝叶斯算法(naive_bayes)实现新闻分类
利用朴素贝叶斯算法实现新闻分类实验背景分类思路可能用到的方法实际操作引入类库遍历所有txt文件组合切片文本和标签创建训练集和测试集统计词频统计的词频倒序排列过滤停顿词创建机器学习绘图查看过滤多少高频词学习效果最好选择最优解实现分类实验背景
在新闻类APP中&#…
Y Combinator Demo Day：第一组介绍
现在Y Combinator有史以来最大的“毕业典礼”正在进行，接下来将会为大家陆续介绍66家公司，所有公司都出场展示各自的展品，一些公司会介绍自己的非正式应用。本Demo将分成五个小组，接下来是第一组YC Winter 2012的创业公司。 1&am…
Onswipe实时触摸操作数据分析工具
据国外媒体报道，移动设备内容发布平台Onswipe今天发布了一个针对平板电脑的实时触摸操作数据分析工具。通过该工具，媒体出版商可以查看全球用户与其内容的实时互动数据，可识别并记录40多种平板触摸操作手势，如旋转iPad、扫动阅读、…
定量分析---频率分布直方图（groupby，agg，round具体用法）
对数据集“捞起生鱼片”做定量分析 穿插pandas的cut，groupby，agg方法 定量数据分布分析
对于定量数据而言，选择组数与组宽是做评率分布分析时最主要的问题，步骤如下：
-第一步：求极差【max-min】
-…
【零基础入门学习Python---Python中数据分析与可视化之快速入门实践】
🚀 零基础入门学习Python🚀 🌲 算法刷题专栏 | 面试必备算法 | 面试高频算法 🍀 🌲 越难的东西,越要努力坚持，因为它具有很高的价值，算法就是这样✨ 🌲 作者简介：硕风和炜…
腾讯技术官发布Python零基础就业宝典，想学习Python的朋友有福了
近几年来，互联网行业变化非常大，除了龙头企业的更替，“裁员潮”“失业潮”也不断掀起，尤其是对于年纪太大的程序员真的是不太友好。但是，根据数据统计表明，自2018来，学习IT行业的人不减反增&…
百度智能云特色城市业务指挥平台，助力城市管理更智能
城市管理，既要像透过显微镜看物体般的细致入微、纵向到底，又要像透过广角镜头看物体般的总览全局、横向到边。百度智能云特色城市业务指挥平台 AI_IOC 依托于云智一体技术底座、平战时一体指挥能力，助力新型城市管理。城市显微镜：…
智能大数据，看这本白皮书就够了
数据资产是数字经济发展的关键生产要素，随着人工智能等新一代信息技术的发展，数据迎来爆发式增长。在国家大数据战略引领下，提高数据安全保护水平，保证数据依法合理有效利用，实现大数据规范、高质量发展，真…
“云智一体”系列白皮书智能物联网篇为你一站式解读！
以人工智能、大数据、云计算、5G 等为代表的新一代信息技术蓬勃发展，驱动新一轮科技革命和产业变革。物联网作为产业互联网的重要基础，作用不言而喻。如何利用好物联网，进而带动企业完成产业跃迁？近日，百度智能云发布的…
当AI拥有“右脑”，互动营销创意还可以这样玩？
写在篇首：营销创意是个「体力活」，考验的是 N 次改稿中依然振作起来的体力和毅力：从业10年的资深广告人在面对 Z 世代的脑洞需求时，只能说：套路无效；创意方案从 PlanA-PlanZ 可以绕字母表一个循环但可能还是…
“云智一体”系列白皮书智能视频篇来了！
云智技术大发展，让视频应用与体验跃入新阶段。在全面视频化的当下，如何构建全场景智能视频技术，找到视频智能化升级法门？近日，百度智能云发布的《“云智一体”技术与应用解析系列白皮书——全场景智能视频篇》…
百度智能云亮相贵阳数博会，还获四个行业大奖！
工业互联网自行分析生产情况、百度智慧城市 x 智慧丽江、百度昆仑 AI 芯片、观众互动体验安全帽检测……这是百度智能云为2021年贵阳数博会带来的丰富的“云智一体”技术和产品，吸引众多观众驻足在 W1馆，成为5月26日开幕当日的热点。每年的数博会&#x…
智能视频云3.0全景图来了！深度融合视频应用共创行业新生态
全视频时代到来，各行各业对视频的应用、体验和效能提出全新升级需求，AI 与云计算的发展则为智能视频进入新阶段注入充足动力。5月13日，百度智能云“云智技术论坛-智能视频专场”活动在北京举行，重磅发布了智能视频云3.0全景图。百…
数据价值看得见，百度智能云Sugar让知乎更“知”用户
有问题，就会有答案。经过十年的发展，知乎已经成为中国最大的在线问答社区。不断优化业务，持续增强用户粘性，对知乎非常重要。而这其中，对数据的价值挖掘必不可少。知乎正在利用百度智能云数据分析与展现平台 Sugar&…
智能视频云3.0来了！基于AI-Native架构，赋能产业智能化
智能视频时代来了！5G、人工智能、云计算等前沿技术的不断成熟，正在加速视频在媒体、互娱、工业、政企等更广泛的业务场景落地应用。智能视频技术不仅能提升视频的存储、处理、分发、互动等效率和体验；同时视频端设备的广泛链接，加…
python实现实时肺炎患者数据分布图
2022.5.14更新：上述链接可能存在问题，bug没有及时修复，有兴趣的小伙伴们可以继续研究或者指出问题所在，如果不感兴趣的小伙伴请忽略此文。 import time
import json
import requests
from datetime import datetime
import numpy…
时序时空数据库MySQL再升级，兼容MySQL协议
为了帮助数据库客户更便捷地实现业务接入，近日，百度智能云时序时空数据库（TSDB）正式宣布兼容 MySQL 协议。这是继今年9月完成时序数据能力和空间数据能力的扩展整合后，TSDB 在产品易用性方面的又一次重要升级。什么是百…
百度智慧油气解决方案亮相2020中国石油石化企业信息技术大会
百度智能云积极推进新基建，在智慧油气领域发布全新解决方案。10月22日，2020中国石油石化企业信息技术交流大会暨数字化转型、智能化发展高峰论坛在北京市隆重召开，会议围绕新一代信息技术与石油石化行业融合创新的解决方案作了专题报告和交流…
数据可视化不再难！这有一份国寿财险的实践经验
中国人寿财险（下称国寿财险）作为财险行业信息化、数字化建设的领军企业，国寿财险已顺利完成新一代核心系统建设，拥有可支撑全数据应用场景的统一数据平台，早在2016年就开始进行车险业务流失预测建模。国寿财险信息化、…
百度智能云 x 徐工挖机 | 实现数据智能，释放工业大数据价值
徐州，自古以来便是钟灵毓秀之地，近年来更是有“中国工程机械之都”的美称。但你或许没想到的是，在这座千年古城，一支制造业的王牌正在用新的大数据“武器”，加速数字化升级，为智能制造加码。徐州徐工挖掘机…
游戏数据分析公司Playtomic为开发者推出免费分析工具
位于阿根廷布宜诺斯艾利斯的游戏数据分析公司Playtomic本周内推出一套针对Android和C开发者的分析工具，这一工具有一个整洁的热图外观，开发者可以跟踪诸如游戏角色死亡等事件并记录地点或者与应用进行互动。目前使用Unity引擎的开发者已经可以使用这套分…
百度智能云启动“AIOT疫情防护罩计划” 一年内免费提供天工物联网平台服务...
在疫情面前，智能科技有着不可替代的防控优势。 为了推动公共场所与疫情相关管理部门真正做到数据共享、科学决策，即日起，百度智能云将为因防疫需要使用百度智能云天工物联网平台的企业提供一年完全免费的服务。百度智能云承诺，将调…
名老中医经验继承研究现状及“中医处方智能分析系统”应用前景
http://journal.shouxi.net/html/qikan/zgyx/zgzyyxxzz/20105175/ztlt/20100702100858842_535823.html 【关键词】 老中医经验;中医处方智能分析系统;应用前景
中医学是世界医学中的瑰宝,疗效卓著。目前,中医现代化发展创新得到社会普遍关注,而中医继承研究在创新中的作用却常…
区块链丨解决公益事业中最根本的“信任”问题
1991年，作为希望工程的标志，“大眼睛女孩”的照片留在了全国人心中，也让更多人开始接触到公益活动。而随着互联网的创新和普及，我国的公益事业，日益蓬勃发展。据《2018年世界捐助指数》，中国已成为世界第三…
深入浅出数据分析宝典
数据分析真实项目流程明确问题：明确问题是数据分析的第一步，必须明确数据分析真实需求； 理解数据：数据获取和数据探索； 数据清洗：一个数据分析项目大部分时间花在数据清洗上； 数据分析和可视化&…
百度云时序数据库又双叒叕更新啦，这些新功能帮你更好玩转IoT
在万物互联网的时代，世界上的每一个物体每时每刻都在产生着数据，如个人的健康数据、工业设备的状态数据、车联网的实时数据等等。在物联网蓬勃发展之际，描述物体在时间坐标中的状态信息的时序数据开始变得越来越重要，成为大数据分…
智能运维 | 百亿级外网访问质量保障：百度猎鹰外网监控（下）
我们在上一篇文章《百亿级外网访问质量保障：百度猎鹰外网监控》（上）中，初步介绍了百度外网质量监控的典型场景与需求，本篇文章将从外网监控的实现原理及系统架构两个方面系统详细介绍百度外网质量监控平台猎鹰。外网监…
TSDB的数据如何利用Hadoop/spark集群做数据分析？
物联网场景已经成为各行业巨头和各互联网公司的兵家必争之地，百度云天工TSDB对物联网场景下时序数据表现除了优秀的存储和查询能力，已经成为物联网应用的标配，支撑着智能制造、工业能源、智能车联网、智能家居、智慧城市等多个行业应用。TSDB…
2018，金融机构的下一个发力点在哪？
自2012年起，由于金融行业天然的数字属性，加之早期政策的大力扶持，互联网科技与金融行业的融合似乎顺理成章，并呈现出雨后春笋般的爆发态势。随着移动支付、P2P等金融服务崛起，银行、保险公司、证券公司也纷纷搭上“互联…
微会议：在线创建会务信息
找人开会是个比较头疼的事情，尤其是关于会议一些详细的 议程啥的，参会的人未必会记得很详细，而用笔记下来又麻烦，而现在是国内微博开始兴起的时候，大家的注意力都在微博上了，不如就着微博做点啥？…
雷锋读图：CMO+CTO=CMTO 大数据时代催生的新角色
如今很少有人怀疑，IT正在主宰全球经济，信息技术正在渗透到每个角落。大数据时代，随着市场和消费者数据的持续膨胀，CMO（首席市场官）的工作变得更加量化，关于消费者喜欢什么以及什么样的广告才能吸…
python数据分析和数据挖掘之numpy模块函数大全
一、numpy模块
numpy模块可以进行数据的高效处理，提供数组支持，是我们后续学习其他的函数库的基础。
二、numpy的安装与引用
numpy可以通过外部安装方式进行安装，外部安装前的准备工作：准备一台安装了python的联网的计算机。 1…
2016年五一杯数学建模A题购房中的数学问题解题全过程文档及程序(采光与房款)
2016年五一杯数学建模
A题 购房中的数学问题
原题再现 随着现代社会经济的快速发展，房地产成为国家经济发展中重要的经济增长点之一。为了充分利用楼房建设的土地面积，开发商经常会选择建筑高层住宅。在购买住房时，影响消费者选择购房的因素…
这才是BI大数据分析工具的正确打开方式！
这两年经济下行给各行各业造成不小的发展困扰，为此企业积极自救，希望通过数字化降本增效，提高业绩水平。BI大数据分析工具就是企业数字化转型中常用到的一种商业智能BI工具，主要作用是缩短数据分析时间，提升企业数据分…
京东数据运营-京东数据平台-京东店铺数据分析-2023年10月京东烘干机品牌销售榜
鲸参谋监测的京东平台10月份烘干机市场销售数据已出炉！ 10月份，烘干机市场整体销售上涨。鲸参谋数据显示，今年10月份，京东平台上烘干机的销量将近5万件，环比增长约77%，同比增长约22%；销售额将近…
一个超强算法模型实战案例！
哈喽，大家周末愉快，今儿不了很多的原理性内容。准备和大家一起实现一个开源且重要的项目：MNIST数字分类机器学习。
大概介绍下：MNIST数字分类项目旨在使用机器学习技术来构建一个模型，能够自动识别手写数字的图像。这个项目是一个经典的图像分类任务，常用于入门级机器学…
AIGC ChatGPT 4 快速整理不规则数据
从业务系统中采集到的数据如下：
序号 省份 英文 2022年销售额 2021年销售额 增量 1 广东guangDOng129068.58 124319.67 4748.91 2 江苏 JiangSu 122825.6 116314.2 6511.4 3 山东ShAnDong 87385 83045.9 4339.1 4 浙江…
Matplotlib不规则子图_Python数据分析与可视化
除了网格子图，matplotlib还支持不规则的多行多列子图网格。 plt.GridSpec()对象本事不能直接创建一个图形，他只是 plt.subplot()命令可以识别的简易接口。
这里创建了一个带行列间距的23网格：
grid plt.GridSpec(2, 3, wspace0.4, hspace0…
2015年五一杯数学建模A题不确定性条件下的最优路径问题解题全过程文档及程序
2015年五一杯数学建模
A题 不确定性条件下的最优路径问题
原题再现 目前，交通拥挤和事故正越来越严重的困扰着城市交通。随着我国交通运输事业的迅速发展，交通“拥塞”已经成为很多城市的“痼疾”。在复杂的交通环境下，如何寻找一条可靠、快…
【生物信息学】scRNA-seq数据分析（一）：质控~细胞筛选~高表达基因筛选
文章目录 一、实验介绍二、实验环境1. 配置虚拟环境2. 库版本介绍 三、实验内容0. 导入必要的库1. 质控2. 细胞筛选3. 高表达基因筛选 一、实验介绍 质控~ 细胞筛选 ~高表达基因筛选
二、实验环境
1. 配置虚拟环境 可使用如下指令：
conda create -n bio python3.…
“SRP模型+”多技术融合在生态环境脆弱性评价模型构建、时空格局演变分析与RSEI 指数的生态质量评价及拓展
近年来，国内外学者在生态系统的敏感性、适应能力和潜在影响等方面开展了大量的生态脆弱性研究，他们普遍将生态脆弱性概念与农牧交错带、喀斯特地区、黄土高原区、流域、城市等相结合，评价不同类型研究区的生态脆弱特征，其研究内容…
数据收集和准备：打造高质量的数据集
写在开头
在数据科学的舞台上，数据被誉为新时代的燃料。但要将原始数据转化为高质量、可用于分析的数据集，需要经历一系列复杂的步骤。本篇博客将深入探讨数据的收集和准备过程，结合实际数字、场景和代码，助你在数据科学的旅程中打造高质量的数据集。
1. 数据收集
1.1 常…
「玩转 TableAgent 数据智能分析」实战数据分析演练
文章目录 前言TableAgent 功能亮点人人都是数据分析师融合创新应用的新成果 TableAgent 使用介绍登陆功能介绍申请认证 实战数据集分析一导入 CSV 文件数据发起提问TableAgent 应答结果贴切的服务推荐问题提问 实战数据集分析二分析结果分析哪个城市的未来人口最多 总结 TableA…
【数据分析之Numpy】Numpy中复制函数numpy.repeat()与numpy.tile()的使用方法及区别
一、简介 numpy.repeat()与numpy.tile()都是Numpy库中的复制函数，用于将数组中的元素重复指定的次数。 numpy.repeat()函数接受三个参数：要重复的数组、重复的次数和重复的轴。 numpy.tile()函数接受两个参数：要重复的数组和重复的次数。
二…
企业如何选择仓库自动化
企业如何选择仓库自动化 仓库自动化的效益是显而易见的：自动化能够加快处理速度，提高精确度，降低动力成本，提高可靠性，达到库房面积和空间的更有效利用。但是，这些优势并不是免费得来。自动化需要很昂贵的成…
Titanic细节记录一
目录 chunker
header
index_col
names
Series与DataFrame的区别 df.columns
del和drop的区别 reset_index
loc与iloc的区别
不同的排序方式
sort_values
sort_index
DataFrame相加
describe函数查看数据基本信息 查看多个列的数据时使用列表 处理缺失值的几种思路
…
Tableau Software：73%的科技公司IPO时不赚钱
西雅图数据分析公司Tableau Software分析师Daniel Hom在对一些科技公司IPO情况进行跟踪调查后得出结论，73%的科技公司在IPO时是不赚钱的；而在上世纪90年代末期，只有34%的科技公司在上市时面临亏损。 Hom还发现，60%的上市科技公司其…
移动应用市场的新问题：搜索设备上的已有应用
虽然目前市场上关于如何在海量的应用中快速发现理想应用的解决方案已经有很多，但似乎很少有人关注用户已安装应用的使用情况。 据移动数据分析机构Flurry的调查结果显示，目前iPhone和iPad应用总数超过50万个，Android应用30多万，其…
中国AUTO-ID应用情况调查报告
中国AUTO-ID应用情况调查报告作者：王俊宇 周锋 王天扬 闵昊（复旦大学Auto-ID实验室） | 阅读次数：21 来源：自动识别技术与应用时间：2005年1月11日13:43 一、 前言 随着经济全球化和来自国际同行的竞争的…
（3）原神角色数据分析-3
绘图类 在名为“WRITEPHOT.py”的文件中，定义如下绘图方式，则在主页面(app.py)文件中，可通过如下方式调用：
from WRITEPHOTO import WriteScatter,WriteFunnel,WriteBarData,WritePie,WriteLineBar
代码如下：
"…
R语言 tidyverse系列 学习笔记（系列6）数据分析 之 写入 导出 多个文件
mypath "/User/sample_files"
list.files(path my_pah, full.names TRUE)# 筛选出 _数字dotcsv 结尾的文件
list.files(path my_pah, pattern "_\\d.csv$")my_file_dir list.files(path my_pah, pattern "_\\d.csv$", full.names TRUE)…
从转型变革大趋势，看企业数据中台“搭建浪潮”
如何更好地进行企业数据处理？如何搭建适用的企业数据中台？如何助推企业数智化转型？ 马云曾经在一次演讲中说过:"人类正从IT时代走向DT时代"。 DT时代，它是以服务大众、激发生产力为主的技术。也就意味着今后的市场竞争&…
（2）原神角色数据分析-2
功能一：
得到某个属性的全部角色，将其封装在class中
"""各元素角色信息：一对多"""
from pandas import DataFrame, Series
import pandas as pd
import numpy as npclass FindType:# 自动执行，将…
python处理卫星云图获取亮温值
在处理卫星云图hdf文件时，matlab非常好用，但随着python的流行，还是想学习一下python处理卫星云图数据获取亮温值。
我处理数据的前提是：
根据最佳路径数据集，获取经纬度和时间。根据时间找对应的hdf文件，…
python处理FNL数据的grib文件和nc文件（纬度存储的问题）
在使用python处理FNL数据时，2007年及之前的数据存储为grib文件，2007年以后为grib2文件，在数据处理时，将grib2转化为nc文件处理Windows上python读取grib2文件（不用Linux），对grib文件则安装了Anac…
探索性数据分析（EDA）：从数据中发现洞察力
写在开头
在数据科学的世界中，探索性数据分析（Exploratory Data Analysis，EDA）是一项至关重要的任务，它能够帮助我们深入了解数据、发现潜在的模式，并为进一步的分析和建模提供基础。本篇博客将介绍探索性数据分析的基本技术和方法，通过具体的数字、场景和代码，帮助读…
【详解】Spark数据倾斜问题由基础到深入详解-完美理解-费元星
数据倾斜定义：顾名思义，就是大量相似或相同数据聚集在一个块的节点里，导致计算和资源分配不均导致的计算缓慢（长尾）问题。
数据倾斜原因：
count(distinct field)
group by
NULL 空值
Shuffle (概率最…
商业银行信贷客户违约量化评估与预测方法--Python/SPSS机器学习
商业银行作为经营风险的金融机构，经营特色在于通过承担适当风险，获取与风险相匹配的收益。常见的盈利途径，比如通过承担信用风险，吸收存款、发放贷款来获取收益；又比如通过承担流动性风险，借短放长、期限错…
GraphPad Prism 9：最强大的数据分析软件，助您轻松解析复杂数据！
您是否正在寻找一个功能强大、易于使用的数据分析软件？GraphPad Prism 9是您的最佳选择！作为全球领先的科学数据分析工具，Prism 9提供了广泛的功能和先进的统计分析方法，帮助您轻松解析和可视化复杂的数据。
Prism 9不仅具备直观…
矩阵元素求和：按行、按列、所有元素np.einsum()
【小白从小学Python、C、Java】 【计算机等考500强证书考研】 【Python-数据分析】 矩阵元素求和： 按行、按列、所有元素 np.einsum() [太阳]选择题 下列说法正确的是： import numpy as np A np.array([[1, 2],[3, 4]]) print("【显示】A") p…
2022年全国大学生数据分析大赛医药电商销售数据分析求解全过程论文及程序
2022年全国大学生数据分析大赛
医药电商销售数据分析
原题再现： 问题背景 20 世纪 90 年代是电子数据交换时代，中国电子商务开始起步并初见雏形，随后 Web 技术爆炸式成长使电子商务处于蓬勃发展阶段，目前互联网信息碎片化以…
CRM：如何通过客户数据分析获得业务洞察？
客户数据分析，也称客户分析，是收集、组织和分析客户数据，以深入了解客户行为的过程。企业将利用这些数据来制定与营销、产品开发、销售等相关的业务决策。
通过客户分析，你可以做出简单的业务决策，比如找出投资回报率…
Get职场新知识：做分析，用大数据分析工具
为什么企业每天累积那么多的数据，也做数据分析，但最后决策还是靠经验？很大程度上是因为这些数据都被以不同的指标和存储方式放在各自的系统中，这就导致了数据的分析口径和标准不一致，无法在同一个分析软件上做综合分析…
大数据：sql，数据挖掘刷题
大数据：sql
2022找工作是学历、能力和运气的超强结合体，遇到寒冬，大厂不招人，可能很多算法学生都得去找开发，测开 测开的话，你就得学数据库，sql，oracle，尤其sql要学&…
获得矩阵对角线元素的索引 numpy.diag_indices_from()
【小白从小学Python、C、Java】 【计算机等级考试500强双证书】 【Python-数据分析】 获得矩阵对角线元素的索引 numpy.diag_indices_from() [太阳]选择题 请问关于以下代码的选项表述错误的是？ import numpy as np a np.array([[1, 2, 3], [4, 5, 6…
2023年日度煤炭价格数据，表格数据，市级精度 需要自取
基本信息.
数据名称: 日度煤炭价格数据
数据格式: excel
数据几何类型: 无
数据坐标系: WGS84
数据来源：网络公开数据
此数据为表格数据，无空间数据；2023年数据只到10月份，并非所有煤炭品种每月都有日价格，且煤…
【产品设计】SaaS产品数据分析之指标与标签
数据分析能够应用到各个领域和岗位，那么在SaaS产品中的应用会是如何？本文将探索SaaS产品在数据分析中的应用，并对其指标与标签的设计进行总结分析，一起来看看吧。 数据分析是业务开展过程中，收集记录各种行为产生的数据…
数据分析案例:超市数据分析
数据分析案例：超市数据管理驾舱
所需内容：
1、pandas数据清洗 2、pyecharts绘图工具 3、绘制可视化大屏
1.获取数据
代码如下实例：
# 读取数据
data pd.read_excel(../data/超市数据.xlsx)pandas 是基于NumPy 的一种工具，该…
pandas2 索引操作
文章目录2.Pandas的索引操作重建索引1.重建索引2.填充重建索引时引入的缺失值【前向与后向填充】3.reindex操作更换索引2.Pandas的索引操作
索引对象是无法修改的，因此重建索引是指对索引的重新排序而不是重新命名，如果某个索引值不存在的话会引入缺失值…
敲黑板、划重点！一文讲透古典互联网与产业的差异
古典互联网，产业互联网。古典互联网是移动互联网的上半场。大家尽享入网人群的增长红利。工具产品百花齐放，平台产品争奇斗艳。胜者笑傲江湖成为巨头，败者寻找/创造下一个风口。产业互联网是移动互联网的下半场。巨头林立格局稳定，…
那些数据工作中的角色
数据工作中有一类非常重要的角色，那就是数据分析师。为什么这个角色这么重要呢？
因为要是没有这个角色，不管一个企业中的数据管理做得有多么好都没用，都无法带来实际的价值。这些数据就像是藏在海底的石油，而数据分析…
我的Python学习之路(9)
今日学习内容
1.下载并安装常用的各类第三方库 (1)数据分析：Numpy、Pandas、SciPy (2)数据可视化：Matplotlib、Seaborn、Mayavi (3)文本处理：PyPDF2、NLTK、Python-docx (4)机器学习：Scikit-learn、TensorFlow、MXNet (5)网络爬虫…
wirehark数据分析与取证0051.pcap
什么是wireshark？wiresharekwireshark0051.pcap数据包数据包下载 请私信博主wiresharek
Wireshark（前称Ethereal）是一个网络封包分析软件。网络封包分析软件的功能是检索取网络封包，并同时显示出最详细的网络封包数据。Wireshark…
山东布谷科技直播平台搭建游戏开发技术分享：数据存储的重要意义
在市场上的热门的直播平台中，有很多小程序为用户提供各种各样的功能，这其中就有很多游戏小程序，当今社会独生子女众多，很多作为独生子女的用户都会去选择一个能够社交互动的APP来填补内心的空虚，而直播平台的实时互动的…
wirehark数据分析与取证infiltration.pacapng
什么是wireshark？wiresharekinfiltration.pacapng数据包如果有不懂得地方可以私信博主，欢迎交流！！交流群：603813289（刚建的）wiresharek
Wireshark（前称Ethereal）是一个网…
机器学习 — 数据预处理：标准化/归一化
文章目录机器学习 — 数据预处理：标准化/归一化一、归一化，标准化，中心化的概念归一化和标准化的区别：二、标准化/归一化的好处三、标准化/归一化的方法1、min-max标准化2、0均值标准化（Z-score standardization&#…
【Python】—— pandas 数据分析
pandas 数据分析 相关知识了解1. 数据清理2. 探索性数据分析（EDA）3. 数据过滤和选择4. 数据分组和聚合5. 数据合并和连接6. 时间序列分析7. 统计分析 第1关：了解数据集特征第2关：DataFrame 的 CRUD第3关：利用 pandas 实…
@业务部门的，奉劝一句，赶紧掌握BI报表
趁着企业还在转型数字化，赶紧把BI报表掌握起来，以后BI大数据分析将是一个常用的企业级数据分析方向。掌握BI报表后，分析数据再也不用求人了。想分析什么数据，直接在BI平台上点击取数就是了，想怎么分析就怎么分析&#…
玩转大数据9：机器学习在大数据分析中的应用
1. 引言
在大数据时代，机器学习在大数据分析中扮演着至关重要的角色。本文介绍机器学习在大数据分析中的重要性和应用场景，并探讨Java中可用的机器学习库和框架。
2. 机器学习的基本概念和算法
机器学习是当今人工智能领域的一个关键分支，…
利用 Python 进行数据分析实验（三）
一、实验目的
使用Python解决简单问题
二、实验要求
自主编写并运行代码，按照模板要求撰写实验报告
三、实验步骤
本次实验共有4题：
自行给定一个从小到大排好序的数组，输入一个数并将其插入到原始数组中，新的数组还是满足从…
让业务带着问题去分析，用大数据分析工具
随着企业数字化转型进程的加快，企业大数据分析的需求也水涨船高，不少企业都在尝试上线BI大数据分析工具，让各业务人员带着业务问题去分析数据，获取解决问题的数据信息。而各高校也在搭建大数据分析教学平台，与时俱进提…
【数据分析实战】酒店行业华住集团门店分布与评分多维度分析
文章目录 1. 写在前面2. 数据集展示3. 多维度分析3.1 门店档次多元化：集团投资战略观察3.1.1 代码实现3.1.2 本人浅薄理解 3.2 门店分布：各省市分布概览3.2.1 代码实现3.2.2 本人浅薄理解 3.3 门店分级评分：服务水平的多维度观察3.3.1 代码实…
数据仪表盘设计：可视化数据指标和报告
写在开头
在信息爆炸的时代，数据不再是简单的数字和图表，而是一种有机的信息体系。如何将这些琳琅满目的数据以一种直观而高效的方式展示，成为企业决策者和分析师们共同关注的问题。本文将带您深入学习如何设计和创建数据仪表盘，使数据指标和报告以一目了然的方式呈现。
…
《PySpark大数据分析实战》图书上线啦
《PySpark大数据分析实战》图书上线啦 《PySpark大数据分析实战》图书上线啦特殊的日子关于创作关于数据关于Spark关于PySpark关于图书/专栏 《PySpark大数据分析实战》图书上线啦
特殊的日子 不知不觉一转眼入驻CSDN已经满一年了，这真是一个充满意义的特殊的日子&…
python 画条形图（柱状图）
目录 前言
基础介绍
月度开支的条形图 前言
条形图（bar chart），也称为柱状图，是一种以长方形的长度为变量的统计图表，长方形的长度与它所对应的变量数值呈一定比例。
当使用 Python 画条形图时，通常会使…
京东数据运营（京东API接口）：10月投影仪店铺数据分析
鲸参谋监测的京东平台10月份投影仪市场销售数据已出炉！ 10月份，环同比来看，投影仪市场销售均上涨。鲸参谋数据显示，今年10月，京东平台投影仪的销量为16万，环比增长约22%，同比增长约8%࿱…
人口减少引发全面社会变革：从幼儿园到经济结构都在发生深刻变化
湖南省教育厅发布文件，首次正式提出“有序组织幼儿园设并转撤”，在我国整体人口下降的大背景下，引发了社会对于幼儿园存废问题的深刻思考。随着出生率的下降，人们虽然对于幼儿园规模的减少有所预期，但供需形势的逆转却…
数据分析-23--糖尿病预测（线性回归模型）（包含数据代码）
文章目录 0. 数据代码下载1. 项目介绍2. 数据处理1. 导入数据2. 处理数据 3. 建立模型4. 考察单个特征 0. 数据代码下载
关注公众号：『AI学习星球』 回复：糖尿病预测 即可获取数据下载。 算法学习、4对1辅导、论文辅导或核心期刊可以通过公众号或➕v&am…
数据分析基础之《numpy（1）—介绍》
一、numpy介绍
1、numpy 数值计算库 num - numerical 数值化的 py - python
2、numpy是一个开源的python科学计算库，用于快速处理任意维度的数组 numpy支持常见的数组和矩阵操作。对于同样的数值计算任务，使用numpy比直接使用python要简洁的多 numpy使…
巧用ChatGPT高效搞定Excel数据分析【文末送书-04】
文章目录 一.巧用ChatGPT高效搞定Excel数据分析1. ChatGPT简介2. 安装所需工具2.1 Python2.2 OpenAI GPT库 3. 与ChatGPT交互进行数据分析4. 利用ChatGPT进行筛选和排序5. ChatGPT的局限性和注意事项6. ChatGPT与数据可视化7. ChatGPT与进阶数据分析任务 二. 结论&文末福利…
做数据分析为何要学统计学（0）——如果提高数据样本质量
样本是数据分析的关键，直接影响研究成果质量。如果样本质量不高，即使使用再好的分析方法，也无法得出理想的结论。所以数据学科圈里有句名言“数据比方法更重要”。所以如何提高数据样本的质量是保证研究成果质量的第一步，虽然这一…
数据科学实践：探索数据驱动的决策
写在前面
你是否曾经困扰于如何从海量的数据中提取有价值的信息？你是否想过如何利用数据来指导你的决策，让你的决策更加科学和精确？如果你有这样的困扰和疑问，那么你来对了地方。这篇文章将引导你走进数据科学的世界，探索数据驱动的决策。
1.数据科学的基本原则
在我们…
做数据分析为何要学统计学（6）——什么问题适合使用t检验？
t检验（Students t test），主要依靠总体正态分布的小样本（例如n < 30）对总体均值水平进行差异性判断。
t检验要求样本不能超过两组，且每组样本总体服从正态分布（对于三组以上样本的࿰…
PrestoSQL语法及优化
PrestoSQL语法及优化 1、PrestoSQL概述2、PrestoSQL语法2.1、PrestoSQL数据类型2.2、关键字和标识符2.3、PrestoSQL注释2.4、PrestoSQL语法2.5、PrestoSQL例程2.6、PrestoSQL使用常见问题3、PrestoSQL优化3.1、存储优化3.2、查询优化3.3、多数据源联合查询1、PrestoSQL概述 202…
利用 Python 进行数据分析实验（二）
一、实验目的、
使用Python解决简单问题
二、实验要求
自主编写并运行代码，按照模板要求撰写实验报告
三、实验步骤
本次实验共有4题：
输入2000年后的某年某月某日，判断这一天是从2000年1月1日开始算起的第几天？公务员面试设…
做数据分析为何要学统计学（7）——什么问题适合使用方差分析？
方差分析（ANOVA，也称变异数分析）是英国统计学家Fisher（1890.2.17－1962.7.29）提出的对两个或以上样本总体均值进行差异显著性检验的方法。
它的基本思想是将测量数据的总变异（即总方差ÿ…
山海鲸可视化软件：选择合适的图表，让数据可视化更高效
作为一名山海鲸可视化软件的开发者，我深知选择合适的图表对于数据可视化的重要性。下面我将从开发者的角度，分享一些关于如何选择合适可视图表的建议。 首先，我们需要明确数据可视化的目标。不同的图表类型具有不同的特点和适用场景ÿ…
如何利用视频号爆款数据分析平台，实现播放变现？
利用视频号爆款数据分析平台了解当下视频号热点视频，以及那个分类更有潜力，可以即使进行预判， 变现是近年来非常流行的一种商业模式。视频号爆款数据分析平台是视频下载plus的一个功能，可以让用户通过每天都热点数据以及热门榜单…
扩展学习|商业智能和分析:从大数据到大影响
文献来源：Chen H, Chiang R H L, Storey V C. Business intelligence and analytics: From big data to big impact[J]. MIS quarterly, 2012: 1165-1188. 下载链接：https://pan.baidu.com/s/1JoHcTbwdc1TPGnwXsL4kIA 提取码：a8uy 在不同的组…
全国高校名单-完整收藏版
点击查看完整版 -> 搜索 “高校” 即可
上海交通大学 北京大学 中国科学技术大学 西安交通大学 中南大学 东南大学 武汉大学 南京大学 同济大学 天津大学 复旦大学 中山大学 华中科技大学 哈尔滨工业大学 清华大学 四川大学 北京师范大学 苏州大学 南开大学 北京航空航天大…
牛客网SQL训练2—SQL基础进阶
文章目录 一、基本查询二、数据过滤三：函数四：分组聚合五：子查询六：多表连接七：组合查询八：技能专项-case when使用九：多表连接-窗口函数十：技能专项-having子句十一：技能…
天猫数据分析（天猫数据查询）：11月茅台涨价依然稳居销冠，白酒市场销售现状分析
11月份，贵州茅台宣布涨价。2023年11月1日起茅台上调53%vol贵州茅台酒（飞天、五星）出厂价格，平均上调幅度约为20%。有媒体报道，随着茅台酒出厂价宣布上调后，市场销售价普遍上涨50元至100元不等。 如今&#…
京东数据分析（京东大数据运营）：10月取暖器行业迎来消费热潮，销额环比增长约570%！
随着气温降低，御寒用品开始热销。 气温的下降对取暖器的销售有明显的拉动效果，环比来看，10月份取暖器的销量销额均呈现三位数增长。鲸参谋数据显示，今年10月，京东平台取暖器的销量将近28万，环比增长572%&am…
用python做餐饮业的数据分析
问题:
1，订单表的长度 shape columns
2，统计菜单的平均价格（amount）
3，什么菜最受欢迎
订单 客户 时间 菜品 这几个维度
4，哪个订单ID点的菜最多等问题
首先在jupyter note里导入模块
import numpy …
2017年五一杯数学建模A题公交车排班问题解题全过程文档及程序
2017年五一杯数学建模
A题 公交车排班问题
原题再现 随着徐州市经济的快速发展，公交车系统对于人们的出行扮演着越来越重要的角色。在公交车资源有限的情况下，合理的编排公交车的行车计划成为公交公司亟待解决的问题。以下给出公交车排班问题中的部分名…
国家数据局提出数据要素十大应用场景
数据要素十大应用场景 1. 数据要素智能制造2. 数据要素智慧农业3. 数据要素商贸流通4. 数据要素交通运输5. 数据要素金融服务5. 数据要素科技创新5. 数据要素文化旅游6. 数据要素医疗健康7. 数据要素应急管理8. 数据要素气象服务9. 数据要素智慧城市10. 数据要素绿色低碳 为贯彻…
数据可视化？这些平台能处
图表在各行各业都起到举重若轻的作用，无论是项目汇报、业绩分析，亦或是数据挖掘、统计分析，良好的可视化可以为我们的阐述起到画龙点睛的效果。在一篇文章中，如果只有密密麻麻的文字堆积，无论是谁恐怕都无法长期保持注…
Python数据科学视频讲解：Python字典
2.13 Python字典 视频为《Python数据科学应用从入门到精通》张甜 杨维忠 清华大学出版社一书的随书赠送视频讲解2.13节内容。本书已正式出版上市，当当、京东、淘宝等平台热销中，搜索书名即可。内容涵盖数据科学应用的全流程，包括数据科学应用…
你应该关注的 36 个 R 博客和网站
简介
本文来自博客， 是从数千个网络博客中挑选出的最佳 R 编程博客，根据流量、社交媒体关注者和更新频率进行排名。
看看你了解哪些，可以通过一些软件订阅这些网站，实现更新提醒等功能。
Power BI - 5分钟学习增加索引列
每天5分钟，今天介绍Power BI增加索引列。
什么是增加索引列？ 增加索引列就是向表中添加一个具有显式位置值的新列，一般从0或者从1开始。
举例： 首先，导入一张【Sales】样例表(Excel数据源导入请参考每天5分钟第一天)…
Python数据科学视频讲解：Python元组
2.12 Python元组 视频为《Python数据科学应用从入门到精通》张甜 杨维忠 清华大学出版社一书的随书赠送视频讲解2.12节内容。本书已正式出版上市，当当、京东、淘宝等平台热销中，搜索书名即可。内容涵盖数据科学应用的全流程，包括数据科学应用…
如何基于企业需求，又便宜又快地定制开发一套CRM客户管理系统？
如何基于企业需求，又便宜又快地定制开发一套CRM客户管理系统？
定制开发CRM客户管理系统是为了满足企业个性化需求而进行的，它可以帮助企业提高客户关系管理效率，提供更好的客户服务和实现精细化运营。本文将为大家介绍CRM定制开发…
大数据技术之Shell（超级详细）
大数据技术之Shell（超级详细）
第1章 Shell概述
Shell 是一种脚本语言，用于在操作系统的命令行界面（CLI）下执行命令和脚本。在大数据领域，Shell 脚本常用于编写数据处理和分析任务的自动化脚本，…
这么讲还不会MySQL的DQL数据查询语言,我倒立洗头！
DQL数据查询语言一、基本的SELECT语句1、查询所有列2、查询特定的列3、列的别名4、去重5、号的作用二、过滤和排序数据1、过滤2、between and3、in4、is null5、order by 子句三、总结一、基本的SELECT语句
在数据库中，查询语句算是最基础、最重要的一个的东西了&a…
【海量数据挖掘/数据分析】之 决策树模型（决策树模型、决策树构成、决策树常用算法、决策树性能要求、信息增益、信息增益计算公式、决策树信息增益计算实例）
【海量数据挖掘/数据分析】之 决策树模型（决策树模型、决策树构成、决策树常用算法、决策树性能要求、信息增益、信息增益计算公式、决策树信息增益计算实例） 目录
【海量数据挖掘/数据分析】之 决策树模型（决策树模型、决策树构成、决策树常…
Chromedriver安装教程【无需翻墙】
第一步
查看你当前Chrome浏览器的版本，如下图所示：
第二步
查看当前Chrome浏览器的版本号，如下图所示,版本 108.0.5359.125（正式版本） （64 位）中的，108就是我们的版本号。
第三…
数据分析-python学习 （1）numpy相关
内容为：https://juejin.cn/book/7240731597035864121的学习笔记
导包
import numpy as np numpy数组创建
创建全0数组，正态分布、随机数组等就不说了，提供了相应的方法通过已有数据创建有两种 arr1np.array([1,2,3,4,5]) 或者datanp.loadt…
Python 2.x 中如何使用pandas模块进行数据分析
Python 2.x 中如何使用pandas模块进行数据分析
概述: 在数据分析和数据处理过程中，pandas是一个非常强大且常用的Python库。它提供了数据结构和数据分析工具，可以实现快速高效的数据处理和分析。本文将介绍如何在Python 2.x中使用pandas进行数据分析&am…
Python3，一行代码解析地址信息，原来物流单的地址是这样拆分。
1行代码解析地址信息1、引言2、代码示例2.1 简介2.2 安装2.3 实战2.3.1 提取省市区信息2.3.2 提取街镇乡、村或居委会信息2.3.3 自动补全省市信息3、总结1、引言
小屌丝：鱼哥，你说咱们发快递时填写的地址信息，到后台怎么能看清楚写的对不对呢…
【数据分析 - 基础入门之NumPy①】Anaconda安装及使用
知识目录 前言一、 Anaconda是什么二、为什么使用Anaconda三、安装步骤3.1 下载安装3.2 配置conda源 结语 前言
大家好！我是向阳花花花花，本期给大家带来的是 Anaconda 安装及使用。
每日金句分享：故事不长，也不难讲。』—— 「…
大数据处理流水线_数据处理生产线_大数据处理公司
当下有出现很多比较热门的技术名词，例如：BI、推荐系统、机器学习模型、高管驾驶舱等，在这些名词的背后，就是我们所说的“数据”。这些数据不是简简单单的数据，并不是单一的，我们需要在这些数据中经过复杂的…
Python数据分析实战-格式化字符串的两种方法（附源码和实现效果）
实现功能
格式化字符串的两种方法
实现代码
# 方法一：format方法
query SELECT customer_id, COUNT(*) as num_ordersFROM ordersWHERE date > {start_date} AND date < {end_date} GROUP BY customer_idHAVING num_orders > {min_orders}
start_da…
我们慢慢的，主动放弃了选择权【10月第四周】
- 边听边看，效果更好 - - 10月第四周 - 一年52周，每周都要总结反思。我之前试过365天每日记录，一段时间后觉的不合理。我们不是每天都有启发，刻意为了总结而每日就失去了意义。成长在于有感而发。我们以每周的维度记录，…
一个产品经理，对积分商城的灵魂四问
产品日活越来越重要了。现在互联网的促活方式，要是不做个会员等级、不做个积分体系，咱都不好意思说咱是产品经理。然而正是这种一窝蜂的做法风气，让我们以为积分商城是万能灵药。当产品需要促活、留存的时候，就会有很多声音说&…
大学统计学基础知识笔记
本文主要介绍：统计学基本概念、数据的收集、数据的描述、回归和分类、多元分析，其中回归和分类、多元分析是学习重点。统计学中的其它概念如：概率及分布、参数估计、假设检验属于经典统计的内容，在此文略去，时间序列分析及指数是金融方面的应用，也一并略去，如有需要请查…
像大禹治水一样治理数据
编辑：阿由设计：紫菜作为亚马逊云服务（AWS）增长最快的一项服务，Amazon Aurora为企业的云数据库应用带来了前所未有的体验，它带来了远超商业数据库的强大性能，却只需十分之一的成本。教人如何不爱…
“技术的归技术，商业的归商业？”SAP：不！
撰文：康翔编辑：阿由设计：紫菜过去的半个世纪，尤其是最近三十多年，商业世界发生的巨大变化令人印象深刻。究其原因，是由于技术已经当仁不让地成为推动进步的催化剂，商业效率不断在提高࿰…
所有的数据，都值得用心守护
撰文：康翔编辑：阿由设计：紫菜“在信息社会，数据将成为核心资源，就像农业时代的土地、工业时代的能源。”说真的，多年前在《南方周末》上第一次看到这段话时，我是有所抵触的，尽管我是…
WAIC 工业互联网算法大赛：五大赛道、真实工业场景
由上海市政府打造的国际顶级人工智能会议——2020 世界人工智能大会云端峰会（WAIC），已于 7 月 9 日--11 日在线上成功举办。同期，2020 全球工业互联网算法大赛（IIAC）也于7 月 10 日晚，在 WAIC 2…
全面升级 | ONES Performance 研发效能管理解决方案
如何提升团队研发效能是企业技术团队的重要课题。然而在实践中，许多企业面临着如下挑战： 研发数据分散难以收集，数据口径不统一 缺乏科学的效能度量指标 效能指标不透明，无法快速定位问题 团队整体效能提升难 基于对研发管理行…
Titanic--细节记录二
目录 merge、join以及concat的方法的不同以及相同 merge
join
concat stack函数
agg函数
countplot--计算条形统计图 FacetGrid
kdeplot--核密度估计图
facet.set facet.add_legend()
折线图表示年龄分布情况
为什么所有的曲线都被添加到同一个图上：
填充…
对话 CTO〡听 GrowingIO CTO 叶玎玎讲无埋点数据分析的业务理想
专栏介绍
「对话 CTO」是极客公园的一档最新专栏，以技术人的视角聊聊研发管理者的发展和成长。
本专栏由企业级研发管理工具ONES的创始人&CEO王颖奇作为特邀访谈者。王颖奇曾参与金山软件 WPS、金山毒霸等大型软件的核心开发工作；2011 年创立了正…
python数据分析( 一)
python数据分析
第一篇：Python 数据分析入门之python的安装 Python介绍python数据分析前言一、Python简介二、Python安装与使用1.推荐使用Anaconda2.推荐使用jupyter lab三、Python数据分析包简介总结前言
作者：Guido Van Rossum (GvR) http://www.pyt…
案例实战：用户评论情感分析模型
目录一.案例背景二.读取数据三.中文分词四. 构造特征变量和目标变量1.数据向量化2.目标变量的提取五.神经网络模型搭建和使用1.划分数据集2.搭建神经网络模型3.模型使用总结一.案例背景
情感分析是自然语言处理领域最为经典的应用之一，一直长盛不衰，特别…
Numpy,pandas,Matplotlib三剑问鼎python数据分析
python之如此强大，是因为他的很多工具包，例如数据分析中就涉及三个主要的包，NumPy和pandas和Matplotlib库，其中NumPy和pandas主要就是处理一维以及二维数据，Matplotlib则是数据可视化的利器。 一 , NumPy库和数组
imp…
EDG夺冠，用爬虫+数据分析+自然语言处理(情感分析)+数据可视化分析3万条数据：粉丝都疯了(唯一原创)
原创不易，本文禁止抄袭、转载，违权必究！ 目录一、EDG夺冠信息二、实战目标2.1 网络爬虫2.2 数据可视化（词云图）2.3 自然语言处理（情感分析）三、bilibili接口分析四、编码4.1 爬取数据4.2 数据可…
医院智慧运营管理数字化方案
近年来，随着医院的发展规模不断扩大，其人、财、物、技术等资源的配置活动愈加复杂，资产管理、成本管理、收支核算管理、资金预算管理、绩效管理等经济活动日常管理也日益繁重，医院对于数字化提升精细化管理的需求也愈发迫切。
国…
小红书数据分析丨现实版模拟人生，这届网友热衷于“云开店”？
近期，小红书出现的一个神秘的热心群体，他们经常活跃在各种小店店主发布的求助帖评论区中，积极地帮助店主出谋划策，寻找小店经营的优化之道，成功帮助小店成功转亏为盈！江湖人称一一云股东。小红书话题#爱上帮…
2023 华数杯全国大学生数学建模竞赛 ——C题母亲身心健康对婴儿成长的影响 完整建模+代码
目录 完整思路下载链接：这里可以获取2023华数杯全国大学生数学建模竞赛题目C 题母亲身心健康对婴儿成长的影响✅ 问题1问题1建模思路✅ 问题2问题2建模思路✅ 问题3问题3建模思路✅ 问题4问题4建模思路✅ 问题5问题5建模思路提供的数据和资料： 完整思路下…
（八）穿越多媒体奇境：探索Streamlit的图像、音频与视频魔法
文章目录 1 前言2 st.image：嵌入图像内容2.1 图像展示与描述2.2 调整图像尺寸2.3 使用本地文件或URL 3 st.audio：嵌入音频内容3.1 播放音频文件3.2 生成音频数据播放 4 st.video：嵌入视频内容4.1 播放视频文件4.2 嵌入在线视频 5 结语&#x…
GPT-4助力数据分析：提升效率与洞察力的未来关键技术 | 京东云技术团队
摘要
随着大数据时代的到来，数据分析已经成为企业和组织的核心竞争力。然而，传统的数据分析方法往往无法满足日益增长的数据分析需求的数量和复杂性。在这种背景下，ChatGPT-4作为一种先进的自然语言处理技术，为数据分析带来了革命…
基于Python爬虫+词云图+情感分析对某东上完美日记的用户评论分析
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
模板学堂｜SQL数据集动态参数使用场景及功能详解
DataEase开源数据可视化分析平台于2022年6月正式发布模板市场（https：//dataease.io/templates/）。模板市场旨在为DataEase用户提供专业、美观、拿来即用的仪表板模板，方便用户根据自身的业务需求和使用场景选择对应的仪表板模板&a…
8 | 美国航班数据分析
"在现代快节奏的生活中，航空旅行已经成为人们出行的重要方式之一。然而，航班的准时性一直以来都是旅客和航空公司关注的焦点。无论是商务出差还是休闲度假，乘客们都希望能够在既定的时间内安全、准时地到达目的地。而对于航空公司而言，准点运营不仅关乎乘客体验，还涉…
ArcGIS Pro技术应用(暨基础入门、制图、空间分析、影像分析、三维建模、空间统计分析与建模、python融合)
GIS是利用电子计算机及其外部设备，采集、存储、分析和描述整个或部分地球表面与空间信息系统。简单地讲，它是在一定的地域内，将地理空间信息和 一些与该地域地理信息相关的属性信息结合起来，达到对地理和属性信息的综合管理。GIS的…
3.利用matlab计算不定积分和定积分（matlab程序 ）
1.简述 不定积分
首先，通过符号变量创建一个符号函数，然后调用积分命令来计算函数的积分，示例如下： 注意：matlab中计算的不定积分结果中没有写上常数C，读者需要自己在使用的时候记得加上常数部分。 通常情…
爬虫如何应对网站的反爬机制？如何查找user-agent对应的值
import requestsurl https://movie.douban.com/top250
response requests.get(url)
# 查看结果
print(response)在requests使用一文中我们有讲到，当状态码不是200时表示爬虫不可用，也就是说我们获取不到网页源代码。但是我们还是可以挣扎一下ÿ…
跨境多语言商城源码搭建--定制代码+源码开源
搭建一个跨境多语言商城需要以下步骤：
1. 确定需求：首先，需要明确商城的功能和需求，比如支持哪些语言、支持哪些支付方式、支持哪些货币等。根据需求来决定使用的开发语言和技术栈。
2. 寻找源码：可以在互联网上搜索…
生信豆芽菜——配对型的复杂箱线图使用说明
网站：http://www.sxdyc.com/visualsBoxHalfPlot 一、配对型的复杂箱线图简介 配对型的复杂箱线图原理与箱线图相同，常见于配对样本的数据分析中，在日常研究中，我们会碰到配对资料，例如同一病人治疗前后的变化ÿ…
selenium爬虫与配置谷歌浏览器的driver问题
用selenium爬虫时，明明已经安装了selenium模块，程序却运行不了。在使用selenium之前必须先配置浏览器对应版本的webdriver
本文主要涉及驱动有问题driver 网上有很多手动的方法（查看谷歌浏览的版本然后在其他博主分享的webdriver中下载与自己…
Gartner 发布影响数据科学和机器学习未来方向重要趋势
出品 | CSDN 云计算
供稿 | Gartner Gartner今日发布了影响数据科学与机器学习（DSML）未来方向的重要趋势。随着DSML行业的快速发展和演变，数据对于人工智能（AI）开发与运用的重要性日益提高，尤其是投资重点…
30 | 中国高校数据分析
一、数据源
本项目使用了两个csv的数据文件，一个是中国高校（大学）的数据，一个是中国高校专业设置的数据 数据基本栏位：高校（大学）的数据高校专业设置的数据学校学校省份专业类别城市专业名称地址国家特色专业水平层次办学类别办学类型985211双一流二、数据分析目标
本…
面向数据科学家和分析师的统计基础
推荐：使用 NSDT场景编辑器助你快速搭建可编辑的3D应用场景 “统计学是科学的语法。 卡尔皮尔逊 统计学在数据科学和数据分析中的重要性不容低估。统计提供了查找结构和提供更深入数据见解的工具和方法。统计学和数学都喜欢事实，讨厌猜测。了解这两个重要…
DataGrip 配置 HiveServer2 远程连接访问
文章目录 集群配置 HiveServer2 服务DataGrip 配置 HiveServer2 访问 Hive 集群配置 HiveServer2 服务
1.在 Hive 的配置文件 hive-site.xml 中添加如下参数： <!-- 指定 HiveServer2 运行端口，默认为：10000 --><property><na…
Apache Doris 入门教程26：资源管理
为了节省Doris集群内的计算、存储资源，Doris需要引入一些其他外部资源来完成相关的工作，如Spark/GPU用于查询，HDFS/S3用于外部存储，Spark/MapReduce用于ETL, 通过ODBC连接外部存储等，因此我们引入资源管理机制来管理Do…
数据分析两件套ClickHouse+Metabase(一)
ClickHouse篇
安装ClickHouse
ClickHouse有中文文档, 安装简单 -> 文档 官方提供了四种包的安装方式, deb/rpm/tgz/docker, 自行选择适合自己操作系统的安装方式 这里我们选deb的方式, 其他方式看文档
sudo apt-get install -y apt-transport-https ca-certificates dirm…
《PySpark大数据分析实战》-14.云服务模式Databricks介绍基本概念
📋 博主简介 💖 作者简介：大家好，我是wux_labs。😜 热衷于各种主流技术，热爱数据科学、机器学习、云计算、人工智能。 通过了TiDB数据库专员（PCTA）、TiDB数据库专家（PCTP…
物业、消防大数据平台页面，小区物业大数据监控服务平台（PS资料）
数据大屏通过实时的数据展示，可及时发现数据的变化和异常，以便及时采取措施。现分享消防可视化大数据大屏网页界面、简约物业大数据平台页面、小区物业大数据监控服务平台模版的UI源文件，供UI设计师们快速获取PSD源文件完成工作。
若需更多 …
数据可视化的魅力你了解吗？
你真的了解数据可视化吗？它所具备的真正魅力可能远远超出我们想象。数据可视化扩展了我们对数字和信息的简单理解，为我们揭示了一个无限可能的世界。今天我就以可视化行业的多年工作经验出发，和大家简单聊聊数据可视化的魅力。
数据的故事化…
天猫数据分析-天猫数据分析工具-11月天猫面霜面膜数据分析报告：市场销售额超150亿！
秋冬气温下降、天气干燥，护肤品的市场需求也与日俱增。根据鲸参谋电商数据分析平台的相关数据显示，今年11月份，天猫平台上护肤品市场的销量销额都纷纷上升，其中，市场销量将近1.2亿，环比增长约14%࿱…
针对海量数据的存储与访问瓶颈的解决方案
背景 在当今这个时代，人们对互联网的依赖程度非常高，也因此产生了大量的数据，企业视这些数据为瑰宝。而这些被视为瑰宝的数据为我们的系统带来了很大的烦恼。这些海量数据的存储与访问成为了系统设计与使用的瓶颈，而这些数据往往存…
金融数据可视化大屏，开启数字时代的金融新篇章
随着数字化时代的到来，金融行业的数据量正在迅速增长。如何有效处理、分析和呈现这些数据，成为了一个亟待解决的问题。而金融数据可视化大屏的出现，正是为了解决这一问题，让金融行业的数据处理和分析更加直观、高效。 一、金融数据…
从单细胞数据分析的最佳实践看R与Python两个阵营的博弈
R与Python，在生物信息学领域的博弈异常激烈。许多生信分析，两个阵营都发展出了自己的方法，比如单细胞数据分析，R有Seurat，Python就有Scanpy。这些层出不穷的方法不断地吸引着吃瓜群众的眼球，同时也让人患上…
京东年度数据报告-2023全年度笔记本十大热门品牌销量（销额）榜单
2023年度，在电脑办公市场整体销售下滑的环境下，笔记本市场的整体销售也不景气。
根据鲸参谋平台的数据显示，京东平台上笔记本的年度销量为650万，同比下滑约16%；销售额约为330亿，同比下滑约19%。同时&#…
数据交付变革：研发到产运自助化的转型之路
作者 | Chris 导读 本文讲述为了提升产运侧数据观察、分析、决策的效率，支持业务的快速迭代，移动生态数据研发部对数仓建模与BI工具完成升级，采用宽表建模与TDA平台相结合的方案，一站式自助解决数据应用需求。在此过程中ÿ…
部分城市公交站点数据，Shp+excel格式数据，2020年，几何类型为点
随着城市的发展和人口的增长，公共交通成为了人们出行的重要方式之一。而公交站点作为公共交通的重要组成部分，其数据信息的获取和分析对于城市规划和管理具有重要意义。
今天来分享一下部分城市公交站点数据： 首先先了解下该数据的基本信息 …
Pandas实战100例 | 案例 27: 数据合并 - 使用 `merge`
案例 27: 数据合并 - 使用 merge
知识点讲解
在数据处理中，经常需要将来自不同来源的数据集合并在一起。Pandas 提供了 merge 函数，它类似于 SQL 中的 JOIN 操作，可以根据一个或多个键来合并两个 DataFrame。
内连接 (inner): 只合并两个 …
解锁加密经济领域的新篇章：Token Explorer 助您一臂之力
随着全球加密货币的普及，市场变化对于想要优化回报的投资者来说是一个挑战。碎片化的数据是一个问题，但是像 Footprint Analytics 的 Token Explorer 这样的创新解决方案，可以提供必要的加密经济生态聚类智能，帮助改善投资组合。 …
missingno——缺失数据可视化
【说明】文章内容来自《机器学习入门——基于sklearn》，用于学习记录。若有争议联系删除。 数据处理中，缺失数据可视化。missingno提供了一个灵活且易于使用的缺少数据可视化工具和实用程序的小型工具集，可以快速直观地概述数据集的完整性。 …
旅游数据可视化大屏：一屏掌控，畅游数据之海
随着旅游业的蓬勃发展，如何有效地管理和分析旅游数据成为行业关注的焦点。旅游数据可视化大屏作为一种新兴的技术手段，为旅游业带来了前所未有的机遇和挑战。 旅游数据可视化大屏集成了丰富的数据资源，通过直观的图表、图像和交互界面&#x…
【Python】数据可视化--基于TMDB_5000_Movie数据集
一、数据准备
tmdb_5000_movie数据集下载
二、数据预处理
观察数据集合情况
import pandas as pd
import ast
import warnings
warnings.filterwarnings(ignore)
# 加载数据集
df pd.read_csv(tmdb_5000_movies.csv)
# 查看数据集信息
print(df.info()) 由于原数据集包含的…
天猫数据分析-天猫分析工具-天猫数据在哪里看-11月天猫宝宝辅食行业销售分析报告
随着居民可支配收入的增长，家长对宝宝健康的关注程度也随之上涨，尽管出生率下降，但越来越多的家长逐渐认可外购辅食的价值，因此辅食也逐渐“刚需化”，辅食市场也保持着较大的市场规模。 根据鲸参谋电商数据分析平台的相…
【Python】—— Numpy 初体验
Numpy 初体验 第1关：Numpy 创建数组第2关：Numpy 数组的基本运算第3关：Numpy 数组的切片与索引第4关：Numpy 数组的堆叠第5关：Numpy 的拆分 第1关：Numpy 创建数组
任务描述 本关任务：使用 Numpy创…
图解智慧：数据可视化如何助你高效洞悉信息？
在信息爆炸的时代，数据扮演着越来越重要的角色，而数据可视化则成为解读和理解海量数据的得力工具。那么，数据可视化是如何帮助我们高效了解数据的呢？下面我就以可视化从业者的角度来简单聊聊这个话题。 无需深奥的专业知识&#x…
Python数据科学视频讲解：特征选择的概念、原则及方法
4.1 特征选择的概念、原则及方法 视频为《Python数据科学应用从入门到精通》张甜 杨维忠 清华大学出版社一书的随书赠送视频讲解4.1节内容。本书已正式出版上市，当当、京东、淘宝等平台热销中，搜索书名即可。内容涵盖数据科学应用的全流程，包…
数据分析基础之《numpy（5）—合并与分割》
了解即可，用panads
一、作用 实现数据的切分和合并，将数据进行切分合并处理
二、合并
1、numpy.hstack 水平拼接
# hstack 水平拼接
a np.array((1,2,3))
b np.array((2,3,4))
np.hstack((a, b))a np.array([[1], [2], [3]])
b np.array([[2], […
Power BI - 5分钟学习追加查询
每天5分钟，今天介绍Power BI追加查询
什么是追加查询？ 追加操作是通过将一个或多个表的内容创建一个新表，通过聚合所有表中的列标题，为新表创建架构。
举例: 导入三张Sales表，分别是【Sales】,【Sales_BJ】,【Sales_…
Python 时间处理与数据分析利器：深入剖析 Arrow 模块的优势
写在开头
时间在数据分析中扮演着至关重要的角色，而选择适当的时间处理模块对于提高代码效率和可读性至关重要。本文将深入介绍 Arrow 模块，探讨其相对于其他时间处理模块的优势，以及在数据分析中的实际应用。
1. Arrow 模块概览
Arrow 模…
《Python数据分析技术栈》第06章使用 Pandas 准备数据 01 Pandas概览（Pandas at a glance）
01 Pandas概览（Pandas at a glance）
《Python数据分析技术栈》第06章使用 Pandas 准备数据 01 Pandas概览（Pandas at a glance）
Pandas概述
Wes McKinney developed the Pandas library in 2008. The name (Pandas) comes from…
5.利用matlab完成 符号矩阵的转置和 符号方阵的幂运算（matlab程序）
1.简述 Matlab符号运算中的矩阵转置
转置向量或矩阵
B A. B transpose(A) 说明
B A. 返回 A 的非共轭转置，即每个元素的行和列索引都会互换。如果 A 包含复数元素，则 A. 不会影响虚部符号。例如，如果 A(3,2) 是 12i 且 B A.࿰…
SPSS--如何使用分层分析以及分层分析案例分享
分层分析：将资料按某个或某些需要控制的变量的不同分类进行分层，然后再估计暴露因子与某结局变量之间关系的一种资料分析方法。 分层分析的最重要的用途是评估和控制混杂因子所致的混杂偏倚。通过按混杂因子分层，可使每层内的两个比较组在所控…
企业时代下的汽车4S店形势分析
据网上数据显示，2022年约有2000家汽车4S店闭店退网，这一数据不由令人惊叹！
疫情放开后，原以为汽车经销商的春天也即将来临，可它们有些已经死在了半路上。
2023年伊始，经销商大戏以一则破产消息开幕——浙…
29 | 广州美食店铺数据分析
广州美食店铺数据分析
一、数据分析项目MVP加/价值主张宣言 随着经济的快速发展以及新媒体的兴起，美食攻略、美食探店等一系列东西进入大众的眼球，而人们也会在各大平台中查找美食推荐，因此本项目做的美食店铺数据分析也是带有可行性的。首先通过对广东省的各市美食店铺数量…
2023年京东按摩仪行业数据分析（京东销售数据分析）
近年来，小家电行业凭借功能与颜值，取代黑电和白电，成为家电市场的主要增长点。在这一市场背景下，颜值更高、功能更丰富、品种更齐全的各类按摩仪，借助新消费和电子商务的风潮，陆续被推上市场。今年…
BDA初级分析——可视化基础
一、可视化的作用
数据可视化——利用各种图形方式更加直观地呈现数据的过程 可视化的作用 1、更快地理解数据，找出数据的规律和异常
2、讲出数据背后的故事，辅助做出业务决策
3、给非专业人士提供数据探索的能力
数据分析问题如何通过可视化呈现&am…
22 | 书籍推荐数据分析
import numpy as np
import pandas as pd
import seaborn as sns
import matplotlib.pyplot as plt
from sklearn.cluster import KMeans
from sklearn import neighbors
from sklearn.model_selection import train_test_split
from sklearn.preprocessing import
辨析：方差 和 均方误差 的联系和区别
在学习回归问题评价指标时，一会遇到 方差 一会遇到均方误差（Mean Squared Error，MSE），感觉这两长得很像，所以总是搞混，所以进行一下对比：
公式：
方差：
、 …
21 | 朝阳医院数据分析
朝阳医院2018年销售数据为例，目的是了解朝阳医院在2018年里的销售情况，通过对朝阳区医院的药品销售数据的分析，了解朝阳医院的患者的月均消费次数，月均消费金额、客单价以及消费趋势、需求量前几位的药品等。 import numpy as np
from pandas import Series,DataFrame
impo…
Apache Doris 2.0.0 版本正式发布：盲测性能 10 倍提升，更统一多样的极速分析体验
亲爱的社区小伙伴们，我们很高兴地向大家宣布，Apache Doris 2.0.0 版本已于 2023 年 8 月 11 日正式发布，有超过 275 位贡献者为 Apache Doris 提交了超过 4100 个优化与修复。
在 2.0.0 版本中，Apache Doris 在标准 Benchmark 数…
access怎么做进销存？借助access开发进销存管理应用
我不太推荐使用Access，因为他的缺点还是比较明显的：
1、软件自身限制
不能用于互联网：使用Access制作好的管理软件，访问页只能在局域网中使用；只能在Windows上运行：Access仅支持windows的运行环境&#x…
OSM模型案例：以游戏陪练app为例
OSM模型的概念
O指目标Objective：整个业务、乃至局部的小功能 能解决什么问题，提供什么样的用户价值，满足用户什么需求？
S指策略Strategy：如何达成目标，以什么方式达成目标？
M指度量Measure&…
数据校园服务管理系统，教育平台可视化界面（教育资源信息化PS文件）
大屏组件可以让UI设计师的工作更加便捷，使其更高效快速的完成设计任务。现分享大数据校园服务管理系统、科技教育平台大数据可视化界面、教育资源信息化大数据分析等Photoshop源文件，文末提供完整资料，供UI设计师们工作使用。
若需其他 大屏…
Python 数据分析 Matplotlib篇 plot设置线条样式（第2讲）
Python 数据分析 Matplotlib篇 plot设置线条样式（第2讲） 🍹博主 侯小啾 感谢您的支持与信赖。☀️ 🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ�…
【python数据分析】北京房租数据分析
北京租房数据分析 下图展示的北京链家租房的数据，请针对以下数据进行数据清洗及展开数据分析，具体要求： 运用数据清洗等常规方法对数据进行预处理；针对出租屋不同的户型、房屋面积、房屋所属区域分别进行租金分析，并用…
单挑力扣（LeetCode）SQL题：178. 分数排名（难度：中等）
题目：178. 分数排名
（通过次数166,157 | 提交次数273,273，通过率60.80%）
表:Scores
----------------------
| Column Name | Type |
----------------------
| id | int |
| score | decimal |
--------…
企业级实战项目：基于 pycaret 自动化预测公司是否破产
本文系数据挖掘实战系列文章，我跟大家分享一个数据挖掘实战，与以往的数据实战不同的是，用自动机器学习方法完成模型构建与调优部分工作，深入理解由此带来的便利与效果。
1. Introduction 本文是一篇数据挖掘实战案例，…
数据分析之词云图绘制
试验任务概述：如下为所给CSDN博客信息表，分别汇总了ai, algo, big-data, blockchain, hardware, math, miniprog等7个标签的博客。对CSDN不同领域标签类别的博客内容进行词频统计，绘制词频统计图，并根据词频统计的结果绘制词云图。…
单挑力扣（LeetCode）SQL题：1951. 查询具有最多共同关注者的所有两两结对组（难度：中等）
题目：1951. 查询具有最多共同关注者的所有两两结对组
（通过次数2,464 | 提交次数3,656，通过率67.40%）
表: Relations
-------------------
| Column Name | Type |
-------------------
| user_id | int |
| follower_id |…
基于Python的B站排行榜大数据分析与可视化系统
温馨提示：文末有 CSDN 平台官方提供的学长 QQ 名片 :) 1. 项目简介 本文介绍了一项基于Python的B站排行榜大数据分析与可视化系统的研究。通过网络爬虫技术，系统能够自动分析B站网址，提取大量相关文本信息并存储在系统中。通过对这些信息进行…
SPSS相关统计学知识精要回顾-大家都来做做
很多学生问我，学SPSS如果想深入学，那么统计学原理应该掌握到什么样的水准，我想说的是，如果真的想融会贯通，而不是短暂过关，那么应该具备一定的统计学基础，但是统计学知识也不是面面俱到都要去学…
大连理工大学软件学院2022年秋季学期《矩阵与数值分析》上机作业
文章目录 《计算机科学计算》第二版162页第12题（1）162页第16题216页第12题 《数值分析方法与应用》一、基础知识部分1、5、 二、线性方程组求解2、6、 三、非线性方程组求解1、4、 四、插值与逼近1、5、7、 五、数值积分2、 六、微分方程数值解法1、 《计…
企业数据可视化-亿发数据化管理平台提供商，实现一站式数字化运营
近些年来，国内企业数据化管理升级进程持续加速，以物联网建设、人工智能、大数据和5G网络等新技术的发展，推动了数字经济的蓬勃发展，成为维持经济持续稳定增长的重要引擎。如今许多国内中小型企业纷纷摒弃传统管理模式，…
6.利用matlab完成 符号矩阵的秩和 符号方阵的逆矩阵和行列式 （matlab程序）
1.简述 利用M文件建立矩阵 对于比较大且比较复杂的矩阵，可以为它专门建立一个M文件。下面通过一个简单例子来说明如何利用M文件创建矩阵。 例2-2 利用M文件建立MYMAT矩阵。(1) 启动有关编辑程序或MATLAB文本编辑器，并输入待建矩阵：(2) 把…
28 | Boss直聘数据分析
针对boss直聘网的招聘信息，然后分析互联网发展排名前十的城市在互联网方面职位的薪水，学历要求，经验要求，等等信息。
准备从以下几个方面进行分析：
（1）各个城市的平均工资 （2）各个学历的平均工资 （3）各个岗位的平均工资 （4）不同工作经验要求的工资 （5）各个经验…
数据分析 | Boosting与Bagging的区别
Boosting与Bagging的区别 Bagging思想专注于降低方差，操作起来较为简单，而Boosting思想专注于降低整体偏差来降低泛化误差，在模型效果方面的突出表现制霸整个弱分类器集成的领域。具体区别体现在如下五点： 弱评估器：Ba…
33 | 美国总统数据分析
在这个数据分析项目中，利用Pandas等Python库对美国2020年7月22日至2020年8月20日期间的超过75万条捐赠数据进行了深入的探索和分析。通过这一分析，他们揭示了这段时间内美国选民对总统候选人的偏好和捐款情况。以下是对文章中的主要步骤和内容的进一步描述： 数据集处理： 作…
9.利用matlab完成 泰勒级数展开 和 符号表达式傅里叶变换和反变换 （matlab程序）
1.简述 matlab之傅里叶变换和逆变换 首先生成一个方波（或者其他组合波形），然后对这个信号做傅里叶变换，拆解到频域，可以看到这个信号是由哪些频率的信号叠加而来。
然后把频域信号，用傅里叶逆变换恢复到时…
记一次练习（内容待完善）
记录最近一次爬虫和数据可视化练习
0、数据获取
import pandas as pdyear [2018,2019,2020,2021,2022]
header {"User-Agent":"Mozilla/5.0 (Linux; Android 6.0; Nexus 5 Build/MRA58N) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/111.0.0.0 Mobile S…
数据分析 | 随机森林如何确定参数空间的搜索范围
1. 随机森林超参数 极其重要的三个超参数是必须要调整的，一般再加上两到三个其他超参数进行优化即可。 2. 学习曲线确定n_estimators搜索范围 首先导入必要的库，使用sklearn自带的房价预测数据集：
import numpy as np
import pandas as pd
f…
01-jupyter notebook的使用方法
一、Tab补全
在shell中输入表达式，按下Tab，会搜索已输入变量（对象、函数等等）的命名空间： 除了补全命名、对象和模块属性，Tab还可以补全其它的。当输入看似文件路径时 （即使是Python字符串&…
36 | 银行贷款数据分析
本文将以银行贷款数据分析为主题，深入探讨如何运用数据科学的方法，揭示银行贷款领域的内在规律和趋势。通过对贷款数据的分析，我们能够洞察不同类型贷款的分布情况、贷款金额的变化趋势，以及借款人的特征和还款情况等关键信息。
通过运用Python编程语言及相关的数据分析工…
第2章 物理层 问题与回答
问题1：在许多文献中经常见到人们将“模拟”与“仿真”作为同义语？
答：“仿真”对应的英文名词有：“emulation”和“simulation” “模拟”对应的英文名词有：“simulation”和“analogy” 所以在计算机仿真领域里&…
数据分析引擎之Kylin学习笔记
文章目录理论知识介绍架构REST Server查询引擎(Query Engine)路由器(Routing)元数据管理工具(Metadata)任务引擎(Cube Build Engine)特点安装配置和启动bin/find-spark-dependency.shtomcat/conf/server.xml启动与关闭web界面使用数据准备创建Kylin项目创建Model创建Cube查询编…
Matplotlib数据可视化（二）
目录
1.rc参数设置 1.1 lines.linestype取值
1.2 lines.marker参数的取值
1.3 绘图中文预设
1.4 示例
1.4.1 示例1
1.4.2 示例2 1.rc参数设置
利用matplotlib绘图时为了让绘制出的图形更加好看，需要对参数进行设置rc参数设置。可以通过以下代码查看matplotli…
Spark大数据分析与实战笔记（第二章 Spark基础-02）
文章目录 每日一句正能量章节概要2.2 搭建Spark开发环境2.2.1 环境准备2.2.2 Spark的部署方式2.2.3 Spark集群安装部署一、Spark下载二、Spark安装三、环境变量配置 2.2.4 Spark HA集群部署一、集群部署二、运行测试三、多学一招 每日一句正能量 人生就像赛跑，不在乎…
使用Wireshark进行网络流量分析
目录
Wireshark是什么？
数据包筛选
筛选指定ip
使用逻辑运算符筛选 HTTP模式过滤
端口筛选
协议筛选
包长度筛选
数据包搜索
数据流分析
数据包导出 Wireshark是什么？
通过Wireshark，我们可以捕获和分析网络数据包，查看…
数据分析中需要用的的python知识（包括Numpy、Pandas、Matplotlib）
由于python的基础知识比较琐碎，这一块我打算以知识导图的形式呈现 软件：幕布 参考内容：菜菜菊花酱数据分析 python基础知识：https://www.mubu.com/doc/5uLBgn5LNTI numpy：https://www.mubu.com/doc/SgpdGGHMvI Pandas&…
python旅游大数据分析可视化大屏 游客分析+商家分析+舆情分析 计算机毕业设计（附源码）Flask框架✅
毕业设计：2023-2024年计算机专业毕业设计选题汇总（建议收藏）
毕业设计：2023-2024年最新最全计算机专业毕设选题推荐汇总
🍅感兴趣的可以先收藏起来，点赞、关注不迷路，大家在毕设选题ÿ…
数据分析中常见的问题之一：怎么用SPSS来读取Stata数据文件？
我们以本书附带的“数据1F”为例进行读取Stata数据文件的讲解。“数据1F”是一个Stata数据文件，如图所示。 首先启动SPSS软件或者在一个已经打开的SPSS数据文件的数据视图中从菜单栏选择“文件| 打开 | 数据”命令，如图所示。 然后就会出现如图1.77所示的…
python数据分析之交叉验证
python数据分析之交叉验证
1、常用的分类算法
有监督：SVM向量机、梯度提升、决策树（随机森林）、朴素贝叶斯、逻辑斯蒂回归、神经网络（cnn、rnn） 无监督：k-means、隐马尔可夫
2、数据分析过程
1、采集数据
2、数据预处理
3、特征选择
4、模型训练、评估、保存
5、模型…
Python中的数据分析和数据处理
随着大数据时代的到来，数据分析和处理变得越来越重要。Python作为一种功能强大的编程语言，广泛应用于数据分析和处理领域。本文将介绍Python中数据分析和处理的相关概念、常用库和工具，以及一些实际应用案例。
一、Python在数据分析和处理中…
技术学习|CDA level I 描述性统计分析（数据的描述性统计分析）
技术学习|CDA level I 描述性统计分析（数据的描述性统计分析）
数据的描述性统计分析常从数据的集中趋势、离散程度和分布形态3个方面进行。
一、集中趋势
集中趋势是指数据向其中心值靠拢的趋势。测量数据的集中趋势，主要是寻找其中心值。…
Python制作【大麦网】自动抢票程序
前言
大麦网，是中国综合类现场娱乐票务营销平台，业务覆盖演唱会、 话剧、音乐剧、体育赛事等领域。
但是因为票数有限，还有黄牛们不能丢了饭碗，所以导致了，很多人都抢不到票
那么，今天带大家用Python来制…
metaSPAdes,megahit,IDBA-UB:宏基因组装软件安装与使用
metaSPAdes,megahit,IDBA-UB是目前比较主流的宏基因组组装软件
metaSPAdes安装
GitHub - ablab/spades: SPAdes Genome Assembler
#3.15.5的预编译版貌似有问题，使用源码安装试试
wget http://cab.spbu.ru/files/release3.15.5/SPAdes-3.15.5.tar.gz
tar -xzf SP…
《PySpark大数据分析实战》-24.数据可视化图表介绍
📋 博主简介 💖 作者简介：大家好，我是wux_labs。😜 热衷于各种主流技术，热爱数据科学、机器学习、云计算、人工智能。 通过了TiDB数据库专员（PCTA）、TiDB数据库专家（PCTP…
大数据分析案例-基于LinearRegression回归算法构建房屋价格预测模型
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
财务数据分析模板有哪些，能满足决策吗？
虽然企业的业务经营各有不同，但在财务数据分析上却有着相似的需求与流程，因此财务数据分析是可以形成一套标准化模板的。奥威BI数据可视化工具从多年丰富的BI项目中总结经验，形成一套标准化、系统化的财务数据分析模板，内含资产负…
excel逻辑函数篇2
1、IF(logical_test,[value_if_true],[value_if_false])：判断是否满足某个条件，如果满足返回一个值，如果不满足则返回另一个值
if(条件,条件成立返回的值,条件不成立返回的值) 2、IFS(logical_test1,value_if_true1,…)：检查是否…
40 | NBA球员信息数据分析
本文将以NBA球员薪资数据并进行数据分析为例，展示如何获取网络上的数据资源，并通过数据处理和可视化方法揭示有关NBA球员薪资的信息。我们将使用提供的URL（www.espn.com/nba/salaries）来抓取NBA球员薪资数据，然后运用数据分析工具，对数据进行清洗、整理和计算，最终通过条…
JimuReport积木报表 v1.6.0版本发布—免费的可视化报表
项目介绍 一款免费的数据可视化报表，含报表和大屏设计，像搭建积木一样在线设计报表！功能涵盖，数据报表、打印设计、图表报表、大屏设计等！ Web 版报表设计器，类似于excel操作风格，通过拖拽完成报…
【Matplotlib】一文带你掌握Matplotlib绘制各种图形
文章目录 前言一、折线图1 - 单线2 - 多线 二、柱状图（条形图）1 - 单柱2 - 多柱3 - 堆叠4 - 条形 三、直方图四、箱型图1 - 单个2 - 多个 五、散点图1 - 散点图2 - 气泡图 六、饼图1 - 饼图2 - 甜甜圈 | 空心3 - 甜甜圈 | 实心 七、面积图八、热力图九、…
Streamlit 讲解专栏（九）：深入探索布局和容器
文章目录 1 前言2 st.sidebar - 在侧边栏增添交互元素2.1 将交互元素添加至侧边栏2.2 示例：在侧边栏添加选择框和单选按钮2.3 特殊元素的注意事项 3 st.columns - 并排布局多元素容器3.1 插入并排布局的容器3.2 嵌套限制 4 st.tabs - 以选项卡形式布局多元素容器4.1…
大数据分析案例-基于KMeans和DBSCAN算法对汽车行业客户进行聚类分群
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
【核磁共振成像】部分傅里叶重建
目录 一、部分傅里叶重建二、部分傅里叶重建算法2.1 填零2.2 零差处理 一、部分傅里叶重建 在部分傅里叶采集中，数据并不是绕K空间中心对称收集的，而是K空间的一半是完全填充的，另一半只收集了一小部分数据。 部分傅里叶采集所依据的原理…
一文详解！对于企业来说，商业智能BI到底有什么意义
随着信息化和数字化在社会各方面的推行，数字经济、数据资产成为了当前各行各业企业寻求的新发展。自2020年数据成为第五大生产要素之后，数据就被很多人誉为新时代的“石油”，也让很多人对未来的看法变成了数据处理时代。
这种环境下…
数据服务能为高校、科研院所解决哪些问题？
我国是科研大国，具有规模庞大的科研人才队伍。随着科研实力的逐渐增强，高校需要对接新平台，获得更多研发资源，而科研信息数据量急剧增长，超过了科研人员所能够管理的范围，这就需要借助数据服务，…
零售行业供应链管理核心KPI指标（一） – 能力、速度、效率和成本
有关零售行业供应链管理KPI指标的综合性分享，涉及到供应链能力、速度、效率和成本总共九大指标，是一个大框架，比较核心也比较综合。
衡量消费品零售企业供应链管理效率和水平的核心KPI通常有哪些？ 图片来源-派可数据（…
一文讲透使用Python绘制双纵轴线图
双纵轴线图主要用来展示两个因变量和一个自变量的关系，并且两个因变量的数值单位不同。具体来说，双纵轴线图是指在一幅图上有一个横轴和两个纵轴，适用于三个变量。两个纵轴分别表示一个变量，横轴变量同时适用于两个纵轴上的变量&a…
广告投放场景中ABtest分析的评价、优化和决策建议
写在开头
在当今数字化的商业环境中，广告投放是企业获取客户和推动销售的重要手段。然而，随着市场竞争的加剧，制定有效的广告策略变得愈发复杂。在这个背景下，AB测试成为了广告主们不可或缺的工具之一。本文将深入探讨广告投放中的AB测试，着重于评价指标的选择、统计学方…
《PySpark大数据分析实战》-27.数据可视化图表Pyecharts介绍
📋 博主简介 💖 作者简介：大家好，我是wux_labs。😜 热衷于各种主流技术，热爱数据科学、机器学习、云计算、人工智能。 通过了TiDB数据库专员（PCTA）、TiDB数据库专家（PCTP…
京东（天猫淘宝）数据分析工具-鲸参谋系统全功能解析——行业大盘、红蓝海市场、品牌分析、店铺分析、商品分析、竞品监控（区分自营和POP）
作为第三方电商数据平台，鲸参谋电商大数据系统能够为品牌方和商家提供包括行业趋势、热门品牌、店铺分析、单品分析在内的多个层面数据分析，帮助商家做出更加准确的经营决策，提升经营效率，实现精准营销。
下面，我们针…
Python中的科学计算和数学建模
Python中的科学计算和数学建模
Python作为一种通用编程语言，在科学计算和数学建模领域有着广泛的应用。通过Python，科学家、工程师和研究人员可以进行复杂的数据分析、建模和可视化。
一、Python中的科学计算
Python的科学计算库非常丰富，…
【财务数据分析经验分享】如何进行三大报表的年度解读
很快就要到年底了，大家又要开始进行年度经营数据分析了。今天我就用一个例子来演示财务数据分析三张报表的年度分析。
为了更便捷的从年度来分析三大报表，我分别以同样的基本思路对三大报表开发出三张年度分析报表：
1、 按年度来进行筛选分…
扩展卡尔曼滤波（Extended Kalman Filter, EKF）：理论和应用
扩展卡尔曼滤波（Extended Kalman Filter, EKF）：理论、公式和应用
引言
卡尔曼滤波是一种广泛应用于估计动态系统状态的技术，但当系统的动态模型或测量模型是非线性的时候，传统的卡尔曼滤波方法就显得无能为力。扩展卡…
【特征工程】 分类变量：使用OrdinalEncoder对序数特征进行编码
Ordinal Encoding：序数特征的编码方法
1. Ordinal Encoding是什么？
什么是序数特征？：
序数特征（Ordinal features） 是分类特征中包含一定顺序的变量（如家属人数、教育程度、财产范围…
【Databend】行列转化：数据透视和逆透视
文章目录 数据准备数据透视数据逆透视总结 数据准备
学生学科得分等级测试数据如下：
drop table if exists fact_suject_data;
create table if not exists fact_suject_data
(student_id int null comment 编号,subject_level varchar null comment …
数据分析-25-电商用户行为可视化分析
文章目录 0. 数据代码获取1. 项目介绍1.1 分析背景1.2 分析目的1.3 分析思路 2. 数据清洗2.1 加载必要的库2.2 读取数据2.3 统计缺失值2.4 处理数据a. 删除重复值b. 转换时间格式c. 提取日期和时间d. 转换数据类型 3. 分析内容3.1 用户活跃规律a. 日均pv与uvb. 日新增pv、uv趋势…
Excel4：数据匹配与连接
数据：八月成交数据&八月获客数据 业务1 八月成交数据表格中有三个子表，需要后两个子表连接到第一个表中。 思路 首先需要对业务组名称进行分裂，同时需要用到一款函数可以自动识别并匹配数据，这个函数就是vlookup，也…
python统计分析——随机抽样（np.random.choice）
参考资料：用python动手学统计学，帮助文档
import numpy as np
import pandas as pddata_setnp.array([2,3,4,5,6,7])
np.random.choice(data_set,size2) （1）a，数据源，用一列数据作为抽样的数据源。
&…
工程监测振弦采集仪采集到的数据如何进行分析和处理
工程监测振弦采集仪采集到的数据如何进行分析和处理 振弦采集仪是一个用于测量和记录物体振动的设备。它通过测量物体表面的振动来提取振动信号数据，然后将其转换为数字信号，以便进行分析和处理。在实际应用中，振弦采集仪是广泛应用于机械、建…
数据可视化工具的三大类报表制作流程分享
电脑（pc）、移动、大屏三大类型的BI数据可视化报表制作步骤基本相同，差别就在于尺寸调整和具体的报表布局。这对于采用点击、拖拉拽方式来制作报表的奥威BI数据可视化工具来说就显得特别简单。接下来，我们就一起看看不这三大类型的…
生信豆芽菜-单基因表达比较
网址：http://www.sxdyc.com/panCancerExpCom 该工具主要用于查看单基因在泛癌的癌组织和癌旁组织中表达比较，可以只选择TCGA数据库，也可以选择TCGAGTEx数据库（GTEx数据库，存放了正常组织全基因的表达谱）
…
因果推断（四）断点回归（RD）
因果推断（四）断点回归（RD）
在传统的因果推断方法中，有一种方法可以控制观察到的混杂因素和未观察到的混杂因素，这就是断点回归，因为它只需要观察干预两侧的数据，是否存在明显的断点…
数据分析--帆软报表--大数据大屏
进入国企公司学习有一段时间了，岗位是数据分析方向------ 母前使用的是帆软工具进行的开发。 可以进行大数据大屏 也可使嵌入到手机端。 下面是例子
2023年京东宠物食品行业数据分析（京东大数据）
宠物食品市场需求主要来自于养宠规模，近年来由于我国宠物数量及养宠人群的规模均在不断扩大，宠物相关产业和市场规模也在蓬勃发展，宠物食品市场也同样保持正向增长。
根据鲸参谋电商数据分析平台的相关数据显示，2023年1月-7月&am…
生信豆芽菜-多种算法计算免疫浸润
网址：http://www.sxdyc.com/immuneInfiltration 一、使用方法 1、数据准备 一个全编码蛋白的表达谱基因，其中行为基因，列为样本
第一列为基因为行名，不能重复 2、选择计算的方法（这里提供了5种免疫计算的方法&#x…
2023年7月京东美妆护肤品小样行业数据分析（京东数据挖掘）
如今，消费者更加谨慎，消费决策也更加理性。在这一消费环境下，美妆护肤市场中，面对动辄几百上千的化妆品，小样或体验装无疑能够降低消费者的试错成本。由此，这门生意也一直备受关注。
并且，小样…
python-数据分析-numpy、pandas、matplotlib的常用方法
一、numpy
import numpy as np1.numpy 数组 和 list 的区别
输出方式不同
里面包含的元素类型
2.构造并访问二维数组
使用 索引/切片 访问ndarray元素
切片 左闭右开
np.array(list) 3.快捷构造高维数组 np.arange() np.random.randn() - - - 服从标准正态分布- - - …
金融风控数据分析-信用评分卡建模(附数据集下载地址)
本文引用自：
金融风控：信用评分卡建模流程 - 知乎 (zhihu.com)
在原文的基础上加上了一部分自己的理解，转载在CSDN上作为保留记录。
本文涉及到的数据集可直接从天池上面下载：
Give Me Some Credit给我一些荣誉_数据集-阿里云…
Apache Doris 入门教程32：物化视图
物化视图
物化视图是将预先计算（根据定义好的 SELECT 语句）好的数据集，存储在 Doris 中的一个特殊的表。
物化视图的出现主要是为了满足用户，既能对原始明细数据的任意维度分析，也能快速的对固定维度进行分析查询。 …
喜报，思迈特荣获DCMM稳健级认证，数据管理能力达国家标准
近日，经中国电子信息行业联合组织主办的数据管理能力成熟度评估（简称DCMM）专家评审会的严格审查，思迈特成功取得DCMM稳健级（乙方三级）证书。这一成就标志着在数据战略和执行方面，思迈特取得了显…
公司运营数据分析大屏：引领企业决策，驱动业务增长
在数字化时代，数据已经成为企业决策的关键。为了更好地洞察市场趋势、优化业务流程、提升运营效率，越来越多的企业开始引入数据分析大屏以分析公司运营状况。这一创新举措不仅改变了传统的管理模式，更引领企业迈向智能化决策的新篇章。 公司运…
python统计分析——操作案例（模拟抽样）
参考资料：用python动手学统计学
import numpy as np
import pandas as pd
from matplotlib import pyplot as plt
import seaborn as snsdata_setpd.read_csv(r"C:\python统计学\3-4-1-fish_length_100000.csv")[length] #此处将文件路径改为自己的路…
用Python做数据分析之生成数据表
第一部分是生成数据表，常见的生成方法有两种，第一种是导入外部数据，第二种是直接写入数据。 Excel 中的文件菜单中提供了**外部数据的功能，支持数据库和文本文件和页面的多种数据源导入。
获取外部数据
python支持从多种类型的数…
Python 数据可视化库之bokeh使用详解
概要
数据可视化在数据分析和报告中扮演着关键角色，而Python的Bokeh库为创建交互式、具有吸引力的可视化图表提供了强大的工具。本文将介绍Bokeh的基本概念、安装方法以及详细的示例代码，以帮助大家了解如何使用Bokeh创建出色的数据可视化。 什么是Boke…
一个月学会Python，零基础入门数据分析
在数据分析领域，python是一个绕不开的知识和工具，如果不会用python就很难说自己会数据分析，但是最近很多想要入门数据分析的小白经常问我，Python怎么入门？Python虽然被称作是“最简洁的语言”，但是它终究还…
基于网络爬虫的天气数据分析
二、网络爬虫设计
网络爬虫原理 网络爬虫是一种自动化程序，用于从互联网上获取数据。其工作原理可以分为以下几个步骤：
定义起始点：网络爬虫首先需要定义一个或多个起始点（URL），从这些起始点开始抓取数据…
Python数据分析（1）Matrix Manipulation
主要根据的是这学期修的一门data science and analysis课程里的lab，自己做完lab之后会反思一下自己学到的内容吧。
然后这周lab的话主要是用numpy来处理矩阵（毕竟numpy可以有效地处理数组）。
创建矩阵
np.zeros(k), np.ones(k) #一维矩阵
…
《Python数据分析技术栈》第03章 02 数据结构（Structure of data）
02 数据结构（Structure of data）
《Python数据分析技术栈》第03章 02 数据结构（Structure of data）
The data that we need to analyze could have any of the following structures,
我们需要分析的数据可能具有以下任何一种结…
Python seaborn库的安装与图像的背景风格（Seaborn篇-01）
Python seaborn库的安装与图像的背景风格（Seaborn篇-01） 🍹博主 侯小啾 感谢您的支持与信赖。☀️ 🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ�…
地方债务余额数据，Shp、excel格式，2008-2020年，含公共财政收入、支出、负债率等多个字段
基本信息：
数据名称: 地方债务余额数据
数据格式: Shp、excel
数据时间: 2008-2020年
数据几何类型: 面
数据坐标系: WGS84
数据来源：网络公开数据
数据字段：
序号字段名称字段说明1zfzqsl地方政府债-债券数量(只)2zfzqye地方政府…
数据分析的理念、流程、方法、工具（上）
一、数据的价值
1、数据驱动企业运营
从电商平台的「猜你喜欢」到音乐平台的「心动模式」，大数据已经渗透到了我们生活的每一个场景。不论是互联网行业，还是零售业、制造业等，各行各业都在依托互联网大数据（数据采集、数据存储、…
银行数据分析师面试题
回答：
1.自我介绍：
"大家好，我是XXX，一名数据分析师。我有着对数据的热爱和深入的了解，
希望能够利用我的技能和知识为企业解决问题、做出有效的决策。
在过去的X年里，我一直从事数据分析相关的工作…
2023年京东儿童智能手表行业数据分析（京东销售数据分析）
儿童消费市场向来火爆，儿童智能手表作为能够实现定位导航，信息通讯，SOS求救，远程监听，智能防丢等多功能的智能可穿戴设备，能够通过较为精准的定位功能和安全防护能力保障儿童的安全，因而广受消费…
Matplotlib绘图知识小结--Python数据分析学习
一、Pyplot子库绘制2D图表
1、Matplotlib Pyplot
Pyplot 是 Matplotlib 的子库，提供了和 MATLAB 类似的绘图 API。 Pyplot 是常用的绘图模块，能很方便让用户绘制 2D 图表。 Pyplot 包含一系列绘图函数的相关函数，每个函数会对当前的图像进行…
零售行业供应链管理核心KPI指标（三）
完美订单满足率和退货率
完美订单满足率有三个方面的因素影响：订单按时、足量、无损交货。通常情况下零售企业追求线上订单履行周期慢慢达到行业平均水平，就是交付的速度变快了，这个肯定是一件好事情，趋势越来越好。
同时&#…
Python数据分析案例30——中国高票房电影分析（爬虫获取数据及分析可视化全流程）
案例背景
最近总看到《消失的她》票房多少多少，《孤注一掷》票房又破了多少多少.....
于是我就想自己爬虫一下获取中国高票房的电影数据，然后分析一下。
数据来源于淘票票：影片总票房排行榜 (maoyan.com) 爬它就行。 代码实现
首先爬虫获…
因果推断（五）基于谷歌框架Causal Impact的因果推断
因果推断（五）基于谷歌框架Causal Impact的因果推断
除了传统的因果推断外，还有一些机器学习框架可以使用，本文介绍来自谷歌框架的Causal Impact。该方法基于合成控制法的原理，利用多个对照组数据来构建贝叶斯结构时间…
窗口函数大揭秘！轻松计算数据累计占比，玩转数据分析的绝佳利器
上一篇文章《如何用窗口函数实现排名计算》中小编为大家介绍了窗口函数在排名计算场景中的应用，但实际上窗口函数除了可以进行单行计算，还可以在每行上打开一个指定大小的计算窗口，这个计算窗口可以由SQL中的语句具体指定，大到整个…
GraphScope，开源图数据分析引擎的领航者
文章首发地址
GraphScope是一个开源的大规模图数据分析引擎，由Aliyun、阿里巴巴集团和华为公司共同开发。GraphScope旨在为大规模图数据处理和分析提供高性能、高效率的解决方案。 Github地址： https://github.com/alibaba/GraphScope
GraphScope 的重…
1.4亿X区智慧城市数字平台及城市大脑（运营中心）建设项目WORD
导读：原文《1.4亿X区智慧城市数字平台及城市大脑（运营中心）建设项目WORD》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。
部分内…
echart 图表添加数据分析功能,(右上控制选择)
echart 图表添加数据分析功能,可区域选择数据,右上按钮,控制echart行为 chart.on(globalcursortaken, onGlobalcursortaken); //绑定事件chart.off("brushSelected");//解绑事件处理函数chart.on(brushSelected, renderBrushed);getBarDev2(eIndex, eTimeArr, eSerie…
python中的matplotlib画折线图（数据分析与可视化）
先导包（必须安装了numpy 、pandas 和matplotlib才能导包）：
import numpy as np
import pandas as pd
import matplotlib.pyplot as plt核心代码：
import numpy as np
import pandas as pd
import matplotlib.pyplot as pltpd.se…
Power BI - 5分钟学习新增度量值
每天5分钟，今天介绍Power BI新增度量值
在 Power BI Desktop 中，你可以创建度量值。度量值用于计算表达式的结果。 在创建自己的度量值时，需要使用DAX语言。 DAX包括超过200个函数、运算符等，几乎可以计算任何数据分析所需的结果…
万界星空科技可视化数据大屏的作用
随着科技的不断发展和进步，当前各种数据化的设备也是如同雨后春笋般冒了出来，并且其可以说是给我们带来了极大的便利的。在这其中，数据大屏就是非常具有代表性的一个例子。 数据大屏的主要作用包括：
数据分析：数据大屏…
机器学习：线性回归模型的原理、应用及优缺点
一、原理
线性回归是一种统计学和机器学习中常用的方法，用于建立变量之间线性关系的模型。其原理基于假设因变量（或响应变量）与自变量之间存在线性关系。
回归的目的（实质）
由解释变量去估计被解释变量的平均值 无 …
图形背后的故事：数据可视化如何改变我们的视角
数据可视化，作为一种信息传递和理解的工具，已经深刻地影响着我们的生活。无论是个人生活还是社会运转，数据可视化都在为我们呈现更清晰、更直观的画面。下面我就以可视化从业者的角度，简单说说这个话题。 生活中，我们时…
【头歌】——数据分析与实践-python-网络爬虫-Scrapy爬虫基础-网页数据解析-requests 爬虫-JSON基础
【头歌】——数据分析与实践-python-网络爬虫-Scrapy爬虫基础-网页数据解析-requests 爬虫-JSON基础 Pandas 初体验第1关 爬取网页的表格信息第2关 爬取表格中指定单元格的信息第3关 将单元格的信息保存到列表并排序第4关 爬取div标签的信息第5关 爬取单页多个div标签的信息第6…
论述Python中列表、元组、字典和集合的概念
Python列表是用于存储任意数目、任意类型的数据集合，包含多个元素的有序连续的内存空间，是内置可变序列，或者说可以任意修改。在Python中，列表以方括号（[ ]）形式编写。
Python元组与Python列表类似&#x…
社区分享｜百果园选择DataEase搭档蜜蜂微搭实现企业数据应用一体化
百果园，全称为深圳百果园实业（集团）股份有限公司，2001年12月成立于深圳，2002年开出中国第一家水果专卖店。截至2022年11月，百果园全国门店数量超过5600家，遍布全国140多个城市，消费会…
Python 数据分析实战——为什么销售额减少？酒卷隆治_案例1
# 为什么黑猫游戏的销售额会减少？
# 数据集
DAU : 每天至少来访问一次的用户数据
数据内容 数据类型 字段名
访问时间 string（字符串） log_data
应用名称 string（字符串） app_name
用户 ID int（数值&…
###C语言程序设计-----C语言学习（4）#
前言：感谢老铁的浏览，希望老铁可以一键三连加个关注，您的支持和鼓励是我前进的动力，后续会分享更多学习编程的内容。现在开始今天的内容： 一. 主干知识的学习
1.字符型数据
（1）字符型常量 字…
精通Python第13篇—数据之光：Pyecharts旭日图的魔法舞台
文章目录 引言准备工作绘制基本旭日图调整颜色和样式添加交互功能定制标签和标签格式嵌套层级数据高级样式与自定义进阶主题：动态旭日图数据源扩展：外部JSON文件总结 引言
数据可视化在现代编程中扮演着重要的角色，而Pyecharts是Python中一个…
数据分析入门指南：用 Python 开启数据之旅
文章目录 前言发现宝藏为什么选择 Python 进行数据分析？准备工作数据分析基础1. 数据加载2. 数据探索3. 数据清洗4. 数据可视化 探索更多可能性好书推荐总结 前言
为了巩固所学的知识，作者尝试着开始发布一些学习笔记类的博客，方便日后回顾。…
计算方法实验2：利用二分法及不动点迭代求解非线性方程
一、问题描述
利用二分法及不动点迭代求解非线性方程。
二、实验目的
掌握二分法及不动点迭代的算法原理；能分析两种方法的收敛性；能熟练编写代码实现利用二分法及不动点迭代来求解非线性方程。
三、实验内容及要求
二分法 (1) 编写代码计算下列数字…
漏洞挖掘和安全审计的技巧与策略
文章目录 漏洞挖掘：发现隐藏的弱点1. 源代码审计：2. 黑盒测试：3. 静态分析工具： 安全审计：系统的全面评估1. 渗透测试：2. 代码审计：3. 安全策略审查： 代码示例：SQL注入漏…
2023年7月天猫糕点市场数据分析（天猫数据怎么看）
烘焙食品行业是近几年食品领域比较火热的赛道之一，随着居民饮食结构的变化，人均消费水平的上升，蛋糕、面包等烘焙糕点越发成为消费者饮食的重要组成部分。同时，在烘焙糕点市场中，老品牌不断推新迭变，新品牌…
Apache Doris 入门教程36：文件分析和文件缓存
文件分析
通过 Table Value Function 功能，Doris 可以直接将对象存储或 HDFS 上的文件作为 Table 进行查询分析。并且支持自动的列类型推断。
使用方式
更多使用方式可参阅 Table Value Function 文档：
S3：支持 S3 兼容的对象存储上的文…
python中的matplotlib画直方图（数据分析与可视化）
python中的matplotlib画直方图（数据分析与可视化）
import numpy as np
import pandas as pd
import matplotlib.pyplot as pltpd.set_option("max_columns",None)
plt.rcParams[font.sans-serif][SimHei]
plt.rcParams[axes.unicode_minus]Fa…
Excel 分组排名
分组排名
公式：SUMPRODUCT((A:AA2)*(C:C>C2)) 1
降序：> 改为 <
⚠️注意1：此处空值参与排名；不参与排名则公式改为：IF(C2“”,“”,SUMPRODUCT((A:AA2)*(C:C>C2)) 1)
⚠️注意2：相同值的项…
我的学习笔记：数据处理
数据清洗
对数据进行处理和加工，以使其适合分析和建模。数据清洗包括去除重复数据、填补缺失值、处理异常值和转换数据格式等操作，以提高数据的可靠性和准确性，避免数据分析时出现偏差，提高决策的准确性。 数据去重：通…
如何理解α、β一类错误和二类错误？
原假设 H0：一般是想要推翻的结论，如指标没有变化，实验组和对照组的该结果指标没有差异等。
备择假设 H1：一般是想要证明的结论，如实验组的指标是显著提升的，指标提升10%等。
弃真错误/一类错误/显著性水平…
数据可视化公司：打造视觉化的数据分析
数据在现代社会中扮演着至关重要的角色。然而，原始和复杂的数据往往难以理解和应用。在这个信息爆炸的时代，数据可视化公司成为了解决这个问题的关键。 数据可视化公司是专业的数据分析和可视化团队，他们的目标是将海量数据转化为易于理解和直…
【100天精通Python】Day55：Python 数据分析_Pandas数据选取和常用操作
目录
Pandas数据选择和操作
1 选择列和行
2 过滤数据
3 添加、删除和修改数据 4 数据排序 Pandas数据选择和操作 Pandas是一个Python库，用于数据分析和操作，提供了丰富的功能来选择、过滤、添加、删除和修改数据。
1 选择列和行
Pandas 提供了多种…
提速换挡 | 至真科技用技术打破业务壁垒，助力出海破局增长
各个行业都在谈出海，但真正成功的又有多少？
李宁出海十年海外业务收入占比仅有1.3%，走出去战略基本失败。
京东出海业务磕磕绊绊，九年过去国际化业务至今在财报上都不配拥有姓名。
几百万砸出去买量，一点水花都没有…
国际旅游网络的大数据分析（数学建模练习题）
题目：国际旅游网络的大数据分析
伴随着大数据时代的到来,数据分析已经深入到现代社会生活中的各个方面。 无论是国家政府部门、企事业单位还是个人，数据分析工作都是进行决策之前的 重要环节。 山东省应用统计学会是在省民政厅注册的学术类社会组织&…
38 | 浦发银行股票分析案例
本文将通过一个浦发银行股票分析案例，探讨如何从多个维度对股票进行分析，包括基本面、技术面和市场环境等因素。我们将深入挖掘浦发银行的财务数据、业务模式以及市场定位，以了解其内在价值和潜在风险。同时，我们还将考察技术面的指标，如价格走势、均线形态等，以揭示市场…
offer 报表数据分析示例
数据信息： Unnamed: 0 offerid sourceName affiliateId clickCount installs 0 0 21059 Clickorbits 10110006 705895 3785 1 1 1818 Mobavenue 10110080 9209 3124 2 2…
呈现数据的精妙之道：选择合适的可视化方法
在当今数据时代，数据可视化已成为理解和传达信息的重要手段。然而，选择适合的数据可视化方法对于有效地呈现数据至关重要。不同的数据和目标需要不同的可视化方法，下面我们将探讨如何选择最佳的数据可视化方法来呈现数据。 1. 理解数据类型&a…
聚焦重要数据价值丨DolphinDB 降采样算法介绍
1. 绪论
在真实的业务场景中，时间序列数据具有以下特点：
采集频率（秒级甚至毫秒级）高，导致数据量非常庞大。数据价值密度低。
对数据进行合理的降采样不仅极大地可以降低系统压力、节约存储成本，同时也可…
Python数据分析实战-给定JSON格式的数据提取所需字段并转换为DataFrame（附源码和实现效果）
实现功能
给定JSON格式的数据提取所需字段并转换为DataFrame
实现代码
import pandas as pd
import json# 假设给定的JSON数据已经存储在data变量中
data [{"title": "Data Source Adapter for Excel Sheets","project_code_url": "htt…
构建高性能云原生大数据处理平台：融合人工智能优化数据分析流程
文章目录 架构要点优势与应用案例研究：基于云原生大数据平台的智能营销分析未来展望：大数据与人工智能的融合结论 🎈个人主页：程序员 小侯 🎐CSDN新晋作者 🎉欢迎 👍点赞✍评论⭐收藏 ✨收录专栏…
腾讯音乐如何基于大模型 + OLAP 构建智能数据服务平台
本文导读：
当前，大语言模型的应用正在全球范围内引发新一轮的技术革命与商业浪潮。腾讯音乐作为中国领先在线音乐娱乐平台，利用庞大用户群与多元场景的优势，持续探索大模型赛道的多元应用。本文将详细介绍腾讯音乐如何基于 Apach…
Python数据分析 | 各种图表对比总结
本期将带领大家一起对在数据可视化的过程中常用的一些图表进行下总结：
条形图 【适用场景】
适用场合是二维数据集（每个数据点包括两个值x和y），但只有一个维度需要比较，用于显示一段时间内的数据变化或显示各项之间的…
AI驱动的大数据创新：探索软件开发中的机会和挑战
文章目录 机会数据驱动的决策自动化和效率提升智能预测和优化个性化体验 挑战数据隐私与安全技术复杂性数据质量和清洗伦理和社会问题 案例：智能代码生成工具总结 🎈个人主页：程序员 小侯 🎐CSDN新晋作者 🎉欢迎 &…
![大数据治理运营整体解决方案[39页PPT]](https://img-blog.csdnimg.cn/img_convert/78462872ed34f4b5fa250171ea4f6d17.jpeg)
大数据治理运营整体解决方案[39页PPT]
导读：原文《大数据治理运营整体解决方案[39页PPT]》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。
数据治理总体方案
数据治理平台解决方案
数据治理运…
淘宝用户购物行为数据分析
一、项目背景与目的 1.1项目背景 UserBehavior是阿里巴巴提供的一个淘宝用户行为数据集，用于隐式反馈推荐问题的研究。数据集包含了2017年11月25日至2017年12月3日之间，有行为的约一百万随机用户的所有行为（行为包括点击、购买、加购、喜欢&a…
![5G+智慧交通行业解决方案[46页PPT]](https://img-blog.csdnimg.cn/img_convert/575618c3bf837a8e0090f59c3d1dbb10.jpeg)
5G+智慧交通行业解决方案[46页PPT]
导读：原文《5G智慧交通行业解决方案[46页PPT]》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。 喜欢文章，您可以点赞评论转发本文，…
Pyecharts教程(十)：使用Pyecharts绘制带有数据缩放功能的K线图
Pyecharts教程(十)：使用Pyecharts绘制带有数据缩放功能的K线图
作者：安静到无声 个人主页 目录 Pyecharts教程(十)：使用Pyecharts绘制带有数据缩放功能的K线图前言步骤总结完整代码推荐专栏前言
K线图是金融市场分析中常用的图表类型之一，它可以直观地展示价格的变化，并…
Pyecharts教程(八)：使用pyecharts创建蜡烛图
Pyecharts教程(八)：使用pyecharts创建蜡烛图
作者：安静到无声 个人主页 目录 Pyecharts教程(八)：使用pyecharts创建蜡烛图一、什么是蜡烛图？二、为什么使用pyecharts创建蜡烛图？三、如何创建蜡烛图？四、自定义蜡烛图五、总结完整代码推荐专栏在这篇文章中，我们将学习如…
企业数字化建设-采购平台规划方案PPT（附数字化建设方案300份)
本资料来源公开网络，仅供个人学习，请勿商用，如有侵权请联系删除，更多浏览公众号：智慧方案文库 46页《智慧书店数字化转型解决方案》.pdf8页德勒数字化智能制造解决方案.pdf24页数字化智能化车间规模与建设.pdf数字化校…
十一、MySQL(DQL)聚合函数
1、聚合函数
注意：在使用聚合函数时，所有的NULL是不参与运算的。 2、实际操作：
（1）初始化表格 （2）统计该列数据的个数
基础语法： select count(字段名) from 表名; ；统…
Spark大数据分析与实战笔记（第一章 Scala语言基础-2）
文章目录 章节概要1.2 Scala的基础语法1.2.1 声明值和变量1.2.2 数据类型1.2.3 算术和操作符重载1.2.4 控制结构语句1.2.5 方法和函数 章节概要 Spark是专为大规模数据处理而设计的快速通用的计算引擎，它是由Scala语言开发实现的，关于大数据技术…
Python数据分析和爬虫：解析数据的强大工具
引言：
在当今数据爆炸的时代，数据分析和数据提取变得越来越重要。作为一种简洁而强大的编程语言，Python在数据分析和爬虫领域有着广泛的应用。本文将详细介绍Python在数据分析和爬虫中的常用库和技术，并探讨其在实际应用中的优势…
构建数据可视化（基于Echarts,python)
构建数据可视化（基于Echarts,python) 本文目录：
一、写在前面的题外话
二、数据可视化概念
三、用Python matplotlib库绘制数据可视化图
四、基于Echarts构建大数据可视化
4.1、安装echarts.js
4.2、数据可视化折线图制作
4.2.1、基础折线图
4.2…
![省级智慧农业大数据平台项目规划建设方案[195页Word]](https://img-blog.csdnimg.cn/img_convert/efb3c31ad5ad8afa95e1c4d97bea4649.jpeg)
省级智慧农业大数据平台项目规划建设方案[195页Word]
导读：原文《省级智慧农业大数据平台项目规划建设方案[195页Word]》（获取来源见文尾），本文精选其中精华及架构部分，逻辑清晰、内容完整，为快速形成售前方案提供参考。
1 农业大数据平台项目概述
1.1 建设…
因果推断（六）基于微软框架dowhy的因果推断
因果推断（六）基于微软框架dowhy的因果推断
DoWhy 基于因果推断的两大框架构建：「图模型」与「潜在结果模型」。具体来说，其使用基于图的准则与 do-积分来对假设进行建模并识别出非参数化的因果效应；而在估计阶段则主要…
pandas计算连续行为天数的几种思路
我需要统计数据中缺失字段的日期跨度，并统计缺失数据条数。可以用pandas分组聚合计数。
import pandas as pddata pd.read_excel("缺失字段.xlsx")
t data.loc[data["当日最高温"].isnull(), "dates"]
groupids pd.to_datetime(…
Pyecharts教程(十一)：使用Pyecharts绘制带有滑动数据缩放功能的K线图
Pyecharts教程(十一)：使用Pyecharts绘制带有滑动数据缩放功能的K线图
作者：安静到无声 个人主页 目录 Pyecharts教程(十一)：使用Pyecharts绘制带有滑动数据缩放功能的K线图前言步骤总结推荐专栏前言
K线图是金融市场分析中常见的图表类型之一，它能够直观地展示价格的变化…
数据时代的必备利器：数据可视化工具的崭新价值
在当今信息时代，数据扮演着越来越重要的角色，而数据的可视化呈现正是一种强大的工具，能够帮助我们更好地理解和利用这些数据。虽然Excel和PPT在处理数据方面有着不可否认的作用，但在处理大规模、复杂数据时，数据可视化…
【广州华锐互动】数字孪生智慧楼宇3D可视化系统：掌握实时运行状态，优化运营管理
在过去的几年中，科技的发展极大地改变了我们的生活和工作方式。其中，三维数据可视化技术的出现，为我们提供了全新的理解和观察世界的方式。特别是在建筑行业，数字孪生智慧楼宇3D可视化系统的出现，让我们有机会重新定义…
统计学补充概念19-交叉验证
概念
交叉验证（Cross-Validation）是一种用于评估机器学习模型性能的统计技术。其主要目的是评估模型在未见过的数据上的泛化能力，即模型在新数据上的表现如何，而不仅仅是在训练数据上的性能。
交叉验证的基本思想是将可用的数据…
Python基础语法：数据分析利器
⭐️⭐️⭐️⭐️⭐️欢迎来到我的博客⭐️⭐️⭐️⭐️⭐️ 🐴作者：秋无之地 🐴简介：CSDN爬虫、后端、大数据领域创作者。目前从事python爬虫、后端和大数据等相关工作，主要擅长领域有：爬虫、后端、大数据…
大数据知识合集之数据分析模型
常用数据分析模型，主要包括：对比分析、漏斗分析、留存分析、A/B测试、用户行为路径分析、用户分群、用户画像分析等。
1、对比分析
对比分析 主要是指将两个相互联系的指标数据进行比较，从数量上展示和说明研究对象的规模大小，水…
![[文本挖掘和知识发现] 01.红楼梦主题演化分析——文献可视化分析软件CiteSpace入门](https://img-blog.csdnimg.cn/139d1b6497224e069e1449a76536d36b.png#pic_center)
[文本挖掘和知识发现] 01.红楼梦主题演化分析——文献可视化分析软件CiteSpace入门
八月太忙，还是写一篇吧！ 本文是作者2023年8月底新开的专栏——《文本挖掘和知识发现》，主要结合Python、大数据分析和人工智能分享文本挖掘、知识图谱、知识发现、图书情报等内容。此外，这些内容也是作者《文本挖掘和知识发现&…
Pyecharts教程(九)：使用Pyecharts绘制K线图的基本示例
Pyecharts教程(九)：使用Pyecharts绘制K线图的基本示例
作者：安静到无声 个人主页 目录 Pyecharts教程(九)：使用Pyecharts绘制K线图的基本示例完整代码推荐专栏引言： K线图是用于展示股票、期货等金融市场价格变动的一种图表形式。在Python中，可以使用Pyecharts库来绘制K线…
谁做的方案，竟把财务数据分析套路都摸透了
来不及计算组合多变又复杂量大的财务数据分析指标？不知道该用哪些财务数据分析方法技巧？不知道怎么把信息量巨大的财务数据分析报表做得易读易理解？别担心，奥威BI数据可视化工具都把套路摸透了，并提出一套系统、标准化…
2023年7月京东笔记本电脑行业品牌销售排行榜（京东数据平台）
随着智能手机、平板电脑等移动互联设备的普及，人们对于个人电脑的依赖减轻，加之电脑的更换率较低，因此当前PC端消费市场整体出现疲态，笔记本电脑的出货量不断下降，今年7月份也同样呈现这一趋势。
根据鲸参谋电商数据分…
Python数据分析：从导入数据到生成报告的全面指南
随着数据科学和人工智能的迅速发展，Python 已经成为了最受欢迎的数据分析语言之一。Python 具有简单易学、灵活性强、可扩展性高等优点，使其在数据分析领域具有广泛的应用。本文将介绍 Python 数据分析的基本步骤，帮助你了解如何使用 Python …
驶向高效运营，StarRocks 助力蔚来汽车数据分析再升级
作者：蔚来汽车数字化业务发展部大数据团队
小编导读： 蔚来汽车是一家全球化的智能电动汽车公司，是高端智能汽车市场的先驱及领跑者。蔚来致力于通过提供高性能的智能电动汽车与极致用户体验，为用户创造愉悦的生活方式。 为了提升…
APP出海：如何在美国市场推广？
作为出海探宝热度最高市场，美国在吸引了全球全球开发者争先抢滩的同时，也造就了该地区高昂的买量、宣发、获客成本。
面对日渐紧迫的局势，中国游戏出海广告主该如何打破传统“买量”思路，提升在当地的品牌影响力？
1、…
Spark大数据分析与实战笔记（第一章 Scala语言基础-3）
文章目录 1.3 Scala的数据结构1.3.1 数组数组的遍历数组转换 1.3.2 元组创建元组获取元组中的值拉链操作 1.3.3 集合ListSetMap 1.3 Scala的数据结构 对于每一门编程语言来说，数组（Array）都是重要的数据结构之一，主要用来存储数据…
Python综合案例（基本地图使用）
一、基本地图的使用
基本代码：
"""
演示地图可视化的基本使用
"""
from pyecharts.charts import Map
from pyecharts.options import VisualMapOpts# 准备地图对象
map Map()
# 准备数据
data [("北京", 99),("…
【GPT引领前沿】GPT4技术与AI绘图
推荐阅读：
1、遥感云大数据在灾害、水体与湿地领域典型案例实践及GPT模型应用
2、GPT模型支持下的Python-GEE遥感云大数据分析、管理与可视化技术 GPT对于每个科研人员已经成为不可或缺的辅助工具，不同的研究领域和项目具有不同的需求。例如在科研编程…
2023年7月京东咖啡行业数据分析（京东数据报告）
瑞幸咖啡与贵州茅台推出的联名咖啡“酱香拿铁”正式上市，一度掀起消费者的消费浪潮。在此之前，瑞幸也与多个品牌推出过联名款咖啡，每次的热度都颇高，这在背后，除了有消费者的猎奇心理外，更重要的是…
数学建模黄河水沙监测数据分析
数学建模黄河水沙监测数据分析
问题： 黄河是中华民族的母亲河。研究黄河水沙通量的变化规律对沿黄流域的环境治理、气候变化和人民生活的影响，以及对优化黄河流域水资源分配、协调人地关系、调水调沙、防洪减灾等方面都具有重要的理论指导意义。
解题思…
爬虫爬取mp3文件例子
相信训练模型时数据集的获取也是一个很头疼的事情，搞cv领域的可以扛着摄像头架起三脚架拍摄获取（以前干过），但是如果是nlp领域的呢，特别是chatgpt等大模型出来后对这类文本等数据的需求更大，如果没有现成的…
机器学习和数据挖掘01- lasso regularization
概念
Lasso正则化是一种线性回归中的正则化技术，旨在减少模型的复杂性并防止过拟合。Lasso（Least Absolute Shrinkage and Selection Operator）通过在损失函数中添加正则项，促使模型的系数变得稀疏，即某些系数会被压缩…
数据分析因子评分学习
当多个因素影响一个结果时，我们需要综合考虑这些因素分别对结果德影响。因子评分就是用于比较其对结果德影响程度。 文章目录 前言一、案例背景二、解决方案（一）分析思路（二）剔除无关数据（三）求…
【100天精通Python】Day51：Python 数据分析_数据分析入门基础与Anaconda 环境搭建
目录
1 科学计算和数据分析概述
2. 数据收集和准备
2.1 数据收集
2.1.1 文件导入：
2.1.2 数据库连接：
2.1.3 API请求：
2.1.4 网络爬虫：
2.2 数据清洗
2.2.1 处理缺失值：
2.2.2 去除重复值：
2.2…
【核磁共振成像】观共享重建
目录 一、K空间关键孔技术-数据采集二、BRISK技术三、TRICKS技术四、实时成像和滑动窗重建五、心电触发电影(CINE)采集六、分段心脏采集和观共享 一、K空间关键孔技术-数据采集 对于笛卡尔K空间，一个相位编码行有时称为一个K空间观。一般情况下，每帧图像…
python数据分析基础—pandas中set_index()、reset_index()的使用
文章目录 一、索引是什么？二、set_index()三、reset_index() 一、索引是什么？
在进行数据分析时，通常我们要根据业务情况进行数据筛选，要求筛选特定情况的行或列，这时就要根据数据类型(Series或者DataFrame)的索引情况…
数据可视化：理论与技术
推荐：使用 NSDT场景编辑器 快速搭建3D应用场景 在由大数据和复杂算法主导的数字环境中，人们会认为普通人迷失在数字和数据的海洋中。
不是吗？
然而，原始数据和可理解的见解之间的桥梁在于数据可视化的艺术。
它是指引我们的指南…
数据清洗：数据挖掘的前期准备工作
⭐️⭐️⭐️⭐️⭐️欢迎来到我的博客⭐️⭐️⭐️⭐️⭐️ 🐴作者：秋无之地 🐴简介：CSDN爬虫、后端、大数据领域创作者。目前从事python爬虫、后端和大数据等相关工作，主要擅长领域有：爬虫、后端、大数据…
新增动态排序图、桑基图、AntV组合图，DataEase开源数据可视化分析平台v1.18.10发布
2023年9月14日，DataEase开源数据可视化分析平台正式发布v1.18.10版本。
这一版本的功能升级包括：数据集方面，对字段管理的后台保存做了相关优化，降低了资源消耗；仪表板方面，对联动、查询结果以及过滤组件等…
《SPSS统计学基础与实证研究应用精解》视频讲解：在线分析处理报告
《SPSS统计学基础与实证研究应用精解》5.1 视频讲解 视频为《SPSS统计学基础与实证研究应用精解》张甜 杨维忠著 清华大学出版社 一书的随书赠送视频讲解5.1节内容。本书已正式出版上市，当当、京东、淘宝等平台热销中，搜索书名即可。本书旨在手把手教会使…
第三章第11节：EXCE利用柱状图和条形图去直观数据分析 (二)
柱状图和条形图-图形简介
01,柱状图 柱状图是使用垂直的柱子显示类别之间的数值比较，其中一个轴(横轴)表示需要对比的分类维度，另一个轴(纵轴)表示相应维度下的数值。 02,条形图 条形图是柱状图的转置，工作中柱状图应用居多。 03,柱状图和条…
基于大数据的B站数据分析系统的设计与实现
摘要：随着B站（哔哩哔哩网）在国内视频分享平台的崛起，用户规模和数据量不断增加。为了更好地理解和利用这些海量的B站数据，设计并实现了一套基于Python的B站数据分析系统。该系统采用了layui作为前端框架、Flask作为后端…
Pandas教程12：常用的pd.set_option方法，显示所有行和列+不换行显示等等...
---------------pandas数据分析集合--------------- Python教程71：学习Pandas中一维数组Series Python教程74：Pandas中DataFrame数据创建方法及缺失值与重复值处理 Pandas数据化分析，DataFrame行列索引数据的选取，增加，…
Pyecharts炫酷散点图构建指南【第50篇—python：炫酷散点图】
文章目录 Pyecharts炫酷散点图构建指南引言安装Pyecharts基础散点图自定义散点图样式渐变散点图动态散点图高级标注散点图多系列散点图3D散点图时间轴散点图笛卡尔坐标系下的极坐标系散点图 总结： Pyecharts炫酷散点图构建指南
引言
在数据可视化领域，…
2023年深圳市节假日人口迁入数据，shp/excel格式，需要自取！
基本信息.
数据名称: 深圳市节假日人口迁入数据
数据格式: Shp、excel
数据时间: 2023年国庆节
数据几何类型: 线
数据坐标系: WGS84
数据来源：网络公开数据
数据字段：
序号字段名称字段说明1a0928迁入人口占迁入深圳市人口的比值࿰…
产业宏观数据分析大屏：洞察经济趋势，引领产业未来
在数字经济时代，信息已成为驱动经济发展的关键要素。产业宏观数据分析大屏作为新型的数据可视化工具，为企业和政府决策者提供了全面、直观、实时的产业数据分析平台，助力洞察经济趋势，引领产业变革。 山海鲸可视化搭建的产业宏观数…
穷游网酒店数据采集与可视化分析与实现
摘 要
穷游网酒店数据采集与可视化分析大屏的背景是为了满足用户对酒店数据的需求以及提供数据洞察和决策支持。随着旅游业的快速发展，人们对酒店信息的需求日益增加，而穷游网作为一家专注于旅游信息的网站，拥有丰富的酒店数据资源。
这个大…
Gas Hero Common Heroes NFT 概览与数据分析
作者：stellafootprint.network
编译：mingfootprint.network
数据源：Gas Hero Common Heroes NFT Collection Dashboard
Gas Hero “盖世英雄” 是一个交互式的 Web3 策略游戏，强调社交互动，并与 FSL 生态系统集成…
辽宁链家新房数据采集与可视化实现
摘 要
网络爬虫也叫做网络机器人，是一种按照一定的规则，自动地抓取网络信息，进行数据信息的采集与整理的程序或者脚本。随着海量数据的出现，如何快速有效的获取到我们想要的数据成为难题。以房源信息为例，该文使用Pyt…
用户体验优化：HubSpot的秘密武器
在当今数字化市场中，提升用户体验已经成为企业成功的关键因素之一。HubSpot，作为一款领先的营销自动化工具，不仅在推动销售业绩上表现出色，同时通过其独特的策略也致力于提升用户体验。运营坛将深入探讨HubSpot是如何通过个性化推…
ClickHouse基于数据分析常用函数
文章标题 一、WITH语法-定义变量1.1 定义变量1.2 调用函数1.3 子查询 二、GROUP BY子句（结合WITH ROLLUP、CUBE、TOTALS）三、FORM语法3.1表函数3.1.1 file3.1.2 numbers3.1.3 mysql3.1.4 hdfs 四、ARRAY JOIN语法（区别于arrayJoin(arr)函数&a…
数据采集：数据挖掘的基础
⭐️⭐️⭐️⭐️⭐️欢迎来到我的博客⭐️⭐️⭐️⭐️⭐️ 🐴作者：秋无之地 🐴简介：CSDN爬虫、后端、大数据领域创作者。目前从事python爬虫、后端和大数据等相关工作，主要擅长领域有：爬虫、后端、大数据…
MongoDB差异数据对比的快速指南
MongoDB是一种非关系型数据库，它以灵活的 JSON-like 文档的形式存储数据，这种特性使其在处理大量数据和实现快速开发时更具有优势。而由于其灵活的数据模型和强大的性能，MongoDB 被广泛应用在各种业务场景中。随着业务的发展和数据的增长&…
睿思BI制作数据分析报告并导出到word中
数据分析报告是一种常用的分析应用文体，它是数据分析项目的目的、方法、过程、结论以及可行性建议等内容的完整展示，是数据背后真实的业务水平的客观体现，是管理者做出科学、严谨决策的依据。睿思BI在数据报表中配置数据分析报告，…
2023年五一杯数学建模A题无人机定点投放问题求解全过程论文及程序
2023年五一杯数学建模
A题 无人机定点投放问题
原题再现： 随着科学技术的不断发展，无人机在许多领域都有着广泛的应用。对于空中执行定点投放任务的无人机，其投放精度不仅依赖于无人机的操作技术，而且还与无人机执行任务时所处状…
原神角色数据分析项目说明文档
---项目涉及---
前端html语言，flask框架，excel，MySQL，DataFrame数组，numpy，pyecharts
---实现方式--- 将所有角色数据存储在excel表格中，在需要时读取，当用户想要查看某一项时&…
jvs-智能bi（自助式数据分析）9.1更新内容
jvs-智能bi更新功能
1.报表增加权限功能（服务、模板、数据集、数据源可进行后台权限分配）
每个报表可以独立设置权限，通过自定义分配，给不同的人员分配不同的权限。 2.报表新增执行模式
可选择首次报表加载数据为最新数据和历…
(源码版)2023 年高教社杯全国大学生数学建模竞赛-E 题 黄河水沙监测题一数据分析详解+Python代码
十分激动啊啊啊题目终于出来了！！官网6点就进去了结果直接卡死现在才拿到题目，我是打算A-E题全部做一遍。简单介绍一下我自己：博主专注建模四年，参与过大大小小数十来次数学建模，理解各类模型原理以及每种模…
2023数模国赛C 题 蔬菜类商品的自动定价与补货决策-完整版创新多思路详解（含代码）
题目简评：看下来C题是三道题目里简单一些的，考察的点比较综合，偏数据分析。涉及预测模型和运筹优化(线性规划)，还设了一问开放型问题，适合新手入门，发挥空间大。
题目分析与思路：
背景&#x…
2023国赛数学建模E题思路分析-黄河水沙监测数据分析
E 题 黄河水沙监测数据分析 黄河是中华民族的母亲河。研究黄河水沙通量的变化规律对沿黄流域的环境治理、气候变 化和人民生活的影响，以及对优化黄河流域水资源分配、协调人地关系、调水调沙、防洪减灾 等方面都具有重要的理论指导意义。 附件 1 给出了位于小浪底水…
【量化分析】Python 布林线（ Bollinger）概念
一、说明 布林线(BOLL)，Bollinger Bands，利用统计原理，求出股价的标准差及其信赖区间，从而确定股价的波动范围及未来走势，利用波带显示股价的安全高低价位，因而也被称为布林带。
二、布林带基本概念 布林线…
2023京东医疗保健器械行业数据分析（京东数据分析平台）
随着人们对自身健康的重视程度不断加深，当前市场中各类对疾病具有诊断、预防、监护、治疗或者缓解的医疗保健仪器越来越受到消费者的关注。
根据鲸参谋电商数据分析平台的相关数据显示，今年7月份，京东平台医疗保健仪器的销量为950万…
绿色、智能、互联：智慧社区的可持续愿景
智慧社区建设是一项旨在提高城市居民生活质量、增强社区安全、优化资源利用和促进可持续发展的重要举措。它涉及将先进的科技与城市基础设施和服务相结合，以实现更便捷、高效和环保的社区生活。 智慧社区三维可视化系统通过数字孪生技术，整合社区各个系统…
基于大数据的淘宝电子产品数据分析的设计与实现
（1）本次针对开发设计系统并设置了相关的实施方案，利用完整的软件开发流程进行分析，完成了设置不同用户的操作权限和相关功能模块的开发，最后对系统进行测试。 （2）框架可以帮助程序开发者快速构建…
三款精选数字孪生产品大比拼
作为一名数据可视化领域的资深用户，我接触过众多数据可视化产品。本文将介绍三款备受关注的数据可视化工具，并对它们进行详细的比较。
首先，让我们了解一下数据可视化产品的核心价值。在信息爆炸的时代，数据可视化成为快速理解复…
2023年天猫食用油市场行业分析（电商数据查询软件）：市场细分，营养调和油高速成长
食用油是人类膳食的重要组成部分，除了为日常饮食提供美味外，也是人体所需脂肪和能量的重要来源，对人体健康发挥着重要作用。因此，作为日常生活中的刚需品，食用油市场的整体规模也较大。
首先来看食用油市场的年度销售…
关于Python运用pyecharts实现简单的数据分析-——柱状图、饼状图
1.什么是pyecharts？
Pyecharts是一个将Echarts与Python结合的数据可视化库。而Echarts本身是由百度开源的一个基于JavaScript的数据可视化库，它以良好的交互性和精巧的图表设计而受到开发者的认可。Python是一门非常适合数据处理的编程语言，具有强大的表达力和丰富的数据处…
叶贝斯定律 -有深入浅数据分析(第六章)
有一种人 沉默寡言，厌恶社交。只喜欢专注自己手头事情 A 农民 B 科研工作者
老张判断 这种人 是 A 因为老张认识 500个农民，10个科研工作者 其中 500个农民有 200个农民沉默寡言，10个科研工作者 10个沉默寡言 这个得出结论 200/500 40% 沉默…
《计算机网络简易速速上手小册》第4章：计算机网络安全基础（2024 最新版）
文章目录 4.1 加密技术概述 - 解锁数字世界的魔法书4.1.1 基础知识详讲4.1.2 重点案例：使用 Python 进行 AES 加密4.1.3 拓展案例1：使用 Python 实现 RSA 加密4.1.4 拓展案例2：使用 Python 进行数据的哈希 4.2 防火墙与入侵检测系统 - 数字世…
《计算机网络简易速速上手小册》第9章：物联网（IoT）与网络技术（2024 最新版）
文章目录 9.1 IoT 架构与通信协议 - 打造智能世界的秘诀9.1.1 基础知识9.1.2 重点案例：使用 Python 和 MQTT 实现智能家居照明系统准备工作Python 脚本示例发布者（灯光控制）订阅者（灯光状态接收）： 9.1.3 拓…
由浅入深，信创落地全面提速｜爱分析报告
01 报告综述
在国际局势日趋复杂的大背景下，中央及地方政府出台大量信创相关政策，对信创目标规划、财政补贴、人才支持、生态发展等多方面均做出了明确规定。加快信创产业发展，打造全面自主可控的国产IT架构，已成为我国实现高水平…
Python基础知识：Python模块
所谓模块(Module)，就是一种以“.py”为命名后缀的Python 文件，里面包含着很多集成的函数，可以很方便的被其他程序和脚本导入并使用。
如果模块理解为一辆汽车，我们使用汽车可以完成驾驶等工作，那么代码就是一个个细小…
Python 数据分析（PYDA）第三版（五）
原文：wesmckinney.com/book/ 译者：飞龙 协议：CC BY-NC-SA 4.0 十、数据聚合和组操作 原文：wesmckinney.com/book/data-aggregation 译者：飞龙 协议：CC BY-NC-SA 4.0 此开放访问网络版本的《Python 数据分析…
django微博热搜数据分析与可视化系统python毕业设计
简而言之，数据可视化是以图形方式呈现结构化或非结构化数据，从而将隐藏在数据中的信息直接呈现给人们。但是有一个陷阱:它不仅仅是使用数据可视化工具将数据转化为图形。相反，它是从数据的角度看待世界。换句话说，数据可视化的对象…
释放数据的潜力：用梯度上升法解锁主成分分析（PCA）的神奇
文章目录 🍀引言🍀什么是主成分分析（PCA）？🍀传统PCA vs 梯度上升PCA🍀PCA的优化目标🍀代码实现🍀求解第一主成分🍀求解第二主成分 🍀在sklearn中封…
产业大数据应用：洞察区域产业实况，把握区域经济脉搏
随着新一代信息技术的崛起，我们进入了大数据时代。在这个时代，数据作为基本生产要素不仅改变着我们的日常生活，更是在区域产业经济发展中扮演着重要角色，它赋予了政府、企业和投资者敏锐的洞察力。 一、摸清区域经济现状
基于…
Tableau自学四部曲_Part3：基础图表制作
文章目录 一、 对比分析：比大小1. 柱状图2. 条形图3. 热力图（突出显示表）4. 气泡图5. 词云 二、变化分析：看趋势1. 折线图2. 基于连续时间序列的折线图预测接下来的数据走向3. 面积图 三、构成分析：看占比1. 饼图2. 【…
2023年7月京东饮料行业数据分析（京东运营数据分析）
饮料消费已成为当下快消品行业里的主力军，随着社会群体喜好的改变、消费群体的不断扩大，可选择的饮料种类越来越多，我国饮料市场的体量也较为庞大。根据鲸参谋电商数据分析平台的数据显示，今年7月份，京东平台饮料的销量…
数据分析和可视化平台：Splunk Enterprise for mac v9.1.1激活版 兼容m1
Splunk Enterprise 是一个数据分析和可视化平台，可帮助企业理解其数据。虽然没有适用于 Mac OS 的 Splunk Enterprise 官方版本，但他们确实为 Mac OS 提供了一个名为“Splunk Light”的应用程序，它提供了基本的数据索引、搜索和仪表板。或者&…
作为数据分析师，如何能把AI工具和数据分析工作更好的结合？
做为数据分析师，如果能够学会把AI工具应用到实际的数据分析工作当中，可以把一些重复性很强的工作交给AI来完成，这样数据分析师在提升效率的过程中能够去有更多的时间考虑具有创意的工作。
数据分析师，在使用AI工具完成数据分…
【2023数学建模国赛】A题定日镜场的优化设计模型建立
2023年全国大学生数学建模竞赛A题定日镜场的优化设计，目前已写出第四版国赛A题思路和模型详细公式，目录如下： 一、 问题重述... 1 二、 问题分析... 1 三、 模型假设... 6 四、 问题一模型的建立和求解... 6 4.1 定日镜场坐标系的建立...…
Python爬虫在电商数据获取与分析中的应用
前言
随着电商平台的兴起，越来越多的人开始在网上购物。而对于电商平台来说，商品信息、价格、评论等数据是非常重要的。因此，抓取电商平台的商品信息、价格、评论等数据成为了一项非常有价值的工作。本文将介绍如何使用Python编写爬虫程序&a…
2023年7月京东白酒行业品牌销售排行榜（京东数据平台）
鲸参谋监测的京东平台7月份白酒市场销售数据已出炉！
鲸参谋数据显示，今年7月份，京东平台白酒的销量为210万，同比增长21%；销售额将近19亿，同比增长超过85%。可以看到，同比去年同期，今…
用户促活留存新方式——在APP中嵌入小游戏
随着APP同类产品的不断出现，APP开发者们面临着激烈的竞争，很多APP下载后被新的APP取代，获客成本越来越高。同时开发者还会面临用户粘性差、忠诚度低、用完即走、留存困难，商业化价值被大大缩减。
在APP中植入小游戏来提高用户活跃…
【数据分析入门】Seaborn[散点图、条形图、计数图、热力图、箱型图、小提琴图]
这里写目录标题 一、数据二、画布外观2.1 Seaborn样式2.2 上下文函数2.3 调色板 三、使用 Seaborn 绘图3.1 坐标轴栅格3.2 各类图形3.2.1 散点图3.2.2 条形图3.2.3 计数图3.2.4 点图3.2.5 箱型图3.2.6 小提琴图 3.3 回归图3.4 分布图3.5 矩阵图 四、深度自定义4.1 Axisgrid 对象…
淘宝app商品详情API 获取淘宝app商品销量价格主图详情API （可获取测试key）
item_get_app-获得淘宝app商品详情原数据
公共参数
点此获取调用key&secret
名称类型必须描述keyString是调用key（必须以GET方式拼接在URL中）secretString是调用密钥api_nameString是API接口名称（包括在请求地址中）[item_…
从 Clickhouse 到 Apache Doris：有赞业务场景下性能测试与迁移验证
本文导读：
当前，电商运营的主要痛点不仅来自多变的市场和客户需求，也受困于碎片化用户触达等带来的竞争与挑战。为了深度挖掘用户价值、培养用户忠诚度、实现业绩增长，有赞为商家搭建了全方位 OLAP 分析系统，提供实时…
2023上半年京东运动鞋服市场数据分析（京东数据运营）
大众线下运动生活恢复，掀起新一轮户外潮流，运动热潮迭起。由此产生的运动鞋服及专业装备需求，为运动品牌们带来了诸多增长机会。近日各大运动品牌陆续发布上半年财报，回答了品牌对复苏机遇、发展挑战的应对情况。接下来结合具体数…
2023年7月京东手机行业品牌销售排行榜（京东数据分析软件）
鲸参谋监测的京东平台7月份手机市场销售数据已出炉！
根据鲸参谋平台的数据显示，7月份京东平台的销量为410万，同比下降约9%；销售额将近145亿，同比增长超过17%。由此也可以看到，同比来看，7月份手…
如何让报表会说话？学会这一招就可以了
Smartbi电子表格软件进化到全新阶段，这轮更新最能吸引人的地方是什么呢？跟随小麦一起来感受下。 1、新增语音播放特性，让报表会说话
Smartbi电子表格软件最新上线超级实用的新特性——语音播报，即让报表自己开口说话~
设想你打开…
pinduoduo（商品详情）API接口
为了进行电商平台 的API开发，首先我们需要做下面几件事情。
1）开发者注册一个账号
2）然后为每个pinduoduo应用注册一个应用程序键（App Key) 。
3）下载pinduoduo API的SDK并掌握基本的API基础知识和调用
4ÿ…
大数据和数据要素有什么关系？
大数据与数据要素之间存在密切的关系。大数据是指海量、多样化、高速生成的数据，而数据要素是指构成数据的基本元素或属性。数据要素包括但不限于数据的类型、结构、格式、单位、精度等。
大数据的产生和应用离不开数据要素的支持。数据要素确定了数据的基本特征和…
AB试验（二）统计基础
AB试验（二）统计基础
随机变量 均值类指标：如用户的平均使用时⻓、平均购买金额、平均购买频率等 概率类指标：如用户点击的概率(点击率)、转化的概率(转化率)、购买的概率 (购买率)等 经验结论：在数量足够大时&#…
(源码版)2023全国大学生数学建模竞赛E题黄河水沙监测数据分析详解+Python代码源码SARIMA模型
前言
比赛结束了不知道大家情况如何，就我个人而言的话，由于工作任务比较繁重仅完成了对D题和E题的思路解答和建模，还是比较遗憾的。一个人要完成多题的建模和分析确实不是一件容易的事情，当然我向大家做出承诺历年的建模比赛我都…
【数据分析入门】【淘宝电商API接入与电商数据分析】初识Web API(一)
今天开始我们将学习如何使用Web应用变成借口(API)自动请求网站到特定信息而不是整个网站，再对这些信息进行可视化。由于这样编写到程序始终使用最新到数据来生成可视化，因此即便数据瞬息万变，它呈现到信息也都是最新的。比如，我们…
商业智能必备利器，帆软、powerBI替代工具
随着商业智能领域的发展，越来越多的企业开始意识到数据对于业务发展的重要性。而在这个过程中，BI（商业智能）工具成为了企业进行数据分析、决策支持的必备利器。然而，市场上BI工具种类繁多，每个工具都有其独…
遥感数据与作物模型同化技术应用
基于过程的作物生长模拟模型DSSAT是现代农业系统研究的有力工具，可以定量描述作物生长发育和产量形成过程及其与气候因子、土壤环境、品种类型和技术措施之间的关系，为不同条件下作物生长发育及产量预测、栽培管理、环境评价以及未来气候变化评估等提供了…
提升运营效率：仓储可视化的实时监控与优化
当今，仓储管理已经不再是简单的储存和分发商品的过程。随着供应链的复杂性增加，企业需要更高效的方式来管理和优化其仓储运营。在这个背景下，仓储可视化成为了一项关键的技术，它利用先进的数字化工具和数据分析来提升仓储管理的效…
Python||数据分析与可视化_使用折线图分析各个城市的P.M.2.5月度差异情况（下）及使用堆叠柱状图对各个城市的PM2.5日均值情况进行数据分析与可视化
目录 1.使用Python折线图对各个城市的P.M.2.5月度差异情况进行数据分析与可视化。 2.使用Python堆叠柱状图对各个城市的PM2.5日均值情况进行数据分析与可视化。 1.使用Python折线图对各个城市的P.M.2.5月度差异情况进行数据分析与可视化。
import numpy as np
import pandas a…
R语言学习case12：ggplot 置信区间（多线型）
接上文：多条曲线 R语言学习case11：ggplot 置信区间（包含多子图）
在ggplot2中，每个geom函数都接受一个映射参数。然而，并非每个美学属性都适用于每个geom。你可以设置点的形状，但不能设置线的“…
Gas Hero Coupon NFT 概览与数据分析
作者：stellafootprint.network
编译：mingfootprint.network 数据源：Gas Hero Coupon NFT Collection Dashboard
Gas Hero “盖世英雄” 是一个交互式的 Web3 策略游戏，强调社交互动，并与 FSL 生态系统集成࿰…
《Git 简易速速上手小册》第1章：Git 基础（2024 最新版）
文章目录 1.1 Git 简介：版本控制的演变1.1.1 基础知识讲解1.1.2 重点案例：协作开发流程优化案例：功能开发与分支策略 1.1.3 拓展案例 1：代码审查与合并1.1.4 拓展案例 2：冲突解决 1.2 安装和配置 Git：首次设…
2024数据分析管理、数字经济与教育国际学术会议(ICDAMDEE2024)
会议简介
2024年数据分析管理、数字经济和教育国际学术会议（ICDAMDEE 2024）将在武汉举行。会议不仅展示了来自世界各地的研究专家围绕数据分析管理、数字经济和教育的最新科研成果，还为来自不同地区的代表们提供了面对面的交流意见和实验经验…
《Python 网络爬虫简易速速上手小册》第7章：如何绕过反爬虫技术？（2024 最新版）
文章目录 7.1 识别和应对 CAPTCHA7.1.1 重点基础知识讲解7.1.2 重点案例：使用Tesseract OCR识别简单CAPTCHA7.1.3 拓展案例 1：使用深度学习模型识别复杂CAPTCHA7.1.4 拓展案例 2：集成第三方 CAPTCHA 解决服务 7.2 IP 轮换与代理的使用7.2.1 重…
每天一个数据分析题（一百五十四）
给定下面的Python代码片段，哪个选项正确描述了代码可能存在的问题？ from scipy import stats
返回异常值的索引
z stats.zscore(data_raw[‘Age’]) z_outlier (z > 3) | (z < -3) z_outlier.tolist().index(1)
A. 代码将返回数据集Age列中第…
Python数据可视化库之ggplot使用详解
概要
数据可视化是数据分析和数据沟通的关键部分。Python 作为一门强大的数据科学和数据分析工具，提供了多种数据可视化库，其中之一就是 ggplot。ggplot 是一个基于 ggplot2 的 Python 数据可视化库，它可以创建精美且高度可定制的图表，以更好地理解和传达数据。本文将深入…
时间序列预测 —— DeepAR 模型
时间序列预测 —— DeepAR 模型
DeepAR 模型是一种专门用于处理时间序列概率预测的深度学习模型，它可以自动学习数据中的复杂模式，提高预测的准确性。本文将介绍 DeepAR 模型的理论基础、优缺点，并通过 Python 实现单步预测和多步预测的完整…
数据分析Pandas专栏---第四章＜Pandas几个处理元素的函数＞
前言:
在处理series和Dataframe对象中的元素的时候,经常会用到一些逻辑运算函数; 那么这些逻辑运算怎么用?有哪些? 我认为这六个都比较重要!!!
正文:
1.apply
apply函数可以用于Series或DataFrame对象，用于将自定义函数应用于每个元素或每一列/行。
对于Ser…
【30秒看懂大数据】留存分析
30秒看懂大数据专栏
让您在有限的碎片化时间，快速看懂最火热的大数据 简单说
公众号：知幽科技，更多知识分享及社群欢迎关注。
留存分析是对不同时间周期存留的情况作分析，常常和7天、30天这样的时间周期一起出现。 举例理解 …
《Git 简易速速上手小册》第6章：Git 在持续集成/持续部署（CI/CD）中的应用（2024 最新版）
文章目录 6.1 CI/CD基础6.1.1 基础知识讲解6.1.2 重点案例：为 Python Web 应用实现 CI/CD6.1.3 拓展案例 1：自动化部署到云平台6.1.4 拓展案例 2：使用 Docker 容器化部署 6.2 Git 与自动化测试6.2.1 基础知识讲解6.2.2 重点案例：为…
《MySQL 简易速速上手小册》第2章：数据库设计最佳实践（2024 最新版）
文章目录 2.1 规划高效的数据库架构2.1.1 基础知识2.1.2 重点案例2.1.3 拓展案例 2.2 数据类型和表设计2.2.1 基础知识2.2.2 重点案例2.2.3 拓展案例 2.3 索引设计原则2.3.1 基础知识2.3.2 重点案例2.3.3 拓展案例 2.1 规划高效的数据库架构
在开启我们的数据库设计之旅之前&a…
《Git 简易速速上手小册》第10章：未来趋势与扩展阅读（2024 最新版）
文章目录 10.1 Git 与开源社区10.1.1 基础知识讲解10.1.2 重点案例：Python 社区使用 Git10.1.3 拓展案例 1：Git 在大型开源项目中的角色10.1.4 拓展案例 2：支持开源项目的 Git 托管平台 10.2 新兴技术与 Git 的整合10.2.1 基础知识讲解10.2.2…
京东数据分析|京东销售数据怎么查|京东销售数据查询软件分享！
京东销售数据分析对商家来说具有多方面的重要作用，主要体现在以下几个方面：
市场趋势分析：
分析京东平台上的商品销量、销售额和价格走势等数据，可以帮助商家了解当前市场的整体需求趋势，以及不同品类的季节性变化、…
利用低代码 BI 平台获得竞争优势：实现数据分析与业务决策的革新
介绍
疫情迫使企业优先考虑数字化转型。由于公司被迫参加计划外的数字化速成课程，这种文化转变将数字技术的采用加速了数年。
转向数字解决方案已成倍增加了跨行业生成的数据量。大量数据可以更好地了解运营、客户和市场，还可以推动任何组织的创新。
…
如何开发一个游戏平台？
随着科技的进步和互联网的普及，游戏行业正在迅速发展。游戏平台的开发已成为游戏行业的一个重要组成部分。开发一个游戏平台需要深入了解游戏行业，掌握相关技术，并具备创新思维。以下是一些关于如何开发一个游戏平台的建议： 市场调…
一文讲透Python函数中的形式参数和实际参数
函数参数包括形式参数和实际参数，简称形参和实参。其中形式参数即是在定义函数时函数后面括号中的参数列表（parameterlist），比如上一个帖子的示例中的width, length；实际参数则是调用函数时函数后面括号中的参数值&…
【Python编程+数据清洗+Pandas库+数据分析】
数据分析的第一步往往是数据清洗，这个过程关键在于理解、整理和清洗原始数据，为进一步分析做好准备。Python 语言通过Pandas库提供了一系列高效的数据清洗工具。接下来，该文章将通过一个简单的案例演示如何利用 Pandas 进行数据清洗ÿ…
使用Python进行数据的描述性分析，用少量的描述性指标来概括大量的原始数据
在进行数据分析时，当研究者得到的数据量很小时，可以通过直接观察原始数据来获得所有的信息。但是，当得到的数据量很大时，就必须借助各种描述性指标来完成对数据的描述工作。用少量的描述性指标来概括大量的原始数据，对…
数据分析基础之《pandas（7）—高级处理2》
四、合并
如果数据由多张表组成，那么有时候需要将不同的内容合并在一起分析
1、先回忆下numpy中如何合并 水平拼接 np.hstack() 竖直拼接 np.vstack() 两个都能实现 np.concatenate((a, b), axis)
2、pd.concat([data1, data2], axis1) 按照行或者列…
《CSS 简易速速上手小册》第5章：CSS 动画与过渡（2024 最新版）
文章目录 5.1 CSS 过渡基础：网页的微妙舞步5.1.1 基础知识5.1.2 重点案例：按钮悬停效果5.1.3 拓展案例 1：渐变显示导航菜单5.1.4 拓展案例 2：动态调整元素大小 5.2 关键帧动画：编排你的网页芭蕾5.2.1 基础知识5.2.2 重…
R语言学习case11：ggplot 置信区间（包含多子图）
ggplot Geometric objects
How are these two plots similar?
两个图都包含相同的x变量、相同的y变量，并且描述相同的数据。但是这两个图并不相同。每个图使用不同的可视化对象来表示数据。在ggplot2语法中，我们说它们使用不同的geoms。
geom是绘图…
Seaborn学习网站：解锁数据可视化的无限可能！
介绍：Seaborn是一个基于Python的高级数据可视化库，它建立在Matplotlib之上，并与Pandas数据结构紧密集成，为用户提供了一种更加方便的方式来创建具有吸引力和信息丰富的统计图形。 Seaborn的特点包括： 高级APIÿ…
Python||数据分析之pyecharts 绘图（词云、气泡）
1. echarts 和 Pyecharts 简介
1.1echarts 简介:
• echarts 是一个使用 JavaScript 实现的开源可视化库，涵盖各行业图表，满足各种需求。
• echarts 遵循 Apache-2.0 开源协议，免费商用。
• ECharts 最初由百度团队开源，并于 2018 年初捐赠给 Apache 基金会，成为 AS…
数据分析基础之《pandas（8）—综合案例》
一、需求
1、现在我们有一组从2006年到2016年1000部最流行的电影数据 数据来源：https://www.kaggle.com/damianpanek/sunday-eda/data
2、问题1 想知道这些电影数据中评分的平均分，导演的人数等信息，我们应该怎么获取？
3、问题…
《区块链公链数据分析简易速速上手小册》第6章：区块链数据的应用（2024 最新版）
文章目录 6.1 市场趋势分析6.1.1 基础知识6.1.2 重点案例：分析比特币市场趋势准备工作实现步骤步骤1: 加载和预处理数据步骤2: 可视化价格和交易量趋势步骤3: 分析链上活动步骤4: 综合分析 结论 6.1.3 拓展案例 1：链上活动分析准备工作实现步骤步骤1: 加…
如何使用 sqlalchemy declarative base 多层次继承
在SQLAlchemy中，通过declarative_base创建的基类可以通过多层次的继承建立继承关系。这允许你在数据库中创建具有继承结构的表。在我使用某数据库做中转的时候，经常会遇到各种各样的问题，例如下面的问题，通过记录并附上完美的解决…
空间数据分析入门POI与莫兰指数基础知识笔记
1. 空间分析与POI
1.1. 什么是POI
POI是“Polnt of Information”的缩写，中文可以翻译为“信息点”。POI是地图上任何非地理意义的有意义的点，如商店、酒吧、加油站、医院、车站等。这些点通常包括名称、类别、经纬度和地址等基本信息。此外࿰…
数据分析Pandas专栏---第十章＜Pandas数据筛选和过滤(2)＞
前言:
继续上一篇数据分析Pandas专栏---第九章＜Pandas数据筛选和过滤(1)＞-CSDN博客 正文: 复杂条件筛选和过滤技巧
A. 使用逻辑运算符进行复杂条件筛选
1. 如何使用逻辑运算符（例如与、或、非等）进行复杂条件筛选
在Pandas中&…
《区块链公链数据分析简易速速上手小册》第5章：高级数据分析技术（2024 最新版）
文章目录 5.1 跨链交易分析5.1.1 基础知识5.1.2 重点案例：分析以太坊到 BSC 的跨链交易理论步骤和工具准备Python 代码示例构思步骤1: 设置环境和获取合约信息步骤2: 分析以太坊上的锁定交易步骤3: 跟踪BSC上的铸币交易 结论 5.1.3 拓展案例 1：使用 Pyth…
数据分析 — Pandas 分组聚合
目录 一、函数应用和映射1、apply2、map 二、汇总和描述统计1、计算平均值2、计算中位数3、计算总和4、找到最小值5、找到最大值6、计算标准差7、计算方差8、计算非空值的数量9、生成摘要统计信息10、计算唯一值的频率 三、str 属性1、str.len()2、str.lower() 和 str.upper()3…
【玩转pandas系列】pandas数据结构—DataFrame
文章目录 前言一、DataFrame创建1.1 字典创建1.2 NumPy二维数组创建 二、DataFrame切片2.1 行切片2.2 列切片2.3 行列切片 三、DataFrame运算3.1 DataFrame和标量的运算3.2 DataFrame之间的运算3.3 Series和DataFrame之间的运算 四、DataFrame多层次索引4.1 多层次索引构造1.隐…
《Linux 简易速速上手小册》第9章: 备份与恢复策略（2024 最新版）
文章目录 9.1 理解备份的重要性9.1.1 重点基础知识9.1.2 重点案例：数据中心遭受火灾9.1.3 拓展案例：个人电脑硬盘故障9.1.4 企业级数据库被恶意软件加密 9.2 实施备份策略9.2.1 重点基础知识9.2.2 重点案例：为中小企业实施备份策略9.2.3 拓展…
数据可视化工具选择指南：六款主流工具的综合评测
随着大数据时代的来临，数据可视化已成为各行业不可或缺的工具。本文将为您介绍市面上六款主流数据可视化工具，包括山海鲸可视化、Echarts、D3.js、Tableau、Power BI和Funnel.io，帮助您更好地了解并选择适合您的工具。
山海鲸可视化
山海鲸…
遨博I20协作臂关节逆解组Matlab可视化
AUBO I20协作臂关节逆解组Matlab可视化 前言1、RTB使用注意点2、代码与效果2.1、完整代码2.2、运行效果 总结 前言
注意：请预先配置好Matlab和RTB机器人工具箱环境，本文使用matlab2022b和RTB10.04版本
工作需要，使用matlab实现对六轴机械臂…
2023年华数杯数学建模A题隔热材料的结构优化控制研究解题全过程文档及程序
2023年华数杯全国大学生数学建模
A题 隔热材料的结构优化控制研究
原题再现： 新型隔热材料 A 具有优良的隔热特性，在航天、军工、石化、建筑、交通等高科技领域中有着广泛的应用。 目前，由单根隔热材料 A 纤维编织成的织物，…
物资管理系统数据分析报告
目 录 1.需求分析
1.1系统目标与要求
1.2系统分析
1.3业务流程图
2.系统逻辑方案
2.1数据流程图（DFD）：
2.2数据字典（简称DD）
3系统总体结构设计
3.1软件系统总体结构设计
3.2数据存储的总体设计…
2023年8月京东彩瞳行业数据分析（京东商品数据）
和传统的框架眼镜、隐形眼镜相比，多种花纹、颜色的美瞳镜片给了爱美的年轻人更多的选择，因此，在颜值经济叠加悦己思潮的影响下，兼具“视力矫正美妆”的彩瞳受追捧。
根据鲸参谋电商数据分析平台的相关数据显示，8月份&…
数据分析（1）——如何用postgres快速找出数据库中所有表格包含空值的列
POSTGRES简介
postgres是一款开源的数据库，好处就在于不会被制裁，之前美国制裁委内瑞拉的时候，禁止委内瑞拉用oracle这款数据库，mysql最后委内瑞拉也用不了了，因为oracle把mysql收购了吗，这是不是也让大家…
2023年五一杯数学建模B题快递需求分析问题求解全过程论文及程序
2023年五一杯数学建模
B题 快递需求分析问题
原题再现： 网络购物作为一种重要的消费方式，带动着快递服务需求飞速增长，为我国经济发展做出了重要贡献。准确地预测快递运输需求数量对于快递公司布局仓库站点、节约存储成本、规划运输线路等具…
Python网页请求超时如何解决
在进行网络爬虫项目时，我们经常需要发送大量的请求来获取所需的数据。然而，由于网络环境的不稳定性，请求可能会因为超时而失败。请求超时可能导致数据获取不完整，影响爬虫的效率和准确性。此外，频繁的请求超时可能会被…
Splunk的转发器扮演什么角色？
Splunk 的转发器（Forwarder）在数据收集中扮演着关键的角色，它们是 Splunk 架构中的重要组成部分之一。没有转发器，数据收集仍然可以进行，但转发器提供了一种更灵活、可扩展和可管理的方式来管理数据收集。以下是有关 S…
探索科技地图：通向未来的科技之路
科技地图是一张连接现实与未来的路线图，它标示着创新的方向和科技的潜力。在这个信息爆炸的时代，我们深陷于新技术和新理念的海洋中，科技地图为我们提供了一颗指南针，帮助我们更好地了解和探索科技的前沿。 科技地图的起源&#x…
GraphBase基础原理
一、GraphBase简介
互联网时代，随着网络技术的发展，企业积累的数据越来越多。伴随着数据集的不断增加，传统的关系型数据库查询性能会随之变差，特别是针对一些特殊的业务场景，所以迫切的需要一种新的解决方案去应对这种…
数据集成：数据挖掘的准备工作之一
⭐️⭐️⭐️⭐️⭐️欢迎来到我的博客⭐️⭐️⭐️⭐️⭐️ 🐴作者：秋无之地 🐴简介：CSDN爬虫、后端、大数据领域创作者。目前从事python爬虫、后端和大数据等相关工作，主要擅长领域有：爬虫、后端、大数据…
数据分析与可视化 Numpy数组
1.创建数组
import numpy as np
anp.array([1,2,3,4])
aarray([1, 2, 3, 4])
print(a)[1 2 3 4]
b np.array((2,4,6,8))
print(b)[2 4 6 8]
cnp.array([[1,2,3,4],[5,6,7,8]])
print(c)[[1 2 3 4] [5 6 7 8]]
dnp.array([1,2,3,4],dtypefloat64)
print(d)[1. 2. 3. 4.]
…
EDA(Exploratory Data Analysis)探索性数据分析
EDA(Exploratory Data Analysis)中文名称为探索性数据分析，是为了在特征工程或模型开发之前对数据有个基本的了解。数据类型通常分为两类：连续类型和离散类型，特征类型不同，我们探索的内容也不同。
1. 特征类型
1.1 连续型特征 …
新媒体与传媒行业数据分析实践：从网络爬虫到文本挖掘的综合应用，以“中国文化“为主题
大家好，我是八块腹肌的小胖，
下面将围绕微博“中国文化”以数据分析、数据处理、建模及可视化等操作
目录
1、数据获取
2、数据处理
3、词频统计及词云展示
4、文本聚类分析
5、文本情感倾向性分析
6、情感倾向演化分析
7、总结 1、数据获取
本…
Gas Hero Pets NFT 概览与数据分析
作者：stellafootprint.network
编译：mingfootprint.network
数据源：Gas Hero Pets NFT Collection Dashboard
Gas Hero “盖世英雄” 是一个交互式的 Web3 策略游戏，强调社交互动，并与 FSL 生态系统集成࿰…
鸿蒙开发者的必修课：进程、线程、协程的深度剖析
博主猫头虎的技术世界 🌟 欢迎来到猫头虎的博客 — 探索技术的无限可能！ 专栏链接： 🔗 精选专栏： 《面试题大全》 — 面试准备的宝典！《IDEA开发秘籍》 — 提升你的IDEA技能！《100天精通Golang》…
数据分析 — Numpy 数组处理
目录 一、简介1、概念2、优点3、特点4、作用5、引用 二、创建数组1、创建一维数组3、创建二维数组 三、属性和数组运算1、基本属性2、数据类型3、数组运算 四、索引和切片1、基本索引2、多维数组索引3、基本切片4、多维数组切片5、布尔索引6、花式索引7、修改元素值 五、统计函…
Python机器学习：样本划分之验证集法
评估机器学习模型优劣的标准是模型的泛化能力，所以关注的应该是泛化误差而不是经验误差，一味追求经验误差的降低，就会导致模型“过拟合”现象。但是泛化误差是难以直接观察到的，我们应该如何选择泛化能力比较好的模型呢࿱…
单细胞scATAC-seq测序基础知识笔记
单细胞scATAC-seq测序基础知识笔记 单细胞ATAC测序前言scATAC-seq数据怎么得出的？ 该笔记来源于 Costa Lab - Bioinformatics Course
另一篇关于scRNA-seq的请移步
单细胞ATAC测序前言
因为我的最终目的是scATAC-seq的数据，所以这部分只是分享下我刚学…
数据分析 — 动画图 pyecharts
目录 一、概念二、安装和导入三、绘图逻辑四、绘图1、柱状图2、折线图3、散点图4、饼图5、南丁格尔图6、Geo() 地理坐标第7、Map() 绘制区域8、词云图9、层叠图10、3D 图11、仪表板 一、概念
Pyecharts 是一个基于 Echarts 的 Python 可视化库，它通过 Python 生成 …
遥感影像目标检测：从CNN（Faster-RCNN）到Transformer（DETR）
我国高分辨率对地观测系统重大专项已全面启动，高空间、高光谱、高时间分辨率和宽地面覆盖于一体的全球天空地一体化立体对地观测网逐步形成，将成为保障国家安全的基础性和战略性资源。未来10年全球每天获取的观测数据将超过10PB，遥感大数据时…
用Python实现创建十二星座数据分析图表
下面小编提供的代码中，您已经将pie.render()注释掉，并使用了pie.render_to_file(十二星座.svg)来将饼状图渲染到一个名为十二星座.svg的文件中。这是一个正确的做法，如果您想在文件中保存图表而不是在浏览器中显示它。
成功创建图表…
每天一个数据分析题（一百五十九）
主成分分析（PCA）不适宜单独用于哪种情况？
A. 员工绩效的评估和排名
B. 描述产品情况，如子公司的业务发展状况
C. 消除数据分析中的共线性问题
D. PCA可以作为异常识别的算法使用
题目来源于CDA模拟题库
点击此处获取答案
数据分析案例-2023年TOP100国外电影数据可视化
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
拍立淘助力电商新趋势：以图搜图购物成主流
拍立淘（或称为“以图搜图”）是一种基于图像识别的购物搜索技术，它允许用户通过上传图片或拍摄照片来搜索相似的商品。这一功能为电商领域带来了新的购物体验，使得搜索更加直观和便捷。
为了实现这样的功能，需要后端支…
excel中的引用与查找函数篇3
1、INDEX(array,row_num,[col_num])：获取指定范围中指定行号和列号对应的数据 index(查询范围,行号,列号) 行号和列号是相对选中查询范围来写的：分别把第二行第三列的数据和第四行第二列的数据查找出来。 数据是单行或单列，后面只需要给一个参…
2023年华数杯数学建模C题母亲身心健康对婴儿成长的影响解题全过程文档及程序
2023年华数杯全国大学生数学建模
C题 母亲身心健康对婴儿成长的影响
原题再现： 母亲是婴儿生命中最重要的人之一，她不仅为婴儿提供营养物质和身体保护，还为婴儿提供情感支持和安全感。母亲心理健康状态的不良状况，如抑郁、焦虑、…
excel中的引用与查找函数篇2
如下所有案例中表头均不参与范围查找内：
1、LOOKUP(lookup_value,lookup_vector,[result_vector])：在一行或者一列中查找某个值并从另一行或者列中找到同位置的值 记住：中括号内的参数可以不赋值，若在中间用逗号隔开这个参数&…
企业级数据仓库-理论知识
D3 AM 大数据中间件
Hive：将SQL转化成分布式Map/Reduce进行运算，也支持转换成Spark,需要单独安装Hive集群才能访问Spark,支持60%的SQL，延迟比较大。SparkSQL:属于Spark生态圈，Hive on Sqark。HBase: NoSQL,高并发读，适…
坚鹏：中国邮储银行金融科技前沿技术发展与应用场景第3期培训
中国邮政储蓄银行金融科技前沿技术发展与应用场景第3期培训圆满结束
中国邮政储蓄银行拥有优良的资产质量和显著的成长潜力，是中国领先的大型零售银行。2016年9月在香港联交所挂牌上市，2019年12月在上交所挂牌上市。中国邮政储蓄银行拥有近4万个营业网点…
ChatGPT AIGC 完成各省份销售动态可视化分析
像这样的动态可视化由人工智能ChatGPT AIGC结合前端可视化技术就可以实现。
Prompt：请使用HTML，JS，Echarts 做一个可视化分析的案例，地图可视化，数据可以随机生成，请写出完整的代码 完整代码复制如下：
<!DOCTYPE html>
<html>
<head><meta char…
除法类型复合指标异动贡献度计算
经常遇到除法类型复合指标异动贡献度的计算，公式可以轻易搜到，比如xhs，简单来说如下
#结构变化贡献值
##（子群体指标值after-总体指标值before）*(子群体结构比例after-子群体结构比例before)
#指标变化贡献值
##&…
Rust免杀 Shellcode加载与混淆2
前言
这是半年前我学习Rust和免杀时的一些记录，最近打开知识库看到了这篇半年前的笔记，并且发现我常逛的安全社区都比较少有人分享Rust以及Rust免杀的帖子，于是想着将这篇笔记分享出来供大家参考和指正。由于我写这篇文章时也刚刚开始接触Ru…
坚鹏：中国邮政储蓄银行金融科技前沿技术发展与应用场景第4期
中国邮政储蓄银行金融科技前沿技术发展与应用场景第4期培训圆满结束
中国邮政储蓄银行拥有优良的资产质量和显著的成长潜力，是中国领先的大型零售银行。2016年9月在香港联交所挂牌上市，2019年12月在上交所挂牌上市。中国邮政储蓄银行拥有近4万个营业网点…
input输入路径，读取图片尺寸，移动手机截图“满屏”相同尺寸图片到别的文件夹
安装Pillow库是一个图像库，获取图片的尺寸，并移动相同尺寸图片到文件夹
input默认读取 /storage/emulated/0/Pictures/Screenshots/Screenshot_20231001_132228.jpg 尺寸大小
输入错误就直接读取这个路径图片尺寸，
将和它相同尺寸的图片移动…
数据分析--观察数据处理异常值
引包：
import pandas as pd
import numpy as np
读取文件：
dfpd.read_csv(./HR.csv)
文件见绑定资源（来自kaggle的HR.csv）
处理过程：
一、从df中拿出处理对象
二、找出缺失值的位置并删除
s1_sdf[satisfactio…
互联网数字化管理升级，制造企业一站式智能管理，可定制-亿发
在互联网时代，传统机械制造企业面临着未有的挑战和机遇。信息化管理水平成为企业竞争力的关键因素。然而，许多制造企业在信息化管理中常常陷入以下三大问题： 1、盲目随潮流，缺乏总体规划
互联网时代，科技发展日新月异…
数据分析Pandas专栏---第八章＜Pandas时间值的处理＞
前言:
时间是数据处理中不可或缺的因素，几乎所有数据都会伴随着时间的演变而产生。在数据分析和建模过程中，正确处理时间是至关重要的。在这样的背景下，Pandas提供了强大的工具和函数，使我们能够轻松处理时间序列数据。
无论是金…
能当老板的AI大模型多智体框架MetaGPT自动完成项目
能当老板的AI大模型多智体框架MetaGPT自动完成项目。 MetaGPT是一个创新的多智能体框架，它结合了大语言模型（LLM）和多智能体协作系统，旨在通过模拟人类工作流程来解决复杂问题。这个框架的核心在于将标准化操作程序（SO…
数据分析-Pandas数据的探查蜂窝图
数据分析-Pandas数据的探查蜂窝图
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表&…
数据分析 — 电商用户分析和用户 RFM 模型
目录 一、电商用户分析1、数据字段信息2、数据读取3、数据清洗4、可视化分析1、每年销售额的增长情况2、各个地区分店的销售额3、每个分店每一年的销售额4、销售淡旺季5、新增用户 二、RFM 模型1、RFM 模型的三个维度2、RFM 的客户类型标签3、RFM 模型的二分法思想4、代码 一、…
每天一个数据分析题（一百六十四）
关于OLAP系统，下列选项不正确的是（）
A. 是基于数据仓库的信息进行分析处理过程
B. 用户数量相对较少，其用户主要是业务决策人员与管理人员
C. 对响应时间要求非常高。
D. 基础数据来源于生产系统的操作数据，也就是…
用Python实现创建餐厅评分数据分析表
代码的功能是创建一个雷达图（Radar Chart），也称为蜘蛛网图（Spider Chart），用来展示不同餐厅在多个维度上的评分。雷达图是一种非常适合展示多维数据的图形，它能够清楚地显示每个数据点在多个变量…
数据分析（二）自动生成分析报告
1. 报告生成思路概述
怎么快速一份简单的数据分析报告，注意这个报告的特点：
--网页版，可以支持在线观看或者分享HTML文件
--标题，动图，原始数据应有尽有
--支持交互，比如plotly交互画面，数据…
数据分析Pandas专栏---第十一章＜Pandas数据聚合与分组(1)＞
前言:
数据聚合和分组操作是数据处理过程中不可或缺的一部分。它们允许我们根据特定的条件对数据进行分组，并对每个组进行聚合计算。这对于统计分析、汇总数据以及生成报告和可视化非常有用。无论是市场营销数据分析、销售业绩评估还是金融数据建模，数据…
每天一个数据分析题（一百六十六）
关于指标体系的构件组成，说法正确的是（）。
A. 指标体系由度量和维度构件组成的。
B. 指标体系由标签和维度构件组成的。
C. 指标体系由指标和标签构件组成的。
D. 指标体系由指标和维度构件组成的。
题目来源于CDA模拟题库
点击此处获取…
R语言数据分析（四）
R语言数据分析（四） 文章目录 R语言数据分析（四）前言一、dplyr基础知识二、行2.1 filter()2.2 arrange()2.3 distinct() 三、列3.1 mutate()3.2 select()3.3 rename()3.4 relocate() 四、组4.1 group_by()4.2 summarize()4.3 slice…
R语言数学建模（二）—— tidymodels
R语言数学建模（二）—— tidymodels 文章目录 R语言数学建模（二）—— tidymodels前言一、示例数据集二、拆分数据集2.1 拆分数据集的常用方法2.2 验证集2.3 多层次数据2.4 其他需考虑问题 三、parsnip用于拟合模型3.1 创建模型3.2 …
Python 数据分析的敲门砖 jieba模块中文分词
文章目录 文章开篇Jieba简介使用场景jieba的引用jieba常用的方法1.精确模式分词2.搜索引擎模式分词3.添加新词4.调整词频5.提取关键词 应用案例总结 文章开篇 Python的魅力，犹如星河璀璨，无尽无边；人生苦短、我用Python！ Jieba简介…
大幅提升数据库删除性能丨DolphinDB 软删除功能详解
为满足近来用户对某些场景下删除性能的更高要求，我们在2.00.11版本的 DolphinDB Server 中特别支持了软删除的功能。本文作为该功能的使用教程，将详细介绍软删除的实现原理与应用场景，同时提供性能测试案例以供参考。
1. 概述
软删除&#…
matplotlib——折线图（python）
前言
在学习数据分析前，一定要有python基础，不一定要非常熟练的掌握这门语言，但一定要对python有个大概的了解（就像我一样，大一学过python，但是现在忘的差不多了，但是没关系，有个大…
数字化转型导师鹏：政府数字化转型政务服务类案例研究
政府数字化转型政务服务类案例研究
课程背景：
很多地方政府存在以下问题：
不清楚标杆省政府数字化转型的政务服务类成功案例
不清楚地级市政府数字化转型的政务服务类成功案例
不清楚县区级政府数字化转型的政务服务类成功案例
课程特色&#x…
京东数据分析（电商数据分析）：2024年1月京东白酒TOP10品牌销量销额排行榜
在公布2024年1月京东白酒品牌排行榜之前，分享一个有点意思的现象：在今年龙年春晚“黄金5分钟”的广告片里，白酒局知名的品牌基本都亮相了（茅台、五粮液、洋河股份、郎酒、古井贡酒、水井坊），但今年汾酒却缺…
图表背后的智慧：办公场景中的数据可视化革新
在现代办公场景中，数据可视化的应用已经成为提高效率、推动创新的得力工具。无论是管理层还是普通员工，都能从数据可视化中受益匪浅。下面我就以可视化从业者的角度，简单聊聊这个话题。 首先，数据可视化提升了数据的易读性与理解性…
ChatGPT论文指南|ChatGPT如何助力论文中的数据分析！【建议收藏】
点击下方▼▼▼▼链接直达AIPaperPass ！
AIPaperPass - AI论文写作指导平台 公众号原文▼▼▼▼：
ChatGPT论文指南|ChatGPT如何助力论文中的数据分析！【建议收藏】 小编在之前的论文写作流程中，介绍了大量论文文字工作ÿ…
数字化转型导师坚鹏：数字政府技术、业务、数据融合发展路径探索
数字政府建设与发展研究
——技术、业务、数据融合发展路径探索
课程背景：
很多政府存在以下问题：
不清楚数字政府建设内涵
不清楚数字政府建设现状
不清楚数字政府融合路径
课程特色：
有实战案例
有原创观点
有精彩解读
学…
第三章第12节：EXCE利用折线图去直观数据分析 (二)
01, 折线图
图形简介 折线图用于显示指标在连续时间间隔上的变化，特点是反映变量随时间或有序类别的变化趋势。
02, 基础用法
折线图中，数据是递增还是递减、增减的速率、增减的规律(趋势性、周期性、螺旋性、随机性等)、峰值、凹值等特征都可以被清晰…
利用元胞自动机-人工神经网络模型预测城市未来土地利用
近年来，土地利用/土地覆盖已成为全球和区域范围内的重要问题。对全球变暖和气候变化的担忧可以作为其原因。土地覆盖/利用的时空分析在规划研究中具有重要地位，可以为未来几年环境问题的进程提供线索。在本研究中，我们将尝试根据马尼萨省2006年和2018年的土地利用情况制作20…
数据分析-Pandas数据探查初步柱状图
数据分析-Pandas数据探查初步柱状图
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表&am…
R语言数据分析（五）
R语言数据分析（五） 文章目录 R语言数据分析（五）前言一、什么是整洁的数据二、延长数据2.1 列名中的数据值2.2 pivot_longer()的处理原理2.3 列名中包含许多变量的情况2.4 列名同时包含数据和变量 三、扩宽数据3.1 pivot_wider的处…
FineBI与DeepBI针对用9行数据分析一篇完整的数据报告的速度对比
#数据分析报告#
在我们的理想化构想中，数据分析师如同诸葛亮一般，运筹帷幄之中，决策千里之外。他们似乎拥有无尽的资源，可以随心所欲地运用各种方法和模型。在这样的前提下，数据分析师理应能轻松驾驭复杂的数据&#…
990-22产品经理:The benefits of business analytics 业务分析的优势
Turning data into pound isn’t just something for big corporations now. Thanks to relatively inexpensive software and easy-to-use, drag-and-drop tools, pulling data and analysing it – with the goal of growing your business – has never been more uncomplic…
2024年1月手机市场行业分析：苹果手机份额骤降，国产高端手机成功逆袭！
小米Ultra发布。
一方面，我们有望看到国产手机再一次超越自己的决心，继续创新追逐高端；另一方面，我们也不得不正视目前手机市场所面临的危机状态。
2024年1月的线上手机市场远不如去年。根据鲸参谋数据显示，今年1月京…
python 二手车数据分析以及价格预测
二手车交易信息爬取、数据分析以及交易价格预测 引言一、数据爬取1.1 解析数据1.2 编写代码爬1.2.1 获取详细信息1.2.2 数据处理 二、数据分析2.1 统计分析2.2 可视化分析 三、价格预测3.1 价格趋势分析(特征分析)3.2 价格预测 引言
本文着眼于车辆信息，结合当下较…
如何使用Java爬取指定链接的网页内容
在当今信息时代，互联网上的数据量庞大且不断增长。为了获取特定网页的内容，爬虫技术成为了一种非常有用的工具。本文将介绍如何使用Java编程语言来实现爬取指定链接的网页内容。 首先，我们需要准备好Java开发环境。确保你已经安装了Java Deve…
Python与数据分析--Matplotlib-1
目录 1.Matplotlib库函数导入
2.简单尝试绘图
3.绘制多条折线图
4.绘制多种颜色风格曲线
5.图片内容文本操作实例
6.图例设置实例
7.坐标轴设置实例 1.Matplotlib库函数导入
#导入matplotlib库
import matplotlib as mpl
import matplotlib.pyplot as plt
#平常一般用第…
一款超强的 Python 分析工具！
这是一个star暴增的项目：PyGWalker，也是目前看来更加轻量级的分析工具！
之前我们的数据分析思路是：
1、利用 R 或者 Python 进行数据分析
2、利用沉跌跌的工具进行数据分析，比如：tableau
今天介绍的*…
2023年数维杯数学建模B题节能列车运行控制优化策略求解全过程文档及程序
2023年数维杯数学建模
B题 节能列车运行控制优化策略
原题再现： 在城市交通电气化进程快速推进的同时，与之相应的能耗增长和负面效应也在迅速增加。城市轨道交通中的快速增长的能耗给城轨交通的可持续性发展带来负担。2018 年，北京、上海、…
大数据驱动业务增长：数据分析和洞察力的新纪元
文章目录 大数据的崛起大数据的特点大数据技术 大数据驱动业务增长1. 洞察力和决策支持2. 个性化营销3. 风险管理4. 产品创新 大数据分析的新纪元1. 云计算和大数据示例代码：使用AWS的Elastic MapReduce（EMR）进行大数据分析。 2. 人工智能和机…
关于硬盘质量大数据分析的思考
近日，看到Backblaze分享了一遍关于硬盘运行监控数据架构的文章，觉得挺有意义的，本文就针对这方面跟大家聊聊。 作为一家在2021年在美国纳斯达克上市的云端备份公司，Backblaze一直保持着对外定期发布HDD和SSD的故障率稳定性质量报告…
使用Selenium进行网页登录和会话管理
随着互联网的快速发展，网页登录和会话管理是许多网站和应用程序的基本功能。通过网页登录，用户可以访问个人账户、购物车订单、历史记录等个性化信息。为了提高用户体验和效率，自动化登录和会话管理成为一个重要的需求。而Selenium作为一种强…
决策树（上）：数据挖掘十大算法之一
⭐️⭐️⭐️⭐️⭐️欢迎来到我的博客⭐️⭐️⭐️⭐️⭐️ 🐴作者：秋无之地 🐴简介：CSDN爬虫、后端、大数据领域创作者。目前从事python爬虫、后端和大数据等相关工作，主要擅长领域有：爬虫、后端、大数据开发、数据分析等。 🐴欢迎小伙伴们点赞👍🏻、收藏⭐️、…
Mac安装SPSS 26(含安装包)
Mac安装SPSS 26(含安装包)
安装包地址(百度网盘)：https://pan.baidu.com/s/127ZJNRIMZaeR2hDilQT0Zg提取码: m5xj
查看是否允许安装任何来源的app 如果没有任何来源这个选项 打开终端输入：sudo spctl --master-disable回车之后输入password(注:电脑的…
辨析常见的医学数据分析（相关性分析回归分析）
目录
1 常见的三种分类结果？
2 什么是相关性分析？ 相关性分析的结果怎么看？
3 什么是回归分析？ 1）前提 2）常见的回归模型
4 对于存在对照组实验的医学病例如何分析？
1）卡方检验…
【重新定义matlab强大系列十五】非线性数据拟合和线性拟合-附实现过程
🔗 运行环境：Matlab 🚩 撰写作者：左手の明天 🥇 精选专栏：《python》 🔥 推荐专栏：《算法研究》 #### 防伪水印——左手の明天 #### 💗 大家好🤗ᾑ…
实时更新：拼多多API确保商品信息最新最准确
实时更新商品信息对于电商平台来说至关重要，因为这关系到用户体验、销售效果以及商家的信誉。拼多多作为中国的主要电商平台之一，也提供了一系列的API接口供商家和开发者使用，以确保商品信息的最新和准确。
以下是关于拼多多API如何确保商品…
数字化转型导师坚鹏：县域数字化转型案例研究
县域数字化转型案例研究
课程背景：
很多县级政府存在以下问题：
不清楚县域数字化转型的发展模式
不清楚县域数字化转型的成功案例
课程特色：
针对性强
实用性强
创新性强
学员收获:
学习县域数字化转型的发展模式。
学习县…
python 层次分析（AHP）
文章目录 一、算法原理二、案例分析2.1 构建指标层判断矩阵2.2 求各指标权重2.2.1 算术平均法（和积法）2.2.2 几何平均法（方根法） 2.3 一致性检验2.3.1 求解最大特征根值2.3.2 求解CI、RI、CR值2.3.3 一致性判断 2.4 分别求解方案层…
基于R语言地理加权回归、主成份分析、判别分析等空间异质性数据分析
在自然和社会科学领域有大量与地理或空间有关的数据，这一类数据一般具有严重的空间异质性，而通常的统计学方法并不能处理空间异质性，因而对此类型的数据无能为力。以地理加权回归为基础的一系列方法：经典地理加权回归，…
仪表板展示｜DataEase看中国：历年研究生报考数据分析
背景介绍
在信息时代的浪潮中，研究生教育作为培养高层次专业人才的重要通道，不断吸引着广大毕业生和在职人士的关注。今天我们结合2018年～2024年的研究生报考数据，以数字为镜，深入了解近年来研究生培养态势。
本文将…
虾皮shopee API如何提高商品详情更新效率
要提高虾皮（Shopee）API的商品详情更新效率，你可以考虑以下几个策略：
批量更新：如果你需要更新大量商品，使用批量更新功能可以大大提高效率。你可以一次性上传多个商品的信息，而不是逐个更新。优…
利用R语言进行因子分析实战（数据+代码+可视化+详细分析）
🍉CSDN小墨&晓末:https://blog.csdn.net/jd1813346972 个人介绍: 研一｜统计学｜干货分享 擅长Python、Matlab、R等主流编程软件 累计十余项国家级比赛奖项，参与研究经费10w、40w级横向 文…
【统计分析数学模型】聚类分析： 系统聚类法
【统计分析数学模型】聚类分析： 系统聚类法 一、聚类分析1. 基本原理2. 距离的度量（1）变量的测量尺度（2）距离（3）R语言计算距离 三、聚类方法1. 系统聚类法2. K均值法 三、示例1. Q型聚类&#x…
数据分析---Python与sql
目录 Python的pandas，如何实现SQL中的leftjoinPython的pandas，如何实现SQL中的unionPython的pandas，如何实现类似SQL中的where进行限制Python的pandas，如和实现SQL中的group byPython的pandas，如何删除某一列Python的pandas，如何实现SQL中的leftjoin 在Python的pandas库中…
《数据治理简易速速上手小册》第1章 数据治理概述（2024 最新版）
文章目录 1.1 数据治理的定义与重要性1.1.1 基础知识1.1.2 重点案例：客户数据分析1.1.3 拓展案例 1：库存管理系统1.1.4 拓展案例 2：合规性数据报告 1.2 数据治理的发展历程1.2.1 基础知识1.2.2 重点案例：电商平台的用户数据管理1.…
数据可视化引领智慧工业新时代
在智慧工业的大潮中，数据可视化崭露头角，以其直观、清晰的方式赋能工业生产，为智慧工业的高效运转提供了强有力的支持。下面我就以可视化从业者的角度，简单聊聊这个话题。
数据可视化首先在智慧工业的生产监控中大显身手。通过将…
数据可视化--了解数据可视化和Excel数据可视化
目录
1.1科学可视化：
可视化是模式、关系、异常
1.2三基色原理：
三基色:红色、绿色和蓝色
1.3Excel数据可视化
1.3.1 excel数据分析-13个图表可视化技巧
1.3.2 excel数据分析-28个常用可视化图表（video）
1.3.3Excel可视化…
数据之美：用山海鲸展现数据魅力
在数据分析领域，数据可视化是一个至关重要的环节。作为一名资深的数据分析师，我深知一个直观、易于理解的数据可视化看板对于传达信息、辅助决策的重要性。今天，我将以自己在用的山海鲸可视化软件为例，与大家分享如何制作一个高效…
nn.Linear() 使用提醒
原本以为它是和nn.Conv2d()一样，就看第二个维度的数值，今天才知道，它是只看最后一个维度的数值！！！ 例子1 Descripttion:
Result:
Author: Philo
Date: 2024-02-27 14:33:50
LastEditors: Philo
LastEditT…
数据分析-Pandas数据探查初步：离散点图
数据分析-Pandas数据探查初步：离散点图
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律ÿ…
990-11产品经理:Team Building in Project Management 项目管理中的团队建设
Introduction
One of the most important developments in management during the 1970’s has been the widespread application广泛应用 of project teams to a variety of complex tasks. Project managers quickly learn the critical significance批判意义 of the effect…
案例研究｜DataEase助力众陶联应对产业链数据可视化挑战
佛山众陶联供应链服务有限公司（以下简称为“众陶联”）成立于2016年，是由34家陶瓷企业共同创办的建陶行业工业互联网平台，股东产值占整个行业的22.5%。众陶联以数据赋能为核心，积极探索新的交易和服务模式，构…
数据挖掘入门项目二手交易车价格预测之数据分析
文章目录 1. 相关库的引入2. 数据的加载3. 数据概况3.1 统计值查看3.2 查看数据类型 4. 判断缺失值4.1 统计每一列空值的数量4.2 可视化缺失值数量 5. 判断异常值5.1 异常值检测 6. 了解预测值的分布6.1 统计各预测值的分布6.2 总体分布概况6.2 查看预测值的具体频数6.3 查看sk…
数据分析-Pandas画分布密度图
数据分析-Pandas画分布密度图
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表ÿ…
（一）Python数据分析体系--九五小庞
课程地址：https://space.bilibili.com/387143299/channel/collectiondetail?sid554734
主要内容 知识体系 分析什么样的数据 为什么使用Python做数据分析
Python近几年的发展势头是有目共睹的，尤其是在科学计算，数据处理，A方面…
预付费远传水表管理系统
预付费远传水表管理系统是一种为水表计量和管理而设计的先进系统，结合了预付费和远传智能化技术，为用户和水务部门提供了更便捷、高效的水表管理解决方案。通过这种系统，用户能够根据自身需求预付水费，同时水务部门也能实现对水表…
2024年1月京东奶粉行业销售数据分析（TOP10奶粉品牌排行榜）
鲸参谋监测的京东平台1月份奶粉市场销售数据已出炉！
根据鲸参谋电商数据分析平台显示，今年1月份，京东平台上奶粉的销量约740万件，环比上个月增长33%，同比去年增长10%；销售额约27亿元，环比上个月…
开源的 Python 数据分析库Pandas 简介
阅读本文之前请参阅-----如何系统的自学python Pandas 是一个开源的 Python 数据分析库，它提供了高性能、易用的数据结构和数据分析工具。Pandas 特别适合处理表格数据，例如时间序列数据、异构数据等。以下是对 Pandas 的简明扼要的介绍，包括…
【Python爬虫+数据分析】采集电商平台数据信息采集|电商API数据采集接口接入
前言
随着电商平台的兴起，越来越多的人开始在网上购物。而对于电商平台来说，商品信息、价格、评论等数据是非常重要的。因此，抓取电商平台的商品信息、价格、评论等数据成为了一项非常有价值的工作。本文将介绍如何使用Python编写爬虫程序&a…
python_pyecharts_柱形图
from pyecharts.charts import Bar
from pyecharts import options as opts
# 创建一个柱形图实例
bar Bar()
# 设置x轴数据
bar.add_xaxis(["A", "B", "C", "D", "E"])
# 设置y轴数据
bar.add_yaxis("柱形图", …
笔记电商人工智能客服
天猫-店小蜜
标准模式 全自动接待：机器接待。若答不出，转人工引导语，顾客手动转人工。
智能辅助接待：机器人将辅助客服接待，在客服接待过程中提供话术推荐，并自动回复客服尚未接起的买家咨询。
混合接待…
什么是大数据分析？大数据分析要学什么？
作为时下最火热的IT行业的词汇——大数据，它是指对规模庞大的数据库或者数据池进行挖掘、清理、分析的过程。大数据可以概括为5个V，数据量大(Volume)、速度快(Velocity)、类型多(Variety)、价值（Value）、真实性(Veracity)。通过对…
数据分析---Python基础
目录 Python中，有哪些数据结构Python中，元组和集合的区别Python中，for和while循环的区别Python的pandas，如何实现排序Python的pandas，如何计算某列的平均值和中位数Python中，有哪些数据结构 列表（List）：有序、可变、可重复的数据集合，使用方括号 [] 表示。可以通过索…
Pandas教程：DataFrame删除重复的行数据
---------------pandas数据分析集合--------------- Python教程71：学习Pandas中一维数组Series Python教程74：Pandas中DataFrame数据创建方法及缺失值与重复值处理 Pandas数据化分析，DataFrame行列索引数据的选取，增加，…
脱云时代渐渐来临，你准备好了么
本地云计算结合IP换道可以被视为一种尝试脱离公有云方案的策略。这种策略的核心思想是将计算和数据存储从公有云环境迁移到本地云环境中，并通过IP换道实现网络配置的调整。
在这种方案中，本地云计算指的是在企业或组织内部建立私有云或混合云环境&#…
基于R语言的分位数回归技术应用
回归是科研中最常见的统计学研究方法之一，在研究变量间关系方面有着极其广泛的应用。由于其基本假设的限制，包括线性回归及广义线性回归在内的各种常见的回归方法都有三个重大缺陷：(1)对于异常值非常敏感，极少量的异常值可能导致结…
如何利用HubSpot出海营销CRM实现品牌建设与传播的有效管理？
利用HubSpot出海营销CRM优化客户互动和沟通可以通过以下方式实现：
个性化客户管理：
利用HubSpot的客户管理功能，集中管理客户信息，并根据客户的行为、偏好和历史数据等信息进行个性化分类和标记。这样可以更好地了解客户需求&am…
【和鲸冬令营】通过数据打造爆款社交APP用户行为分析报告
【🐋和鲸冬令营】通过数据打造爆款社交APP用户行为分析报告 文章目录 【🐋和鲸冬令营】通过数据打造爆款社交APP用户行为分析报告1 业务背景2 数据说明3 数据探索性分析4 用户行为分析4.1 用户属性与行为关系分析4.2 转化行为在不同用户属性群体中的分布…
每天一个数据分析题（一百七十九）
指标体系包括根指标、组合指标和派生指标。业务方最关心的指标称为根指标，根指标与最常用的维度取值相结合生成组合指标，根指标和组合指标的运算得到派生指标。以下属于派生指标的是（）单选
A. 销售额
B. 净利润
C. 客单价
D. …
python数据分析numpy基础之cumsum求数组累计和
1 python数据分析numpy基础之cumsum求数组累计和
python的numpy库的cumsum()函数，用于获取数组沿指定轴每个位置的累计和。
本文的累计和是指第1个数到第n个数的和。比如数组a[a1,a2,a3,a4,a5]，那么第1个数的累计和为a1，第2个数的累计和为a…
最新基于SWAT-MODFLOW地表水与地下水耦合技术应用
耦合模型被应用到很多科学和工程领域来改善模型的性能、效率和结果，SWAT作为一个地表水模型可以较好的模拟主要的水文过程，包括地表径流、降水、蒸发、风速、温度、渗流、侧向径流等，但是对于地下水部分的模拟相对粗糙，考虑到SWAT…
数据可视化原理-腾讯-散点图
在做数据分析类的产品功能设计时，经常用到可视化方式，挖掘数据价值，表达数据的内在规律与特征展示给客户。 可是作为一个产品经理，（1）如果不能够掌握各类可视化图形的含义，就不知道哪类数据该用…
别问怎么下载，金蝶云星空SaaS BI系统不用下载
国产自研的奥威软件-金蝶云星空SaaS BI，不下载不安装，从浏览器上一键注册登录即可使用：一键点击下载金蝶云星空方案，执行后，BI系统将基于金蝶云星空内的数据与方案自带的BI报表，智能计算分析指标࿰…
历史高频行情数据存储最佳实践：DolphinDB Array Vector 使用指南
越来越多的机构使用 L1/L2 的快照行情数据进行量化金融的研究。作为一个高性能时序数据库，DolphinDB 非常适合存储和处理海量的历史高频行情数据。针对快照数据包含多档位信息的特点，DolphinDB 研发了一种方便、灵活且高效的数据结构——Array Vector&am…
RESTful API的性能优化：如何提高API的响应速度和吞吐量
RESTful API（Representational State Transfer）是一种基于HTTP协议的Web API设计风格，它可以实现资源的表示、交互和状态转移。在实际应用中，RESTful API的性能优化是一个非常重要的问题，可以提高API的响应速度和吞吐量…
Spark SQL【基于泰坦尼克号生还数据的 Spark 数据分析处理】
前言 昨天实验课试着做了一个 Spark SQL 小案例，发现好多内容还是没有掌握，以及好多书上没有的内容需要学习。
一、数据准备
csv 文件内容部分数据展示：
PassengerId,Survived,Pclass,Name,Sex,Age,SibSp,Parch,Ticket,Fare,Cabin,Embarke…
数据统计和分析怎么做?spss如何做好数据分析?
为什么要做数据分析?数据分析有什么意义？数据分析可以为企业和组织提供多方面的帮助，包括提高工作效率、优化业务流程、升职加薪、提高管理效率以及改进汇报效果等方面。 IBM SPSS Statistics 26是一款功能强大的统计分析软件，适用于Mac操作…
Python 数据分析 | 机器学习 必备
相关文档查找 Python标准库中文文档： http://www.opython.com/docs/python/3.8/library/index.html
Python 第三方库官方地址： https://pypi.org/
Python 第三方库 whl 文件下载地址： https://www.lfd.uci.edu/~gohlke/pythonlibs/
Python…
如何使用 Python 中 Pandas 进行数据分析？
Pandas是Python中一个常用的数据分析库，它提供了丰富的数据结构和工具，可以轻松地进行数据分析和处理。下面是一些使用Pandas进行数据分析的示例：
1、加载数据
在进行数据分析之前，我们需要加载数据。Pandas提供了多种方法来加载…
如何套用模板制作大屏？
在山海鲸可视化的资源中心里内置了大量的二维、三维大屏模板，大家可以根据需要找到自己想要的模板，然后点击下载直接进行使用。 有需要可自行前往哔哩哔哩账号中观看相关内容的视频教程↓↓↓
山海鲸可视化的个人空间-山海鲸可视化个人主页-哔哩哔哩视频…
预制菜行业数据分析（京东数据挖掘）
最近一段时间，关于预制菜进校园事件的讨论热度高涨。而这两天，核酸大王“张核子”转行开预制菜公司卖方便米饭的消息又被传出，直接让预制菜市场饱受关注。
“预制菜是近两年的风口”，这个结论鲸参谋早在以往的内容中专门讨论过&a…
数据分析的-五种常用方法实例
一、对照 俗称对比，单独看一个数据是不会有感觉的，必需跟另一个数据做对比才会有感觉。比如下面的图a和图b。
图a毫无感觉 图b经过跟昨天的成交量对比，就会发现，今天跟昨天实则差了一大截。 这是最基本的思路，也是最重…
数据分析三剑客之一：Numpy详解及实战
1 NumPy介绍
NumPy 软件包是Python生态系统中数据分析、机器学习和科学计算的主力军。它极大地简化了向量和矩阵的操作处理。Python的一些主要软件包（如 scikit-learn、SciPy、pandas 和 tensorflow）都以 NumPy 作为其架构的基础部分。除了能对数值数据…
京东大型API网关实践之路
概述
1、背景
京东作为电商平台，近几年用户、业务持续增长，访问量持续上升，随着这些业务的发展，API网关应运而生。
API网关，就是为了解放客户端与服务端而存在的。对于客户端，使开放给客户端的接口标准统…
Python中的数据常见问题
数据可视化在Python中是一个非常重要的主题，它可以帮助我们更好地理解和分析数据。无论是探索数据的特征，还是向其他人展示数据的结果，数据可视化都起到了关键作用。然而，在进行数据可视化时可能会遇到一些常见问题。本文将为您分…
京东数据挖掘：2023年8月京东厨卫大电行业数据分析
8月份，厨卫大电市场的销售数据已经出炉。鲸参谋数据显示，今年8月份，京东平台厨卫大电的销量为197万，同比增长9%；销售额将近33亿，同比增长约14%。整体来看，厨卫大电市场在逐步复苏，与…
一文读懂集合竞价，建议收藏，读完少交学费
集合竞价每个时间段交易规则及作用都不一样，了解集合竞价的规则，有利于琢磨主力的意图。
大部分同学都不是很关心集合竞价，也不知道如何利用集合竞价买卖股票。如上图所示，有同学在9点15看着股票涨停，立马冲进去&…
代理IP对企业网络安全的重要性
随着科技的快速发展，网络已经成为企业运营的重要工具，然而与发展相伴的网络安全问题也日趋复杂，为了降低数据和隐私泄露的风险，企业必须给予足够的重视，采取全面的网络安全应对措施来降低风险，维护企业形象…
Python与数据分析--Pandas操作进阶
目录
1.文件读取方式
1.1.绝对路径读取文件
1.2.相对路径读取文件
2.列表数据操作
2.1.列索引指定
2.2.代码数据对齐
3.创建新CSV文件
4.缺失值处理
4.1.缺失值创建
4.2.缺失值检索
4.3.缺失值查询 4.3.1.isnull()函数判断 4.3.2.notnull()函数判断
4.3.3.any()函数…
KNN（下）：数据分析 | 数据挖掘 | 十大算法之一
⭐️⭐️⭐️⭐️⭐️欢迎来到我的博客⭐️⭐️⭐️⭐️⭐️ 🐴作者：秋无之地 🐴简介：CSDN爬虫、后端、大数据领域创作者。目前从事python爬虫、后端和大数据等相关工作，主要擅长领域有：爬虫、后端、大数据…
设置小数点后2位，随机保存财富txt，生成随机富翁数
如果想要将生成的随机财富数据保留小数点后两位，可以在写入文件之前使用格式化字符串的方法来控制小数点的位数。以下是修改后的代码示例：
import random# 生成随机财富数据
total_people 100
average_wealth 200 * 10**8 # 平均财富 200亿# 5个人的…
数据分析（python）学习笔记1.0
《利用Python进行数据分析》（原书第2版）
《利用Python进行数据分析》（原书第2版）
《利用Python进行数据分析》（原书第2版）
社区和会议
除了网络搜索，科学、数据相关的Python邮件列表对于解决问题也非常有帮助。可以看看下列邮件列表： pydata：与数据分析和pandas相…
京东数据分析软件：2023年8月京东彩妆行业品牌销售排行榜
鲸参谋监测的京东平台8月份彩妆市场销售数据已出炉！
根据鲸参谋平台的数据显示，今年8月份，京东平台上彩妆行业的销量将近390万，其中，环比来看增长约11%，同比则降低约34%；销售额为6.3亿…
K-Means（上）：数据分析 | 数据挖掘 | 十大算法之一
⭐️⭐️⭐️⭐️⭐️欢迎来到我的博客⭐️⭐️⭐️⭐️⭐️ 🐴作者：秋无之地 🐴简介：CSDN爬虫、后端、大数据领域创作者。目前从事python爬虫、后端和大数据等相关工作，主要擅长领域有：爬虫、后端、大数据…
Python 数据分析与挖掘（一）
Python 数据分析与挖掘（数据探索）
数据探索
1.1 需要掌握的工具（库）
1.1.1 Nump库
Numpy 提供多维数组对象和各种派生对象（类矩阵），利用应用程序接口可以实现大量且繁琐的数据运算。可以构建…
2023年最新云存储工具排行榜：找到适合你的云存储服务
随着数据规模的不断增长，传统的本地存储已经无法满足用户的需求。云存储工具通过提供灵活、安全和高效的数据存储服务，成为了现代化的数据管理方式。在众多云存储工具中，有一些在功能和性能方面表现出色，成为用户首选。下面是2023…
京东数据分析平台：9月中上旬白酒消费市场数据分析
9月份，围绕白酒的热点不断。9月5日，瑞幸咖啡官微发布消息称，瑞幸与贵州茅台跨界合作推出的酱香拿铁刷新单品纪录，首日销量突破542万杯，销售额破1亿元。9月14日，贵州茅台官微发布消息称与德芙推出联名产品“…
GEE15：获取不同遥感指数的时间序列及不同指数间的关系
GEE 1. 不同遥感指数间的时间序列分析2. 不同指数之间的关系 1. 不同遥感指数间的时间序列分析 GPP数据在一定程度上和植被指数（如NDVI和EVI）有着显著的相关性，那么其相关性如何？如何从时间序列的角度来思考呢？下面我将…
代谢组学最常用到的数据分析方法（五）
代谢组学是一门对某一生物或细胞所有低分子质量代谢产物（以相对分子质量<1000的有机和无机的代谢物为研究核心区）进行分析的新兴学科。因此从复杂的代谢组学数据中确定与所研究的现象有关的代谢物，筛选出候选生物标记物成为代谢物组学研究…
京东数据接口|电商运营中数据分析的重要性
在电商运营中，数据分析是非常重要的一环，它可以帮助电商企业更好地了解市场、了解消费者、了解产品、了解销售渠道等各种信息，从而制定更为科学有效的运营策略，提高销售效益。
数据方面用户可以直接选择使用数据接口来获取&#…
读取vivo手机截图尺寸移动.jpg等文件
这个代码的设计初衷是为了解决图片处理过程中的一些痛点。想象一下，我们都曾遇到过这样的情况：相机拍摄出来的照片、网络下载的图片，尺寸五花八门，大小不一。而我们又渴望将它们整理成一套拥有统一尺寸的图片，让它们更…
R语言 一种功能强大的数据分析、统计建模 可视化 免费、开源且跨平台 的编程语言
R语言是一种广泛应用于数据分析、统计建模和可视化的编程语言。它由新西兰奥克兰大学的罗斯伊哈卡和罗伯特杰特曼开发，并于1993年首次发布。R语言是一个免费、开源且跨平台的语言，它在统计学和数据科学领域得到了广泛的应用。
R语言具有丰富的数据处理、…
在供应链管理中，如何做好库存分析？库存分析有哪些监控指标？
在供应链管理中，库存分析是其重要的一环。库存分析的方法繁杂且广泛，选择正确的方法才能更好的进行库存分析，下面就为大家盘点一些常用的库存分析方法和监控指标，全程干货，建议收藏！
01 如何进行库存分析&…
![[论文必备]最强科研绘图分析工具Origin（2）——简单使用教程](https://img-blog.csdnimg.cn/dea0e6079dcc4dbaa8f0edb87d9fcd10.gif)
[论文必备]最强科研绘图分析工具Origin（2）——简单使用教程
本篇将介绍Origin的简单使用教程。
安装教程见上篇：[论文必备]最强科研绘图分析工具Origin（1）——安装教程
目录
📢一、工具栏介绍
📣1.1 行
1.1.1 标准栏
1.1.2 导入栏
1.1.3 工作表数据
1.1.4 图表数据
&a…
![最值得收藏的顶级专业数据恢复软件列表 [持续更新]](https://img-blog.csdnimg.cn/img_convert/9c468fef582e83c2771ce4b6e1c0aa0b.jpeg)
最值得收藏的顶级专业数据恢复软件列表 [持续更新]
互联网上充斥着很多的数据恢复软件，每个软件都声称自己是最好的。现在该同意谁的观点呢？我们创建了 2023 年顶级专业数据恢复软件列表。下载顶级一流数据恢复专业软件的免费试用版，我们强烈建议用户评估演示版本，然后选择付费版本…
关联规则挖掘（上）：数据分析 | 数据挖掘 | 十大算法之一
⭐️⭐️⭐️⭐️⭐️欢迎来到我的博客⭐️⭐️⭐️⭐️⭐️ 🐴作者：秋无之地 🐴简介：CSDN爬虫、后端、大数据领域创作者。目前从事python爬虫、后端和大数据等相关工作，主要擅长领域有：爬虫、后端、大数据…
关联规则挖掘（下）：数据分析 | 数据挖掘 | 十大算法之一
⭐️⭐️⭐️⭐️⭐️欢迎来到我的博客⭐️⭐️⭐️⭐️⭐️ 🐴作者：秋无之地 🐴简介：CSDN爬虫、后端、大数据领域创作者。目前从事python爬虫、后端和大数据等相关工作，主要擅长领域有：爬虫、后端、大数据…
三、机器学习基础知识：Python常用机器学习库（Numpy第一部分）
文章目录 1、Numpy定义2、ndarray对象3、Numpy数据类型4、Numpy数组类型 1、Numpy定义
Numpy是Numberical Python的简称，是用来进行高性能计算与分析的基础包，是Python中重要的扩充库。它支持高维度数组与矩阵运算，也针对数组运算提供了大量…
NLP_文本数据分析_3（代码示例）
目标
了解文本数据分析的作用.掌握常用的几种文本数据分析方法.
1 文件数据分析介绍 文本数据分析的作用: 文本数据分析能够有效帮助我们理解数据语料, 快速检查出语料可能存在的问题, 并指导之后模型训练过程中一些超参数的选择. 常用的几种文本数据分析方法: 标签数量分布句…
模糊C均值聚类（Fuzzy C-means）算法（FCM）
本文的代码与数据地址已上传至github：https://github.com/helloWorldchn/MachineLearning
一、FCM算法简介
1、模糊集理论
L.A.Zadeh在1965年最早提出模糊集理论，在该理论中，针对传统的硬聚类算法其隶属度值非0即1的严格隶属关系ÿ…
每天一个数据分析题（一百八十六）
现有名为df的数据框，若想要将其中列名为A和B的列删除，则下列方法可行的是（）
A. df.drop([‘A’, ‘B’])
B. df.drop(columns [‘A’, ‘B’])
C. df.drop([‘A’, ‘B’], axis0)
D. df.drop([‘A’, ‘B’], axis1)
题目来…
无人机遥感在农林信息提取中的实现方法与GIS融合应用
在新一轮互联网信息技术大发展的现今，无人机、大数据、人工智能、物联网等新兴技术在各行各业都处于大爆发的前夜。为了将人工智能方法引入农业生产领域。首先在种植、养护等生产作业环节，逐步摆脱人力依赖；在施肥灌溉环节构建智慧节能系统&a…
“成像光谱遥感技术中的AI革命：ChatGPT应用指
遥感技术主要通过卫星和飞机从远处观察和测量我们的环境，是理解和监测地球物理、化学和生物系统的基石。ChatGPT是由OpenAI开发的最先进的语言模型，在理解和生成人类语言方面表现出了非凡的能力。本文重点介绍ChatGPT在遥感中的应用，人工智能…
数据分析-Pandas如何观测数据的中心趋势度
数据分析-Pandas如何观测数据的中心趋势度
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据…
Graphpad Prism10.2.1（395） 安装教程 (含Win/Mac版)
GraphPad Prism
GraphPad Prism是一款非常专业强大的科研医学生物数据处理绘图软件，它可以将科学图形、综合曲线拟合（非线性回归）、可理解的统计数据、数据组织结合在一起，除了最基本的数据统计分析外，还能自动生成统…
Altair® RapidMiner®数据分析与人工智能平台
无论您的组织处于数据旅程的哪个阶段，Altair RapidMiner 都能帮助您克服前进道路上的挑战性障碍。我们为成熟的数据分析团队提供现代化之路，也为刚刚起步的团队提供自动化之路。我们不需要您的组织从根本上改变人员、流程、计算环境或现有数据状况&#…
数字化转型导师坚鹏：证券公司数字化思维升级之道
证券公司数字化思维升级之道
——数字化思维之六脉神剑
课程背景：
很多证券公司存在以下问题：
不知道数字化转型如何改变思维模式？
不清楚需要建立什么样的数字化思维？
不知道如何开展数字化思维提升工作？
课…
热门的数据分析软件推荐
在数字化时代，数据分析已成为企业决策的关键。为了帮助企业更好地应对市场竞争，提升业务运营效率，本文将为您推荐一款热门的数据分析软件——VeryReport。作为一款功能全面、操作简便、性能卓越的数据分析软件，VeryReport已成为众…
金蝶云星空，怎么做BI数据可视化分析？
金蝶云星空是一个流程管理方面的软件，如果想要做BI数据可视化分析，还就需要一套BI方案，即一套奥威BI软件金蝶云星空BI方案。
奥威BI软件，负责提供平台和技术；金蝶云星空BI方案，则提供标准化的数据分析模型…
产业园区如何实现数字化运营管理？
在数字化浪潮席卷全球的今天，产业园区正经历着前所未有的变革，数字化运营管理成为各个园区转型升级的发力方向，它不仅能够提升园区的运营管理效率，还能够帮助园区提高服务效能、实现精准招商、增强决策效率，从而全面…
合并不同年度收入数据-外连接
案例需求：统计2019年和2020年的客户销售收入并求和
思路：使用pandas读取excel数据横向连接，使用sum()含函数求和
代码如下：
1、使用pandas读取excel数据 2、由于两个表一个是"客户名称"，一个是客户描述,使…
举个栗子~Tableau 技巧（258）：使用参数高亮文本表中的行
经常有数据粉咨询：如何高亮文本表中的某一行，像 Excel 那样给数据行增加底色，达到突出显示的效果。
其实，可以通过参数来实现这个需求。如下示例，在参数中键入不同的行数，视图就高亮对应的数据行。 那么&…
lazada商品链接获取lazada商品详情数据（用 Python实现lazada商品信息抓取）
在网页抓取方面，可以使用 Python、Java 等编程语言编写程序，通过模拟 HTTP 请求，获取lazada网站上的商品页面。在数据提取方面，可以使用正则表达式、XPath 等方式从 HTML 代码中提取出有用的信息。值得注意的是，lazada…
数字孪生和数据分析：数字化时代的力量结合
在当今数字化时代，数据是无处不在的。企业、政府和个人不仅生成了大量数据，还寻求从中获取有价值的信息以进行更好的决策。在这个背景下，数字孪生和数据分析成为了迎合这一需求的两个关键概念。本文带大家一起探讨二者之间相辅相成的关系。 一…
31 数据分析（中）numpy介绍
文章目录 工具excelTableauPower Queryjupytermatplotlibnumpy安装导入包快速掌握（bushi）array和list的相互转化 np的range多维数组的属性array的改变形状array升降维度array内元素的类型数和array的运算array之间的加减法认识轴切片条件与逻辑修改值app…
Table.Group系列_第4参数为全局的情况下，利用第五参数进行分组汇总
原始数据： 部门与职位存在于同一列中 实现功能： 根据筛选条件，可对部门或职位进行统计汇总第一列列名根据筛选自动变更，显示当前统计的维度 实现方式：
1. 构建筛选器内容 在任意空白单元格内输入需要筛选的内容 2. 插入"组合框"控件，并进行相应设置 从开发工具…
2023年中国数据存储市场现状及发展前景预测分析
中商情报网讯：当前，新一代信息技术快速发展推动信息产业发生了重大变革，数据存储行业将很快成为信息领域一个重要的产业分支。生成式人工智能催生算力需求，各种新兴应用场景对数据存储的容量、效率、流动性和安全性等方面提出了更…
京东数据报告：2023年常温奶消费市场数据分析
众所周知，目前大家所熟知的乳企品牌最初能够在中国市场立足，靠的就是常温奶产品。作为一个传统领域赛道，常温奶多年来的规模增长大多来自于新老产品的升级迭代。
然而在消费加速升级的当下，常温奶行业显然陷入了僵局，…
数据分析篇-数据认知分析
一简介
数据认知分析，实际是对数据的整体结构和分布特征进行分析，是对整个数据外在的认识，也是数据分析的第一步。对于数据认知的分析，一般会考虑分散性、位置特性、变量的相关性等，一般会考虑平均数、方差、极差、峰…
选择适合户外篷房企业的企业云盘解决方案
“户外篷房企业用什么企业云盘好？Zoho WorkDrive企业网盘可以帮助户外篷房企业实现文档统一管理、提高工作效率、加强团队协作，并且支持各种文件类型的预览和编辑。” S公司是一家注重管理规范的大型户外篷房企业，已经有10余年的经验。作为设…
Tableau：商业智能（BI）工具
Tableau入门 1、Tableau概述2、Tableau Desktop2.1、初识Tableau Desktop2.2、Tableau工作区2.3、数据窗格与分析窗格2.4、功能区和标记卡2.4.1、列和行功能区2.4.2、标记卡2.4.3、筛选器功能区2.4.4、页面功能区2.4.5、附加功能区、图例、控件 3、Tableau视图4、Tableau工作簿…
拼多多商品品牌数据采集接口，拼多多商品详情数据接口，拼多多API接口
拼多多商品品牌数据采集的方法如下：
手动数据采集。直接在拼多多平台上搜索并手动复制商品数据，适合采集小批量的商品数据。自动数据采集。通过爬虫来自动获取，具体步骤如下：
选择爬虫框架并安装。Python爬虫框架有很多…
ChatGPT4+Python数据分析与可视化、人工智能建模及论文高效撰写教程
原文链接：ChatGPT4Python数据分析与可视化、人工智能建模及论文高效撰写教程
前沿 2022年11月30日，可能将成为一个改变人类历史的日子——美国人工智能开发机构OpenAI推出了聊天机器人ChatGPT3.5，将人工智能的发展推向了一个新的高度。2023年…
【四 （5）数据可视化之 Pyecharts常用图表及代码实现 】
目录 文章导航一、介绍[✨ 特性]二、安装Pyecharts三、主题风格四、占比类图表1、饼图2、环形图3、玫瑰图4、玫瑰图-多图5、堆叠条形图6、百分比堆叠条形图 五、比较排序类1、条形图2、雷达图3、词云图4、漏斗图 六、趋势类图表1、折线图2、堆叠折线图3、面积图4、堆叠面积图 七…
智慧园区建设是否实现了节能减排？
在我们追求可持续发展的道路上，智慧园区已经成为了一颗璀璨的明星，它不仅代表着科技与自然的和谐共融，更是实现节能减排的关键一环。 智慧园区的核心是智能化管理。通过物联网 技术，园区内的能源消耗可以被实时监控，就…
数据挖掘案例分析：如何通过数据挖掘推动业务增长
在当今这个数据驱动的时代，拥有大量数据并不罕见，但如何从这些数据中提取有价值的信息，进而推动业务增长，却是一个挑战。数据挖掘作为一种分析技术，它通过发现数据中的模式和关联，帮助企业做出更加明智的决…
使用docker datascience-notebook进行数据分析
Jupyter/datascience-notebook 简介
jupyter/datascience-notebook 是 Docker Hub 上可用的 Docker 镜像：https://hub.docker.com/。该镜像提供了一个开箱即用的环境，用于数据科学任务，包括：
Jupyter Notebook: 一个基于 Web 的…
地址分词 | EXCEL批量进行地址分词，标准化为十一级地址
一 需求 物流需要对用户输入地址进行检查，受用户录入习惯地址可能存在多种问题。 地址标准化是基于地址引擎和地址大数据模型，自动将地址信息标准化为省、市、区市县、街镇、小区、楼栋、单元、楼层、房屋、房间等元素，补充层级缺失数据、构建…
Unity--自动版面（Grid Layout Group）
Unity--自动版面（Grid Layout Group）
Grid Layout Group
网格布局组组件将其子布局元素放置在网格中。 Padding：（填充） 布局组边缘内的填充。与其他布局组不同，“网格布局组”将忽略其所包含布局元素的最…
数据分析-Pandas数据画箱线图
数据分析-Pandas数据画箱线图
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表ÿ…
数据分析Pandas专栏---第十三章＜Pandas训练题(初)＞
前言: 写这篇是为了弄一个富有挑战性的Pandas练习题库，涵盖了许多常见和实用的数据处理问题。通过解决这些练习，能够深入了解Pandas提供的关键功能，掌握有效处理数据的技巧和方法。 练习题库涵盖了选择特定列并创建新DataFrame、对DataFrame进…
Decontam去污染：一个尝试
为了程序运行的便利性，不想将Decontam放到windows的Rstudio里面运行，需要直接在Ubuntu中运行，并且为了在Decontam时进行其他操作，使用python去运行R 首先你需要有一个conda环境，安装了R，Decontam࿰…
MapReduce-Join多种应用
Join多种应用
Reduce Join
Map端的主要工作：为来自不同表或文件的key/value对，打标签以区别不同来源的记录。然后用连接字段作为key，其余部分和新加的标志作为value，最后进行输出。Reduce端的主要工作：在Reduce端以连…
Coggle数据科学 | Streamlit + LangChain 问答可见即所得~
本文来源公众号“Coggle数据科学”，仅用于学术分享，侵权删，干货满满。
原文链接：Streamlit LangChain 问答可见即所得~
LangChain是一个框架，旨在开发由语言模型驱动的应用程序。它不仅仅是通过API调用语言模型&…
从新手到高手：一站式 SQL Server 学习平台！
介绍：SQL Server是由微软公司开发的关系数据库管理系统（RDBMS），自1989年推出以来，已成为全球主流的数据库之一。以下是对SQL Server的详细介绍： 易用性与可伸缩性：SQL Server以其易用性和良好的…
Python 语言如日中天，详细介绍 Python 语言的发展历程和特点
在时间进入 2018 年后，身边越来越多的人说 Python 语言如日中天了，也有人说 Python 的发展速度像坐了火箭一般。究竟 Python 语言有什么神奇之处，让广大程序员们对它如痴如醉？本章将详细介绍 Python 语言的发展历程和特点…
「五度情报站」网罗全量企业情报，找客户、查竞品、寻商机！
在当下严峻的市场经济环境下，准确、及时的情报信息，就如同指引企业前行的明灯，能够让企业在风起云涌的市场大潮中保持敏锐的洞察力，掌握最新的市场动态，洞悉竞争对手的一举一动，先知先动，保持竞…
生物标志物发现中的无偏数据分析策略
目录 0. 导论基本概念 1. 生物标志物发现的注意事项2. 数据预处理2.1 高质量原始数据和缺失值处理2.2 数据过滤2.3 数据归一化 3. 数据质量评估3.1 混杂因素3.2 类别分离3.3 功效分析3.4 批次效应 4. 生物标志物发现4.1 策略4.2 数据分析工具4.3 模型优化策略 0. 导论
组学技术…
使用Python进行钻石价格分析
钻石是最昂贵的宝石之一。钻石的质量通常以其重量（克拉）、净度、颜色和切工来评估。重量越大、净度越高、色彩纯净、切工精细的钻石价格也越高。其中，4C标准是衡量钻石质量的国际标准，即克拉（Carat）、净度&…
成为数据分析师要具备什么能力——功法篇（上）
这篇文章适合做了一段时间数据分析工作，开始思考怎么继续提升自己的分析师、运营或者是实习了一段时间的同学，这时的你也许会想几个问题： 为什么我做出来的分析总觉得没有别人的那么高级？ 老板为什么总说我的分析“太浅了”&#…
AI时代Excel数据分析提升之道
欢迎关注博主 Mindtechnist 或加入【智能科技社区】一起学习和分享Linux、C、C、Python、Matlab，机器人运动控制、多机器人协作，智能优化算法，滤波估计、多传感器信息融合，机器学习，人工智能等相关领域的知识和技术。关…
【数据挖掘】数据挖掘、关联分析、分类预测、决策树、聚类、类神经网络与罗吉斯回归
目录 一、简介二、关于数据挖掘的经典故事和案例2.1 正在影响中国管理的10大技术2.2 从数字中能够得到什么？2.3 一个网络流传的笑话(转述)2.4 啤酒与尿布2.5 网上书店关联销售的案例2.6 数据挖掘在企业中的应用2.7 交叉销售 三、数据挖掘入门3.1 什么激发了数据挖掘…
Python中Numpy的应用技巧
目录 1. 什么是 NumPy?2. NumPy 中的数组2.1. 创建数组2.2. 用Numpy的数据2.2.1. OpenCV2.2.2. Pandas 3. 数学计算3.1. 四则计算3.1.1. 矩阵乘法3.1.2. 点乘 3.2. 求逆矩阵与伪逆矩阵3.3. 判断矩阵相等3.4. np.eye()函数生成对角阵 4. 统计4.1. 最大值、最小值、均值条件4.2.…
1688拍立淘接口，按图搜索商品接口，图片识别接口，图片上传搜索接口，图片搜索API接口，以图搜货接口
1688拍立淘接口的作用是让用户通过上传图片或输入图片链接的方式，调用1688的图片搜索引擎，返回与该图片相关的所有1688商品。
使用该接口需要先获取一个key和secret，然后参考API文档里的接入方式和示例，查看测试工具是否有需要的…
ThingsBoard的数据分析-自定义节点来订阅kafka stream的消息
1、概述
在ThingsBoard官方文档中有说明：ThingsBoard 规则引擎支持对传入遥测数据的基本分析，例如阈值交叉。规则引擎背后的想法是提供基于设备属性或数据本身将数据从物联网设备路由到不同插件的功能。 然而，大多数现实生活中的用例也需要高级分析的支持：机器学习、预测分…
高效防汛决策：山海鲸可视化系统助力城市防洪
随着全球气候的变化，自然灾害如洪水、台风等频发，防范洪水成为城市管理者和居民们亟待解决的重要问题。 洪水的威胁
洪水是自然界的杀手之一，不仅会造成大量的财产损失，还可能危害人们的生命安全。因此，预测、监测和有…
BI工具：让数据分析井然有序一望而知
BI（Business Intelligence）工具是一类专门用于数据分析和决策支持的软件工具。
它们能够将企业内部和外部的数据进行整合、处理和可视化，帮助用户从海量数据中获取有价值的见解和洞察，并以直观、易懂的方式展示给决策者和相关人员…
GEE 18：基于GEE平台的土地荒漠化监测与分析【论文复现】
Desertification 1. 研究背景1.1 参考论文1.2 参数获取1.2.1 NDVI1.2.2 Albedo1.2.3 Normalizing indices1.2.4 Calculating the quantitative relationship1.2.5 Calculating DDI2. GEE2.1 数据2.2 GEE code2.2.1 Study region2.2.2 Reomove cloud for Landsat-82.2.3 Calcula…
数据分析案例-基于snownlp模型的MatePad11产品用户评论情感分析（文末送书）
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
印尼禁令频出，Shopee该站也停止销售跨境商品
日前，Shopee印尼站已经正式停止销售来自海外或跨境卖家的商品，这一举措于10月4日开始施行。
Shopee印尼公共政策负责人Radityo Triatmojo表示，该举措系对印尼2023年第31号贸易部长条例（Reg 31/2023）的响应。该条例旨在…
2023年Q3季度国内手机大盘销额下滑2%，TOP品牌销售数据分析
根据Canalys机构发布的最新报告，2023年第三季度，全球智能手机市场出货量仅下跌1%，可以认为目前全球手机市场的下滑势头有所减缓。而国内线上市场的表现也类似。 根据鲸参谋数据显示，今年Q3京东平台手机累计销量约1100万件…
简单谈谈我参加数据分析省赛的感受与体会
数据分析省赛的感受与体会 概要考试前的感受与体会考试注意事项小结 概要
大数据分析省赛指的是在省级范围内举办的大数据分析竞赛活动。该竞赛旨在鼓励和推动大数据分析领域的技术创新和人才培养，促进大数据技术与应用的深度融合，切实解决实际问题。参…
1688店铺商品评论数据采集，1688商品评论数据接口，1688API接口
1688店铺商品评论数据接口可以获取到商品ID，商品标题，商品优惠券，商品到手价，商品价格，商品优惠价，商品sku属性，商品图片，商品视频，商品sku属性图片，商品属性…
使用Python进行iPhone销售分析
苹果iPhone是全球最畅销的智能手机之一。在印度，智能手机品牌之间存在巨大的竞争，在那里你可以以iPhone一半的价格获得智能手机中的最新技术。不过，iPhone在印度的销量仍然很高。在这篇文章中，将带你完成使用Python进行iPhone销售…
30天精通Python（数据分析篇）——第2天：环境搭建之Windows下安装Anaconda及使用介绍
目录 一、为什么需要安装Anaconda?二、下载Anaconda2.1 从百度网盘链接中获取Anaconda安装包2.2 从官网下载Anaconda安装包 三、安装Anaconda四、Anaconda的使用4.1 利用 Conda 管理 Python 环境4.2 利用 Conda 管理 Python 包4.3 文学式开发工具 Jupyter Notebook4.4 Jupyter…
0.3万粉暴涨700万播放，实现B站流量、变现双丰收
- 导语
经过国庆长假，2023年已经进入最后一个季度，平台内的热点一换再换，现在B站年轻人们正在关心什么内容、喜欢什么内容呢？本期飞瓜数据（B站版）盘点近期热点内容，提取有效素材和创作模式&…
荧光EEM平滑教程（去除散射）
说明：本文为drEEM工具箱官网教程《Smoothing EEMs》的笔记。
瑞利散射是一种弹性散射。来自激发源的光子遇到溶液中的分子之后，反弹到各个方向。 最重要的是，瑞利散射（的发射波长）总是与激发波长完全相等。 因此&…
开发者职场“生存状态”大调研报告分析 - 第四版
听人劝、吃饱饭，奉劝各位小伙伴，不要订阅该文所属专栏。 作者：不渴望力量的哈士奇(哈哥)，十余年工作经验, 跨域学习者，从事过全栈研发、产品经理等工作，现任研发部门 CTO 。荣誉：2022年度博客之星Top4、博客专家认证、全栈领域优质创作者、新星计划导师，“星荐官共赢计…
Python数据挖掘实用案例——自动售货机销售数据分析与应用
🚀欢迎来到本文🚀 🍉个人简介：陈童学哦，目前学习C/C、算法、Python、Java等方向，一个正在慢慢前行的普通人。 🏀系列专栏：陈童学的日记 💡其他专栏：CSTL&…
2022年亚太杯APMCM数学建模大赛C题全球变暖与否全过程文档及程序
2022年亚太杯APMCM数学建模大赛
C题 全球变暖与否
原题再现： 加拿大的49.6C创造了地球北纬50以上地区的气温新纪录，一周内数百人死于高温；美国加利福尼亚州死亡谷是54.4C，这是有史以来地球上记录的最高温度；科威特53…
淘宝商品详情API接口(标题|主图|SKU|价格|销量|库存..）
一、应用场景
淘宝商品详情接口的应用场景非常广泛，以下是其中几个例子： 商家用于展示商品信息：淘宝详情接口可以被用于商家的自主店铺或第三方电商平台上，方便展示商品详细信息。 商品价格比对：淘宝详情接口可以用于…
阿里巴巴店铺所有商品数据接口及店铺商品数据分析
获取阿里巴巴店铺所有商品数据的接口是阿里巴巴开放平台提供的接口，通过该接口可以获取店铺所有商品数据。
通过阿里巴巴开放平台接口获取店铺所有商品数据的方法如下：
在开放平台注册成为开发者并创建一个应用，获取到所需的 App Key 和 Ap…
R语言入门看这一章就够了（上）
目录
一、R的基础
1.1、R的安装
1.2、牛刀小试
1.3、线性关系实例
1.4、工作空间
1.5、R包的使用
包的安装
结果的重用
二、R数据集
2.1、向量
2.2、矩阵
2.3、数组
2.4、数据框
2.5、列表
三、R的常用命令
四、list列表详解
五、数据源导入方法
5.1、键盘输…
2022年京东双11食品饮料品类数据回顾
2022年双11，根据京东官方发布的数据显示，京东百货中，京东新百货的589个品类10025个品牌成交额同比增长100%。而在食品饮料行业中，也有一些在大促期间成交额同比涨幅超过100%的品牌。 下面，结合鲸参谋平台提供的数据&am…
商业智能的利用：打造成功的业务战略之道
在当今快节奏和数据驱动的商业环境中，制定稳健的商业战略对于实现可持续的增长和保持竞争力至关重要。商业智能（BI）是能够显著提高业务战略有效性的关键因素之一。本文将深入探讨商业智能的定义、其在战略制定中的重要性，以及如何…
Pandas数据处理分析系列5-数据如何提取
Pandas-数据提取
①通过索引提取数据 # 提取前10行数据 df.head(10) # 提取末尾10行数据 df.tail(10) # 通过列名提取数据 df[列名’] # 通过布尔条件提取数据 df[df[列名] > 10] # 多条件过滤 df[(df[列名1] > 10) & (df[列名2] < 20)]
df1=pd.read_excel(&quo…
使用Spyder进行动态网页爬取：实战指南
导语
知乎数据的攀爬价值在于获取用户观点、知识和需求，进行市场调查、用户画像分析，以及发现热门话题和可能的新兴领域。同时，知乎上的问题并回答也是宝贵的学习资源，用于知识图谱构建和自然语言处理研究。爬取知乎数据为决策和…
Pandas数据处理分析系列3-数据如何预览
Pandas-数据预览
Pandas 导入数据后，我们通常需要对数据进行预览，以便更好的进行数据分析。常见数据预览的方法如下：
①head() 方法 功能：读取数据的前几行，默认显示前5行 语法结构：df.head(行数)
df1=pd.read_excel("销售表.xlsx",sheet_name="手机销…
Python Pandas数据处理作图——波尔共振实验
import matplotlib.pyplot as plt
import pandas as pd
from pylab import mplmpl.rcParams["font.sans-serif"] ["SimHei"]data {频率比例w/wr: [1.036, 1.030, 1.025, 1.020, 1.012, 1.007, 1.002,0.997,0.993,0.990,0.986,0.977,0.969],振幅测量值θ&…
数据分析案例-顾客购物数据可视化分析（文末送书）
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
Python数据分析实战-使用numpy.where方法基于条件替换某列的值（附源码和实现效果）
实现功能
在Pandas中，replace方法默认是基于精确匹配进行替换，而不是基于条件匹配。要实现基于条件的替换，可以使用numpy.where函数。将DataFrame中某一列的指定的两个值分别替换为0和1，其他值替换为2
实现代码
import pandas …
Spark大数据分析与实战笔记（第一章 Scala语言基础-5）
文章目录 每日一句正能量章节概要1.5 Scala的模式匹配与样例类1.5.1 模式匹配字符匹配匹配字符串守卫匹配类型匹配数组、元组、集合 1.5.2 样例类 课外补充偏函数 每日一句正能量 “成功的秘诀，在于对目标的执着追求。”——爱迪生 无论是在工作、学习、还是生活中&…
这5种炫酷的动态图，都是用Python实现的！
数据可以帮助我们描述这个世界、阐释自己的想法和展示自己的成果，但如果只有单调乏味的文本和数字，我们却往往能难抓住观众的眼球。而很多时候，一张漂亮的可视化图表就足以胜过千言万语。本文将介绍 5 种基于 Plotly 的可视化方法，…
2022年京东双十一手机数码全品类数据回顾
2023年双十一临近，特此带大家回顾一下去年双十一热门品类的一些战况数据。这一期是京东手机电脑数码。 整体表现来看，2022年双11大促京东手机、电脑、数码类产品并没有想象中的增长状态，无论是电脑中的笔记本、数码中的相机，或者是…
深度学习遇到 DolphinDB AI DataLoader
深度学习模型有能力自动发现变量之间的关系，而这些关系通常是不可见的，这使得深度学习可以挖掘新的因子和规律，为量化投资策略提供更多可能性。在传统的量化策略开发流程中，通常会使用 Python 或第三方工具生成因子，并…
提升药店效率：山海鲸医药零售大屏的成功案例
在医药行业中，特别是医药零售领域，高效的药品管理和客户服务至关重要。随着科技的飞速发展，数字化解决方案已经成为提高医药零售管控效率的有效工具之一。其中，医药零售管控大屏作为一种强大的工具，正在以独特的方式改…
![[yolo系列：YOLOV7改进-添加CoordConv,SAConv.]](https://img-blog.csdnimg.cn/2ba6b26858f84fef9683874df1336046.png)
[yolo系列：YOLOV7改进-添加CoordConv,SAConv.]
文章目录 概要CoordConvSAConv 概要
CoordConv（Coordinate Convolution）和SAConv（Spatial Attention Convolution）是两种用于神经网络中的特殊卷积操作，用于处理图像数据或其他多维数据。以下是它们的简要介绍&#x…
Python文本聚类分析
本文将会从数据预处理、特征提取、聚类算法选择等多个方面详细介绍Python文本聚类分析的步骤和方法。
一、数据预处理
数据预处理是文本聚类分析的第一步，其目的是对原始文本数据进行去噪、规范化、标准化等处理，以便后续的特征提取和聚类。
常见的文…
Python连接SQL SEVER数据库全流程
背景介绍
在数据分析领域，经常需要从数据库中获取数据进行分析和处理。而SQL Server是一种常用的关系型数据库管理系统，因此学习如何使用Python连接SQL Server数据库并获取数据是非常有用的。
以下是Python使用pymssql连接SQL Server数据库的全流程&a…
京东（天猫）数据分析：2023下半年茶饮料市场高速增长，东方树叶一骑绝尘
当前在食品饮料行业中，整体的增长放缓，且各个细分品类上都已经充分竞争。但茶饮料市场例外，近两年呈现高增长的态势，一来取决于行业头部企业也在积极推动茶饮料不断升级，另外是主打更健康、更时尚的茶饮料深受年轻消费…
2023年香水行业数据分析：国人用香需求升级，高端香水高速增长
在人口结构变迁的背景下，“Z世代”作为当下我国的消费主力，正在将“悦己”消费推动成为新潮流。具备经济基础的“Z世代”倡导“高颜值”、“个性化”、“精致主义”，这和香水、香氛为代表的“嗅觉经济”的特性充分契合，因此&#…
【文末福利】巧用Chat GPT快速提升职场能力：数据分析与新媒体运营
欢迎关注博主 Mindtechnist 或加入【智能科技社区】一起学习和分享Linux、C、C、Python、Matlab，机器人运动控制、多机器人协作，智能优化算法，滤波估计、多传感器信息融合，机器学习，人工智能等相关领域的知识和技术。关…
BI零售数据分析，当代零售企业的核心竞争力
在数字化转型中，BI智能零售数据分析成为了极其重要的核心竞争力之一。通过对大数据的采集和分析，零售企业可以更好地了解消费者的需求和行为模式，从而做出更准确的决策。例如，通过分析消费者的购物历史、浏览记录等数据࿰…
2020年亚太杯APMCM数学建模大赛A题激光标记舱口轮廓生成求解全过程文档及程序
2020年亚太杯APMCM数学建模大赛
A题 激光标记舱口轮廓生成
原题再现： 激光是20中的一项重要发明世纪，它被称为“最锋利的刀”、“最精确的尺子”和“最不寻常的光”。 激光已越来越多地应用于工业加工， 其中可以是就业在各种加工业务例如作…
新手程序员怎么接单？将超能力转化为 “钞能力” ？
程序员如何在自己年富力强的时候，最大化发挥自己的能力？将超能力转化为 “钞能力” ？
有人还在苦哈哈当老黄牛，一身使不完的牛劲，有人已经另辟蹊径，开创了自己的一片致富小天地。
接单找兼职，…
C#和HttpClient结合示例：微博热点数据分析
概述
微博是中国最大的社交媒体平台之一，它每天都会发布各种各样的热点话题，反映了网民的关注点和舆论趋势。本文将介绍如何使用C#语言和HttpClient类来实现一个简单的爬虫程序，从微博网站上抓取热点话题的数据，并进行一些基本的…
天堂2如何对版本里面的内容进行修改
天堂2写装备属性的问题
早一点的版本属性都是写在armor文件夹 xml档里，不再写armor里了 armor文件夹里只有防御 HP MP增加量，套装的属性都用一个技能形式写在 skills里了 在配合数据库里一个叫armorsets实现套装属性，拿皇家套做说明。 id 43…
数字孪生技术与VR：创造数字未来
在当今数字化浪潮中，数字孪生和虚拟现实（VR）技术是两大亮点，它们以独特的方式相互结合，为各个领域带来了创新和无限可能。本篇文章将探讨数字孪生与VR之间的关系，以及它们如何共同开辟未来的新前景。
数字…
Python通过pyecharts对爬虫房地产数据进行数据可视化分析（一）
一、背景 对Python通过代理使用多线程爬取安居客二手房数据（二）中爬取的房地产数据进行数据分析与可视化展示 我们爬取到的房产数据，主要是武汉二手房的房源信息，主要包括了待售房源的户型、面积、朝向、楼层、建筑年份、小区名称…
天猫店铺所有商品数据接口（Tmall.item_search_shop）
天猫平台店铺所有商品数据接口是开放平台提供的一种API接口，通过调用该接口，开发者可以获取天猫整店的商品的标题、价格、库存、月销量、总销量、库存、详情描述、图片、价格信息等详细信息。
要使用天猫店铺所有商品数据接口，您需要先登录天…
数据分析必备原理思路（三）
文章目录 四、图文并茂的数据汇报与观点表达1. 什么是数据表达?2. 数据表达的目的是什么?3. 为什么要基于数据进行表达?4. 如何基于图表进行优质的数据表达？（1）提炼文字观点（2）制作完善图表a. 视觉映射原理与可视化…
关键词搜索苏宁易购商品数据接口(标题|主图|SKU|价格|优惠价|掌柜昵称|店铺链接|店铺所在地）
关键词搜索苏宁易购商品数据接口可以帮助企业快速获取苏宁易购平台上的商品数据。通过该接口，企业可以获取到商品的详细信息，如商品名称、价格、库存量、销量等。这些信息可以用于多种业务场景，如选品决策、采购计划制定、价格监控等。
使用…
2015年亚太杯APMCM数学建模大赛A题海上丝绸之路发展战略的影响求解全过程文档及程序
2015年亚太杯APMCM数学建模大赛
A题 海上丝绸之路发展战略的影响
原题再现 一带一路不是实体或机制，而是合作与发展的理念和主张。凭借现有有效的区域合作平台，依托中国与有关国家现有的双边和多边机制，利用古丝绸之路的历史象征࿰…
单篇笔记预估曝光360万+！小红书数据分析，内容社交新模式新解法
今年搭子火了，从中我们发掘现代人的社交新模式。其实，在小红书上，还藏着另一种社交模式——“互换生活”。不管是大热的旅游赛道，还是美妆、穿搭、美食等，都频出爆文。 一、小红书用户的社交新模式：互换生活…
python中有哪些你觉得超级牛的模块？
之前在做数据分析的时候，用过一个自动化生成数据探索报告的Python库：ydata_profiling
一般我们在做数据处理前会进行数据探索，包括看统计分布、可视化图表、数据质量情况等，这个过程会消耗很多时间，可能需要上百行代码…
数据分析面试的一些问题提炼与总结
你是怎么进行数据跟踪 数据异常监控的 举个例子
比如在上家公司 发现当日活跃人数环比上日下降40% 这就是一个异常 我们去监控出现这个问题的原因 是不是有用户对新版本的不熟悉、操作不习惯导致日活跃人数下降 或者是版本太久没有更新 内容没有什么变化 用户粘性不高 导致下降…
Excel自学三部曲_Part3：Excel工作场景实战（三）
文章目录 三、基础图表、透视图表制作与分析1. 条形图（1）给逾期金额加上条形图（2）各个城市的逾期发展趋势（迷你图） 2. 柱状图（1）同时展示每个城市上中下旬的逾期金额a. 格式设置&…
京东数据平台：2023年9月京东智能家居行业数据分析
鲸参谋监测的京东平台9月份智能家居市场销售数据已出炉！ 9月份，智能家居市场销售额有小幅上涨。根据鲸参谋电商数据分析平台的相关数据显示，今年9月，京东平台智能家居的销量为37万，销售额将近8300万，同比增…
分享Python的十大库，这你一定得知道！
文章目录 前言关于Python技术储备一、Python所有方向的学习路线二、Python基础学习视频三、精品Python学习书籍四、Python工具包项目源码合集①Python工具包②Python实战案例③Python小游戏源码五、面试资料六、Python兼职渠道 前言
Python为我们提供了非常完善的基础库&#…
AB实验_如何确定实验周期
在实操AB实验时往往会遇到一个问题：我们应该取哪一段的实验数据来评估实验效果呢？如果取数周期不一致的话，实验效果自然不一致；而且多次取不同周期的数据来评估的话，又会犯多重检验的错误，提高了第一类错误…
知乎盈利来源分析与指标体系构建
知乎用户画像
知乎所属行业：内容社区平台
知乎上的内容涉及的领域： 婚恋情感（300亿总阅读量，截止2022年12月）、法律纠纷（200亿）、教育（200亿）、游戏（150亿&…
2015年亚太杯APMCM数学建模大赛C题识别网络中的错误连接求解全过程文档及程序
2015年亚太杯APMCM数学建模大赛
C题 识别网络中的错误连接
原题再现 网络是描述真实系统结构的强大工具——社交网络描述人与人之间的关系，万维网描述网页之间的超链接关系。随着现代技术的发展，我们积累了越来越多的网络数据，但这些数据部…
SPSS单样本K-S检验
前言： 本专栏参考教材为《SPSS22.0从入门到精通》，由于软件版本原因，部分内容有所改变，为适应软件版本的变化，特此创作此专栏便于大家学习。本专栏使用软件为：SPSS25.0 本专栏所有的数据文件请点击此链接下…
202310-MetaPhlAn4安装和使用方法-Anaconda3- centos9 stream
MetaPhlAn 4是一种基于DNA序列的微生物组分析工具，它能够从宏基因组测序数据中识别和分离微生物的组成。以下是安装和使用MetaPhlAn 4的步骤：
安装MetaPhlAn 4：
裸机环境，手动安装（
1. 安装依赖项：
Met…
用Python做数据分析之数据统计
接下来说说数据统计部分，这里主要介绍数据采样，标准差，协方差和相关系数的使用方法。
1、数据采样 Excel 的数据分析功能中提供了数据抽样的功能，如下图所示。Python 通过 sample 函数完成数据采样。
2、数据抽样 Sample 是进行…
超好用的数据可视化工具推荐，小白也适用！
Excel、Tableau……可以做数据可视化的工具不少，但简单、好用又高效，甚至连无SQL基础的小白也能轻松使用的就真没几个。奥威BI数据可视化工具是少有的操作难度低、成本支出低、灵活自助分析能力强的BI工具。
1、操作难度低
奥威BI数据可视化工具的操作…
2023年清洁电器行业数据分析：洗地机市场规模持续倍增，进入赛点
洗地机作为清洁电器领域的明星品类，正在成为继扫地机器人之后拉动清洁电器市场大盘的又一核心动力。 在清洁电器领域，扫地机器人、洗地机和吸尘器是三大热门品类。截至今年9月份，根据鲸参谋平台的数据显示，吸尘器的规模继续大幅下…
数据可视化报表分享：区域管理驾驶舱
在零售数据分析中，区域管理驾驶舱报表是用来分析企业运营数据，以制定销售策略和提高利润。因此这张报表需要整合大量数据，数据整合、分析、指标计算的工作量极大，在讲究高效率、高度及时性的大数据时代，BI数据可视化分…
怎么在Python爬虫中使用IP代理以避免反爬虫机制？
在进行网络爬虫的过程中，尤其是在大规模批量抓取数据时，需要应对各种反爬虫技术，其中最常用的就是IP封锁。为了避免IP被封锁，我们可以使用IP代理来隐藏自己的真实IP地址，从而让爬虫活动看起来更像正常的浏览器行为。 I…
数据分析必备原理思路（二）
文章目录 三、主流的数据分析方法与框架使用1. 五个数据分析领域关键的理论基础（1）大数定律（2）罗卡定律（3）幸存者偏差（4）辛普森悖论（5）帕累托最优（…
将字符串中符合规则的元素替换为指定元素 re.sub()
【小白从小学Python、C、Java】 【计算机等级考试500强双证书】 【Python-数据分析】 将字符串中符合规则的元素 替换为指定元素 re.sub()
选择题 请问re.sub(r[0-9],*,s)的结果是： import re s "hello123" print("【显示】s ",s) print(&quo…
亚马逊云科技为奇点云打造全面、安全、可扩展的数据分析解决方案
刘莹奇点云联合创始人、COO：伴随云计算的发展，数据技术也在快速迭代，成为客户迈入DT时代、实现高质量发展的关键引擎。我们很高兴能和云计算领域的领跑者亚马逊云科技一同，不断为客户提供安全可靠的产品与专业的服务。 超过1500家…
springboot+vue基于Hadoop短视频流量数据分析与可视化系统的设计与实现【内含源码+文档+部署教程】
博主介绍：✌全网粉丝10W,前互联网大厂软件研发、集结硕博英豪成立工作室。专注于计算机相关专业毕业设计项目实战6年之久，选择我们就是选择放心、选择安心毕业✌ 🍅由于篇幅限制，想要获取完整文章或者源码，或者代做&am…
Python进阶教程：pandas数据分析实践示例总结
文章目录 前言一、分析数据文件二、数据预处理关于Python技术储备一、Python所有方向的学习路线二、Python基础学习视频三、精品Python学习书籍四、Python工具包项目源码合集①Python工具包②Python实战案例③Python小游戏源码五、面试资料六、Python兼职渠道 前言
在近日的py…
基于机器学习的 ICU 脑血管疾病死亡风险智能预测系统
温馨提示：文末有 CSDN 平台官方提供的学长 Wechat / QQ 名片 :) 1. 项目简介 重症患者或重大手术后的患者在重症监护室（ICU）内通过多种生命支持系统以维持生理功能。患者在ICU 内会被频繁持续的记录生命体征和实验室测量等多种数据。由于高频…
notes_质谱蛋白组学数据分析基础知识
目录 蛋白组学方法学液相-质谱法基本原理bottom-up策略的基本流程 PEA/Olink 质谱数据分析1. 原始数据格式2. 分析过程1）鉴定2）定量3）预处理 3. 下游分析 参考附录 蛋白组学方法学
目前常见的蛋白组学方法学如下图。
液相-质谱法 2001年&a…
【分析思路】测试数据分析思路
测试数据分析思路：
性能数据
对性能测试数据进行分析时，可以从以下几个维度进行比较： 响应时间（Response Time）：分析每一天的响应时间数据，可以查看系统在不同时间段的性能表现，是…
让BI自动生成零售数据分析报表？用模板
不知道BI零售数据分析怎么做？用模板。
没时间去整理数据、计算零售数据分析指标？用模板。
不知道怎么做出炫酷直观的零售数据分析报表？用模板。
……
奥威BI零售数据分析模板全新上线，数据分析模型、数据可视图表、关键指标以…
数据分析：智能企业七步曲（一）
原创： MicroStrategy微策略中国 作者：数据杰论 时间走到2018年最后一个季度，过去几年热炒的大数据概念正在各行各业开始落地并展开实际应用，核心是关注数据如何能为企业带来价值。因此，数据分析及其种种实现手段不断被…
数据分析实战 | 线性回归——女性身高与体重数据分析
目录
一、数据集及分析对象
二、目的及分析任务
三、方法及工具
四、数据读入
五、数据理解
六、数据准备
七、模型训练
八、模型评价
九、模型调参
十、模型预测 实现回归分析类算法的Python第三方工具包比较常用的有statsmodels、statistics、scikit-learn等&#…
全国保护性耕作/常规耕作农田分类数据集
基于Sentinel-2遥感产品，使用来自文献调研和目视解译产生的保护性/常规耕作样本点，通过交叉验证方法训练随机森林分类器，生成了2016-2020年全国保护性耕作/常规耕作农田分类数据集。分类代码：0值代表非农田，1值表示第一…
林业数据可视化新篇章：山海鲸软件看板设计心得
可视化看板作为一种直观、高效的数据展示工具，对于提升管理水平和决策效能具有重要意义。作为一名山海鲸可视化软件的资深用户，我深知其设计方面的强大实力和便捷性，同时由于其免费可视化编辑、免费私有化部署的特点，使我能自由探…
企业如何进行数据分析，实现科学决策和业务增长
在当今信息时代，数据已经成为企业运营和发展的重要资源。企业拥有大量的数据，包括但不限于销售数据、客户数据、市场数据、企业内部管理数据等等，这些数据记录了企业的运营状况和业务发展情况。但是，这些数据如果不进行分析和利用…
6问6答 | 快人一步掌握开发效率提升“秘籍”
年前，WakeData惟客数据产品——昆仑-开发云成功开源。
除了陆续收到一些产品优化建议外，我们也收到了一些产品使用问题。比如，开发云适应于哪些岗位人员？在工作中能帮大家解决什么问题？开发云的代码插件具体包含哪些功…
电商数据分析19——数据分析在电商平台价格弹性研究中的应用
目录 写在开头1. 价格弹性的基本理论1.1 价格弹性的定义1.2 价格弹性对销售和利润的影响1.2.1 如何通过价格弹性预测销量变化1.2.2 价格弹性高和低对企业策略的影响2 数据分析方法在价格弹性研究中的应用2.1 收集与处理销售和价格数据2.1.1 收集数据2.1.2 数据处理2.2 使用统计…
数据分析入门，深入浅出的数据分析
时下正值大数据与人工智能高速发展的时刻，相信很多对数据分析感兴趣的朋友想要转行。很多朋友选择从事数据分析，主要是看到这个岗位的发展前景和薪资待遇。
但是一些小伙伴并不知道数据分析到底是做什么的？需要用到哪些知识？
为…
今晚直播交流：解读Lancet关于医学论文数据分析的统计学建议
由浙江省预防医学会卫生统计专委会2024年“医学科研设计与统计”学术沙龙在2024年1月8号将正式启动。 欢迎预约报名学习，接下来是第5场预告。 第5场：2024年3 月07日：浙江中医药大学郑卫军：解读Lancet杂志的统计学建议 接着&#x…
探索ChatGPT的前沿科技：解锁其在地理信息系统、气候预测、农作物生长等关键领域的创新应用
以ChatGPT、LLaMA、Gemini、DALLE、Midjourney、Stable Diffusion、星火大模型、文心一言、千问为代表AI大语言模型带来了新一波人工智能浪潮，可以面向科研选题、思维导图、数据清洗、统计分析、高级编程、代码调试、算法学习、论文检索、写作、翻译、润色、文献辅助…
ChatGPT GPT4科研应用、数据分析与机器学习、论文高效写作、AI绘图技术
原文链接：ChatGPT GPT4科研应用、数据分析与机器学习、论文高效写作、AI绘图技术https://mp.weixin.qq.com/s?__bizMzUzNTczMDMxMg&mid2247596849&idx3&sn111d68286f9752008bca95a5ec575bb3&chksmfa823ad6cdf5b3c0c446eceb5cf29cccc3161d746bdd9f2…
【天池课堂】零基础入门数据挖掘-课程汇总
写在前面： 如果你现在很迷茫，但是又对数据挖掘感兴趣，建议先看看以下两个视频直播，两位大佬亲身讲述自己和数据挖掘的前世今生。
《如何入门数据挖掘竞赛》 鱼遇雨欲语与余。天池明星选手，武汉大学硕士，天…
2024年1月粮油调味行业分析（TOP品牌/店铺/商品销售数据分析）
鲸参谋监测的某东1月份粮油调味市场销售数据已出炉！
根据鲸参谋电商数据分析平台显示，今年1月份，某东平台上粮油调味品的销量约6200万件，环比上个月增长45%，同比去年下滑15%；销售额约25亿元，环…
网络安全攻击数据的多维度可视化分析
简介
本研究项目通过应用多种数据处理与可视化技术，对网络安全攻击事件数据集进行了深度分析。首先，利用Pandas库读取并预处理数据，包括检查缺失值、剔除冗余信息以及将时间戳转化为日期时间格式以利于后续时间序列分析。
研究步骤 数据分析…
temu英国电商市场洞察：2月份商品销售数据分析Python数据采集Api
文章目录 引言可视化分析数据展示商品类目占比分析销售额分析价格区间占比分析各类目新品占比分析 写在最后 引言 在美国市场稳步增长基础上，Temu也不断加快全球步伐，现已进入47个国家，光23年9月份就进驻了10个国家，创造单月扩张国…
数据分析过程中，发现数值缺失，怎么办？
按照数据缺失机制，数据分析过程中，我们可以将其分为以下几类： （1）完全随机缺失（MCAR）：所缺失的数据发生的概率既与已观察到的数据无关，也与未观察到的数据无关。 &#x…
按顺序判断对象a和b中第一个不同之处ax和bx【1】ax是否小于等于bx【2】不同处ax是否为空operator.le()
【小白从小学Python、C、Java】
【计算机等考500强证书考研】
【Python-数据分析】
按顺序判断对象a和b中
第一个不同之处ax和bx
【1】ax是否小于等于bx
【2】不同处ax是否为空
operator.le() [太阳]选择题
下列代码执行输出结果为True的个数为?
import operator
pr…
京东数据平台：2023年Q3季度黄金市场数据分析
继9月国内黄金市场持续上涨后，进入10月中下旬后，黄金行情再度反转，多家品牌金饰价格再次突破600元/克，达到611元/克。 今年以来，黄金行情不断走俏，销售市场也有明显增长。根据鲸参谋平台的数据显示…
数据可视化：动态柱状图
终于来到最后一个数据可视化的文章拿啦~~~
在这里学习如何绘制动态柱状图 我先整个活 (๑′ᴗ‵๑)Ｉ Lᵒᵛᵉᵧₒᵤ❤ 什么是pyecharts？
答：
Python的Pyecharts软件包。它是一个用于Python数据可视化和图表绘制的库，可用于制作…
SPSS多因素方差分析
前言： 本专栏参考教材为《SPSS22.0从入门到精通》，由于软件版本原因，部分内容有所改变，为适应软件版本的变化，特此创作此专栏便于大家学习。本专栏使用软件为：SPSS25.0 本专栏所有的数据文件请点击此链接下…
2023年内衣行业分析：京东大数据平台-服饰内衣市场解析
如今，女性消费力的提升正在推动国内女性内衣市场份额逐年提升。而今年，内衣市场更是进入了存量之战，增长趋势明显减弱。 根据鲸参谋数据显示，今年1月至9月，京东平台内衣（文胸）累计销量约500万件…
2023年辽宁省数学建模竞赛A题铁路车站的安全标线
2023年辽宁省数学建模竞赛
A题 铁路车站的安全标线
原题再现： 在火车站或地铁站台上，离站台边缘 1 米左右的地方都画有一条黄线(或白线)，这是为什么呢? 这条线称为安全线(业内称之为安全标线)，人们在候车时必须站在安全线以…
2023年高教社杯全国大学生数学建模竞赛-【赛题解析篇】E题：黄河水沙监测数据分析（附获奖论文及MATLAB代码实现）(续)
目录 4.5.2 问题四的模型建立与求解 五、模型检验 六、模型评价与推广
用Python舞动数据的魔力：探索数据分析的艺术之路
用Python舞动数据的魔力：探索数据分析的艺术之路 前言什么是Python数据分析Python介绍数据分析介绍Python和数据分析的关系 python数据分析的作用金融领域社交媒体领域电子商务领域医疗领域物流和供应链管理领域 Python数据分析教材 前言
打开招聘网站，…
睿思BI已支持3D图形
从睿思BI旗舰版V5.3开始，系统支持如下3D图形：
3D地球 3D地图 飞线图 3D金字塔 睿思BI采用ThreeJS实现3D功能，用户也可以基于系统接口，采用ThreeJS在数据大屏中实现自己的3D图形。
系统演示地址：睿思BI旗舰版https://…
时间序列预测模型实战案例(八)(Informer)个人数据集、详细参数、代码实战讲解
论文地址->Informer论文地址PDF点击即可阅读
代码地址-> 论文官方代码地址点击即可跳转下载GIthub链接 本文介绍
本篇博客带大家看的是Informer模型进行时间序列预测的实战案例，它是在2019年被提出并在ICLR 2020上被评为Best Paper，可以说Inform…
践行“人人可用”：更轻量、更好用、更优雅、更全面，DataEase开源数据可视化分析平台发布v2.0版本
2023年11月6日，DataEase开源数据可视化分析平台正式发布v2.0版本。DataEase开源项目创立于2021年1月，于2021年6月发布v1.0版本。相比v1.x版本，DataEase v2.0版本采用了更加轻量级的架构设计，功能模块在保留原有“仪表板”模块的基…
第二十四天-数据可视化Matplotlib
目录 1.介绍
2.使用
1. 安装：
2.创建简单图表 3.图表类型
1.一共分为7类
2.变化
1.折线图
3.分布
编辑
1.直方图
2.箱型图
4.关联
1. 散点图：
2.热力图：
5.组成
1.饼图
2.条形图
6.分组
1.簇型散点图
2.分组条形图
3.分…
跨平台数据整合：电商平台如何利用API进行数据分析和决策支持
在当今数据驱动的商业环境中，跨平台数据整合对于电商平台来说至关重要。API（应用程序编程接口）提供了一种高效的方式来收集、整合和分析来自不同平台的数据，从而支持更明智的商业决策。以下是电商平台如何利用API进行数据分析和决…
金蝶BI方案能解决云星空数据分析痛点吗？
金蝶云星空作为一个主攻企业管理流程的软件确实立下了汗马功劳，但一到数据分析方面那就阻碍重重了。直接的感受是分析步骤多且复杂，数据展现不够直观易懂，有些分析指标的计算真的很难实现，跨部门跨组织计算指标、合并账套什么的能…
flink重温笔记（十八）： flinkSQL 顶层 API ——时态表实现表数据动态变化（涵盖全面实用的 API ）
Flink学习笔记 前言：今天是学习 flink 的第 18 天啦！很多小伙伴私信说，自己只会SQL语法来编写flinkSQL，如何使用代码来操作呢？因为工作中都是要用到代码编写的。还有小伙伴说，想要实现表是动态变化的&#…
数据智造：ERP企业一体化管理系统，引领专业工厂信息化-亿发
随着智能工厂的兴起，ERP生产管理系统正成为制造业的新宠。它不仅简化了生产流程，还通过实时数据分析、自动化生产流程和智能决策支持等功能，推动着制造业迈向更高效、更灵活和可持续的生产模式。本文将深入探讨ERP生产管理系统在智能工厂革命…
【四 （2）数据可视化之 Matplotlib 常用图表及代码实现 】
目录 文章导航一、介绍二、安装Matplotlib三、导入Matplotlib四、设置可以中文显示四、常用图形1、散点图（Scatter Plot）2.1、线性图（Line Plot）2.2、堆叠折线图2.3、多图例折线图3.1、柱状图/条形图（Bar Chart&#x…
数据分析实战-Python实现博客评论数据的情感分析
数据分析实战-Python实现博客评论数据的情感分析 学习建议SnowNLP基础什么是SnowNLP？SnowNLP情感分析 SnowNLP使用SnowNLP安装情感分析中文分词关键词提取拼音、词性标准 SnowNLP实战-博客评论数据的情感分析数据准备数据获取数据分析 总结 学习建议
现在很多网站、…
【四 （3）数据可视化之 Seaborn 常用图表及代码实现 】
目录 文章导航一、介绍二、安装Seaborn三、导入Seaborn四、设置可以中文显示五、占比类图表1、饼图2、环形图 六、比较排序类1、条形图2、箱线图3、小提琴图 七、趋势类图表1、折线图 八、频率分布类1、直方图 九、关系类图表1、散点图2、成对关系图3、热力图 文章导航
【一 简…
Python 利用CSV模块处理数据
CSV（Comma-Separated Values 逗号分割值）是一种简单的数据存储与分享方式，和Excel相比，CSV文件的一个主要优点是有很多程序可以存储，转换和处理纯文本文件，因此应用场景更加广泛。 目录 一、CSV模块简介二、…
【python】爬取杭州市二手房销售数据做数据分析【附源码】
一、背景 在数据分析和市场调研中，获取房地产数据是至关重要的一环。本文介绍了如何利用 Python 中的 requests、lxml 库以及 pandas 库，结合 XPath 解析网页信息，实现对链家网二手房销售数据的爬取，并将数据导出为 Excel 文件的过…
【数据结构和算法初阶(C语言)】队列实操（概念实现+oj题目栈和队列的双向实现以及循环链表难点题目详解！）
目录 1. 队列的概念及结构 2.队列结构存在的意义应用 3.队列实现的结构选择 4.队列实现 5.队列对数据的处理 5.1队列初始化 5.2队尾入数据 5.3队头出数据 5.4获取队列尾部元素 5.5获取队列头部元素 5.6获取队列中元素个数 5.7检测队列是否为空 5.8销毁队列 6.循环队列补充 7.使…
淘宝婴儿用品购买情况分析报告
一.分析背景和目的
随着购物网站的发展，人们的网络购物行为占比也快速增加。为了能够获取更多的用户，提升商家的销售量，需要从产品和用户不同的角度进行分析，进而得到有价值的信息，指导商家进行获客和营销。本文就以淘…
Pandas数据集的合并与连接merge()方法_Python数据分析与可视化
数据集的合并与连接 merge()解析merge()的主要参数 merge()解析
merge()可根据一个或者多个键将不同的DataFrame连接在一起，类似于SQL数据库中的合并操作。 数据连接的类型
一对一的连接：
df1 pd.DataFrame({employee: [Bob, Jake, Lisa, Sue], grou…
白上这么多年班，才知道数据可视化这么简单
写编程整理数据、做数据可视化分析，不仅难度大、易僵化，还效率低，不能及时响应业务的数据分析需求。那怎么办？换个BI数据可视化工具，套用BI方案，数据分析模型、BI数据可视化分析报表都一应俱全，…
总结之数据分析工具cube.js通过Docker部署
cube.js介绍
官网地址：https://cube.dev/
Cube.js是一个开源的模块化框架，用于构建分析web应用程序。它主要用于构建内部业务智能工具或向现有应用程序添加面向客户的分析。 Cube.js设计用于无服务器查询引擎，如AWS Athena和谷歌BigQuery。…
2023北京1024城市开发者聚会总结
🌷🍁 博主猫头虎 带您 Go to New World.✨🍁 🦄 博客首页——猫头虎的博客🎐 🐳《面试题大全专栏》 文章图文并茂🦕生动形象🦖简单易学！欢迎大家来踩踩~🌺 &a…
全国2021年夜间灯光数据，有图有数据
在昨天的文章里，我们分享了全国手机基站数据，今天我们来分享全国2021年夜间灯光数据~
这些数据是由中国国家统计局发布的，并且包含了多个省份和城市的夜间灯光数据。通过这些数据，我们可以了解不同地区的发展状况和人口分布情况。…
数字化转型：2023零售业的新机遇，亿发零售云系统释放无限可能
零售业的数字化转型不仅能够为顾客带来卓越的购物体验，同时也能为零售企业提供丰富的数据分析、销售预测和生产管理的机会。通过这些分析，企业能够更准确地了解市场需求和消费者的购买行为，进而制定更具针对性的营销策略，从而增强…
企业如何落地搭建商业智能BI系统
随着新一代信息化、数字化技术的应用，引发了新一轮的科技革命，现代化社会和数字化的联系越来越紧密，数据也变成继土地、劳动力、资本、技术之后的第五大生产要素，这一切都表明世界已经找准未来方向，前沿科技也与落地并…
企业中台如何进行测试（上篇）
企业的信息化建设比较合理的规划是专业套装软件 灵活的SaaS应用 定制化的开发平台 基础的平台支撑，而企业在进行建设时，往往都是从业务软件开始，而忽略平台的建设，但平台却是支撑企业业务系统整合的基础，从企业整体…
Pandas-pd.to_numeric函数知识点总结
前言 本文是该专栏的第38篇，后面会持续分享python数据分析的干货知识，记得关注。
我们在处理数据分析项目的时候，通常会需要处理各种类型的数据，比如说“时间日期，字符串，布尔值”等等类型。有的时候，恰巧需要用Pandas将这些数据转换为数值类型，以便于后期进行统计或计…
抖音店铺所有商品数据接口（douyin.item_search_shop）
抖音店铺所有商品数据接口可以用于获取抖音店铺的所有商品数据，包括商品的标题、价格、库存、销量、评价等信息。通过该接口，开发者可以在自己的应用程序或网站中展示抖音店铺的商品信息，提升用户体验和购物决策效率。
此外，抖音…
SPASS-参数估计与假设检验
参数估计
点估计 点估计用样本统计量的值直接作为总体参数的估计值。如用样本均值直接作为总体均值的估计值，用样本方差直接作为总体方差的估计值等。
常用的点估计法
（1）矩估计法 （2）极大似然估计法 （3）稳健估计法
区间估计 因为点估计直接用样本估计值作为总体参数…
参数估计和非参数估计
一、参数估计
参数估计是统计学中的一个重要概念，它涉及到使用样本数据来估计总体参数的过程。在统计学中，总体是指研究对象的整体集合，而样本是从总体中抽取的部分元素。
参数估计有两种主要方法：点估计和区间估计。 点估计&am…
数据分析之Excel的使用
数据分析之Excel的使用 SUM()求和SUMIF()单条件求和SUMIFS()多条件求和日期函数YEAR()提取年份MONTH()提取月份DAY()提取日 SUBTOTAL()聚合函数IF()函数IF嵌套 VLOOKUP()搜索取值MATCH()返回行值或列值INDEX()定位取值 SUM()求和
SUMIF()单条件求和
SUMIFS()多条件求和
日期…
银行数字化转型导师坚鹏：银行数字化转型案例研究
银行数字化转型案例研究 课程背景：
数字化背景下，很多银行存在以下问题：
不清楚银行科技金融数智化案例？
不清楚银行供应链金融数智化案例？
不清楚银行普惠金融数智化案例？
不清楚银行跨境金融数智…
数据可视化之旅：电商销售看板的制作与心得
作为一名电商工作者，每天都需要与海量的销售数据打交道。在数据海洋中，如何快速准确地找到关键信息，优化销售策略，是摆在我面前的一大挑战。在了解市面上众多可视化产品后，我选择尝试了山海鲸可视化软件，这…
如何制作一份精美的数据分析可视化报告？详细教程
在数据可视化分析的最后阶段，所有的分析、研究、推导以及得出的结论，都汇总成了一份详实的报告。这份报告不仅是对整个数据分析旅程的总结，更是向读者展示这段旅程所取得的成果。
那么，数据分析报告该如何制作呢？不用…
深度解析：如何运用山海鲸可视化软件制作高效销售数据看板
在数字化时代，数据可视化已经成为企业决策和运营的重要工具。作为一名长期使用山海鲸可视化软件的资深用户，我深知其在制作销售数据可视化看板方面的优势。今天，我想分享一些我在使用山海鲸可视化软件制作销售数据可视化看板过程中的经验和感…
Python基础综合案例-数据可视化
一、数据可视化 - 折线图可视化 1.1、json数据格式 """
演示JSON数据和Python字典的相互转换
"""
import json
# 准备列表，列表内每一个元素都是字典，将其转换为JSON
data [{"name": "张大山", &quo…
“AI巨浪：ChatGPT等大模型重塑科研与创新的未来！“
AI大模型引领未来智慧科研暨ChatGPT在地学、GIS、气象、农业、生态、环境等领域中的应用
以ChatGPT、LLaMA、Gemini、DALLE、Midjourney、Stable Diffusion、星火大模型、文心一言、千问为代表AI大语言模型带来了新一波人工智能浪潮，可以面向科研选题、思维导图、数…
医院为什么需要信息集成平台？有什么数据集成平台推荐？
在现代医疗行业中，信息技术的应用已经成为提高医疗服务质量、提升医院管理效率的关键。信息集成平台作为医院信息化建设的重要组成部分，扮演着连接各类医疗信息系统、整合医疗数据的重要角色。本文将详细探讨医院信息集成平台的必要性，以及集…
【四 （6）数据可视化之 Grafana安装、页面介绍、图表配置】
目录 文章导航一、Grafana介绍[✨ 特性]二、安装和配置1、安装2、权限配置（账户/团队/用户）①用户管理②团队管理③账户管理④看板权限 3、首选项配置4、插件管理①数据源插件②图表插件③应用插件④插件安装方式一⑤安装方式二 三、数据源管理1、添加数…
Python数据分析与可视化笔记一 机器学习概述
机器学习是一种从数据当中发现复杂规律，并且利用规律对未来时刻、未知状况进行预测和判定的方法，是当下被认为最有可能实现人工智能的方法之一。 所有数据的集合称为数据集(dataset)，其中每条记录是关于一个事件或对象的描述，称为…
excel是编程语言？
不是，Excel是一种电子表格软件，它主要用于数据分析、数据处理和数据可视化。Excel提供了一些简单的编程功能，如公式、宏和VBA（Visual Basic for Applications），但这些功能并不等同于一种完整的编程语言。 但…
数据分析和机器学习库Pandas的使用
Pandas 库是一个免费、开源的第三方 Python 库，是 Python 数据分析和机器学习的工具之一。Pandas 提供了两种数据结构，分别是 Series（一维数组结构）与 DataFrame（二维数组结构），极大地增强的了 …
每天一个数据分析题（二百零六）
如果要使用卡方检验来判断违约状态（bad_ind）和破产状态（bankruptcy_ind）两个分类型变量之间是否存在统计学上的关联，下面哪个步骤不是必须的？ A.计算每个单元格的实际频数。 B.计算每个单元格的期望频数。 …
flink重温笔记（十三）： flink 高级特性和新特性（2）——ProcessFunction API 和 双流 join
Flink学习笔记 前言：今天是学习 flink 的第 13 天啦！学习了 flink 高级特性和新特性之ProcessFunction API 和 双流 join，主要是解决大数据领域数据从数据增量聚合的问题，以及快速变化中的流数据拉宽问题，即变化中多个…
超越标签的探索：K-means与DBSCAN在数据分析中的新视角
最近在苦恼为我的数据决定分组问题，在查找资料时，恰好看到机器学习中的无监督学习的聚类分析，正好适用于我的问题，但是我之前学机器学习时。正好没有学习无监督部分，因为我认为绝大多数问题都是有标签的监督学习&#…
爬虫与DataFrame对象小小结合
import pandas as pd
import requests
from lxml import etree
#数据请求
url"https://www.maigoo.com/brand/list_1715.html"
headers{User-Agent:Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/114.0.5735.289 Safari…
数据可视化看板的进阶之路：山海鲸可视化私有化部署体验
作为一名长期使用山海鲸可视化的资深用户，我在数据可视化看板的制作过程中，深刻感受到了这款软件带来的便捷与高效。今天，我想与大家分享一些我在使用山海鲸可视化制作数据可视化看板时的经验，给对这款产品同样感兴趣的朋友同行一…
Apache Doris 2.0.6 版本正式发布
亲爱的社区小伙伴们，Apache Doris 2.0.6 版本已于 2024 年 3 月 12 日正式与大家见面，该版本在物化视图、统计信息收集、JDBC Catalog 等方面进行了更新优化，并提交了 114 个改进项以及问题修复，欢迎大家下载体验。
官网下载&…
JavaScript爬虫进阶攻略：从网页采集到数据可视化
在当今数字化世界中，数据是至关重要的资产，而网页则是一个巨大的数据源。JavaScript作为一种强大的前端编程语言，不仅能够为网页增添交互性，还可以用于网页爬取和数据处理。本文将带你深入探索JavaScript爬虫技术的进阶应用&#…
快速高效地数据分析处理：QtiPlot for Mac中文直装版 兼容M
QtiPlot 是一个用于数据分析和可视化的跨平台科学应用程序。由于其多语言支持，QtiPlot 被积极用于世界各地学术机构的教学。许多研究科学家信任 QtiPlot 来分析他们的数据并发布他们的工作结果。来自各个科学领域和行业的数千名注册用户已经选择了 QtiPlot 来帮助他…
Python中的惩罚分析：理论与实践指南
目录 写在开头1. 理论基础1.1 优化问题与约束条件简介1.2 什么是惩罚分析1.3 惩罚分析的应用场景1.4 惩罚方法的类型2. 惩罚分析在Python中的实现2.1 实现代码示例2.2 未加惩罚的模型2.3 加惩罚的模型（L1和L2正则化）2.4 选择合适的惩罚方法与调整强度2.5 惩罚过程改善过拟合问…
分析云星空数据用奥威-金蝶BI，快且直观
财务指标计算难，数量太大，报表需求太多，报表根本做不完？如果云星空用户遇到这种情况，建议用奥威-金蝶BI方案。预设分析模型和BI报表，注册、下载并执行方案，立得200多张BI数据可视化分析报表&…
flink重温笔记（十八）： flinkSQL 顶层 API ——实时数据Table化（涵盖全面实用的 API ）
Flink学习笔记 前言：今天是学习 flink 的第 18 天啦！很多小伙伴私信说，自己只会SQL语法来编写flinkSQL，如何使用代码来操作呢？因为工作中都是要用到代码编写的。还有小伙伴说，想要实现表是动态变化的&#…
【呼市经开区建设服务项目水、电能耗监测 数采案例】
实施方案 针对能耗采集中的水、电能源数据采集，因客观因素条件，数据采集方面存在较大难度。大多数国网电表485接口由于封签限制，不能实施采集，不让拆机接线，采集实施存在困难。水量能耗采集，存在类似问题&a…
假设检验方法： t 检验、z 检验、卡方检验、ANOVA（方差分析）
假设检验是统计学中一种常用的方法，用于判断关于总体参数的某个假设是否成立。下面是一些常见的假设检验方法的简要介绍：
t 检验（t-test）： 用途：用于比较两个样本均值是否存在显著差异。类型： …
PHP调用调用API接口的方法及实现
随着互联网、云计算和大数据时代的到来，越来越多的应用程序需要调用第三方的API接口来获取数据，实现数据互通和协同工作。PHP作为一种常用的服务器端语言，也可以通过调用API接口来实现不同系统的数据交互和整合。本文将介绍PHP调用电商API接口…
计算数组中每个元素的立方根numpy.cbrt()
【小白从小学Python、C、Java】 【计算机等级考试500强双证书】 【Python-数据分析】 计算数组中每个元素的立方根 numpy.cbrt()
[太阳]选择题 请问以下代码中执行语句输出结果是？ import numpy as np a np.array([1, 8, 27]) print("【显示】a ",a) pr…
【Python】数据分析案例：世界杯数据可视化
文章目录 前期数据准备导入数据 分析：世界杯中各队赢得的比赛数分析：先打或后打的比赛获胜次数分析：世界杯中的抛硬币决策分析：2022年T20世界杯的最高得分者分析：世界杯比赛最佳球员奖分析：最适合先击球或追…
实验4.数据全量、增量、比较更新
【实验目的】
1.利用Kettle的“表输入”，“表输入出”，”JavaScript代码”组件，实现数据全量更新。 2.熟练掌握“JavaScript代码”，“表输入”，“表输入出”组件的使用，实现数据全量更新。
【实验原理】 …
2023解析企业数据中台：突破数据孤岛，实现数据化管理升级-亿发
当前，各大企业纷纷将业务中台、数据中台、安全中台等纳入建设计划，其中，数据中台被视为重中之重。但是，对于初接触者而言，对数据中台的定义可能存在一些模糊。 下面我们将讨论和讲解对企业建设数据中台的3点建议&#…
Python数据分析实战① Python实现数据可视化
文章目录 一、数据可视化介绍二、matplotlib和pandas画图1.matplotlib简介和简单使用2.matplotlib常见作图类型3.使用pandas画图4.pandas中绘图与matplotlib结合使用 三、订单数据分析展示四、Titanic灾难数据分析显示 一、数据可视化介绍
数据可视化是指将数据放在可视环境中…
基于Python实现大型家用电器和电子产品在线商店购买数据分析【500010098】
导入模块
import pandas as pd
import numpy as np
import matplotlib.pyplot as plt获取数据
df pd.read_csv( r"./data/kz.csv",sep,)数据描述
该数据包含2020年4月至2020年11月从大型家用电器和电子产品在线商店购买的数据。
数据说明
event_time：…
自动计算零售数据分析指标？BI软件表示可行
随着BI技术的飞速发展，借助系统来计算分析指标也不是什么难事，即便是面对组合多变的零售数据分析指标，奥威BI软件也依旧可以又快又精准地完成指标计算。
BI软件可以自动计算零售数据分析指标，如销售额、库存量、订单量等。在计算…
数据分析思维与模型：相关分析法
相关分析法" 是一种用于研究两个或多个变量之间关系强度和方向的统计方法。这种方法在多个领域，如经济学、心理学、社会科学和自然科学中都有广泛应用。其核心是通过计算相关系数来量化变量之间的相关性。以下是相关分析法的一些基本概念和步骤：
选…
2020年五一杯数学建模B题基于系统性风险角度的基金资产配置策略分析解题全过程文档及程序
2020年五一杯数学建模
B题 基于系统性风险角度的基金资产配置策略分析
原题再现 近年来，随着改革开放程度的不断提高，我国经济运行中的各种风险逐渐暴露并集中传导和体现于金融领域。党的“十九大”报告提出“守住不发生系统性金融风险的底线”要求&am…
需求调研，是做好商业智能BI的第一步
商业智能BI，一个高大上的名字，一直被很多人认为是企业信息化中的“面子工程”。美其名曰“可视化大屏”，什么经营驾驶舱，什么管理仪表盘，都是花里胡哨的东西，老板不会看，企业不会用，…
AB实验_如何计算P值、效应量和统计功效
做AB实验的核心过程就是做一个假设检验，为了让这个假设检验可以支持接下来的决策，我们通常需要计算三个值，P值、效应量和统计功效。
P值跟显著性水平比较（一般取0.05），若结果具有统计显著性（P&…
数据分析实战 | 贝叶斯分类算法——病例自动诊断分析
目录
一、数据及分析对象
二、目的及分析任务
三、方法及工具
四、数据读入
五、数据理解
六、数据准备
七、模型训练
八、模型评价
九、模型调参
十、模型预测 一、数据及分析对象
CSV文件——“bc_data.csv”
数据集链接：https://download.csdn.net/d…
数据分析实战 | K-means算法——蛋白质消费特征分析
目录
一、数据及分析对象
二、目的及分析任务
三、方法及工具
四、数据读入
五、数据理解
六、数据准备
七、模型训练
编辑 八、模型评价
九、模型调参与预测 一、数据及分析对象
txt文件——“protein.txt”，主要记录了25个国家的9个属性，主…
描述性统计：分析数据的离散程度：方差和标准差
1、数学定义和业务含义
方差和标准差是统计学中常用于描述数据分布的两个重要指标。
方差（variance）是用来衡量数据集中各个数值与其平均值的偏差程度的统计量。计算公式为： V a r ( X ) ∑ i 1 n ( X i − μ ) 2 n − 1 Var(X)\frac{\s…
hive sql多表练习
hive sql多表练习
准备原始数据集 学生表 student.csv 讲师表 teacher.csv 课程表 course.csv 分数表 score.csv 学生表 student.csv
001,彭于晏,1995-05-16,男
002,胡歌,1994-03-20,男
003,周杰伦,1995-04-30,男
004,刘德华,1998-08-28,男
005,唐国强,1993-09-10,男
006,陈道…
PCA（主成分分析）数据降维技术代码详解
引言
随着大数据时代的到来，我们经常会面临处理高维数据的问题。高维数据不仅增加了计算复杂度，还可能引发“维度灾难”。为了解决这一问题，我们需要对数据进行降维处理，即在不损失太多信息的前提下，将数据从高维空间…
hive sql 行列转换 开窗函数 炸裂函数
hive sql 行列转换 开窗函数 炸裂函数
准备原始数据集 学生表 student.csv 讲师表 teacher.csv 课程表 course.csv 分数表 score.csv 员工表 emp.csv 雇员表 employee.csv 电影表 movie.txt 学生表 student.csv
001,彭于晏,1995-05-16,男
002,胡歌,1994-03-20,男
003,周杰伦,…
文档向量化工具（一）：Apache Tika介绍
Apache Tika是什么？能干什么？
Apache Tika是一个内容分析工具包。
该工具包可以从一千多种不同的文件类型（如PPT、XLS和PDF）中检测并提取元数据和文本。
所有这些文件类型都可以通过同一个接口进行解析，这使得Tika在…
计算两个向量的叉积numpy.cross()
【小白从小学Python、C、Java】 【计算机等考500强证书考研】 【Python-数据分析】 计算两个向量的叉积 numpy.cross()
[太阳]选择题 请问代码中最后输出正确的是？ import numpy as np a np.array([1, 2, 3]) b np.array([4, 5, 6]) c np.cross(a, b) pri…
Pandas透视表与交叉表_Python数据分析与可视化
这里写目录标题 透视表交叉表 透视表
透视表是各种电子表格程序和其他数据分析软件中一种常见的数据汇总工具。它根据一个或多个键对数据进行聚合，并根据行和列上得分组建将数据分配到各个矩形区域中。在 pandas 中，可以通过 pivot_table 函数创建透视表…
数据资产入表，给企业带来的机遇和挑战
作为推动数字经济发展的核心要素，近年来，数据资源对于企业特别是相关数据企业的价值和作用正日益凸显。 数据资产入表之后，能够为企业经营带来实质性的收益。“随着数据资产的纳入，企业的资产也出现了新标的。在资产负债表中&…
ML-Net：通过深度学习彻底改变多标签分类
一、说明 多标签分类是一项具有挑战性的机器学习任务，其中输入可以同时属于多个类。传统的多标签分类方法通常依赖于将问题转化为一系列二元分类任务或使用集成方法。然而，深度学习的出现开创了多标签分类的新时代，ML-Net 等模型突破了该领域…
虾皮台湾站点如何选品
在互联网时代，电商平台成为了越来越多人购物的首选。虾皮作为台湾地区最大的电商平台之一，为商家提供了良好的销售渠道。然而，在虾皮上选择适合的商品对于商家来说并不容易。本文将介绍如何通过虾皮选品工具-知虾来查看台湾地区各大类目的热销…
【EI会议征稿】第三届电子信息工程与数据处理国际学术会议（EIEDP 2024）
第三届电子信息工程与数据处理国际学术会议（EIEDP 2024）
2024 3rd International Conference on Electronic Information Engineering and Data Processing Welcome to the official website of 2024 3rd International Conference on Electronic Infor…
由浅入深学习统计学 -集中趋势的量度
由浅入深学习统计学 -集中趋势的量度
均值 （通俗来说是平均数）
计算公式 均值在对称数据中才有参考性。 异常数据会导致出现，向左偏移或者向右偏移 中位数 - （也是属于平均数的一种） 当偏移数据和异常数据使得均值产…
Excel数据可视化—波士顿矩阵图【四象限图】
EXCEL系列文章目录 Excel系列文章是本人亲身经历职场之后萌发的想法，为什么Excel覆盖如此之广，几乎每个公司、学校、家庭都在使用，但是它深藏的宝藏功能却很少被人使用，PQ、BI这些功能同样适用于数据分析；并且在一些需…
数字化转型时代，商业智能BI到底是什么？
据国际数据公司（IDC）预测，2025年时中国产生的数据量预计将达48.6ZB，在全球中的比例为27.8%。商业智能BI这一专为企业提供服务的数据类解决方案，仅2021年上半年在中国商业智能BI市场规模就达到了3.2亿美元，商…
high perfermance computer usage
简单记一下hpc的使用：
hpc就是一些科研机构或者大学建立的服务器中心。我这大学的每一位学生，可以轻松使用hpc批量跑数据，也可以新建自己的server跑一些local data，后者每个学生账号最大是32核512G的运行内存，体验非常…
Origin：科研绘图与学术图表绘制从入门到精通
文章目录 一、引言二、安装和启动Origin三、创建和保存图表四、深入学习Origin绘图功能五、应用Origin进行科研绘图和学术图表绘制六、总结与建议《Origin科研绘图与学术图表绘制从入门到精通》亮点内容简介作者简介目录获取方式 一、引言
Origin是一款功能强大的数据分析和科…
对这套BI零售数据分析方案心动，是零售人天性
零售数据分析做了这么多年，难道真的没累积点经验，摸索出一条又快又能满足绝大多数需求的数据分析捷径？别人不知道，奥威BI还真就有这么一套标准化的BI零售数据分析方案，不管是服装零售、医药连锁、商超都能利用这套方案…
如何实现可视化大屏——基于VChart
引言
在大屏产品中，可视化扮演着信息展示和传达、用户体验和互动、数据分析和决策支持、品牌展示和差异化、故事叙述和信息呈现等至关重要的角色。作为可视化图表的重要载体之一，大屏与智能BI产品不管是在产品设计，还是可视化设计的侧重点都…
数据可视化在监控易中的艺术与实践
在数字化运维管理中，数据可视化成为一种日益重要的工具，它将复杂的数据通过图形化的方式呈现，帮助运维团队更加直观和快速地理解系统的运行状况。监控易（MeiXin Era）将数据可视化引入到运维监控中，通过科学…
2023年亚太杯APMCM数学建模大赛数据分析题MySQL的使用
2023年亚太杯APMCM数学建模大赛
以2022年C题全球变暖数据为例
数据分析： 以2022年亚太杯数学建模C题为例，首先在navicat建数据库然后右键“表”，单击“导入向导”，选择对应的数据格式及字符集进行数据导入 导入之后，…
大模型在数据分析场景下的能力评测｜进阶篇
做数据分析，什么大模型比较合适？ 如何调优大模型，来更好地做数据计算和洞察分析？ 如何降低整体成本，同时保障分析体验？10月25日，我们发布了数据分析场景下的大模型能力评测框架（点击…
京东数据挖掘（京东数据采集）：2023年Q3电脑行业数据分析报告
近年来，在远程办公、远程教育等需求的刺激下，电脑的销售增长较为显著。不过，随着市场的成熟乃至饱和，电脑销售市场也逐渐出现增长困难、需求疲软等问题。 2023年第三季度，电脑市场的出货量同比下滑。根据鲸参谋电商数据…
shopee选品软件：解决你店铺选品难题的神器-shopee选品软件知虾
在如今竞争激烈的电商市场中，选品难、定价难、销量差等问题一直困扰着许多商家。然而，如今有一款强大的工具能够帮助商家解决这些难题，它就是shopee选品软件——知虾。本文将介绍知虾的功能以及如何利用它来提升店铺的运营效果。 一、产品功能…
污水处理智能化：污水处理拓扑图的未来发展趋势
随着城市化进程的不断加速，城市污水处理已经成为了一个重要的问题。污水处理不仅关系到城市环境的质量，还直接影响着人们的生活质量和健康。污水处理拓扑图作为一种新型的污水处理技术，已经被广泛应用于各种污水处理设施中。本文将介绍污水处…
想分析全国用电及煤气、液化石油气供应利用情况，这部分数据对你有帮助！
随着经济的发展和人民生活水平的提高，能源的需求量越来越大。其中，电力和煤气、液化石油气等能源的供应利用情况与我们的日常生活息息相关。 今天我们根据《中国城市统计年鉴》统计的中国地级及以上城市的煤气及液化石油气供应及利用情况的指标ÿ…
Python-大数据分析之常用库
Python-大数据分析之常用库
1. 数据采集与第三方数据接入
1-1. Beautiful Soup
Beautiful Soup 是一个用于解析HTML和XML文档的库，非常适用于网页爬虫和数据抓取。可以提取所需信息，无需手动分析网页源代码，简化了从网页中提取数据的过…
DolphinDB 浙商银行 | 第二期现场培训圆满结束
自 DolphinDB 高级工程师计划开展以来，客户们纷纷响应，除了定期收看我们每周三开设的线上公开课外，也有部分客户报名参加了 “总部工程师培训计划” 。
上周，我们迎来了总部培训的第二期学员：来自浙商银行的4位策略研…
一整个分析模型库，大数据分析工具都这么玩了吗？
一整个分析模型库，100张BI报表，覆盖销售、财务、采购、库存等多个分析主题。只需对接ERP，就能自动生成BI报表，完成对海量数据的系统化分析。现在大数据分析工具都发展到这种程度了吗？
放眼看去，现阶段能做…
零基础想系统地学习金融学、量化投资、数据分析、python，需要哪些课程、书籍？有哪些证书可以考？
曾经我也是零基础小白，题主想走的路，我已经走过啦～作为一名CFA持证人和管理因子投资的量化策略的投资组合经理，我把这些年积累的干货跟大家分享。
量化投资是金融学的一部分，量化投资（跟量化交易的概念有部…
5款免费BI数据可视化工具，2023年最新精选推荐！
BI可视化工具顾名思义是进行数据分析和可视化的软件，旨在将数据以表格、图表、仪表盘等形式展示出来，让用户能够更加直观了解其业务状况、发现问题，并在必要时进行决策。 市面上BI数据可视化工具很多，目前比较火的像国外的Tabl…
数字化转型导师坚鹏：数字化时代银行网点厅堂营销5大重点分析
数字化时代银行网点厅堂营销存在以下5大重点：
1、厅堂宣传。应以主推产品作为厅堂宣传的宣传重点，结合视频宣传、平面物料、互动机具、陈列物料等多维度，开展有序重复展示，进而加大吸引客户关注度。
2、产品推荐。在识别出中高端…
Python数据分析实战-爬取以某个关键词搜索的最新的500条新闻的标题和链接（附源码和实现效果）
实现功能
通过百度引擎，爬取以“开源之夏”为搜索关键词最新的500条新闻的标题和链接
实现代码
1.安装所需的库：你需要安装requests和beautifulsoup4库。可以使用以下命令通过pip安装：
pip install requests beautifulsoup42.发起搜索请求…
数字化转型导师坚鹏：数字化时代银行网点厅堂营销5大特点分析
数字化时代银行网点厅堂营销存在以下5大特点：
1、产品多样化：在数字化时代，银行的产品和服务变得更加多样化。除了传统的存款、贷款、理财等金融服务外，还新增了各种创新产品，如网上银行、移动支付、投资咨询、保险、…
时间序列中的6大类10种异常值处理方法(从根源上提高预测精度)
一、本文介绍
本文介绍的内容是在时间序列中异常值处理的方法，当我进行时间序列分析建模收集数据的过程中，往往都存在着一些特数据情况导致数据中存在着一些异常值，这些异常值往往会导致模型识别到不正常的模式从而无法准确的预测࿰…
基于生态系统服务（InVEST模型）的人类活动、重大工程生态成效评估、论文写作等具体应用
白老师（研究员）：长期从事生态系统结构-格局-过程-功能-服务的变化与响应关系等研究工作；重点围绕生物多样性、生态系统服务与价值等，构建生物地球化学模型和评价指标体系，为城市、区域和自然保护区的可持续…
水电能源智能化监控系统
水电能源智能化监控系统是利用现代信息技术，对水电站的运行状态、设备性能、环境参数等进行实时监测和管理的一种智能化系统。随着我国水电能源事业的快速发展，水电能源智能化监控系统在水电能源行业中的应用越来越广泛，为我国水电能源事业的…
从Excel到山海鲸：我的数据可视化升级之旅
作为一名新用户，我最近有幸体验了山海鲸可视化软件，近期山海鲸可视化产品开放了可视化编辑全部功能，并支持本地化部署功能，在使用过程中它不仅打开了我对数据可视化全新世界的大门，而且在实际操作中为我带来了不少惊喜…
详解：如何利用BI工具进行生产管理分析？
作为专业数据分析师，相信大家都深谙数据在决策制定和业务优化中的至关重要性。而高效的生产管理分析不仅仅是对企业内部生产过程的监控和预警，更是推动企业优化生产效率、提升产品质量以及促进创新的不可或缺的关键要素。
关注我们的个人读者与企业客户…
计算机毕业设计-基于深度学习的验证码识别方法设计与实现
概要 验证码是一个系统区分人类与非人类行为的有效方式。验证码识别技术能够使计算机程序输入正确的验证码，伪装成人类用户进入目标系统。另一方面，系统方面需要考虑破解验证码识别技术，修补验证方式的可能漏洞，使之能够更有效地区…
2024年国内彩妆行业市场数据分析：增长机会在哪？
从伊蒂之屋、菲诗小铺等平价韩妆的退出，到全球第一眉妆贝玲妃的落幕，曾经的“网红”-“全网断货选手”纷纷退出中国市场。
有人认为是国内彩妆市场不景气？事实上，国内彩妆市场线上市场规模仍在持续扩大。根据鲸参谋数据统计&…
AI大模型智能大气科学探索之：ChatGPT在大气科学领域建模、数据分析、可视化与资源评估中的高效应用及论文写作
本文深度探讨人工智能在大气科学中的应用，特别是如何结合最新AI模型与Python技术处理和分析气候数据。课程介绍包括GPT-4等先进AI工具，旨在帮助大家掌握这些工具的功能及应用范围。本文内容覆盖使用GPT处理数据、生成论文摘要、文献综述、技术方法分析等…
【成像光谱遥感技术】ChatGPT应用指南
遥感技术主要通过卫星和飞机从远处观察和测量我们的环境，是理解和监测地球物理、化学和生物系统的基石。ChatGPT是由OpenAI开发的最先进的语言模型，在理解和生成人类语言方面表现出了非凡的能力。本文重点介绍ChatGPT在遥感中的应用，人工智能…
面了几家大厂数据挖掘岗，题是一家比一家难。。。
年前，技术群组织了一场数据类的技术&面试讨论会，邀请了一些大厂同学和23年参加招聘的同学来分享：新人如何入门数据和算法岗，面经/面试题分享、大厂在算法场景的落地项目及经验分享等热门话题。
今天分享一位星球成员的上岸之…
“光谱视界革新：ChatGPT在成像光谱遥感中的智能革命“
遥感技术主要通过卫星和飞机从远处观察和测量我们的环境，是理解和监测地球物理、化学和生物系统的基石。ChatGPT是由OpenAI开发的最先进的语言模型，在理解和生成人类语言方面表现出了非凡的能力。本文重点介绍ChatGPT在遥感中的应用，人工智能…
2.Python数据分析—数据分析入门知识图谱索引(知识体系上篇)
2.Python数据分析—数据分析入门知识图谱&索引 一个人简介二数据分析的重要性和用途Python在数据分析中的角色 三Python数据分析基础Python简介和安装指南Python基本语法和数据结构Python中的数学运算 四数据分析工具和库概览NumPy：高效的多维数组操作Pandas&am…
【数据分析】Pandas内容补充（Lambda、applymap、merge...）
Pandas内容补充
1.lambda函数
①f lambda x:x ** 2
f lambda( x:x ** 2)
print(f(100)) # 10000②f lambda x:fun1(x)
def fun1(x):return str(x) "hahla"
f lambda x:fun1(x)
print(f(100)) # 100hahla③f (lambda x,y:x y)(32,23)
f (lambda x,y:x y…
按照指定条件对数据进行分组并对每个分组内的全部数据应用自定义函数进行聚合计算groupby().apply()
【小白从小学Python、C、Java】 【计算机等考500强证书考研】 【Python-数据分析】 按照指定条件对数据进行分组 并对每个分组内的全部数据 应用自定义函数进行聚合计算 groupby().apply() [太阳]选择题 下列输出正确的是： import pandas as pd data {Name: [A, B,…
数据分析：数据预处理流程及方法
数据预处理是数据分析过程中至关重要的一步，它涉及到清洗、转换和整理原始数据，以便更好地适应分析模型或算法。以下是一些常见的数据预处理方法和规则： 数据清洗： 处理缺失值：检测并处理数据中的缺失值，可…
jvs-智能bi（自助式数据分析）11.21更新功能上线
jvs智能bi更新功能
新增:
1.字段设置节点新增自定义时间格式功能；
自定义功能允许用户根据需要自定义日期和时间字段的显示格式，为用户提供了更大的灵活性和便利性 2.图表时间搜索条件新增向下兼容模式；
时间搜索条件的向下兼容模式允许用…
银行数字化转型导师坚鹏：BLM银行数字化转型战略培训圆满结束
在数字化转型背景下，中国金融出版社金融文化研训院为了落实监管政策《关于银行业保险业数字化转型的指导意见》，充分认识到学习银行银行数字化转型战略的价值和重要性，特别举办《2023年金融机构数字化转型及数字化风控与运营管理研讨班》。为…
分享五款可视化数据平台，零代码也能轻松上手！
今天给大家推荐五款市面上常见的可视化数据平台，不仅可以做日常的图表，制作可视化大屏也不在话下，考虑到一些非技术人员的需求，我把这些数据可视化平台分为代码类和零代码类，大家可以根据需要选择最合适自己的工具。
…
数据分析基础之《matplotlib（1）—介绍》
一、什么是matplotlib
1、专门用于开发2D图表（包括3D图表）
2、使用起来及其简单
3、以渐进、交互方式实现数据可视化
4、matplotlib mat：matrix（矩阵） plot：画图 lib：库
二、为什么要学习m…
京东数据分析平台（京东运营数据采集）：2023年10月京东白酒品牌销售排行榜
鲸参谋监测的京东平台10月份白酒市场销售数据已出炉！ 鲸参谋数据显示，10月份，京东平台上白酒的销量为340万，环比增长约16%，同比增长约37%；销售额为28亿，环比增长约20%，同比增长约122…
电商数据采集|电商API接口接入|从京东平台获取商品SKU 主图 价格 详情数据
在进行API开发过程中，数据异常常常令人头痛。我们的API开车软件经过精心设计和测试，能够准确识别并及时处理各类数据异常。拥有稳定的运行环境，保障了您的开发进程不受干扰，让您的工作更加顺畅高效。
京东获得JD商品详情 API 返…
AIGC ChatGPT4总结SQL优化细节操作
数据库SQL优化是一个复杂的过程，它通常涉及到许多不同的技术和方法。以下是一些常用的SQL优化策略：
1. **索引使用**：索引可以极大地加速查询速度。但是，索引并不总是有好处的，因为它们需要额外的空间来存储，并且在插入和更新数据时可能会减慢速度。因此，选择正确的字段…
从入门到精通！Python数据分析畅销书《利用Python进行数据分析》第三版中文版助你成为数据分析师！
Python数据分析畅销书《利用Python进行数据分析》第三版中文版助你成为数据分析师！ 个人简介什么是数据分析如何自学数据分析书籍推荐作译者简介作者简介译者简介 主要变动导读视频：购书链接：参与方式往期赠书回顾 个人简介 🏘️&…
2023亚太赛B题详细讲解 玻璃温室中的微气候
Problem B
Microclimate Regulation in Glass Greenhouses
问题B玻璃温室中的微气候法规 温室作物的产量受到各种气候因素的影响，包括温度、湿度和风速[1]。其中，适宜的温度和风速是植物生长[2]的关键。为了调节玻璃温室内的温度、风速等气候因素&…
不知道数据可视化大屏选什么工具？看这一篇就够了！
数据可视化大屏现在是越来越受欢迎了，逐渐成为各行业决策者、数据分析师的重要工具。 数据可视化大屏不仅能将复杂的数据以简单直观的方式呈现，帮助用户更好地理解数据、分析数据、解决数据孤岛的问题，从而做出更明智的决策，第…
Python 数据分析模块pandas 如何创建DataFrame
以下用两种方式分别创建DataFrame。
import pandas as pd#原始数据存储在列表中
names [Alice,Deric,Amanda,Petter]
ages [34,24,33,35]
incomes [50000,65000,46000,69000]# 使用字典创建 DataFrame
data {names:names,ages:ages,incomes:incomes}
df1 pd.DataFrame(da…
Data.olllo：轻松解锁邮政编码数据！
引言： 在数据处理的路上，解析邮政编码可能会让您头疼不已。然而，有了Data.olllo的“超级抽取”功能，这一切都变得轻而易举！
功能介绍： Data.olllo的“超级抽取”功能为您提供了快速、简便的解决方案&#…
涛哥聊Python | auto-sklearn，一个非常好用的 Python 库！
本文来源公众号“涛哥聊Python”，仅用于学术分享，侵权删，干货满满。
原文链接：auto-sklearn，一个非常好用的 Python 库！
大家好，今天为大家分享一个非常好用的 Python 库 - auto-sklearn。
G…
shopee选品工具：Shopee选品工具—知虾精准选品与科学运营的利器
在如今竞争激烈的电商市场中，如何进行精准选品和科学运营成为了每个卖家都需要面对的问题。而Shopee选品工具——知虾，作为一款强大的大数据采集及分析平台，为卖家提供了全面的市场分析、产品分析和店铺分析功能，帮助卖家发现市场…
pyecharts操作三
pyecharts操作三 pyecharts 是一个用于生成Echarts图表的Python库。Echarts是百度开源的一个数据可视化JS库，可以生成一些非常酷炫的图表。 环境安装 pip install pyecharts 检查版本
import pyecharts print(pyecharts.version) 2.0.3
GL关系图
import rando…
数据分析-GroupBy的排序和缺失值处理
数据分析-GroupBy的排序和缺失值处理
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表&a…
数据分析之POWER Piovt透视表分析
将几个数据表之间进行关联 生成数据透视表 超级透视表这里的字段包含子字段 这三个月份在前面的解决办法 1.选中这三个月份，鼠标可移动的时候移动到后面 2.在原数据进行修改 添加列获取月份，借助month的函数双击日期 选择月份这列----按列排序-----选择月…
案例研究｜DataEase实现物业数据可视化管理与决策支持
河北隆泰物业服务有限责任公司（以下简称为“隆泰物业”）创建于2002年，总部设在河北省高碑店市，具有国家一级物业管理企业资质，通过了质量体系、环境管理体系、职业健康安全管理体系等认证。自2016年至今，隆…
基于spark的大数据分析预测地震受灾情况的系统设计
基于spark的大数据分析预测地震受灾情况的系统设计
在本篇博客中，我们将介绍如何使用Apache Spark框架进行地震受灾情况的预测。我们将结合数据分析、特征工程、模型训练和评估等步骤，最终建立一个预测模型来预测地震造成的破坏程度，同时使用可视化大屏的方式展示数据的分布…
数据可视化第二版-03部分-08章-分布
文章目录数据可视化第二版-03部分-08章-分布总结可视化视角-分布代码实现直方图直方图案例1直方图示例2直方图与趋势线直方图与趋势线2分组直方图变形密度图密度图1密度图2-堆积密度图密度图3-二维密度图密度图4-边际密度图密度图5-镜像密度图密度图6-横向密度图箱线图箱线图1箱…
聚焦AI赋能，诚邀您共议数据价值新机遇｜爱分析活动
随着数字化时代的来临，大模型与数据分析技术正日益成为推动企业发展的核心引擎。为深入探讨大模型与数据分析在各个行业的实际应用与价值，我们将于3月29日在上海举办一场以“AI赋能，释放数据价值”为主题的闭门研讨会。
本次研讨会旨在汇聚不…
数据分析能力模型分析与展示
具体内容：
专业素质 专业素质-01 数据处理 能力定义•能通过各种数据处理工具及数据处理方法，对内外部海量数据进行清洗和运用，提供统一数据标准，为业务分析做好数据支持工作。 L1•掌握一…
数据分析---SQL实战（2）
目录 sql查询重复出现的email在学生成绩单中查找出语文、数学和英语成绩的各自前三名计算每个部门的平均薪水，并按照薪水降序排列获取每个学生的排名sql查询重复出现的email GROUP BY和HAVING子句SELECT email, COUNT(*) as count
FROM your_table
GROUP BY email
HAVING coun…
数据噪声对数据分析的影响及其应对策略
在数字化时代，数据作为决策的重要依据，其准确性和可靠性对于分析结果的正确性至关重要。然而，在实际应用中，数据往往不可避免地会受到各种噪声的干扰。那么，数据噪声究竟会对数据分析产生怎样的影响呢？本文…
【傻瓜文档】鼎利测试软件Pilot Pioneer-② 数据分析与处理功能
数据分析与处理功能
数据导入、解码
① 导入数据
两种方式： 添加新数据导入历史数据不需要的数据可以移除 ② 数据解码
正式格式的数据可以重解码，例如Rcu、dcf等等，尽量选择正式数据。
两种方式： 选中数据，右键选择重解码双击信令重解码后的文件会生成为DitIB的文件…
生成凹形曲线算法技术实践
1. 需求目标
生成曲线，以生成凹形曲线为例，如下图所示。 凹形曲线描述如下：
左边高点为y25（均值），跨度4（x[0,5)）；中间最低点为y2（均值）&#x…
透视未来工厂：山海鲸可视化打造数字孪生新篇章
在信息化浪潮的推动下，数字孪生工厂项目正成为工业制造领域的新宠。作为一名山海鲸可视化的资深用户，我深感其强大的数据可视化能力和数字孪生技术在工厂管理中的应用价值，同时我们公司之前也和山海鲸可视化合作制作了一个智慧工厂项目&#…
Python数据分析与可视化笔记 二 机器学习与数据分析的关系 数据分析的基本步骤 Python和数据分析
机器学习与数据分析的关系 机器学习一开始研究的目的是让机器具有学习能力从而拥有智能。目前公认的定义是：利用经验来改善计算机系统自身的性能。由于经验在计算机系统中主要以数据形式存在，因此机器学习需要对数据进行分析。 数据分析的定义则是&#…
GraphPad Prism 10：一站式数据分析解决方案
GraphPad Prism 10是一款功能强大的数据分析和可视化软件，广泛应用于生命科学研究、医学、生物、化学等多个领域。以下是对其详细功能的介绍：
首先，GraphPad Prism 10具有出色的数据可视化功能。它支持各种类型的图表和图形，包括…
数据分析web可视化神器---streamlit框架，无需懂前端也能搭建出精美的web网站页面
✨✨ 欢迎大家来到景天科技苑✨✨
🎈🎈 养成好习惯，先赞后看哦~🎈🎈
所属的专栏：数据分析系统化教学，零基础到进阶实战 景天的主页：景天科技苑 文章目录 Streamlit什么是streamli…
每天一个数据分析题（二百二十）
在集成学习的GBDT算法中，每次训练新的决策树的目的是( )？
A. 预测原始数据的标签
B. 预测上一个模型的残差
C. 降低模型的偏差
D. 降低模型的方差
题目来源于CDA模拟题库
点击此处获取答案
深度分析 | 2024年四川大学信息资源管理考研初试成绩数据分析
摘要
本文深入分析了2024年四川大学信息资源管理考研复试成绩，提供了关于考生成绩分布、各科目成绩表现以及科目成绩与总分之间的相关性的详细见解。分析显示，复试考生的平均总分为380.63分，标准差为12分，反映出成绩分布相对集中且波动适中。特别地，专业课972与总分的相关…
Tableau学习——网络图、弧线图
1 简单的网络图
（1）拖入X Y——取消聚合度量——添加关联线条 （2）创建双轴，不能直接加点 然后将下面的y轴设置为双轴就好了 2复杂点的网络图
（1）同样拖入横纵坐标——分析——取消聚合度量——…
从零开始的 dbt 入门教程 （dbt cloud 自动化篇）
一、引
在前面的几篇文章中，我们从 dbt core 聊到了 dbt 项目工程化，我相信前几篇文章足够各位数据开发师从零快速入门 dbt 开发，那么到现在我们更迫切需要解决的是如何让数据更新做到定时化，毕竟作为开发我们肯定没有经历每天定…
贪心算法的魅力与应用
在算法的世界里，贪心算法（Greedy Algorithm）以其简洁而高效的策略吸引着我们的目光。本文将深入探讨贪心算法的原理、特点以及它在实际问题中的广泛应用。 一、什么是贪心算法？ 贪心算法是一种在每一步选择中都采取当前看起来最优…
从双非文科生到年薪50万大厂女码农，我用了3年
报班学习，成为码农，进入小厂，跳槽大厂，是很多转码人都期待的发展之路。 “你这是骚扰，你们就是一群骗子！”电话那头，一个中年男子正对朱颖（化名）进行大声呵斥，…
【最简单的方法】python pandas 安装
pandas 是基于NumPy 的一种工具，该工具是为解决数据分析任务而创建的。Pandas 纳入了大量库和一些标准的数据模型，提供了高效地操作大型数据集所需的工具。pandas提供了大量能使我们快速便捷地处理数据的函数和方法。你很快就会发现，它是使Py…
Pandas数据预处理python 数据分析之4——pandas 预处理在线闯关_头歌实践教学平台
Pandas数据预处理python 数据分析之4——pandas 预处理 第1关 数据读取与合并第2关 数据清洗第3关 数据转换 第1关 数据读取与合并
任务描述 本关任务：加载 csv 数据集，实现 DataFrame 合并。 编程要求 根据提示，在右侧编辑器补充代码&#…
使用Apache Hive进行大数据分析的关键配置详解
Apache Hive是一个在Hadoop上构建的数据仓库工具，它允许用户通过类似SQL的语言（HiveQL）进行数据查询和分析。在使用Hive进行大数据分析之前，需要配置一些重要的参数以确保系统正常运行并满足特定需求。本文将重点介绍Apache Hive的…
我在京东做数据分析，一位京东数据分析师的工作日常
有人说：“种下一棵树最好的时间是十年前，其次是现在”。任何时候，我们都应该抓住机遇，说不定就是改变你现状的一个机会。
2020年，我在疫情得到控制后，面试入职京东大数据组，截止目前࿰…
Scikit-learn 数据挖掘和数据分析工具的使用指南
Scikit-learn是Python中一款非常强大且广泛使用的数据挖掘和数据分析工具。它为数据挖掘和数据分析任务提供了简单高效的接口，涵盖了分类、回归、聚类、降维、模型选择等多个方面。以下是一份详细的使用指南，帮助用户更好地理解和使用Scikit-learn。
一…
【数据分析面试】1. 计算年度收入百分比（SQL）
题目
你需要为公司的营收来源生成一份年度报告。计算截止目前为止，在表格中记录的第一年和最后一年所创造的总收入百分比。将百分比四舍五入到两位小数。
示例： 输入： annual_payments 表
列名类型amountINTEGERcreated_atDATETIMEstatusV…
pyecharts操作一
pyecharts 是一个用于生成Echarts图表的Python库。Echarts是百度开源的一个数据可视化JS库，可以生成一些非常酷炫的图表。 环境安装 pip install pyecharts 检查版本
import pyecharts print(pyecharts.version) 2.0.3
柱状图绘制
from pyecharts.charts impor…
4.Python数据分析—数据分析入门知识图谱索引(知识体系下篇)
4.Python数据分析—数据分析入门知识图谱&索引-知识体系下篇 一个人简介二机器学习基础2.1 监督学习与无监督学习2.1.1 监督学习：2.1.2 无监督学习： 2.2 特征工程2.3 常用机器学习算法概述2.3.1 监督学习算法：2.3.2 无监督学习算法&#…
基于R语言的DICE模型技术应用
随着温室气体排放量的增大和温室效应的增强，全球气候变化问题受到日益的关注。我国政府庄严承诺在2030和2060年分别达到“碳达峰”和“碳中和”，因此气候变化和碳排放已经成为科研人员重点关心的问题之一。气候变化问题不仅仅是科学的问题，同…
Python图形界面开发：Tkinter与PyQt
Python是一种非常流行的编程语言，它拥有丰富的图形用户界面（GUI）开发库。其中，Tkinter和PyQt是最常用的两个库。下面是对这两个库的简单介绍。
1. Tkinter
Tkinter是Python的标准图形用户界面库。它提供了一组简单的工具和函数&…
Apache Doris 2.0.5 版本正式发布
亲爱的社区小伙伴们，Apache Doris 2.0.5 版本已于 2024 年 2 月 27 日正式与大家见面。这次更新带来一系列行为变更和功能更新，并进行了若干的改进与优化，旨在为用户提供更为稳定高效的数据查询与分析体验。新版本已经上线，欢迎大…
插入电脑的u盘文件删除了怎么恢复？删除文件恢复的2024新招数
随着科技的发展，U盘已经成为我们日常生活中不可或缺的一部分。然而，使用U盘时，有时我们可能会不小心删除一些重要的文件，这可能会给我们带来很大的困扰。那么，当U盘中的文件被删除后，我们该如何恢复呢&…
如何通过数据可视化优化城市交通？
在当今社会，数据已成为信息时代的关键资源，而数据可视化则是将这些庞杂的数据转换为易于理解和分析的图形和图表的过程。随着城市化进程的加快，交通拥堵、安全管理、环境监测等问题日益凸显，智慧交通系统的构建成为了解决这些问题…
智慧水利中数据可视化的关键作用
在当今这个数据驱动的时代，数据可视化已成为转化复杂数据集为易于理解的视觉格式的关键技术，它在智慧水利领域的应用尤为显著。智慧水利利用现代信息技术，整合水资源管理的各个方面，旨在提高水资源的使用效率和管理效能。数据可视…
零基础入门转录组数据分析——绘制差异火山图
零基础入门转录组数据分析——绘制差异火山图 差异分析的火山图（Volcano Plot）在生物信息学数据分析中，特别是在基因表达差异分析中，是一个非常直观和有用的工具。
本教程将从导入的数据结构开始，一步步带大家在R中绘制好看的火山图，最后对火山图进行解读，确保读者理解…
Python数据分析八
一、Python之列表的切片取值
在Python中，我们可以使用切片操作来获取列表中的子集。切片操作使用[start:end:step]的语法，其中start表示起始位置的索引（包含），end表示结束位置的索引（不包含）&a…
2024免费Microsoft考试券又来了！大家抓紧薅羊毛√
2024年第一季度，微软推出了AI Challenge学习主题，里面一共包含了四个科目，分别是：
1，Microsoft Fabric 2，Azure OpenAI 3，Azure Machine Learning 4，Azure AI Fundamentals 重点&am…
PowerBI和Tableau之间该怎么选择?
最近经常看到朋友询问，最近想学习数据分析工具，但是PowerBI和Tableau之间不知道怎么选择?
其实可以从下面几个方面进行参考，Power BI和Tableau哪个更适合你？
共同点：
Power BI和Tableau都是强大的数据分析和数据可…
数据分析之Tebleau的度量和维度
维度 维度是分类的字段。如名称、国家、地区等，一般为非数字 度量 度量是数值字段。如销量、利润、折扣等，一般为数字 注意 字符串、日期格式为维度 [数据桶]连续型数据离散化为维度 例如：0，1，2，3ÿ…
教培机构办公管理系统B端实战项目作品集Figma源文件
这是一套教培机构办公管理系统设计复盘作品集，都提供分层源文件
交付文件：设计复盘作品集源文件作品集里面的B端设计项目包装样机字体文件
交付格式：figma
作品集文件页数：19页
B端项目文件页数：15页
B端项目源文…
超市销售数据-python数据分析项目
Python数据分析项目-基于Python的销售数据分析项目 文章目录 Python数据分析项目-基于Python的销售数据分析项目项目介绍数据分析结果导出数据查阅 数据分析内容哪些类别比较畅销?哪些商品比较畅销?不同门店的销售额占比哪个时间段是超市的客流高封期?查看源数据类型计算本月…
数据分析：SQL和Python
SQL
统计数据概况：计算样本总数、商家总数、用户总数、消费总数、领券总数等
selectcount(User_id) as 样本总数,count(distinct Merchant_id) as 商家总数,count(distinct User_id) as 用户总数,count(Date) as 消费总数,count(Date_received) as 领券总数,(sele…
基于python的NBA球员数据可视化分析的设计与实现
完整下载：基于python的NBA球员数据可视化分析的设计与实现.docx 基于python的NBA球员数据可视化分析的设计与实现 Design and Implementation of NBA Player Data Visualization Analysis based on Python 目录 目录 2 摘要 3 关键词 4 第一章 引言 4 1.1 研究背景 …
实现外卖配送的智能化：外卖配送可视化技术解析
随着互联网技术的不断发展，外卖配送行业也迎来了快速发展的时代。而随之而来的是越来越多的用户对于外卖配送的质量和效率提出了更高的要求。如何让外卖配送更加可视化，成为了外卖配送行业亟需解决的问题。 外卖配送可视化是指通过技术手段，将…
2022年MathorCup大数据竞赛B题北京移动用户体验影响因素研究求解全过程文档及程序
2022年MathorCup高校数学建模挑战赛—大数据竞赛
B题 北京移动用户体验影响因素研究
原题再现： 移动通信技术飞速发展，给人们带来了极大便利，人们也越来越离不开移动通信技术带来的各种便捷。随着网络不断的建设，网络覆盖越来越…
项目中如何配置数据可视化展现
在现今数据驱动的时代，可视化已逐渐成为数据分析的主要途径，可视化大屏的广泛使用便应运而生。很多公司及政务机构，常利用大屏的手段展现其实力或演示业务，可视化的效果能让观者更快速的理解结果并直观的看到数据展现。因此&#…
后端跟前端讨论：如何对比分析AB方案？
目录
一、结论
二、场景再现
1、方案说明
2、不同思维的碰撞（重点）
（1）场景描述
（2）后端思维
（3）前端思维
3、我作为后端说一句 一、结论
不是在设置相同条件下进行对比。 …
京东数据采集接口推荐（京东大数据分析工具）
随着京东电商平台的不断发展，平台中店铺数量也越来越多，对于电商卖家而言，在电商运营过程中如何做好数据分析也越来越重要。而电商运营数据往往多而杂，想要高效的完成电商数据分析，品牌需要借助一些电商数据分析软件。…
如何提高工作效率和决策能力？试试宽屏尺寸的可视化大屏
[作者整理了17份宽屏尺寸的可视化大屏源文件，开箱即用，支持二次开发！有需要可私我发你提取码哈~！] 随着科技的不断发展，宽屏尺寸的可视化大屏已经成为了商务、政府和企业等领域中不可或缺的一部分。这种大屏幕具有高清…
2015年五一杯数学建模B题空气污染问题研究解题全过程文档及程序
2015年五一杯数学建模
B题 空气污染问题研究
原题再现 近十年来，我国 GDP 持续快速增长，但经济增长模式相对传统落后，对生态平衡和自然环境造成一定的破坏，空气污染的弊病日益突出，特别是日益加重的雾霾天气已经干扰…
Matplotlib直方图的创建_Python数据分析与可视化
Matplotlib直方图的创建 概念区分绘制直方图 概念区分
什么是直方图？
直方图（Histogram）又称质量分布图，是统计报告图的一种，由一系列高度不等的纵向条纹或线段表示数据分布的情况，一般用横轴表示数据所属…
C现代方法（第23章）笔记——库对数值和字符数据的支持
文章目录 第23章 库对数值和字符数据的支持23.1 <float.h>: 浮点类型的特性23.2 <limits.h>: 整数类型的大小23.3 <math.h>: 数学计算(C89)23.3.1 错误23.3.2 三角函数23.3.3 双曲函数23.3.4 指数函数和对数函数23.3.5 幂函数23.3.6 就近舍入、绝对值函数和取…
python实现炫酷的屏幕保护程序！
今天写了桌面保护程序。先来看看效果吧。
完全可以作为屏保程序了，老方式：以下是实现的代码： from tkinter import *from time import strftimedef update_time():global i, j current_time strftime(%H:%M:%S)time_label.config(textcu…
CDA一级备考思维导图
CDA一级备考思维导图 第一章 数据分析概述与职业操守1、数据分析概念、方法论、角色2、数据分析师职业道德与行为准则3、大数据立法、安全、隐私 CDA一级复习备考资料共计七个章节，如需资料，请留言，概览如下图：
第一章 数据分析…
python小数据分析小结及算法实践集锦
在缺乏大量历史数据的新兴技术和产业中，商业分析可能会面临一些挑战。然而，有一些技术和方法可以帮助分析者在数据不充分的情况下进行科学化商业分析，并为决策提供支持。
1. 当面对缺乏大量历史数据的新兴技术和产业时所采常用的技术和方法 …
暴雷！Shopee佣金再度上调，入驻还需要保证金?—站斧浏览器
近段时间以来，Shopee陆陆续续地上调了多个站点地佣金费率、交易手续费以及FSS&CCB费率等，不仅如此，Shopee还官宣了入驻需要缴纳保证金！甚至已入驻商家未交保证金或会被冻结风险！这一些列操作让不少Shopee卖家有些措…
Python pandas数据分析
Python pandas数据分析：
2022找工作是学历、能力和运气的超强结合体，遇到寒冬，大厂不招人，可能很多算法学生都得去找开发，测开 测开的话，你就得学数据库，sql，oracle，尤其…
虾皮免费分析工具：了解市场趋势、优化产品和店铺运营
在如今竞争激烈的电商市场中，了解市场趋势、优化产品和店铺运营对于卖家来说至关重要。虾皮（Shopee）作为一家知名的电商平台，为卖家提供了一些免费的分析工具，帮助他们更好地了解市场情况并做出明智的决策。本文将介绍…
Matplotlib子图的创建_Python数据分析与可视化
Matplotlib子图的创建 plt.axes创建子图fig.add_axes()创建子图 plt.axes创建子图
前面已经介绍过plt.axes函数，这个函数默认配置是创建一个标准的坐标轴，填满整张图。
它还有一个可选的参数，由图形坐标系统的四个值构成。这四个值表示为坐…
二进制数据转换成十六进制表示 binascii.hexlify()
【小白从小学Python、C、Java】 【计算机等考500强证书考研】 【Python-数据分析】 二进制数据转换成十六进制表示 binascii.hexlify()
选择题 binascii.hexlify()参数的数据类型可以是？ import binascii number 11 byte_data number.to_bytes() hex_data bin…
京东数据采集（京东数据运营）：怎样快速获取京东市场大数据？
相信京东平台的很多品牌方们都有做数据分析的需求，但面对多而杂的市场数据，很多运营者都没有思路。单依靠肉眼来看，很多商品的类目、销售成绩、价格分布等运营者也未必清楚。 其实对于京东平台上市场数据的获取，品牌可以直接借助一…
AIGC ChatGPT4总结Linux Shell命令集合
在Linux中，Shell命令的数量非常庞大，因为Linux提供了各种各样的命令来处理系统任务。这些命令包括GNU核心工具集、系统命令、shell内置命令以及通过安装获得的第三方应用程序命令。以下是一些常见的Linux命令分类及其示例，但请注意，这不是一个全面的列表，因为列出所有命令…
箱型图 Box Plot 数据分析的法宝
文章目录 一、箱形图的介绍二、六大因数三、Box plot的应用四、箱形图的优劣势五、图形拓展 一、箱形图的介绍
箱形图又称为盒须图、盒式图、盒状图或箱线图，是一种用作显示一组数据分散情况资料的统计图。因型状如箱子而得名。在各种领域也经常被使用，…
一文看懂：库存分析如何做？
在之前的文章中，老李给大家简单介绍了制造业数据分析用到的指标体系和典型分析场景。如果你读过那篇文章，你就会知道制造业主要有两个典型的分析场景，一是库存管理，二是生产管理。虽然老李在之前的文章中提到了这两个场景…
Matplotlib画图接口_Python数据分析与可视化
Matplotlib画图接口 导入matplotlib显示图像画图接口 导入matplotlib
和numpy,pandas一样，在导入matplotlib时我们也可以用一些常用的简写形式：
import matplotlib as mpl
import matplotlib.pyplot as pltpyplot是最常用的画图模块接口，功…
数据分析实战案例：Python 分析员工为何离职（附完整代码）
大家好，今天给大家介绍一个Python数据分析项目实战，不仅包含代码，还提供分析数据集。
员工流失或是员工离开公司的比率是公司关注的一个重要问题。它不仅会导致宝贵人才的流失，还会产生成本并破坏生产力。了解员工辞职的原因对于…
Excel如何比较两列数据的不同
当遇到exel有两个列表的数据，需要比较得到他们的不同的部分，并且得到一个不同的值的列表。示例如下： 目的是：通过比较，知道Column2的哪些值不在在Column1里。
WPS直接提供了这一个功能，如下图：…
「数据分析」之零基础入门数据挖掘
摘要：对于数据挖掘项目，本文将学习应该从哪些角度分析数据？如何对数据进行整体把握，如何处理异常值与缺失值，从哪些维度进行特征及预测值分析？ 探索性数据分析（Exploratory Data Analysis&#…
高校水电预付费管控系统
高校水电预付费管控系统在现代高校管理中扮演着重要角色。这一系统通过整合先进的科技手段，如智能计量设备和互联网技术，实现对校园水电消费的精准监控和管理。首先，高校水电预付费管控系统能够有效监测学生宿舍、教学楼等区域的实时用水用电…
2023年亚太杯APMCM数学建模大赛A题水果采摘机器人的图像识别
2023年亚太杯APMCM数学建模大赛
A题 水果采摘机器人的图像识别
原题再现 中国是世界上最大的苹果生产国，年产量约3500万吨。同时，中国也是世界上最大的苹果出口国，世界上每两个苹果中就有一个是中国出口的，世界上超过六分之一的…
大模型下交互式数据挖掘的探索与发现
在这个数据驱动的时代，数据挖掘已成为解锁信息宝库的关键。过去，我们依赖传统的拖拉拽方式来建模，这种方式在早期的数据探索中起到了作用，但随着数据量的激增和需求的多样化，它的局限性逐渐显露。 >>>> 首…
2021年第十届数学建模国际赛小美赛A题气道阻力的评估解题全过程文档及程序
2021年第十届数学建模国际赛小美赛
A题 气道阻力的评估
原题再现： 气道阻力的定义是通过肺气道产生单位气流所需的经肺压力的变化。更简单地说，它是嘴和肺泡之间的压力差，除以气流。影响气道阻力的因素是多方面的，我们需要探讨这…
sklearn教程：iris鸢尾花数据集数据分析
文章目录 数据集介绍导入数据集查看数据标签、属性和介绍查看数据整理为dataframe数据indo()查看数据类型和是否缺失describe() 提供数值型变量的描述性统计变量赋值标签编码分割训练集测试集查看X y 维度可视化分析箱线图查看数据分布和异常值直方图查看数值型数据分布密度图查…
利用python对数据进行季节性和趋势拆解
1. 引言
时间序列数据是按时间顺序排列的数据点的集合。与传统的交叉-sectional 数据不同，时间序列数据通常具有时间维度，因此每个数据点都与一个特定的时间点相关联。这种数据类型在许多领域中都很常见，如经济学、气象学、股票市场分析等。…
京东数据分析（京东大数据采集）：2023年线上珍珠市场销售数据采集
在珠宝首饰市场，从黄金到钻石，如今年轻人的新风潮又转向了珍珠。珍珠热潮并非刚刚兴起，早在前两年，抖音、快手等短视频台的珍珠开蚌直播内容，就掀起了一波珍珠热潮。 此后，随着珍珠饰品被越来越多社交平台的…
今天给大家分享一套Python入门基础测试题，大家看看都会做吗？
今天给大家分享一套Python入门基础测试题，大家看看都会做吗？
一、测试题
1. 正确下载Anaconda平台或Python安装包并成功安装。
2. 掌握Python注释与print()和input()两个函数的用法，并作答以下选择题（不定项选择，正…
sklearn教程：titanic泰坦尼克号数据集
文章目录 数据集介绍导入数据集info()显示数据类型和是否缺失describe()数据描述性统计数据可视化-探索性分析EDA填充缺失值之后的可视化类别变量的相关关系数据集介绍
这个数据集是基于泰坦尼克号中乘客逃生的，泰坦尼克号出事故，船上的乘客的一些信息被记录在这张表中。现在…
知虾主页：为商家和市场分析师提供的数据分析工具
知虾是专为Shopee（虾皮购物）平台而设计的数据分析工具，为商家和市场分析师提供了丰富的功能和信息。本文将介绍知虾主页上的各项功能，并详细解释如何利用这些功能来分析市场趋势、产品分析和竞争对手分析等方面的数据。无论您是新…
基于AWS Serverless的Glue服务进行ETL(提取、转换和加载)数据分析（三）——serverless数据分析
3 serverless数据分析 大纲 3 serverless数据分析3.1 创建Lambda3.2 创建API Gateway3.3 结果3.4 总结 3.1 创建Lambda
在Lambda中，我们将使用python3作为代码语言。
步骤图例1、入口2、创建（我们选择使用python3.7）3、IAM权限（…
阶段四：数据分析与机器学习(学习如何使用matplotlib和seaborn进行数据可视化)
Matplotlib 和 Seaborn 是 Python 中常用的数据可视化库。Matplotlib 是一个基本的绘图库，可以用于绘制各种静态、动态、交互式和三维图表。Seaborn 基于 Matplotlib，提供了更高级的接口和更美观的默认样式。
下面是一个简单的教程，介绍如何使用 Matplotlib 和 Seaborn 进行…
地方招商策略：招商招哪些，如何选择理想的企业？
招商引资是推动地方经济发展的不二选择，通过吸引优质企业入驻，不仅可以带来直接的投资和税收，还可以为地方创造更多的就业机会，引入高端人才、先进的技术及管理经验，同时，招商引资还能够促进地方的产业升级…
虾皮助手：提升Shopee卖家运营效率的必备辅助工具
随着电商市场的快速发展，越来越多的卖家选择在Shopee平台上开设在线商店。然而，随之而来的是更多的竞争和挑战。为了在这个竞争激烈的市场中脱颖而出，卖家们需要寻找一种工具来帮助他们更高效地管理和运营他们的店铺。虾皮助手（Sh…
Apache Doris 在某工商信息商业查询平台的湖仓一体建设实践
本文导读： 信息服务行业可以提供多样化、便捷、高效、安全的信息化服务，为个人及商业决策提供了重要支撑与参考。本文以某工商信息商业查询平台为例，介绍其从传统 Lambda 架构到基于 Doris Multi-Catalog 的湖仓一体架构演进历程。同时通过一…
数学建模-二氧化碳排放及时空分布测度
二氧化碳排放及时空分布测度
整体求解过程概述(摘要) 面临全球气候变化的巨大挑战，我国积极响应《巴黎协定》的号召，提出“2030年前碳达峰，2060 年前实现碳中和”的碳排放发展目标，并将碳中和相关工作作为 2021 年的重点任务之一…
数据分析简单项目总结
基于BERT模型的群众问政留言之城乡建设热点大数据分析 基于Python爬取了1500条阳光热线中关于城乡建设的留言，通过BERT预训练语言模型提取文本的语义向量特征，利用临近传播算法对语义向量特征进行聚类得到127类群众关注问题，定义热度评价指标…
大数据分析与应用实验任务九
大数据分析与应用实验任务九
实验目的 进一步熟悉pyspark程序运行方式； 熟练掌握pysaprkRDD基本操作相关的方法、函数，解决基本问题。
实验任务
进入pyspark实验环境，打开命令行窗口，输入pyspark，完成下列任务&am…
挑选数据可视化工具：图表类型、交互功能与数据安全
作为一名数据分析师，我经常需要使用各种数据可视化工具来将数据以直观、清晰的方式呈现出来，以便更好地理解和分析。在市面上的众多可视化工具中，我根据实际需求和项目特点进行选择。本文将从以下几个角度对市面上的数据可视化工具进行对比&a…
jvs智能bi新增：数据集添加sql自定义节点、添加websocket任务进度动态展示等等
智能bi更新功能
新增:
1.数据集添加sql自定义输入节点，支持mysql Oracle数据源；
用户可以从这些数据源中获取数据，并通过SQL语句对数据进行自定义处理和分析。可以帮助用户更加灵活地处理和分析数据，满足各种个性化的需求。 2.…
时间序列数据的异常检测案例
异常检测是识别数据集中显著偏离规范的数据点或模式的过程。时间序列是在一段时间内收集的数据点的集合。时间序列数据中的异常检测可能在包括制造业、医疗保健和金融在内的各个行业中有所帮助。时间序列数据中的异常检测可以使用无监督学习方法（如聚类、PCA&#x…
业务场景中Hive解析Json常用案例
业务场景中Hive解析Json常用案例
json在线工具
json格式转换在线工具
https://tool.lu/json/format格式互转：
// 格式化可以合并整行显示
{"name":"John Doe","age":35,"email":"johnexample.com"}// 格式化…
【赠书第9期】巧用ChatGPT高效搞定Excel数据分析
文章目录
前言
1 操作步骤
1.1 数据清理和整理
1.2 公式和函数的优化
1.3 图表和可视化
1.4 数据透视表的使用
1.5 条件格式化和筛选
1.6 数据分析技巧
1.7 自动化和宏的创建
2 推荐图书
3 粉丝福利 前言
ChatGPT 是一个强大的工具，可以为你提供在 Exce…
100天精通Python（可视化篇）——第109天：Pyecharts绘制各种常用地图（参数说明+代码实战）
文章目录 专栏导读一、地图应用场景二、参数说明1. 导包2. add函数 三、地图绘制实战1. 省市地图2. 中国地图3. 中国地图（带城市）4. 中国地图（分段型）5. 中国地图（连续型）6. 世界地图7. 行程轨迹地图8. 人口…
数据可视化：用图表和图形展示数据
写在开头
在当今信息爆炸的时代，海量的数据如同一座沉默的宝库，等待着我们挖掘和理解。然而，这些庞大的数据集本身可能令人望而生畏。在这个时候，数据可视化成为了解数据、发现模式和传达信息的强大工具。本篇博客将带领你探索数据可视化的奇妙世界，学习如何在python中使…
SPSS多维尺度分析
前言： 本专栏参考教材为《SPSS22.0从入门到精通》，由于软件版本原因，部分内容有所改变，为适应软件版本的变化，特此创作此专栏便于大家学习。本专栏使用软件为：SPSS25.0 本专栏所有的数据文件请点击此链接下…
Pandas进阶：transform 数据转换的常用技巧
引言
本次给大家介绍一个功能超强的数据处理函数transform，相信很多朋友也用过，这里再次进行详细分享下。
transform有4个比较常用的功能，总结如下： 转换数值 合并分组结果 过滤数据 结合分组处理缺失值
一. 转换数值
pd.…
一文讲透Python机器学习特征选择之互信息法
1.互信息法的基本思想
互信息（Mutual Information，MI）的基本思想是计算每个特征变量与目标变量之间的互信息统计量，互信息统计量衡量变量之间的依赖关系。两个随机变量之间的互信息统计量肯定是非负值，当且仅当两个随…
智慧垃圾分拣站：科技改变城市环境，创造更美好的未来
随着城市化进程的不断加快，垃圾处理问题日益凸显。为了更好地解决垃圾分类问题，越来越多的城市开始推广智慧垃圾分拣站，利用创新科技实现高效垃圾分类处理。 山海鲸使用三维建模技术，建立了一个智慧垃圾分拣站数字孪生模型&#x…
线性回归既是一种数据挖掘与建模算法，也是统计学领域、计量经济学领域的常用学术建模方法，有何不同？
一.线性回归的基本形式
线性回归既是一种数据挖掘与建模算法，也是统计学领域、计量经济学领域的常用学术建模方法。在数据挖掘与建模领域，线性回归算法是一种较为基础的机器学习算法，其基本思想是将响应变量（因变量、被解释变量&…
城市数字经济数据，附数字经济主成分公式，shp/excel格式，2011-2019年
数字经济主成分普惠金融指数* 0.6716信息传输计算机服务和软件业人*0.1896互联网宽带接入用户数万户* 0.0865移动电话用户数万人*0.0358电信业务收入万元* 0.0166 基本信息.
数据名称: 城市数字经济数据
数据格式: Shpexcel
数据时间: 2011-2019年
数据几何类型: 面
数…
openEuler JDK21 部署 Zookeeper 集群
zookeeper-jdk21 操作系统：openEuler JDK：21 主机名IP地址spark01192.168.171.101spark02192.168.171.102spark03192.168.171.103
安装
1. 升级内核和软件
yum -y update2. 安装常用软件
yum -y install gcc gcc-c autoconf automake cmake make \zl…
利用 Python 进行数据分析实验（六）
一、实验目的
使用Python解决问题
二、实验要求
自主编写并运行代码，按照模板要求撰写实验报告
三、实验步骤
假设有两个txt文件，内容如下：
seg1.txtseg2.txt 将这两个文件中的内容根据id(即前面的编号)合并为如下内容，并存…
大数据技术之Hive（超级详细）
第1章 Hive入门
1.1 什么是Hive
Hive：由Facebook开源用于解决海量结构化日志的数据统计。
Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。
本质是：将HQL转化成MapReduce程序 …
做数据分析为何要学统计学（6）——什么问题适合使用卡方检验？
卡方检验作为一种非常著名的非参数检验方法（不受总体分布因素的限制），在工程试验、临床试验、社会调查等领域被广泛应用。但是也正是因为使用的便捷性，造成时常被误用。本文参阅相关的文献，对卡方检验的适用性进行粗浅…
京东看数据-京东运营数据分析-10月宠物市场销售数据分析（宠物店铺数据查询）
近年来，宠物成为越来越多家庭的成员，宠物数量不断增长，“宠物经济”异军突起，成为消费市场中特殊的存在。“撸猫”“吸狗”正迅速成为人们交际的热门谈资，宠物经济也迈入快速发展阶段。 根据鲸参谋电商数据分析平台的相…
《PySpark大数据分析实战》-08.宽窄依赖和阶段划分
📋 博主简介 💖 作者简介：大家好，我是wux_labs。😜 热衷于各种主流技术，热爱数据科学、机器学习、云计算、人工智能。 通过了TiDB数据库专员（PCTA）、TiDB数据库专家（PCTP…
基于Python+django影片数据爬取与数据分析设计与实现
博主介绍：✌全网粉丝30W,csdn特邀作者、博客专家、CSDN新星计划导师、Java领域优质创作者,博客之星、掘金/华为云/阿里云/InfoQ等平台优质作者、专注于Java技术领域和毕业项目实战✌ 🍅文末获取源码联系🍅 👇🏻 精彩专…
单细胞seurat-细胞比例分析-画图详细教程
大家好，今天我们来画单细胞中最简单的细胞比例图~
1.老规矩，先加载pbmc数据
dir.create("~/gzh/细胞比例")
setwd("~/gzh/细胞比例")subset_datareadRDS("~/gzh/pbmc3k_final.rds")
table(stringr::str_split(string c…
虾皮关键词广告怎么选
在虾皮（Shopee）平台上，关键词广告是提高商品曝光度和销量的有效手段。然而，选择合适的关键词对于广告效果至关重要。本文将为您提供一些建议，帮助您选择适合虾皮关键词广告的关键词。
先给大家推荐一款shopee知虾数据…
数据可视化软件的兴起：背后的驱动力
在当今信息时代，数据变得比以往任何时候都更为重要。数据可视化软件的广泛应用成为了一种趋势。那么，为什么越来越多的人选择使用数据可视化软件呢？今天我就以自己的工作经验为基础，进行简单的分析。
数据可视化软件能将枯燥的数…
做数据分析为何要学统计学（4）——什么问题适合使用卡方检验？
卡方检验作为一种非常著名的非参数检验方法（不受总体分布因素的限制），在工程试验、临床试验、社会调查等领域被广泛应用。但是也正是因为使用的便捷性，造成时常被误用。本文参阅相关的文献，对卡方检验的适用性进行粗浅…
数据分析基础之《matplotlib（5）—直方图》
一、直方图介绍
1、什么是直方图 直方图，形状类似柱状图却有着与柱状图完全不同的含义。直方图牵涉统计学的概念，首先要对数据进行分组，然后统计每个分组内数据元的数量。在坐标系中，横轴标出每个组的端点，纵轴表示频…
城市生态与交通，数据可视化大屏，PSD源文件（ps大屏设计素材）
用酷炫的大屏展示其城市的生态与交通情况，辅助相关决策。好的大屏组件也可以让设计师的工作更加便捷，使其更高效快速的完成设计任务。现分享城市生态与交通的大屏Photoshop源文件，开箱即用！以下为部分截图示意。
若需更多的 智慧…
坚鹏：中国邮政储蓄银行数字化转型战略、方法与案例培训
中国邮政储蓄银行拥有优良的资产质量和显著的成长潜力，是中国领先的大型零售银行。2016年9月在香港联交所挂牌上市，2019年12月在上交所挂牌上市。中国邮政储蓄银行拥有近4万个营业网点，服务个人客户超6.5亿户。2022年，在《银行家》…
商务与经济统计案例分析:3-2电影业——python 实现
商务与经济统计案例分析:3-3亚太地区的商学院 要求Python实现 要求
1.四个变量中每个变量的描述统计量，接着对每个描述统计量得出关于电影业的情况进行讨论 2.如果有，哪些电影被认为是优异表现的异常值，请解释。 3.列出总票房收入与每一个其…
推荐4个优秀的 Python 时间序列分析库
时间序列分析在金融和医疗保健等领域至关重要，在这些领域，理解随时间变化的数据模式至关重要。在本文中，我们将介绍四个主要的Python库——statmodels、tslearn、tssearch和tsfresh——每个库都针对时间序列分析的不同方面进行了定制。这些库…
【持更】python数据处理-学习笔记
1、读取excel /csv及指定sheet： pd.read_excel("路径",sheetname"xx") 修改列名df.rename 修改字符串类型到数字 pandas.to_numeric（） 2、删除drop、去重drop_duplicates
（1）空值所在行/列 行&am…
做数据分析为何要学统计学（9）——什么是回归分析
回归分析（regression analysis)是量化两种或两种以上因素/变量间相互依赖关系的统计分析方法。回归分析根据因素的数量，分为一元回归和多元回归分析；按因素之间依赖关系的复杂程度，可分为线性回归分析和非线性回归分析。我们通过…
《PySpark大数据分析实战》-03.了解Hive
📋 博主简介 💖 作者简介：大家好，我是wux_labs。😜 热衷于各种主流技术，热爱数据科学、机器学习、云计算、人工智能。 通过了TiDB数据库专员（PCTA）、TiDB数据库专家（PCTP…
这儿有一道SPSS回归分析考试题，大家学会了吗？
为研究某地区房地产市场的价格与相关影响因素之间的关系，现从该地区采集了 20 份样本，数据如下表，请给出销售价格与相关影响因素之间的函数表达式，并从统计学角度分析这些因素之间的关系，最后预测 X 小区的平均销售价格…
2023年医疗器械行业分析（京东医疗器械运营数据分析）：10月销额增长53%
随着我国整体实力的增强、国民生活水平的提高、人口老龄化、医疗保障体系不断完善等因素的驱动，我国的医疗器械市场增长迅速。 根据鲸参谋电商数据分析平台的相关数据显示，今年10月份，京东平台上医疗器械市场的销量将近1200万，环比…
2020年第九届数学建模国际赛小美赛C题亚马逊野火解题全过程文档及程序
2020年第九届数学建模国际赛小美赛
C题 亚马逊野火
原题再现： 野火是指发生在乡村或荒野地区的可燃植被中的任何不受控制的火灾。这样的环境过程对人类生活有着重大的影响。因此，对这一现象进行建模，特别是对其空间发生和扩展进行建模&…
数据库产品层出不穷，金融行业应该怎么选？｜飞轮科技联合创始人连林江
众所周知，金融行业对于数据有着极为严苛的标准和要求，尤其当在线化、实时化业务场景增多以后，金融行业也面临着多重的挑战：既要满足实时数据分析的高性能、高效率需求，又要确保数据的安全性和完整性。基于此࿰…
数据挖掘目标(Kaggle Titanic 生存测试)
import numpy as np
import pandas as pd
import matplotlib.pyplot as plt
import seaborn as sns1.数据导入
In [2]:
train_data pd.read_csv(r../老师文件/train.csv)
test_data pd.read_csv(r../老师文件/test.csv)
labels pd.read_csv(r../老师文件/label.csv)[Su…
数字化新风潮：数据可视化引领小微企业
数据可视化技术正在成为小微企业数字化转型的利器。它不仅为企业提供了更清晰、更直观的数据呈现方式，还在企业决策、运营和客户体验等方面发挥着巨大的作用。下面我就以可视化从业者的角度，简单分析数据可视化是如何助力小微企业实现数字化加速的。 数据…
《PySpark大数据分析实战》-15.云服务模式Databricks介绍创建集群
📋 博主简介 💖 作者简介：大家好，我是wux_labs。😜 热衷于各种主流技术，热爱数据科学、机器学习、云计算、人工智能。 通过了TiDB数据库专员（PCTA）、TiDB数据库专家（PCTP…
基因表达差异分析R工具包DESeq2的详细使用方法和使用案例
DESeq2是一种常用的差异表达基因分析工具，可用于RNA-seq数据的差异表达分析。下面是DESeq2的详细使用步骤和全部脚本示例。
文章参考
Moderated estimation of fold change and dispersion for RNA-seq data with DESeq2 | Genome Biology | Full Text (biomedcen…
Selenium库编写爬虫详细案例
一、引言
Selenium作为一个强大的自动化测试工具，其在网络爬虫领域也展现出了许多技术优势。首先，Selenium可以模拟浏览器行为，包括点击、填写表单、下拉等操作，使得它能够处理一些其他爬虫工具无法应对的情况，比如需…
《PySpark大数据分析实战》-16.云服务模式Databricks介绍运行案例
📋 博主简介 💖 作者简介：大家好，我是wux_labs。😜 热衷于各种主流技术，热爱数据科学、机器学习、云计算、人工智能。 通过了TiDB数据库专员（PCTA）、TiDB数据库专家（PCTP…
什么是数据仪表板？数据可视化仪表盘怎么制作？
在数据经济时代，分析数据是每个企业做出最佳决策的关键。但是，手动分析和解释大量数据是不可行的。数据可视化对于分析数据中存在的各种有价值信息至关重要，包括可见趋势和隐藏趋势等。仪表盘显示可视化趋势和信息，例如 KPI、趋势…
自动评估作业，支持订正最终得分、查看关联代码｜ModelWhale 版本更新
冬至时节，2023 已进入尾声，ModelWhale 于今日迎来新一轮的版本更新，与大家一起静候新年的到来。
本次更新中，ModelWhale 主要进行了以下功能迭代：
自动评估作业
新增 提交代码（团队版✓ ）新增…
【数据分析】数据指标的分类及应用场景
数据分析之数据指标的分类
数据分析离不开对关键指标的分析与跟踪，这些指标通常与具体的业务直接相关。好的指标能够促进业务的健康发展，因为指标与业务目标是一致的，此时指标就能反映业务变化，指标发生变化，行动也发…
山海鲸开发者：展现数据可视化在各领域的无限可能
作为一名山海鲸可视化软件的内部开发者，我对这款软件投入了大量的经历以及含有深深的情感。下面，我从这款软件应用场景下手，带大家探秘这款软件的多种可能性以及我们的用心。 首先，从行业角度来看，山海鲸可视化软件可以…
2019年第八届数学建模国际赛小美赛D题安全选举的答案是什么解题全过程文档及程序
2019年第八届数学建模国际赛小美赛
D题 安全选举的答案是什么
原题再现： 随着美国进入一场关键性的选举，在确保投票系统的完整性方面进展甚微。2016年总统大选期间，唐纳德特朗普因被指控受到外国干涉而入主白宫，这一问题再次成为…
《PySpark大数据分析实战》-07.Spark本地模式安装
📋 博主简介 💖 作者简介：大家好，我是wux_labs。😜 热衷于各种主流技术，热爱数据科学、机器学习、云计算、人工智能。 通过了TiDB数据库专员（PCTA）、TiDB数据库专家（PCTP…
数据分析为何要学统计学（0）——如何提高数据样本质量
样本是数据分析的关键，直接影响研究成果质量。如果样本质量不高，即使使用再好的分析方法，也无法得出理想的结论。所以数据学科圈里有句名言——“数据比方法更重要”。所以如何提高数据样本的质量是保证研究成果质量的第一步，虽然…
可视化数据监控大屏网页界面，数据大屏模版PS资料（免费UI源文件）
数据大屏模板在大数据领域被广泛应用，其优势在于能够将复杂的数据通过图形、图表等方式呈现出来，使数据更易于理解。数据大屏模板可以用来进行数据分析。通过对数据的比较、趋势分析、异常检测等，可以发现数据中的规律和问题，为决…
数据可视化---柱状图
import matplotlib.pyplot as plt
import numpy as npdef plot_bar_chart(data, labels, colorsNone, title"Bar Chart", xlabel"X-Axis", ylabel"Y-Axis"):"""绘制柱状图，并在柱子上显示数量和比例。:param data: 包…
拆东墙补西墙-中国金融风控多头借贷数据分析
引言
在中国的金融行业中，多头借贷是一个备受关注的话题。多头借贷是指一个借款人同时从多个金融机构借款，这种行为可能会增加借款人的还款压力，也会增加金融机构的风险。因此，对多头借贷的风险进行有效的监控和分析对于金融机构…
seaborn库图形进行数据分析（基于tips数据集）
Seaborn 是一个基于 matplotlib 的数据可视化库，可以用来绘制各种统计图表，包括散点图、条形图、折线图、箱线图等。Seaborn 提供了一些用于美化图表的默认样式和颜色主题，使得生成的图表更具有吸引力。下面是一些 Seaborn 库的常用功能和用法…
2023年中国法拍房用户画像和数据分析
法拍房主要平台
法拍房主要平台有3家，分别是阿里、京东和北交互联平台。目前官方认定纳入网络司法拍卖的平台共有7家，其中阿里资产司法拍卖平台的挂拍量最大。
阿里法拍房
阿里法拍房数据显示2017年，全国法拍房9000套；2018年&a…
2021年数维杯国际大学生数学建模D题2021年电影市场票房波动模型分析求解全过程文档及程序
2021年数维杯国际大学生数学建模
D题 2021年电影市场票房波动模型分析
原题再现： 1、电影票房预测建模背景 随着人们文化消费需求的增加，电影院和银幕的数量不断增加，我国的电影产业不断呈现出繁荣景象。2019年，全国电影票房…
数据可视化---饼图、环形图、雷达图
类别内容导航机器学习机器学习算法应用场景与评价指标机器学习算法—分类机器学习算法—回归机器学习算法—聚类机器学习算法—异常检测机器学习算法—时间序列数据可视化数据可视化—折线图数据可视化—箱线图数据可视化—柱状图数据可视化—饼图、环形图、雷达图统计学检验箱…
Python-数据分析可视化实例图
Python-数据分析可视化实例图
一：3D纹理图 运行效果图： Python代码：
import math
from typing import Unionimport pyecharts.options as opts
from pyecharts.charts import Surface3Ddef float_range(start: int, end: int, step: Union[…
数据分析为何要学统计学（2）——如何估计总体概率分布
明确总体的概率分布类型及参数是进行数据分析的基础，这项工作称为分布推断与参数估计。在总体分布及其参数不明确的情况下，我们可以利用手头掌握的样本来完成这项工作。具体过程由以下步骤组成。
第一步，样本统计特性直观估计
我们采用Seab…
【数据分析实战】华住集团酒店行业洞察：节假日与工作日表现对比
文章目录 1. 写在前面2. 数据采集源介绍2.1 数据展示 3. 节假日与工作日入住率对比3.1 入住率数据3.2 数据可视化3.3 本人浅薄分析 4. 节假日与工作日日均价对比4.1 日均价数据4.2 数据可视化4.3 本人浅薄分析 5. 总结与展望 1. 写在前面
随着旅游业的蓬勃发展和疫情逐渐得到控…
海洋可视化大屏，Photoshop源文件
数据大屏通过实时的数据展示，可及时发现数据的变化和异常，以便及时采取措施。现分享海洋动力大数据监控、海洋数据监控系统、科技感海洋监控系统大屏模版的UI源文件，供UI设计师们快速获取PSD源文件完成工作
若需更多 大屏组件，请…
跟随山海鲸开发者，深入了解智慧城市解决方案的核心技术
随着科技的飞速发展，数字孪生技术逐渐成为智慧城市建设的重要手段。作为山海鲸开发者，我们深知数字孪生技术在智慧城市中的应用价值，因此致力于开发出高效、便捷的数字孪生智慧城市解决方案。因此本文将带大家了解山海鲸智慧城市解决方案。
…
《PySpark大数据分析实战》-09.Spark独立集群安装
📋 博主简介 💖 作者简介：大家好，我是wux_labs。😜 热衷于各种主流技术，热爱数据科学、机器学习、云计算、人工智能。 通过了TiDB数据库专员（PCTA）、TiDB数据库专家（PCTP…
【数据分析之Numpy】Numpy随机抽样函数random.choice()的使用方法
一、简介 numpy.random.choice() 是 NumPy 库中的一个函数，用于从给定的数组或整数范围中随机选择一个元素或数组。这个函数可以用于生成随机数、随机选择数组中的元素等。
二、基本语法 函数的基本语法如下：
numpy.random.choice(a, sizeNone, replac…
中央经济工作会议：发展为重心，变革为动力
近期，中央经济工作会议在细致总结国家经济状况的同时，为未来的发展描绘了清晰的蓝图。会议提到在做好明年经济工作的总体要求中，强调要“巩固和增强经济回升向好态势，持续推动经济实现质的有效提升和量的合理增长”。这一总体要求…
天猫数据分析-天猫查数据软件-11月天猫平台饮料市场品牌及店铺销量销额数据分析
今年以来，饮料是快消品行业中少数保持稳定增长的品类之一。 11月份，饮料市场同样呈现较好的增长态势。根据鲸参谋电商数据分析平台的相关数据显示，今年11月份，天猫平台上饮料市场的销量为2700万，环比增长约42%…
深入挖掘：Python中的Statsmodels库高级应用
写在开头
随着数据科学的发展，解决更为复杂问题的关键往往在于深入了解数据并采用更高级的分析工具。本文将带您深入探讨Python中的Statsmodels库，并引入一些高级功能，为更深入的数据挖掘奠定基础。
1 方差分析
1.1 方差分析概念
方差分析…
2018年第七届数学建模国际赛小美赛C题共享单车对城市交通的影响解题全过程文档及程序
2018年第七届数学建模国际赛小美赛
C题 共享单车对城市交通的影响
原题再现： 共享自行车改变了许多城市的交通状况，许多大城市引入共享自行车来解决交通问题。我们需要定量评估共享自行车对城市交通的影响，以及相关的经济、社会和环境影响。…
Python Pandas Excel/csv文件的保存与读取（第14讲）
Python Pandas Excel/csv文件的读取于保存（第14讲） 🍹博主 侯小啾 感谢您的支持与信赖。☀️ 🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔…
数据分析-19-Thera Bank信贷业务数据（包含数据代码）
文章目录 0. 数据代码下载1. 数据集介绍1.1 原始数据集变量的含义：1.2 原始数据的读入与清洗1.3 数据清洗及预处理 2. 探索数据变量2.1 数据相关系数的探索2.2 分类变量与开通贷款的关系探索2.2.1 银行存款证（CD）帐户与贷款之间的关系2.2.2 教…
《PySpark大数据分析实战》-18.什么是数据分析
📋 博主简介 💖 作者简介：大家好，我是wux_labs。😜 热衷于各种主流技术，热爱数据科学、机器学习、云计算、人工智能。 通过了TiDB数据库专员（PCTA）、TiDB数据库专家（PCTP…
Python数据科学视频讲解：特征归一化、特征标准化、样本归一化
5.1 特征归一化、特征标准化、样本归一化 视频为《Python数据科学应用从入门到精通》张甜 杨维忠 清华大学出版社一书的随书赠送视频讲解5.1节内容。本书已正式出版上市，当当、京东、淘宝等平台热销中，搜索书名即可。内容涵盖数据科学应用的全流程&#…
平衡二叉树的构建（递归
目录 1.概念：2.特点：3.构建方法：4.代码：小结： 1.概念：
平衡二叉树（Balanced Binary Tree），也称为AVL树，是一种二叉树，它满足每个节点的左子树和右…
BI 商业数据分析能够给企业带来什么改变？
时下，随着中国企业数据整合应用的意识不断提高，BI 商业数据分析的应用驶入飞速发展的“快车道”。BI 商业智能利用数据分析技术与业务场景联系起来，通过一系列思维方法、指标体系及工具模型来支持市场分析、产品优化、客户洞察，从…
数据探查系列：如何进行有意义的探索性数据分析（EDA）
如何进行有意义的探索性数据分析（EDA） 目录 1. 设置 1.1 导入库1.2 导入数据1.3 数据集特征1.4 数据集属性 2. 探索训练集和测试集 2.1 训练集 - 快速概览2.2 训练集 - 基本统计2.3 测试集 - 快速概览2.4 测试集 - 基本统计 3. 特征分布4. 数据不平衡检查…
PYTHON基础：数据可视化绘图
python数据可视化入门
–常见的四种数据图形绘制 数据可视化在数据分析和数据科学中起着重要的作用。它可以帮助我们更直观地理解和解释数据，发现数据中的模式、趋势和异常。
在数据可视化中，常用的图表类型包括折线图、散点图、直方图和饼图ÿ…
牛客网SQL训练5—SQL大厂面试真题
文章目录 一、某音短视频1.各个视频的平均完播率2.平均播放进度大于60%的视频类别3.每类视频近一个月的转发量/率4.每个创作者每月的涨粉率及截止当前的总粉丝量5.国庆期间每类视频点赞量和转发量6.近一个月发布的视频中热度最高的top3视频 二、用户增长场景（某度信…
ChatGPT4和python完美融合，快速完成数据分析与可视化、人工智能建模及论文高效撰写
2022年11月30日，可能将成为一个改变人类历史的日子——美国人工智能开发机构OpenAI推出了聊天机器人ChatGPT3.5，将人工智能的发展推向了一个新的高度。2023年4月，更强版本的ChatGPT4.0上线，文本、语音、图像等多模态交互方式使其在…
数据可视化能为我们带来哪些好处？
在信息爆炸的时代，数据量呈指数级增长，企业和个人都面临着处理大量信息的挑战。在这个背景下，数据可视化崭露头角，成为解决复杂数据呈现和理解难题的得力工具。那么，数据可视化究竟能为我们带来哪些好处呢？…
全球电商平台API数据稳定接入
API是什么？
API就是接口，就是通道，负责一个程序和其他软件的沟通，本质是预先定义的函数。”比如：电脑需要调用手机里面的信息，这时候你会拿一根数据线将电脑手机连接起来，电脑和手机上连接数据…
财务数据智能化：使用讯飞星火助手进行财务分析的心得体验
其他系列文章 财务数据智能化：用AI工具高效制作财务分析PPT报告
进入讯飞星火-助手中心页面
打开火星助手中心，搜索“财务”相关的小助手。
每个助手旁边，都有一句话的简介。目前主要以财务知识整理相关和财报分析解读的两种功能。
这一…
如何用 GPT 去分析Excel数据
背景
需要尝试分析 Excel 的内容，每月都需要进行相关的分析，固定化流程，因此尝试制作固化的脚本，方便后续的分析。
执行步骤
帮我写一段 python 代码，我需要区分一个.xlsx的数据。格式示例如下： ”这块自…
山海鲸可视化软件的优势：数据整合、可视化与个性化定制
随着科技的快速发展，企业数字化转型已成为必然趋势。而对于一些本身没有开发优势或非技术型企业，数字化产品的选择就成为重中之重。作为山海鲸可视化软件的开发者，我们深知这一点，对于企业来说，能选择一个产品一定要有…
我用 Python 自动生成图文并茂的数据分析报告
reportlab是Python的一个标准库，可以画图、画表格、编辑文字，最后可以输出PDF格式。它的逻辑和编辑一个word文档或者PPT很像。有两种方法：
1）建立一个空白文档，然后在上面写文字、画图等； 2）建…
Python等高线图的绘制（Matplotlib篇-11）
Python等高线图的绘制（Matplotlib篇-11） 🍹博主 侯小啾 感谢您的支持与信赖。☀️ 🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ🌹꧔ꦿ…
地理空间分析3——数据可视化与地理空间
写在开头
数据可视化是将数据以图形形式呈现，使其更易于理解和分析的过程。在地理空间分析中，数据可视化不仅能够展示地理位置信息，还能够有效地传达地理空间数据的模式、趋势和关联。本文将探讨数据可视化在地理空间分析中的作用，介绍Python中常用的数据可视化工具，并深…
技术学习|CDA level I 描述性统计分析（常用的数据分布）
推断性统计分析方法的基础理论——常用的分布（两点分布、二项分布、正态分布[含标准正态分布]、χ2分布、t分布、F分布。
随机试验：结果不确定的实验，例如，进行一次抛硬币实验，结果是不确定的。对于随机试验的结果&am…
买工业用品就找震坤行，提供震坤行商品数据，数据分析的API接口
要接入API接口以采集电商平台上的商品数据，可以按照以下步骤进行：
1、找到可用的API接口：首先，需要找到支持查询商品信息的API接口。这些信息通常可以在电商平台的官方文档或开发者门户网站上找到。 2、注册并获取API密钥&#x…
数据分析求职-岗位介绍
这是咱们干货开始的第一篇文章，后续我尽量会保持日更的节奏和大家做分享~
在未来所有分享的内容展开之前，咱们有必要先彻底、深入地了解下数据分析这个岗位。如果你还在犹豫是否要走数据分析的路，或者你已经拿了数据分析的offer想了解下将来…
宠物猫可能塑造人类肠道中的抗生素耐药性和益生菌
谷禾健康 宠物猫——伴侣——耐药性 宠物可以为人类的身心健康做出贡献，它们通常与主人生活得很亲密，有时甚至睡一张床。然而，宠物与其主人之间的密切接触所带来的潜在生物安全风险常常被忽视。狗和猫是很受欢迎的宠物，也是人畜共…
数据分析求职-简历准备
简历在整个求职过程中的重要性不言而喻，今天咱们来聊求职过程中简历准备的那些事儿~
1. 简历究竟有啥用
求职的流程简单说就是：网申->笔试->面试->offer
其中网申环节，简历100%决定了你的通过与否，这个点大家都知道。…
新年福利｜这款价值数万的报表工具永久免费了
随着数据资产的价值逐渐凸显，越来越多的企业会希望采用报表工具来处理数据分析，了解业务经营状况，从而辅助经营决策。不过，企业在选型报表工具的时候经常会遇到以下几个问题： 各个报表工具有很多功能和特性，…
自然语言处理5——发掘隐藏规律 - Python中的关联规则挖掘
目录 写在开头1. 了解关联规则挖掘的概念和实际应用1.1 关联规则挖掘在市场分析和购物篮分析中的应用1.2 关联规则的定义和基本原理1.3 应用场景2. 使用Apriori算法和FP-growth算法进行关联规则挖掘2.1 Apriori算法的工作原理和实现步骤2.2 FP-growth算法的优势和使用方法2.3 A…
传感数据分析——高通滤波与低通滤波
传感数据分析——高通滤波与低通滤波 文章目录 传感数据分析——高通滤波与低通滤波前言一、运行环境二、Python实现总结 前言
对于传感信号而言，我们可以提取其中的高频信息和低频信息，低频信息往往是信号的趋势，高频信息往往是一些突变或异…
（22.12.20）matlab2022+yalmip+cplex安装教程，win11 x64
前言
Hi,你好！最近刚刚更换新的电脑设备，安装软件时尽量选择最新版本，但也遇到了大大小小的安装问题，这里把踩到的坑一并总结出来，给出一份还算合理的MATLAByalmipCPLEX安装教程（win11）。
MAT…
数字智慧：数据可视化如何引领各行各业的未来？
在信息时代的浪潮中，数据无疑成为推动各行各业发展的引擎。而数据可视化作为数据处理与表达的有力工具，其在各个领域发挥的重要作用日益凸显，成为推动创新、提高效率的关键因素。下面我就从可视化行业从业者的角度，简单聊聊这个问…
初识大数据，一文掌握大数据必备知识文集(6)
🏆作者简介，普修罗双战士，一直追求不断学习和成长，在技术的道路上持续探索和实践。 🏆多年互联网行业从业经验，历任核心研发工程师，项目技术负责人。 🎉欢迎 👍点赞✍评论…
Python数据科学应用从入门到精通--Python读取、合并SPSS数据文件
在很多情况下，我们需要调用SPSS软件产生的数据，下面通过示例来进行讲解。首先需要将本书提供的数据文件存储在安装spyder-py3的默认路径位置（C:/Users/Administrator/.spyder-py3/，注意具体的安装路径可能与此不同）&am…
100天精通Python（实用脚本篇）——第111天：批量将PDF转Word文档（附上脚本代码）
文章目录 专栏导读1. 将PDF转Word文档需求2. 模块安装3. 模块介绍4. 注意事项5. 完整代码实现6. 运行结果书籍推荐 专栏导读
🔥🔥本文已收录于《100天精通Python从入门到就业》：本专栏专门针对零基础和需要进阶提升的同学所准备的一套完整教…
快乐学Python，数据分析之使用爬虫获取网页内容
在上一篇文章中，我们了解了爬虫的原理以及要实现爬虫的三个主要步骤：下载网页-分析网页-保存数据。
下面，我们就来看一下：如何使用Python下载网页。
1、网页是什么？
浏览器画网页的流程，是浏览器将用户输…
电商API接口的大数据分析与挖掘技巧
随着电商行业的快速发展，电商平台上的交易数据量也越来越大。如何对这些数据进行分析和挖掘，从中获取有价值的信息，已经成为电商企业和开发者关注的重点。本文将介绍电商API接口的大数据分析与挖掘技巧。
一、数据采集
1.确定分析目标&…
地理空间分析4——空间模式分析与Python
写在开头
空间模式分析是地理信息科学和数据科学领域中的一个重要分支，它主要关注地理现象的分布和变化模式。而Python，作为当今数据分析和数据挖掘的重要工具，为空间模式分析提供了丰富的方法和库。本文将带您深入了解Python在空间模式分析中的应用。
1.集聚分析
集聚分…
Seaborn 可视化
Seaborn简介
Seaborn是基于matplotlib的图形可视化python包。它提供了一种高度交互式界面，便于用户能够做出各种有吸引力的统计图表。
Seaborn是在matplotlib的基础上进行了更高级的API封装，从而使得作图更加容易，在大多数情况下使用seabor…
2、Excel：基础概念、表格结构与常见函数
数据来源：八月成交数据 数据初探
业务背景
数据来源行业：金融行业（根据应收利息和逾期金额字段来判断） 可以猜测： 业务主体：某互联网金融公司（类似支付宝）也业务模式：给…
【Project】TPC-Online Module (manuscript_2024-01-07)
PRD正文
一、概述
本模块实现隧道点云数据的线上汇总和可视化。用户可以通过注册和登录功能进行身份验证，然后上传原始隧道点云数据和经过处理的数据到后台服务器。该模块提供数据查询、筛选和可视化等操作，同时支持对指定里程的分段显示和点云颜色更改…
HubSpot CRM与数字化营销的完美融合
随着企业数字化转型的推进，HubSpot CRM作为领先的客户关系管理工具，与数字化营销实现了无缝的融合。这种协同作用为企业提供了更全面、智能的客户管理解决方案，推动了销售和市场营销的卓越发展。 数字化营销的潮流
数字化营销已经成为企业推…
纽约Uber数据分析图形化和K-means计算热点
K-means是一种聚类算法，用于将一组样本分成预定数量的簇。它通过计算样本之间的距离，将它们分配到最近的簇中，然后根据分配的结果，更新簇的中心位置。这个过程迭代进行，直到簇的中心位置不再变化或达到预定的迭代次数。…
数据分析实战丨基于flask+pygal可视化分析sqlite中的数据
文章目录 写在前面实验目标项目框架实验内容1.配置实验环境2.查看sqlite3数据库的数据3.创建项目文件4.编写代码5.运行项目 运行结果写在后面 写在前面
本期内容： 基于FlaskPygal可视化分析Sqlite3中的数据
实验环境：
pythonpygalflask
项目下载地址…
Python综合数据分析_RFM用户分组模型
文章目录 1.导入数据2.月度订单数据可视化3.数据清洗4.特征工程5.构建User用户表6.求R值7.求F值8.求M值9.显示R、F、M值的分布情况10.显示手肘图辅助确定K值11.创建和训练模型12.给R值聚类13.给聚类后的层级排序14.继续给F、M值聚类，并排序15.为用户整体分组画像 1.…
2024趋势：ERP中数据分析的五大要点
2024 年，数据分析不仅仅是 ERP 实施中的一个额外功能;这就像第一步，将最终确定整个 ERP 实施项目的成功之路。忘记笨重的电子表格和无休止的报告——准备好驾驭这五种新兴趋势的浪潮： 一、人工智能和机器学习 (ML) 的兴起
人工智能驱动的数据…
如何激活数据要素价值
文章目录 前言一、数据作为生产要素的背景二、数据作为新型生产要素，是价值创造的重要源泉（一）生产要素是经济活动中的基本要素（二）激活数据要素价值，要从理论上认识数据要素的基本特征（三&…
【零基础入门Python数据分析】Anaconda3 JupyterNotebookseaborn版
目录 一、安装环境
python介绍
anaconda介绍
jupyter notebook介绍 anaconda3 环境安装
解决JuPyter500：Internal Server Error问题-CSDN博客
Jupyter notebook快捷键操作大全
二、Python基础入门
数据类型与变量
数据类型
变量及赋值
布尔类型与逻辑运算…
数据分析-Pandas如何转换产生新列
数据分析-Pandas如何转换产生新列
时间序列数据在数据分析建模中很常见，例如天气预报，空气状态监测，股票交易等金融场景。此处选择巴黎、伦敦欧洲城市空气质量监测 N O 2 NO_2 NO2数据作为样例。
python数据分析-数据表读写到pandas
经典…
图像处理：孤立点的检测
图像处理-孤立点的检测
孤立点的检测在图像处理中通常涉及到检测图像中的突变或者边缘，而使用二阶导数是一种常见的方法。一阶导数可以帮助找到图像中的边缘，而二阶导数则有助于检测边缘上的峰值，这些峰值可能对应于孤立点或者特殊的图像结构…
DataGear专业版 1.0.0 发布，数据可视化分析平台
DataGear专业版 1.0.0 正式发布，欢迎大家试用！
http://datagear.tech/pro/
DataGear专业版 基于 开源版 开发，新增了诸多企业级特性，包括：
MySQL、PostgreSQL、Oracle、SQL Server以及更多兼容部署数据库支持OAuth2…
MiniTab的拟合回归模型的分析
拟合回归模型概述
使用拟合回归模型和普通最小二乘法可以描述一组预测变量和一个连续响应之间的关系。可以包括交互作用项和多项式项、执行逐步回归和变换偏斜数据。
例如，房地产评估人员想了解城市公寓与多个预测变量（包括建筑面积、可用单元数量、建…
altair，一个超级厉害的 Python 库！
更多资料获取
📚 个人网站：ipengtao.com 数据可视化是数据科学和数据分析中不可或缺的一部分。它帮助我们以可视化的方式理解和传达数据，从而更好地发现数据中的模式、趋势和见解。在Python生态系统中，有许多优秀的数据可视化工具…
大厂接连崩溃，帆软BI、奥威BI这老牌BI呢？
阿里崩完了滴滴崩，滴滴崩完了腾讯崩。说的正是前段时间大厂们接连崩溃，影响万千企业用户的事。这也引发了人们对软件系统的担忧，比如在BI软件朋友圈内就有人问：帆软BI、奥威BI这些老牌BI软件会崩溃吗？
帆软BI软件是一…
如何在 Windows 电脑上恢复硬盘数据
虽然硬盘偶尔发出安静的咔哒声无需担心，但响亮、持续的咔哒声（有时称为“死亡咔哒声”）应该认真对待。您应该尽快从发出咔嗒声的硬盘驱动器中恢复数据，因为它会比您想象的更快失效。我们下面的指南将探讨从点击硬盘驱动器获取数据…
excel3基础图标与透视图表的制作
业务需求1 给逾期金额也加上条形图,同时制作各个城市的逾期发展趋势 思路： 操作顺序：选中3列数据（8月上旬逾期金额、8月中旬逾期金额和8月下旬逾期金额）–开始–条件格式–数据条–渐变填充（第5个）…
Apache Doris 聚合函数源码阅读与解析｜源码解读系列
笔者最近由于工作需要开始调研 Apache Doris，通过阅读聚合函数代码切入 Apache Doris 内核，同时也秉承着开源的精神，开发了 array_agg 函数并贡献给社区。笔者通过这篇文章记录下对源码的一些理解，同时也方便后面的新人更快速地上…
vue3+echarts应用——深度遍历html的dom结构并用树图进行可视化
文章目录 ⭐前言💖vue3系列文章 ⭐html数据解析💖 html字符串转为html对象💖 深度遍历html对象内容 ⭐echarts 树图的渲染💖 处理html内容为树状结构💖 渲染树状图💖 inscode代码块 ⭐总结⭐结束 ⭐前言
大…
科研绘图（五）玫瑰图
柱状图的高级平替可视化
“玫瑰图”，通常也被称为“科克斯图”。它类似于饼图，但不同之处在于每个部分（或“花瓣”）的角度相同，半径根据它表示的值而变化。这种可视化工具对于周期性地显示信息非常有用，比…
2023年国庆节深圳市节假日人口迁出数据，shp/excel格式
基本信息
数据名称: 深圳市节假日人口迁出数据
数据格式: Shp、excel
数据时间: 2023年国庆节
数据几何类型: 线
数据坐标系: WGS84
数据来源：网络公开数据
数据字段：
序号字段名称字段说明1a0928迁出人口占迁出深圳市人口的比值（…
进销存＋小程序商城：实现批发零售企业的互联网转型与管理升级
在当今互联网高速发展的时代，越来越多的批发零售企业开始开始考虑转型。在这个行业中，企业要想取得更好的发展，就要积极地拥抱互联网。专属的订货商城小程序是企业转型的第一步。通过将进销存与订货商城一体化，企业可以更好地满足…
大数据毕业设计：房屋数据分析可视化系统 预测算法 可视化 商品房数据 Flask框架（源码+讲解视频）✅
毕业设计：2023-2024年计算机专业毕业设计选题汇总（建议收藏）
毕业设计：2023-2024年最新最全计算机专业毕设选题推荐汇总
🍅感兴趣的可以先收藏起来，点赞、关注不迷路，大家在毕设选题ÿ…
京东年度数据报告-2023全年度游戏本十大热门品牌销量（销额）榜单
同笔记本市场类似，2023年度游戏本市场的整体销售也呈下滑态势。根据鲸参谋电商数据分析平台的相关数据显示，京东平台上游戏本的年度销量累计超过350万，同比下滑约6%；销售额将近270亿，同比下滑约11%。 鲸参谋综合了京东…
怎么提升数据分析能力？——功法篇（下）
先来复习一下上篇提到的3个疑问： 为什么我做出来的分析总觉得没有别人的那么高级？ 老板为什么总说我的分析“太浅了”？ 数据分析师每天的工作就是取数做需求？ 看完上篇讲的金字塔原理，如果你还有疑问，不妨再…
【数据分析】numpy基础第四天
文章目录 1. 前天教程与巩固1.1. 第一天1.2. 第二天1.3. 第三天 2. 问题解析2.1. 第一天1. 如何创建Numpy数组2. 如何获取第3个元素3. 如何获取包含第1、2、3行的切片 2.2. 第二天4. 如何将一个有10个元素的一维数组，转变为10行1列的二维数组5. 如何在垂直或者水平上…
从数据角度分析年龄与NBA球员赛场表现的关系【数据分析项目分享】
好久不见朋友们，今天给大家分享一个我自己很感兴趣的话题分析——NBA球员表现跟年龄关系到底大不大？数据来源于Kaggle，感兴趣的朋友可以点赞评论留言，我会将数据同代码一起发送给你。 目录 NBA球员表现的探索性数据分析导入Python…
探索数据的奥秘：一份深入浅出的数据分析入门指南
数据分析
书籍推荐
入门读物
深入浅出数据分析啤酒与尿布数据之美数学之美
数据分析
Scipy and NumpyPython for Data AnalysisBad Data Handbook集体智慧编程Machine Learning in Action机器学习实战Building Machine Learning Systems with Python数据挖掘导论Machine L…
Pyhton基础知识：整理18 -＞ 基于面向对象的知识完成数据分析的案例开发
数据准备：两份数据，一份是是字符串的形式，一份是json格式，之后对数据处理后，需要合并为一份的数据，进而进行图表的开发 1 设计一个类，完成对数据的封装
"""数据定义的类
"…
XGBoost系列2——深入了解XGBoost参数
写在开头
XGBoost（Extreme Gradient Boosting）是在机器学习领域中备受推崇的算法之一。为了更好地利用XGBoost，我们需要深入了解其关键参数及其调优方法。在本文中，我们将结合XGBoost模块中的函数和方法，以及实际数据…
Python爬虫实战：IP代理池助你突破限制，高效采集数据
当今互联网环境中，为了应对反爬虫、匿名访问或绕过某些地域限制等需求，IP代理池成为了一种常用的解决方案。IP代理池是一个包含多个可用代理IP地址的集合，可以通过该代理池随机选择可用IP地址来进行网络请求。 IP代理池是一组可用的代理IP地址…
Excel 动态可视化图表分享
AIGC ChatGPT 职场案例 AI 绘画 与 短视频制作 PowerBI 商业智能 68集 数据库Mysql 8.0 54集 数据库Oracle 21C 142集 Office 2021实战应用 Python 数据分析实战， ETL Informatica 数据仓库案例实战 Excel 2021实操 100集， Excel 2021函数大全 80集 Exc…
计算机毕设：网民社交网络数据的分析与挖掘
1.读数据表
首先，我们读取原始数据，并查看各字段基本情况。
gradyeargenderagefriendsbasketballfootballsoccersoftballvolleyballswimmingcheerleadingbaseballtennissportscutesexsexyhotkisseddancebandmarchingmusicrockgodchurchjesusbiblehaird…
【Python数据分析案例】基于泰坦尼克船员数据的完整数据分析全过程
此案例展现了完整的数据分析流程，思路可作用于数据分析、建模等工作。
如果想看更多Python数据分析基础内容可参考： https://codeknight.blog.csdn.net/article/details/135565847https://codeknight.blog.csdn.net/article/details/135565847
目录…
以超市数据微案例-fineBI可视化分析
一、入门案例： 2.分析思路： 数据清晰界面中添加毛利额计算 **所以在新增步骤之后，必须点击保存并更新，否则可视化界面中无法使用最新的数据
4、数据可视化分析
1）销售额最高的十大商品种类 为1-8月超市数据ÿ…
我用 ChatGPT 做了一次探索性数据分析，真的太太太实用了！
ChatGPT 经过短短1年时间的发展，其功能越来越强，现在已经是大多数企业和个人不可或缺的助手。特别是最新的 GPT-4 版本，专门在左边菜单栏给出了两个工具（一个是数据分析，另一个是根据文字描述生成图片）&…
山海鲸可视化软件：引领航空业数字化转型的智慧机场解决方案
作为山海鲸可视化软件的开发者，我们深知在当今数字化时代，数据可视化的重要性。特别是在航空业，数据可视化不仅可以提高运营效率，还能为决策者提供更准确、实时的信息。为此，我们推出了一款专为智慧机场设计的可视化解…
Web3 游戏开发者的数据分析指南
作者：lesleyfootprint.network
在竞争激烈的 Web3 游戏行业中，成功不仅仅取决于游戏的发布，还需要在游戏运营过程中有高度的敏锐性，以应对下一次牛市的来临。
人们对 2024 年的游戏行业充满信心。A16Z GAMES 和 GAMES FUND ONE …
零售电商经营分析体系建设咨询案例
一、项目背景
在当前经济形式下，外贸出口面临着巨大压力，跨境电商行业在经营上需要更加精细化。为了应对这一挑战，某跨境电商决定进行零售电商经营分析体系的建设，以提升企业的运营效率和决策准确性。
二、项目目标
建立一套完…
数据分析中常用的指标或方法
一、方差与标准差二、协方差三、皮尔逊系数四、斯皮尔曼系数五、卡方检验六、四分位法和箱线图七、 一、方差与标准差
总体方差 V a r ( x ) σ 2 ∑ i 1 n ( x i − x ˉ ) 2 n ∑ i 1 n x i 2 − n x ˉ 2 n E ( x 2 ) − [ E ( x ) ] 2 Var(x)\sigma^2\frac {\sum\l…
如何将ChatGPT4与Python近红外光谱数据分析及机器学习与深度学习建模完美融合
2022年11月30日，可能将成为一个改变人类历史的日子——美国人工智能开发机构OpenAI推出了聊天机器人ChatGPT3.5，将人工智能的发展推向了一个新的高度。2023年4月，更强版本的ChatGPT4.0上线，文本、语音、图像等多模态交互方式使其在…
推荐收藏！48道数据分析师高频面试题汇总！
大家好，最近很多小伙伴私信我，讲一下数据分析的面试题，今天给大家整理了48道数据分析师面试时被频繁问到的题目，找数据分析岗位的同学一定要码住认真看。
想了解最新的面试动态、最新高频考点、技术交流的同学，可以文…
数据预处理 matlab 数据质量评估
知乎 数据类型转换等 Mathworks 数据预处理
概念辨析 配对是同一批样本的前后比较，独立是两批不同样本的的比较 独立样本是指我们得到的样本是相互独立的。配对样本就是一个样本中的数据与另一个样本中的数据相对应的两个样本。配对样本可以消除由于样本指定的不公…
爬虫实战 - 微博评论数据可视化
简介：
我们都知道在数据比较少的情况下，我们是可以很轻易的获取到数据中的信息。但是当数据比较庞大的时候呢，我们就很难看出来了。尤其是面对现如今数以万计的数据，就更了。
不过好在我们可以通过计算机来帮我们进行分析&#…
科技赋能智慧水利——山海鲸软件水利方案解析
作为山海鲸可视化软件的开发者，我们深感荣幸能为我国智慧水利建设提供强大助力。作为钻研数字孪生领域的开创者，我们希望不仅能为大家带来免费好用，人人都能用起来的数字孪生产品，还希望以其独特的技术优势和创新设计理念…
数据分析-Pandas如何处理表格中的文本数据
数据分析-Pandas如何处理表格中的文本数据
数据分析和处理中，难免会遇到文本数据，比如人名，地名，还有其他的场景描述等等。金融数据，风控数据，营销数据等等，莫不如此。如何用pandas处理文本数据…
基于ChatGPT4+Python近红外光谱数据分析及机器学习与深度学习建模教程
详情点击链接：基于ChatGPT4Python近红外光谱数据分析及机器学习与深度学习建模教程
第一：GPT4
1、ChatGPT（GPT-1、GPT-2、GPT-3、GPT-3.5、GPT-4模型的演变）
2、ChatGPT对话初体验
3、GPT-4与GPT-3.5的区别，以及与…
70_Pandas中获取最大最小值的行名和列名
70_Pandas中获取最大最小值的行名和列名
使用 idxmax() 和 idxmin() 方法获取 pandas.DataFrame 和 pandas.Series 中每列和行的最大值和最小值元素的行名和列名。
pandas.DataFrame 和 pandas.Series 都有 idxmax() 和 idxmin() 方法。 在此对以下内容进行说明。
获取最大值…
【Java万花筒】数据之翼：Java库助您飞跃科学计算高峰
Java数据魔法：探秘科学计算之道
前言
随着科技的不断发展，数据处理和科学计算在各行各业中扮演着愈发重要的角色。为了更高效、更准确地进行数据分析、科学计算和可视化展示，Java开发者广泛使用各种强大的库。本文将深入探讨几个在数据处理…
第二章第17节：Excel中match 函数
1, match和index 函数介绍
01，match 功能:返回符合特定值，特定顺序的项在数组中的相对位置。 语法:= INDEX(lookup_value, lookup_array,[match type])
2,match函数的用法
用法：MATCH(要查找的数据, 查找区域, 查找方式) 重点：第三参数，-1，0，1； -1代表降序排列， 0表…
掌握可视化大屏：提升数据分析和决策能力的关键(下)
🤍 前端开发工程师、技术日更博主、已过CET6 🍨 阿珊和她的猫_CSDN博客专家、23年度博客之星前端领域TOP1 🕠 牛客高级专题作者、打造专栏《前端面试必备》 、《2024面试高频手撕题》 🍚 蓝桥云课签约作者、上架课程《Vue.js 和 E…
Logistics 逻辑回归概念
1. sigmoid函数
逻辑回归算法的拟合函数，叫做sigmoid函数：
函数图像如下（百度图片搜到的图）： sigmoid函数是一个s形曲线，就像是阶跃函数的温和版，阶跃函数在0和1之间是突然的起跳，…
淘宝API接口调用：案例分析与最佳实践（续）
进阶应用探讨
应用1：多渠道同步
在多渠道经营中，商家需要在不同的平台之间同步商品信息、库存和订单状态。利用淘宝API，商家可以自动化这一过程，减少人工操作的错误率和时间成本。例如，当一个商品在淘宝店铺售出时&a…
运小筹 | Python编程-系统性的学会 Pandas，看这一篇就够了！(含案例分析)
本文来源公众号“运小筹”，仅用于学术分享，侵权删，干货满满。篇幅略长，建议收藏！
原文链接：Python编程 | 系统性的学会 Pandas，看这一篇就够了！ (qq.com)
1、Pandas数据结构 2008年…
机器学习 | 利用Pandas进入高级数据分析领域
目录
初识Pandas
Pandas数据结构
基本数据操作
DataFrame运算
文件读取与存储
高级数据处理 初识Pandas
Pandas是2008年WesMcKinney开发出的库，专门用于数据挖掘的开源python库，以Numpy为基础，借力Numpy模块在计算方面性能高的优势&am…
深入Pyecharts：桑基图绘制与炫酷效果实战【第38篇—python：桑基图】
文章目录 深入Pyecharts：桑基图绘制与炫酷效果实战桑基图简介安装 Pyecharts简单桑基图的绘制自定义桑基图的炫酷效果高级样式定制 多组数据桑基图的展示动态桑基图的绘制结合真实数据的桑基图案例导出和分享进阶应用：桑基图与其他图表的组合总结 深入Py…
【大数据分析与挖掘技术】Mahout推荐算法
目录
一、推荐的定义与评估
（一）推荐的定义
（二）推荐的评估
二、Mahout中的常见推荐算法
（一）基于用户的推荐算法
（二）基于物品的推荐算法
（三）基于S…
基于python flask茶叶网站数据大屏设计与实现，可以做期末课程设计或者毕业设计
基于Python的茶叶网站数据大屏设计与实现是一个适合期末课程设计或毕业设计的项目。该项目旨在利用Python技术和数据可视化方法，设计和开发一个针对茶叶行业的数据大屏，用于展示和分析茶叶网站的相关数据。 项目背景 随着互联网的快速发展，越…
meshgrid contour contourf
meshgrid contour contourf 参考video: https://www.bilibili.com/video/BV1qW411A775/?spm_id_from333.337.search-card.all.click&vd_sourced171c31a396363b8ea8c0e92a59cee6b 官方文档: https://matplotlib.org/stable/api/_as_gen/matplotlib.pyplot.contourf.html#ma…
R数据分析：非劣效性研究设计的统计处理方法，原理和实例
在我们经常接触的统计模式中，我们是在寻求推翻原假设，证明差异，这种统计模型在传统的临床试验中，在各种统计推断中已经成为默认了。在传统的临床试验中通常会将一种新的治疗方法与标准治疗或安慰剂进行比较，从而证明这…
探索Pyecharts关系图绘制技巧：炫酷效果与创意呈现【第42篇—python：Pyecharts水球图】
文章目录 Pyecharts绘制多种炫酷关系网图引言准备工作代码实战1. 基本关系网图2. 自定义节点样式和边样式3. 关系网图的层级结构4. 添加标签和工具提示5. 动态关系网图6. 高级关系网图 - Les Miserables 示例7. 自定义关系网图布局8. 添加背景图9. 3D 关系网图10. 热力关系网图…
超级菜鸟怎么学习数据分析？
如果你有python入门基础，在考虑数据分析岗，这篇文章将带你了解：数据分析人才的薪资水平，数据人应该掌握的技术栈。
首先来看看，我在搜索数据分析招聘时，各大厂开出的薪资： 那各大厂在数据领域…
探索Pyecharts之美-绘制多彩旭日图的艺术与技巧【第37篇—python：旭日图】
文章目录 引言准备工作绘制基本旭日图调整颜色和样式添加交互功能定制标签和标签格式嵌套层级数据高级样式与自定义进阶主题：动态旭日图数据源扩展：外部JSON文件总结 引言
数据可视化在现代编程中扮演着重要的角色，而Pyecharts是Python中一个…
Python3，除Pandas、Numpy之外，有一款受到数据科学家和数据分析师青睐的库。
orange3 1、引言2、orange3介绍2.1 定义2.2 特点2.3 常用功能2.3.1 安装2.3.2 数据可视化2.3.3 数据导入2.3.4 机器学习建模 3、总结 1、引言
**小屌丝：**鱼哥，你看这是啥。
小鱼： 小砂糖橘，是广西的吗。 小屌丝：……
智慧用电，同为云（TOWE Cloud）平台为机房供配电提供数字化赋能
随着现代数字经济的快速发展，机房智能供配电监控系统是所有电源和电气设备统一管理监控的重要核心部分，除了可以确保电源和动力系统正常运行外，还可以大大提高工作效率，节省能源消耗。智能供配电监控系统通过传感器、数据采集器等…
【头歌-数据分析与实践-python】数据分析与实践-python——python基础
注意 ： 本文档仅供参考使用，本章节程序绝大多数程序面向对象输出，一旦测试用例改变，会导致无法通过，请悉知 ! ! ! 请勿盲目使用 数据分析与实践-python——python基础 数据分析与实践-python——python基础 数据分析与…
时序分析中的去趋势化方法
时序分析中的去趋势化方法
时序分析是研究随时间变化的数据模式的一门学科。在时序数据中，趋势是一种随着时间推移而呈现的长期变化趋势，去趋势化是为了消除或减弱这种趋势，使数据更具平稳性。本文将简单介绍时序分析中常用的去趋势化方法&a…
2、互信息(Mutual Information)
文章目录 1、简介2、互信息及其测量内容3、解读互信息得分4、例子 - 1985年的汽车1、简介
首次遇到新的数据集可能会让人感到不知所措。你可能会面对数百甚至数千个特征，甚至没有描述可以参考。你应该从哪里开始呢？
一个很好的第一步是构建一个特征效用度量的排名，这是一个…
有关Quick BI中lod_fixed函数中以MAX()作为过滤条件报错
一、Quick BI中的lod_fixed函数
lod_fixed{维度1[,维度2]...:聚合表达式[:过滤条件]}
作用：使用指定维度进行计算而不引用任何其他维度。其中，
维度1[,维度2]...：声明维度，指定聚合表达式要连接到的一个或多个维度。使用逗号分…
精通Python第15篇—数据之流：Pyecharts桑基图的多维视角与绘制艺术
文章目录 数据之流：Pyecharts桑基图的多维视角与绘制艺术桑基图简介安装 Pyecharts简单桑基图的绘制自定义桑基图的炫酷效果高级样式定制 多组数据桑基图的展示动态桑基图的绘制结合真实数据的桑基图案例导出和分享进阶应用：桑基图与其他图表的组合总结 …
【头歌】 —— 数据分析与实践-python_NumPy基础及取值操作-NumPy数组的高级操作-Numpy初体验-亲和性分析——商品推荐
【头歌】 —— 数据分析与实践-python_NumPy基础及取值操作-NumPy数组的高级操作-Numpy初体验-亲和性分析——商品推荐 Numpy 初体验第1关 Numpy 创建数组第2关 Numpy 数组的基本运算第3关 Numpy 数组的切片与索引第4关 Numpy 数组的堆叠第5关 Numpy 的拆分 NumPy基础及取值操作…
Pandas实践指南：从基础到高级数据分析
Pandas实践指南：从基础到高级数据分析 引言Pandas基础1. 安装和基本配置2. DataFrame和Series的基础3. 基础数据操作 数据清洗与预处理1. 缺失值处理2. 数据转换3. 数据过滤 数据分析与操作1. 数据聚合和分组操作2. 时间序列数据处理3. 条件逻辑和数据分割 高级数据…
通过 Footprint 的钱包地址属性解密身份和意图
作者：shellyfootprint.network
编译：mingfootprint.network
Footprint Analytics 的钱包地址属性揭示了加密货币市场中深层的洞察力，揭示了钱包地址背后的身份和意图。这些标签，如“交易所”，“矿工”或“大鲸”&…
文本检索性能提升 40 倍，Apache Doris 倒排索引深度解读
在 OLAP 领域，Apache Doris 已成为高性能、高并发以及高时效性的代名词。在面向海量数据的复杂查询需求时，除硬件配置、集群规模、网络带宽等因素外，提升性能的核心在于如何最大程度地降低 SQL 执行时的 CPU、内存和 IO 开销，而这…
【数据分析】numpy基础第一天
文章目录 前言本文代码：使用jupyter notebook打开本文的代码操作示例步骤1.打开Anaconda Powershell Prompt步骤2.复制代码文件地址步骤3.在Anaconda Powershell Prompt中打开jupyter notebook步骤3.5.解决一个可能的问题步骤4.在浏览器中查看ipynb文件步骤5.运行代…
Python 数据分析实战——社交游戏的用户流失？酒卷隆治_案例2
# 什么样的顾客会选择离开 # 数据集
DAU : 每天至少来访问一次的用户数据
数据内容 数据类型 字段名
访问时间 string（字符串） log_data
应用名称 string（字符串） app_name
用户 ID int（数值） user_id…
【脑电信号处理与特征提取】P5-彭薇薇：脑电信号的预处理及数据分析要点
彭薇薇：脑电信号的预处理及数据分析要点
脑电
脑电是神经活动的测量方法，在不同位置测量有不同的方法。比如大脑皮层表面测量的是ECoG，在头皮测量的是EEG。除了EEG是无损的，其他都是有损的。
脑电信号采集系统
下面是完整的…
解密数据清洗，SQL中的数据分析
大家好，数据库表中的数据经常会很杂乱。数据可能包含缺失值、重复记录、异常值、不一致的数据输入等，在使用SQL进行分析之前清洗数据是非常重要的。
当学习SQL时，可以随意地创建数据库表，更改它们，根据需要更新和删除…
干货 | 大模型在图数据分析、推荐系统和生物科学中的综合应用
点击蓝字 关注我们 AI TIME欢迎每一位AI爱好者的加入！ 图机器学习、推荐系统与大语言模型的融合正成为新的前沿热点。图机器学习通过利用图结构数据，能够有效地捕捉和分析复杂关系和模式。同时，推荐系统正逐步成为我们日常生活的一部分&#…
空间数据分析和空间统计工具库PySAL入门
空间数据分析是指利用地理信息系统(GIS)技术和空间统计学等方法，对空间数据进行处理、分析和可视化，以揭示数据之间的空间关系和趋势性，为决策者提供有效的空间决策支持。空间数据分析已经被广泛运用在城市规划、交通管理、环境保护、农业种植…
Kaggle竞赛系列_SpaceshipTitanic金牌方案分析_数据分析
文章目录 【文章系列】【前言】【比赛简介】【正文】（一）数据获取（二）数据分析1. 缺失值2. 重复值3. 属性类型分析4. 类别分析5. 分析目标数值占比 （三）属性分析1. 对年龄Age分析（1）…
百川终入海 ，一站式海量数据迁移工具 X2Doris 正式发布
在大数据分析领域，Apache Doris 作为广受认可的开源实时数据仓库，已经在越来越多行业用户的真实业务场景中得到广泛应用，成为许多企业数据分析基础设施的重要基座。尤其在过去一年多的时间里，越来越多企业选择基于 Apache Doris 进…
Apache Doris 2.0.4 版本正式发布
亲爱的社区小伙伴们，Apache Doris 2.0.4 版本已于 2024 年 1 月 26 日正式发布，该版本在新优化器、倒排索引、数据湖等功能上有了进一步的完善与更新，使 Apache Doris 能够适配更广泛的场景。此外，该版本进行了若干的改进与优化&…
数据可视化 pycharts实现中国各省市地图数据可视化
自用版 数据格式如下： 运行效果如下： import pandas as pd
from pyecharts.charts import Map, TreeMap, Timeline, Page, WordCloud
from pyecharts import options as opts
from pyecharts.commons.utils import JsCode
from pyecharts.globals im…
Pandas进阶--map映射，分组聚合和透视pivot_table详解
文章目录 1.Pandas的map映射（1）映射（2）map充当运算工具 2.数据分组和透视（1）分组统计 - groupby功能 是pandas最重要的功能（2）聚合agg 3.透视表pivot_table（1）…
【30秒看懂大数据】变量
简单说
变量是指研究或观察中可能发生变化的事物、属性或特征，它们可以用来描述数据或现象的不同方面。 举例理解
一位热衷于烹饪的大厨老李，经常尝试不同的菜肴来满足不同顾客的口味。
1. 老李明白，每种食材都等同于一个重要的变量…
地理空间分析10——空间数据分析中的地理编码与Python
目录 写在开头1. 地理编码基础1.1 地理编码的基本原理1.1.1 坐标系统1.1.2 地名解析1.1.3 编码算法1.2 Python中使用地理编码的基础知识1.2.1 百度地图API1.2.2 高德地图API1.2.3 腾讯地图API1.3 Python中实现代码2. 逆地理编码2.1 利用Python进行逆地理编码2.1.1 获取高德地图…
python 解决线性规划问题 （深入浅出数据分析-第三章 题目）
题目： 有一个商家下个月要卖两种产品 总原料是 50000 A 产品卖出一只 利润是 5元 B 产品卖出一只 利润是 4元 现在原料（原料是 50000）只能一次生产 500 A产品或者 400 B 产品 生产A产品需要消耗 100 原料 生产B产品需要消耗 125 原料 由于时间…
数据分析基础之《pandas（3）—DataFrame运算》
一、算术运算
1、add() 加法运算
2、sub() 减法运算
3、想要得到每天的涨跌幅大小，求出每天close-open价格差
# 算术运算
close data[close]
open1 data[open]
# 收盘价减去开盘价
data[m_price_change] close.sub(open1)
data.head() 二、逻辑运算
1、逻辑…
数据分析基础之《pandas（6）—高级处理》
一、缺失值处理
1、如何处理nan 两种思路： （1）如果样本量很大，可以删除含有缺失值的样本 （2）如果要珍惜每一个样本，可以替换/插补（计算平均值或中位数）
2、判断数据是否…
如何用 CloudCanal 做多源数据汇聚
简介
CloudCanal 近期增强了数据汇聚防重能力，消除各个来源 数据表名冲突、主键/唯一键约束冲突 的可能性。
这个增强具体特性包括:
常用虚拟列添加指定虚拟列为对端表主键对端表名分级元数据拼接可视化操作，无需写自定义代码
本文简要介绍上述特性&…
数据可视化 pycharts实现时间数据可视化
自用版
数据格式为：
运行效果为：
from pyecharts import options as opts
from pyecharts.charts import Polar, Page
import csv
filename "./hot-dog-places.csv"
data_x []
data_y []
with open(filename) as f:reader csv.reade…
如何在CentOS安装DataEase数据分析服务并实现远程访问管理界面
如何在CentOS安装DataEase数据分析服务并实现远程访问管理界面 前言1. 安装DataEase2. 本地访问测试3. 安装 cpolar内网穿透软件4. 配置DataEase公网访问地址5. 公网远程访问Data Ease6. 固定Data Ease公网地址 🌈你好呀！我是 是Yu欸 🌌 202…
大数据平台-可视化面板介绍-Echarts
应对现在数据可视化的趋势，越来越多企业需要在很多场景(营销数据，生产数据，用户数据)下使用，可视化图表来展示体现数据，让数据更加直观，数据特点更加突出。
目录
01-使用技术
02- 案例适配方案
03-基础…
【金蝶BI方案】用一张报表，分析生产完成情况
当老板问生产完成地怎样？难道还能拿出一叠报表让老板逐个细看？奥威-金蝶BI方案只用一张BI数据可视化报表就把整个生产完成情况给讲明白了。甚至还能满足老板想从不同角度进行分析的需求。
奥威-金蝶BI方案-BI生产完成情况报表 这张报表总结计算了生产合…
2024美赛A题完整思路代码分析：建立竞争机理方程+遗传算法优化
A题是自由度比较大的场景限定下的模型构建，相对比较容易，核心是找到现有的成熟的数学模型，然后找到合适的数据进行证明得到结论，估计大部分是目标优化问题。（不限制专业）
B题属于较为经典的物理建模&#…
数据可视化市场概览：五款主流工具的优缺点解析
在数据可视化的世界中，选择一款合适的工具对于提升工作效率和洞察力至关重要。本文将为您介绍五款主流数据可视化工具，包括山海鲸可视化、Echarts、D3.js、Tableau和Power BI，并进行详细比较，帮助您做出明智的选择。
山海鲸可视化…
R语言学习case6：ggplot基础画图（Scatter散点图）
step1: 导入ggplot2库文件
library(ggplot2)step2：带入自带的iris数据集
iris <- datasets::irisstep3：查看数据信息
dim(iris)维度为 [150,5]
head(iris)查看数据前6行的信息
step4：利用ggplot工具包绘图
plot1 <- ggplot(iris…
Python||五城P.M.2.5数据分析与可视化_使用华夫图分析各个城市的情况（中）
目录 1.上海市的空气质量 2.成都市的空气质量 【沈阳市空气质量情况详见下期】 五城P.M.2.5数据分析与可视化——北京市、上海市、广州市、沈阳市、成都市，使用华夫图和柱状图分析各个城市的情况 1.上海市的空气质量
import numpy as np
import pandas as pd
impor…
数据分析基础之《pandas（4）—pandas画图》
1、DataFrame.plot(xNone, yNone, kindline) 说明： x：设置x轴标签 y：设置y轴标签 kind： line 折线图 bar 柱状图 hist 直方图 pie 饼图 scatter 散点图
# 找到p_change和turnover之间的关系
data.plot(xvolume, yturnover, kinds…
数据图表方案，企业视频生产数据可视化
在信息爆炸的时代，如何将复杂的数据转化为直观、生动的视觉信息，是企业在数字化转型中面临的挑战。美摄科技凭借其独特的数据图表方案，为企业在数据可视化领域打开了一扇全新的大门。
一、数据图表方案的优势
1、高效便捷：利用数…
超过1000种工具揭示了单细胞RNA数据分析的趋势
文章：Over 1000 tools reveal trends in the single-cell RNA-seq analysis landscape 杂志：Genome Biology 年份：2021 从 2016 年开始，scRNA-tools 数据库（https://www.scrna-tools.org/）不断收集单细胞转…
Python3 交叉编译 numpy pandas scipy scikit-learn
1. 概述
由于需要将Python3.7 和一些软件包交叉编译到 armv7 平台硬件，如果是arm64位的系统，很多包都有预编译好的版本，可直接下载。本文主要在基于 crossenv(https://github.com/benfogle/crossenv)环境下交叉编译。
2. 编译环境搭建
创建…
数据描述的统计量解释-上
目录 一.导读
二.介绍
①算数平均数
②几何平均数
③标准差
④变异系数
⑤分位数
⑥方差
三.结尾 一.导读
在讲到数据描述的时候，我们提及了数据集中位置、离散程度、偏度和峰度以及单个数据变量的分布情况。而在这些当中，我们遇到了一些统计量…
智慧港口：山海鲸可视化引领未来
随着疫情的结束，全球贸易迎来新的春天，港口作为物流枢纽的地位日益凸显。然而，传统港口的运营和管理方式已无法满足现代物流的需求。为了提高港口运营效率，降低成本，智慧港口的概念应运而生。作为山海鲸可视化的开发者…
（4）【Python数据分析进阶】Machine-Learning模型与算法应用-回归、分类模型汇总
线性回归、逻辑回归算法应用请参考： https://codeknight.blog.csdn.net/article/details/135693621https://codeknight.blog.csdn.net/article/details/135693621本篇主要介绍决策树、随机森林、KNN、SVM、Bayes等有监督算法以及无监督的聚类算法和应用PCA对数据进行降维的算法…
HubSpot营销自动化如何优化营销流程？
HubSpot营销自动化在优化营销流程、减少手动工作以及提高效率方面发挥着关键作用。以下是一些具体的方法和策略：
1. 自动化电子邮件营销：
利用HubSpot的电子邮件自动化功能，设置触发条件，使邮件发送根据用户行为或阶段自动进行。…
数据处理方法--OrdinalEncoder自然数排序
实现原理
首先是自然数排序方法，该方法的过程较为简单，即先对离散字段的不同取值进行排序，然后对其进行自然数值取值转化，例如下述过程：
实现过程
可以直接考虑调用sklearn中的OrdinalEncoder()评估器（…
分享一个Python网络爬虫数据采集——电商API接口数据采集
前言 你是否曾为获取重要数据而感到困扰？是否因为数据封锁而无法获取所需信息？是否因为数据格式混乱而头疼？现在，所有这些问题都可以迎刃而解。【API接口数据采集】 公共参数
请求地址: 申请调用KEY测试
名称类型必须描述keyStr…
新增同步管理、操作日志模块，支持公共链接分享，DataEase开源数据可视化分析平台v2.3.0发布
2024年2月5日，DataEase开源数据可视化分析平台正式发布v2.3.0版本。
这一版本的功能升级包括：新增“同步管理”功能模块，用户可通过此模块，将传统数据库中的数据定时同步到Apache Doris中，让数据分析更快速࿱…
数据可视化：让数据“活”起来
在当今数据驱动的时代，数据可视化已经成为了一种至关重要的工具，它可以将复杂的信息以直观、易于理解的方式呈现出来。通过图形、图表、地图等视觉元素，数据可视化帮助我们更好地理解和分析数据，发现隐藏在其中的模式、趋势和关系…
京东数据分析（电商数据查询）：2023年冲锋衣行业大卖，销售额同比增长96%！
在服装行业，每年都会出现不同的服装爆款，成为人们时尚穿搭的新宠，2023年的服装爆款无疑是冲锋衣。
在社交平台上，冲锋衣鲨鱼裤运动鞋的搭配一时间成为许多女性消费者的户外潮流穿搭，不少网友点赞表示“很出片”。对于…
Spark大数据分析与实战笔记（第三章 Spark RDD弹性分布式数据集-01）
文章目录 每日一句正能量第3章 Spark RDD弹性分布式数据集章节概要3.1 RDD简介3.2 RDD的创建方式3.2.1 从文件系统加载数据创建RDD3.2.2 通过并行集合创建RDD 每日一句正能量 学如积薪，后来者居上。 第3章 Spark RDD弹性分布式数据集
章节概要
传统的MapReduce虽然…
人工智能：数据分析之数据预处理、分析模型与可视化
在人工智能和数据科学领域，数据分析是一种核心过程，它帮助我们从大量的数据中提取有价值的信息。数据分析的质量和结果直接影响到决策的效率和准确性。在这篇博客中，我们将详细探讨数据分析的关键步骤，包括数据预处理、分析模型和…
特征工程:特征提取和降维-上
目录 一、前言
二、正文
Ⅰ.主成分分析
Ⅱ.核主成分分析
三、结语 一、前言 前面介绍的特征选择方法获得的特征，是从原始数据中抽取出来的，并没有对数据进行变换。而特征提取和降维，则是对原始数据的特征进行相应的数据变换，并…
《MySQL 简易速速上手小册》第4章：数据安全性管理（2024 最新版）
文章目录 4.1 用户认证和权限控制4.1.1 基础知识4.1.2 重点案例：使用 Python 管理 MySQL 用户权限4.1.3 拓展案例 4.2 防止 SQL 注入和其他安全威胁4.2.1 基础知识4.2.2 重点案例：使用 Python 和 MySQL 进行安全的数据查询4.2.3 拓展案例 4.3 数据加密和…
Methodot低代码实战教程（一）——熟悉可视化Echart组件
一、产品介绍：
Methodot是行云创新旗下一款面向研发使用的一站式云原生开发及应用托管平台，产品内有大量开箱即用的服务和开发工具，例如：
支持开发团队进行微服务架构设计（例如一个袜子商店管理系统）&…
【数据分析】Excel中的常用函数公式总结
目录 0 引用方式0.1 相对引用0.2 绝对引用0.3 混合引用0.4 3D引用0.5 命名引用 1 基础函数1.1 加法、减法、乘法和除法1.2 平均数1.3 求和1.4 最大值和最小值 2 文本函数2.1 合并单元格内容2.2 查找2.3 替换 3 逻辑函数3.1 IF函数3.2 AND和OR函数3.3 IFERROR函数 4 统计函数4.1…
R语言——条形图数据可视化的多种方式
本文章将会介绍如何使用R语言中的ggplot2包使用条形图进行数据可视化。将会使用一个“生产企业原材料的订购与运输”的订单数据，该数据来自2021数学建模国赛C题。
某建筑和装饰板材的生产企业所用原材料主要是木质纤维和其他植物素纤维材料总体可分为 A B C 三种类…
Python爬虫Xpath库详解#4
爬虫专栏：http://t.csdnimg.cn/WfCSx
前言
前面，我们实现了一个最基本的爬虫，但提取页面信息时使用的是正则表达式，这还是比较烦琐，而且万一有地方写错了，可能导致匹配失败，所以使用正则表达式…
Python爬虫实战：抓取猫眼电影排行榜top100#4
爬虫专栏系列：http://t.csdnimg.cn/Oiun0
抓取猫眼电影排行
本节中，我们利用 requests 库和正则表达式来抓取猫眼电影 TOP100 的相关内容。requests 比 urllib 使用更加方便，而且目前我们还没有系统学习 HTML 解析库，所以这里就…
天猫数据分析（天猫数据查询工具）：2023年滑雪服市场消费现状及趋势（天猫服饰行业分析报告）
随着全民健身的理念逐渐深入人心，滑雪运动产业迎来了前所未有的发展机遇。相关政策的大力支持，冰雪旅游服务设施的日益完善，都为滑雪运动的普及和推广提供了有力保障。
目前，滑雪行业正在蓬勃发展，而在滑雪运动的热潮…
【机器学习】合成少数过采样技术 (SMOTE)处理不平衡数据（附代码）
1、简介
不平衡数据集是机器学习和人工智能中普遍存在的挑战。当一个类别中的样本数量明显超过另一类别时，机器学习模型往往会偏向大多数类别，从而导致性能不佳。
合成少数过采样技术 (SMOTE) 已成为解决数据不平衡问题的强大且广泛采用的解决方案。
…
每天一个数据分析题（一百五十三）
对于执行edu_class变量数据编码和缺失值填充的代码，以下哪个Python代码片段不能正确实现所提供的操作？
A. data_raw[‘gender’] data_raw[‘gender’].replace({‘Male’: 1, ‘Female’: 0})
B. data_raw[‘edu_class’] data_raw[‘edu_class’].…
《MySQL 简易速速上手小册》第7章：MySQL监控和日志分析（2024 最新版）
文章目录 7.1 配置和使用 MySQL 监控工具7.1.1 基础知识7.1.2 重点案例：使用 Python 和 Prometheus 监控 MySQL 性能7.1.3 拓展案例 1：自动化 MySQL 慢查询日志分析7.1.4 拓展案例 2：实时警报系统 7.2 解读 MySQL 日志文件7.2.1 基础知识7.2.…
《CSS 简易速速上手小册》第10章：未来的 CSS（2024 最新版）
文章目录 10.1 CSS 的新特性和趋势10.1.1 基础知识10.1.2 重点案例：使用 CSS Grid 创建响应式图库10.1.3 拓展案例 1：利用 CSS 变量实现主题切换10.1.4 拓展案例 2：使用 lab() 颜色和 layer 规则优化样式 10.2 CSS Houdini：魔法般…
《CSS 简易速速上手小册》第8章：CSS 性能优化和可访问性（2024 最新版）
文章目录 8.1 CSS 文件的组织和管理8.1.1 基础知识8.1.2 重点案例：项目样式表结构8.1.3 拓展案例 1：使用BEM命名规范8.1.4 拓展案例 2：利用 Sass 混入创建响应式工具类 8.2 提高网页加载速度的技巧8.2.1 基础知识8.2.2 重点案例：图…
Python爬虫之文件存储#5
爬虫专栏：http://t.csdnimg.cn/WfCSx
文件存储形式多种多样，比如可以保存成 TXT 纯文本形式，也可以保存为 JSON 格式、CSV 格式等，本节就来了解一下文本文件的存储方式。
TXT 文本存储
将数据保存到 TXT 文本的操作非常简单&am…
数据分析 — Pandas 数据处理
目录 一、简介1、概念2、特点3、引用 二、数据结构1、Series2、DataFrame 三、常见操作1、数据合并2、数据删除3、创建多层索引4、数据对齐5、排序6、DataFrame 和 Series 之间的运算 四、应用 一、简介
1、概念
Pandas（Python Data Analysis Library）…
Python爬虫之自动化测试Selenium#7
爬虫专栏：http://t.csdnimg.cn/WfCSx
前言
在前一章中，我们了解了 Ajax 的分析和抓取方式，这其实也是 JavaScript 动态渲染的页面的一种情形，通过直接分析 Ajax，我们仍然可以借助 requests 或 urllib 来实现数据爬取…
【知识整理】产研中心岗位评定标准之大数据岗位
为贯彻执行集团数字化转型的需要,该知识库将公示集团组织内各产研团队不同角色成员的职务“职级”岗位的评定标准; 一、定级定档目的
通过对公司现有岗位及相应岗位员工的工作能力、工作水平进行客观公正评定,确定各岗位的等级及同等级岗位员工对应的档级,从而为员工以后的晋升…
基于GPT-4一键完成数据分析全流程的AI Agent: Streamline Analyst
大型语言模型（LLM）的兴起不仅为获取知识和解决问题开辟了新的可能性，而且催生了一些新型智能系统，例如旨在辅助用户完成特定任务的AI Copilot以及旨在自动化和自主执行复杂任务的AI Agent，使得编程、创作等任务变得高效…
跟LV学Python编程——前言
😐 ！！！记得先关注订阅本专栏【跟LV学Python编程】！！！！！不然后续找不到了哦！！！ 😐 跟LV学Python编程——前言 前言第1章 Py…
光芒绽放：妙用“GLAD原则”打造标准的数据可视化图表
光芒绽放：妙用“GLAD原则”打造标准的数据可视化图表 文章目录 光芒绽放：妙用“GLAD原则”打造标准的数据可视化图表前言一、可视化工具有哪些？二、那如何做出正确可视化图表 ？GLAD原则1.G原则2.L原则3.A原则4.D原则 三、总结最后…
《Go 简易速速上手小册》第1章：Go 语言基础（2024 最新版）
文章目录 1.1 Go 语言的安装与环境配置1.1.1 基础知识讲解案例 Demo：简单的 Go 程序 1.1.2 重点案例：搭建一个 Go Web 服务准备工作步骤 1：创建项目目录步骤 2：编写 Web 服务代码步骤 3：运行你的 Web 服务步骤 4&#…
正确看待OpenAI大模型Sora
2月16日凌晨，OpenAI发布了文生视频模型Sora。官方是这样描述的：Sora is an AI model that can create realistic and imaginative scenes from text instructions.Sora一个人工智能模型，它可以根据文本指令创建逼真和富有想象力的场景。Sora…
《Go 简易速速上手小册》第5章：并发编程（2024 最新版）
文章目录 5.1 Goroutines 的基础 - Go 语言中的轻盈舞者5.1.1 基础知识讲解5.1.2 重点案例：并发下载器功能描述实现代码扩展功能 5.1.3 拓展案例 1：网站健康检查功能描述实现代码扩展功能 5.1.4 拓展案例 2：并发日志处理器拓展案例 2…
数字化转型导师坚鹏：数据安全法解读与政府数字化转型
网络安全法、数据安全法、个人信息保护法解读与政府数字化转型 课程背景：
很多机构存在以下问题：
不清楚网络安全法、数据安全法、个人信息保护法立法背景？
不知道如何理解网络安全法、数据安全法、个人信息保护法政策？
不…
数据分析 — Pandas 数据加载、存储和清洗
目录 一、文件读取1、常见文件读取函数2、read_csv()3、read_table()4、read_excel()5、read_json()6、read_html()7、大文件读取 二、数据保存1、csv2、excel3、json4、html5、MySQL1、连接数据库2、MySQL 存储到本地3、本地存储到 MySQL 三、数据清洗1、处理缺失值1、判断数据…
《Go 简易速速上手小册》第9章：数据库交互（2024 最新版）
文章目录 9.1 连接数据库 - Go 语言的海底宝藏之门9.1.1 基础知识讲解安装数据库驱动数据库连接 9.1.2 重点案例：用户信息管理系统准备数据库Go 代码实现连接数据库添加新用户查询用户信息用户登录验证主函数 9.1.3 拓展案例 1：批量添加用户准备数据库Go…
SQL补充：窗口函数
SQL窗口函数
结合order by关键词和limit关键词是可以解决很多的topN问题，比如从二手房数据集中查询出某个地区的最贵的10套房，从电商交易数据集中查询出实付金额最高的5笔交易，从学员信息表中查询出年龄最小的3个学员等。
但是，…
R语言课程论文-飞机失事数据可视化分析
数据来源：Airplane Crashes Since 1908 (kaggle.com)
代码参考：Exploring historic Air Plane crash data | Kaggle 数据指标及其含义 指标名 含义 Date 事故发生日期(年-月-日) Time 当地时间，24小时制，格式为hh:mm Locat…
《Go 简易速速上手小册》第4章：接口与抽象（2024 最新版）
文章目录 4.1 接口的定义与实现 - Go 语言的多面手4.1.1 基础知识讲解4.1.2 重点案例：动物乐队功能描述实现代码 4.1.3 拓展案例 1：通用支付系统拓展案例 1：通用支付系统功能描述实现代码 4.1.4 拓展案例 2：动物园管理器拓展案例 …
数据分析 - 机器学习
1：线性回归 线性回归是一种统计技术用于对输出变量与一个或多个输入变量之间的关系进行建模 用外行人的话来说，将其视为通过某些数据点拟合一条线，如下所示 以便在未知数据上进行预测，假设变量之间存在线性关系 点和线之间存在微小…
2月19日，每日信息差
第一、小米徕卡光学研究所正式成立。据介绍，这是以光学底层技术为核心，影像数字技术、AI等多学科交叉融合的研发机构。将于本月22日发布的全新影像旗舰小米14 Ultra就是这一标准实践演进的第一个里程碑。
第二、东方甄选试水“小时达”，目前…
山海鲸可视化软件：多场景下的数据呈现利器
在当今数据驱动的时代，数据可视化成为了企业和个人不可或缺的工具。作为一个老数据人，本文想借用自己常用山海鲸可视化软件，带大家了解在不同使用场景下数据可视化的应用。山海鲸可视化是一款可以免费编辑、本地化部署的产品，对数…
智能风控体系之Y定义与样本选择(A卡)
评分卡模型设计里面，最重要的一环就是Y的定义和好坏样本的选择，即样本范围选择和Y变量确定。一般来说，产品评分卡开发需要有需求、设计、开发、测试、部署上线等过程。需要思考几个问题：
1.需要做几个评分卡模型，根据…
【统计分析数学模型】聚类分析
【统计分析数学模型】聚类分析 一、聚类分析1. 基本原理2. 距离的度量（1）变量的测量尺度（2）距离（3）R语言计算距离 三、聚类方法1. 系统聚类法2. K均值法 三、示例1. Q型聚类（1）问题描…
日立F-4700FL数据分析实验报告
实验设定 日立F-4700FL为荧光分光光度计，可输出三维光谱扫描结果到计算机。D和L为两种化合物。对4种不同的溶液进行三维光谱扫描，得到的光谱文件如下。 溶质光谱文件无K.txtDD.txtLL.txtD+LH.txt光谱文件（txt）的内容格式如下。
Sample: ...
File name: ...
Run date: ...
…
读书笔记-增强型分析：AI驱动的数据分析、业务决策与案例实践
目录
前言
运用人工智能技术，可以使人类社会变得更美好。人们总是期待产品更适合、服务更贴心、生活更便利。在实践中，技术给企业赋能，企业通过优质的产品和服务满足社会，提升人类福祉。很多金融企业已经开始尝试向潜在客户推送…
数据分析Pandas专栏---第三章＜Pandas合并list和字典＞
正文:
在处理数据时，经常会遇到需要操作和转换DataFrame的场景。特别是当涉及到从单个或多个字典合成DataFrame，以及合并多个DataFrame时，适当的方法和技巧可以极大地简化程序逻辑并提高代码的可读性与效率。此外，数据操作过程中…
医学大数据实战知识|1 R操作基础|学这些就够了
医学大数据分析R要学的实在是太多了，由于本人是新手启航，所以秉着能做就行的心态梳理需要学习代码和模块，希望能和大家一起进步，共同成长。
作者简介:985硕士/医学大数据公司医学研究员/SCI一区一篇/Nature子刊一篇/中文二区核心…
唯品会vip.item_get API：第三方开发者的商品信息获取利器
唯品会（VIP.com）是中国的一家知名折扣电商平台，提供大量品牌商品的打折销售。对于第三方开发者而言，唯品会提供的API接口可以帮助他们集成唯品会的数据和功能，从而开发出自己的应用或服务。
vip.item_get API是唯品会…
用Python实现学生成绩数据分析
我的代码使用了pygal库来创建一个简单的折线图，并将其保存为SVG格式的文件。下面是对您代码的分析：
学生成绩数据分析表： 分析代码： 导入库：您导入了pygal库，这是一个用于生成可缩放矢量图形（S…
Spark大数据分析与实战笔记（第三章 Spark RDD 弹性分布式数据集-03）
文章目录 每日一句正能量第3章 Spark RDD弹性分布式数据集章节概要3.4 RDD的分区3.5 RDD的依赖关系 后记 每日一句正能量 书籍是最好的朋友。当生活中遇到任何困难的时候，你都能够向它求助，它永远不会背弃你。 第3章 Spark RDD弹性分布式数据集
章节概要…
数据科学实战：利用R进行数据分析与可视化
💂 个人网站:【 海拥】【神级代码资源网站】【办公神器】🤟 基于Web端打造的：👉轻量化工具创作平台💅 想寻找共同学习交流的小伙伴，请点击【全栈技术交流群】 引言
随着大数据时代的到来，数据科…
阿里巴巴1688.item_password API助力电商行业实现数据驱动营销
阿里巴巴1688平台上的item_password API通常不是直接用于数据驱动营销的。通常，item_password这样的API可能是用于商品访问控制的，例如，确保只有拥有正确密码或权限的用户才能查看或编辑特定的商品信息。
在数据驱动营销的背景下，…
【Apache Spark】Spark 的基本概念和在大数据分析中的应用
Apache Spark是一个开源的分布式计算引擎，用于大规模数据处理和分析。它提供了一个高级别的API，可以在集群中快速执行计算任务，并且能够处理多种类型的数据，包括结构化数据、半结构化数据和非结构化数据。
Spark的核心概念是弹性…
从 Elasticsearch 到 Apache Doris，统一日志检索与报表分析，360 企业安全浏览器的数据架构升级实践
导读：随着 360 企业安全浏览器用户规模的不断扩张，浏览器短时间内会产生大量的日志数据。为了提供更好的日志数据服务，360 企业安全浏览器设计了统一运维管理平台，并引入 Apache Doris 替代了 Elasticsearch，实现日志检…
【数据分析之Numpy基础002】如何访问与修改ndarray对象
ndarray对象的访问与修改十分容易，跟list对象的操作一样，直接通过索引或切片操作就可以实现。 ndarray数组的下标也是从0开始，因此可以设置start，stop以及step参数即可从原数组中切割出一个新的数组。
例： 一维数组的…
智慧医疗新篇章：山海鲸可视化引领行业变革
随着科技的不断发展，智慧医疗已经成为医疗行业的新趋势。山海鲸可视化以其独特的视角和前沿的技术，为智慧医疗提供了全方位的解决方案。其强大的数据可视化能力，使得医疗数据更加直观、易于理解。无论是病例分析、手术模拟，还是患…
游戏平台如何定制开发？
随着科技的飞速发展和互联网的普及，游戏平台已成为人们休闲娱乐的重要选择。为了满足用户多样化的需求，游戏平台的定制开发显得尤为重要。本文将探讨游戏平台定制开发的过程、关键要素以及注意事项，为有志于涉足此领域的开发者提供参考。 一、…
数据分析Pandas专栏---第五章＜Pandas缺失值的处理(1)＞
前言: 当进行数据清洗和处理时，缺失值处理是一个非常重要的步骤。缺失值是指在数据集中某些位置缺少数值或信息。处理缺失值的目标是确保数据的完整性和准确性，以便能够进行后续的分析和建模。
正文:
I. 简介 A. 什么是缺失值
当某个特定数据点未能被…
Spark大数据分析与实战笔记（第三章 Spark RDD 弹性分布式数据集-02）
文章目录 每日一句正能量第3章 Spark RDD弹性分布式数据集章节概要3.3 RDD的处理过程3.3.1 转换算子3.3.2 行动算子3.3.3 编写WordCount词频统计案例 每日一句正能量 人生很长，不必慌张。你未长大，我要担当。 第3章 Spark RDD弹性分布式数据集
章节概要…
从新手到高手：用NumPy学习网站打造你的数据处理超能力！
介绍：NumPy是一个用于数值计算的Python库，特别擅长处理多维数组和矩阵。以下是对NumPy的详细介绍： 起源和发展：NumPy由Travis Oliphant在2005年创建，它是基于原来的Numeric模块和Numarray模块发展而来的。它的大部分代…
数字化转型导师坚鹏：政府数字化流程管理
政府数字化流程管理
课程背景：
很多政府存在以下问题：
不清楚数字化对流程有什么影响？
不知道政府业流程如何进行优化？
不知道政府业流程优化的具体案例？
课程特色：
有实战案例
有原创观点
…
Spark大数据分析与实战笔记（第三章 Spark RDD 弹性分布式数据集-04）
文章目录 每日一句正能量第3章 Spark RDD弹性分布式数据集章节概要3.6 RDD机制3.6.1 持久化机制3.6.2 容错机制 总结 每日一句正能量 勤奋踏实，诚实守信。我始终相信我读过的所有书都不会白读，它总会在未来日子的某一个场合帮助我表现得更出色࿰…
链式插补 (MICE)：弥合不完整数据分析的差距
导 读
数据缺失可能会扭曲结果，降低统计功效，并且在某些情况下，导致估计有偏差，从而破坏从数据中得出的结论的可靠性。
处理缺失数据的传统方法（例如剔除或均值插补）通常会引入自己的偏差或无法充分利用数…
【奥威-金蝶云星空BI方案】你要的报表，这里都有！
用金蝶云星空来记账，那确实好，但如果让你再去做一份详细的报表呢？自己开发的话，成本大、耗时长，一旦有了新的需求又要一再开发，长此以往将增加使用者使用难度，降低数据分析对运营决策的时效性。…
数字化转型导师坚鹏：政府数字化转型智慧城市类案例研究
政府数字化转型智慧城市类案例研究
课程背景：
很多地方政府存在以下问题：
不清楚政府数字化转型的智慧城市类成功案例
不清楚政府数字化转型的城市大脑类成功案例
不清楚政府数字化转型的综合实践类成功案例
课程特色：
针对性强
…
时间序列分析实战（二）：时序的ARMA模型拟合与预测
🍉CSDN小墨&晓末:https://blog.csdn.net/jd1813346972 个人介绍: 研一｜统计学｜干货分享 擅长Python、Matlab、R等主流编程软件 累计十余项国家级比赛奖项，参与研究经费10w、40w级横向 文…
数据分析Pandas专栏---第七章＜Pandas缺失值的处理(3)＞
前言:
数据分析Pandas专栏---第五章＜Pandas缺失值的处理(1)＞-CSDN博客
数据分析Pandas专栏---第六章＜Pandas缺失值的处理(2)＞-CSDN博客
正文:
A. 数据预处理技术的选择
在利用Pandas处理数据时，首先了解数据集的基…
数据分析Pandas专栏---第七章＜Pandas缺失值的处理(4)＞
前言:
数据分析Pandas专栏---第五章＜Pandas缺失值的处理(1)＞-CSDN博客
数据分析Pandas专栏---第六章＜Pandas缺失值的处理(2)＞-CSDN博客
数据分析Pandas专栏---第七章＜Pandas缺失值的处理(3)＞-CSDN博客
…
数据可视化基础与应用-01-数据可视化概述
总结
本系列是数据可视化基础与应用的第02篇，主要介绍数据可视化概述，包括数据可视化的历史，原理，工具等。
认识大数据可视化
数据是什么
信息科学领域面临的一个巨大挑战是数据爆炸。据IDC Global DataSphere统计，…
主数据管理是数字化转型成功的基石——江淮汽车案例分享
汽车行业数字化转型的背景 在新冠疫情导火索的影响下，经济全球化政治基础逐渐动摇。作为全球最大的汽车市场，我国的汽车市场逐渐由增量转为存量市场。
在数字化改革大背景下，随着工业4.0时代的到来，江淮汽车集团力争实现十四五数…
「哈哥赠书活动 - 48期」-『商业分析思维与实践：用数据分析解决商业问题宣传文案』
⭐️ 赠书 - 《商业分析思维与实践》 ⭐️ 内容简介 本书以业务为导向，详细地讲解了如何通过大数据分析来解决商业问题。其目的在于运用大数据分析思维，帮助读者把学术知识应用于真实的业务场景，解决实际的业务问题。本书基于业务问题&#x…
数据可视化引领智慧仓储新时代
随着科技的飞速发展，数据可视化已然成为智慧仓储领域的璀璨明珠，其强大的功能和多面的作用让智慧仓储焕发出勃勃生机。让我们一同探索，数据可视化究竟在智慧仓储中起到了怎样的作用。下面我就以可视化从业者的角度来简单谈谈这个话题。
在这…
关于python的数据可视化与可视化：数据读取
带着问题寻找答案可以使自己不再迷茫或者不知所措！
了解什么python的数据可视化？
数据的读取（一般伴随着课程文件中会进行提供和利用） 数据可视化是将Python应用于大气海洋科学中数据处理及分析过程的重要环节，它可以…
GEE案例—— 如何获取包含网格（经纬度）降水数据集图像中每个像元值并导出 CSV
简介
这里我们首先要作的就是给研究区的影像添加一个波段，这个波段是用来获取影像的经纬度，另外，这里我们使用的数据分辨率是5000米，所以这里建议如果分辨率选择更细的话可能导致运行超限
Resolution
5566 meters
Bands Table NameDescriptionMin*Max*Unitsprecipitat…
如何搭建零售行业经营分析体系？
怎么搭建零售行业的经营分析体系？
整体思路就是：利用数据中台基于业务全价值链的数据沉淀，借助大数据技术进行采集、计算、存储和加工，同时统一数据建模与治理，构建数据资产，充分挖掘数据，实…
智慧城市系统的开发流程
智慧城市是城市地区使用不同类型的电子方法和传感器来收集数据。从这些数据中获得的见解可用于有效地管理资产、资源和服务作为回报，这些数据将用于改善整个城市的运营。智慧城市系统的开发流程涉及多个阶段和步骤，以下是一个一般性的开发流程࿰…
数据分析---SQL(4)
目录 窗口和列什么关系如何使用窗口max()聚合函数和窗口函数max(A)over(partition by B)的区别窗口函数和where的执行顺序谁在先sql中，正则化函数一般如何使用sql中，如何将int类型的字段转化为string类型sql中，leftjoin、rightjoin、innerjoin的区别sql中，如何将类型为floa…
2024年1月京东洗衣机行业数据分析：TOP10品牌销量销额排行榜
鲸参谋监测的京东平台1月份洗衣机市场销售数据已出炉！
根据鲸参谋电商数据分析平台显示，今年1月份，京东平台上洗衣机的销量约160万件，环比上个月增长约42%，同比去年下滑7%；销售额约28亿元，环比…
基于R语言的Meta分析【全流程、不确定性分析】方法与Meta机器学习技术应用
Meta分析是针对某一科研问题，根据明确的搜索策略、选择筛选文献标准、采用严格的评价方法，对来源不同的研究成果进行收集、合并及定量统计分析的方法，最早出现于“循证医学”，现已广泛应用于农林生态，资源环境等方面。…
DeepBI实现AI结合数据仓库做智能数据分析VS传统BI工具
#AI数据分析#
传统数据分析如同一座巍峨的大山，每一步都让人感到沉重和艰难。从数据采集、存储、筛选、整合，到人工预测和技术实现，这些繁琐的过程如同攀登峭壁，既艰难又耗时。
然而，随着AI时代的到来，De…
电商数据分析10——电商行业中的用户画像构建与数据分析应用
目录 写在开头1. 用户画像的概念和重要性1.1 用户画像定义1.2 用户画像在电商中的应用价值 2. 构建用户画像的数据分析方法2.1 数据收集与处理2.2 关键特征提取和用户分类2.3 用户行为和偏好分析 3. 用户画像在电商营销中的应用案例3.1 个性化推荐系统3.1.1 背景介绍3.1.2 问题…
数据分析案例-社交媒体情绪数据集可视化分析（文末送书）
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
医疗行业数据分析，为医疗提质增效提供科学支持
信息化时代的到来，医疗行业数据分析已成为提升医疗服务质量和效率的重要手段。医院拥有大量的医疗数据，医疗数据中包含着很多宝贵的信息与规律，通过深入的数据分析，能够为决策者提供直观、深入的数据洞察，帮助医疗服务…
天一个数据分析题（一百七十三）
聚类算法的主要应用场景是用户分群，聚类是一种无监督方法，以下哪个不是衡量聚类效果好坏的评估方法（）。
A. 轮廓系数
B. 平方根标准误差
C. ARI(调整的兰德系数)
D. 相关系数
题目来源于CDA模拟题库
点击此处获取答案
如何利用ChatGPT搞科研？论文检索、写作、基金润色、数据分析、科研绘图（全球地图、植被图、箱型图、雷达图、玫瑰图、气泡图、森林图等）
以ChatGPT、LLaMA、Gemini、DALLE、Midjourney、Stable Diffusion、星火大模型、文心一言、千问为代表AI大语言模型带来了新一波人工智能浪潮，可以面向科研选题、思维导图、数据清洗、统计分析、高级编程、代码调试、算法学习、论文检索、写作、翻译、润色、文献辅助…
大数据旅游数据分析：基于Python旅游数据采集可视化分析推荐系统
文章目录 基于Python旅游数据采集可视化分析推荐系统一、项目概述二、项目说明三、开发环境四、功能实现五、系统页面实现用户登录注册系统首页数据操作管理价格与销量分析旅游城市和景点等级分析旅游数据评分情况分析旅游数据评论情况分析旅游景点推荐Django系统后台管理 六、…
智能水表预付费管理系统
智能水表预付费管理系统是当前智能水表技术的重要应用之一，结合了智能化管理和预付费功能，为水务公司和用户提供了便捷、高效的用水管理解决方案。该系统利用先进的科技手段，实现了水表抄表、计费和管理的自动化，为用户带来更便捷…
10个SQL查询方法
SQL 是管理和分析关系数据库的基本工具。掌握基本的SQL命令能够完成简单的数据查询和操作，但是如果想从数据中提取更有价值的信息，数据分析工作者和开发人员应该深入学习和掌握高级的SQL技巧。
1 窗口函数 窗口函数是指在SQL查询中对一组相关行进行聚合…
企业的数据分析应该如何做
在当今竞争激烈的商业环境中，数据分析已成为企业制定战略决策、优化运营、提升市场竞争力的重要工具。然而，要想在海量数据中找到有价值的信息并转化为可操作的见解，并不是一件容易的事情。那么有不少企业会咨询数聚，企业的数据分…
1 数据分析概述与职业操守
1、 EDIT数字化模型 E——exploration探索 （是什么）
业务运行探索：探索关注企业各项业务的运行状态、各项指标是否合规以及各项业务的具体数据情况等。
指标体系——目标（O）、策略（S）、指标&a…
Python 编程语言以及相关的库和工具来进行金融市场数据分析、策略开发和交易执行的过程。
Python 量化是指利用 Python 编程语言以及相关的库和工具来进行金融市场数据分析、策略开发和交易执行的过程。
Python 由于其简洁、易学、强大的生态系统和丰富的金融库而成为量化交易的首选编程语言之一。
量化交易在金融领域得到广泛应用，它允许交易者通过系统…
数据分析Pandas专栏---第十二章＜Pandas数据聚合与分组(2)＞
前言:
继续上一章数据分析Pandas专栏---第十一章＜Pandas数据聚合与分组(1)＞-CSDN博客
正文:
数据分组与聚合的高级应用
多级分组操作和索引层级
多级分组操作是指在数据分析中，我们可以根据多个列的值进行分组，并形成索引层级…
返回两个数组中每个对应位置的两个元素的最大值返回结果为数组np.fmax()
【小白从小学Python、C、Java】 【计算机等级考试500强双证书】 【Python-数据分析】 返回两个数组中 每个对应位置的 两个元素的最大值 返回结果为数组 np.fmax()
[太阳]选择题 请问关于以下代码表述正确的是？ import numpy as np a np.array([1, 3, 6, 8]) prin…
基于R语言piecewiseSEM结构方程模型在生态环境领域技术应用
结构方程模型（Sructural Equation Modeling，SEM）可分析系统内变量间的相互关系，并通过图形化方式清晰展示系统中多变量因果关系网，具有强大的数据分析功能和广泛的适用性，是近年来生态、进化、环境、地学、…
高效备考一级数据分析师考试《CDA Level I 实操训练营》3月30日开课！
曾经报名了考试，买了教程辅导书，却因为各种原因没有坚持学习，这样的经历可能让你感到沮丧和失望。但是，失败并不代表终结，而是迈向成功的必经之路。为了帮助大家能够快速学习考试相关知识，特别为CDA LEVEL …
Python 教学平台，支持“多班教学”的课程授课方式｜ModelWhale 版本更新
龙行龘龘、前程朤朤，ModelWhale 新一轮的版本更新，期待为大家带来更优质的使用体验。
本次更新中，ModelWhale 主要进行了以下功能迭代：
新增 课程（包括课件、作业、算力）按班级管理（团队版✓ …
B站UP视频播放数据分析之然冉创业说
【背景介绍】
几年前做过类似的分析，但是B站数据加密了，刚好最近在用selenium，就顺手用它爬一下数据。
df pd.read_excel("然冉创业说_13.2万_output.xlsx")
df.head() 以上数据在视频播放页面就可以获取到。
【数据分析】 从数…
数据分析之Logistic回归分析（二元逻辑回归、多元有序逻辑回归、多元无序逻辑回归）
1、Logistic回归分类
在研究X对于Y的影响时：
如果Y为定量数据，那么使用多元线性回归分析；如果Y为定类数据，那么使用Logistic回归分析。
结合实际情况，可以将Logistic回归分析分为3类：
二元Logistic回归…
每天一个数据分析题（一百八十三）
以下哪一项不是逻辑回归模型的特点？
A. 因变量通常为二分类型变量
B. 自变量可以是分类型或连续型变量
C. 适用于处理连续自变量与二分类型因变量之间的关系
D. 通过logit转换，输出结果为实数域内的数值
题目来源于CDA模拟题库
点击此处获取答案
数据分析-Pandas数据探查初步圆饼图
数据分析-Pandas数据探查初步圆饼图
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表&am…
光谱下的养殖业：数据可视化的现代变革
在数字化时代，数据可视化在养殖业中崭露头角，为这一传统行业注入了新的活力。无论是家禽养殖还是水产养殖，数据可视化都以其直观、高效的特点，为养殖业带来了全新的发展机遇。下面我就以可视化从业者的角度，简单聊聊这…
Excel常用公式总结非常实用
16个最实用的Excel万能公式 1、多条件判断 IF(And(条件1,条件2..条件N),条件成立返回值) IF(or(条件1,条件2..条件N),条件成立返回值)
2、多条件查找 Lookup(1,0/((条件1*条件2*...条件N)),返回值区域）
3、多条件求和
Sumifs(值区域,判断区域1,条件1,判断区域2,条…
益生菌不一定全是“益”，也存在一定的安全风险
谷禾健康 益生菌被世界卫生组织定义为“当摄入足够量时，可为宿主带来健康益处的活微生物”。近年来，随着人们发现其可用于预防、减轻或治疗特定疾病以及改善健康，益生菌在食品和临床治疗中的应用越来越广泛。
大量研究表明，益生菌有助于维持肠道菌群的平衡，促进消化和吸收…
【python】Python航空公司客户价值数据分析（代码+论文）【独一无二】
👉博__主👈：米码收割机 👉技__能👈：C/Python语言 👉公众号👈：测试开发自动化【获取源码商业合作】 👉荣__誉👈：阿里云博客专家博主、5…
探索数据宇宙：深入解析大数据分析与管理技术
✨✨ 欢迎大家来访Srlua的博文（づ￣3￣）づ╭❤～✨✨ 🌟🌟 欢迎各位亲爱的读者，感谢你们抽出宝贵的时间来阅读我的文章。 我是Srlua，在这里我会分享我的知识和经验。&#x…
【tableau学习笔记】tableau无法连接数据源
【tableau学习笔记】tableau无法连接数据源
背景：
学校讲到Tableau，兴奋下载Kaggle Excel，一看后缀CSV，导入Tableau发现报错“tableau无法连接数据源”，自作聪明改为后缀XLSX，bug依旧。
省流：…
AI大语言模型【成像光谱遥感技术】ChatGPT应用指南
遥感技术主要通过卫星和飞机从远处观察和测量我们的环境，是理解和监测地球物理、化学和生物系统的基石。ChatGPT是由OpenAI开发的最先进的语言模型，在理解和生成人类语言方面表现出了非凡的能力。本文重点介绍ChatGPT在遥感中的应用，人工智能…
数字化转型导师坚鹏：BLM证券公司数字化转型战略
BLM证券公司数字化转型战略
——以BLM模型为核心，实现知行果合一
课程背景：
很多证券公司存在以下问题：
不知道如何系统地制定证券公司数字化转型战略？
不清楚其它证券公司数字化转型战略是如何制定的？
不知道…
ChatGPT支持下的PyTorch机器学习与深度学习技术应用
近年来，随着AlphaGo、无人驾驶汽车、医学影像智慧辅助诊疗、ImageNet竞赛等热点事件的发生，人工智能迎来了新一轮的发展浪潮。尤其是深度学习技术，在许多行业都取得了颠覆性的成果。另外，近年来，Pytorch深度学习框架受…
机器学习笔记 探索性数据分析(EDA) 中的配对图详述
一、介绍 在数据科学领域，理解和分析数据的第一步涉及全面的探索性数据分析（EDA）。这个过程对于识别模式、识别异常和建立假设至关重要。在 EDA 可用的众多工具中，配对图作为一种基本可视化技术脱颖而出，可提供多方面的数据视图。本文探讨了机器学习中的配对图，并解释了如…
数据分析-Pandas数据的探查面积图
数据分析-Pandas数据的探查面积图
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表&…
网络爬虫部分应掌握的重要知识点
目录 一、预备知识1、Web基本工作原理2、网络爬虫的Robots协议 二、爬取网页1、请求服务器并获取网页2、查看服务器端响应的状态码3、输出网页内容 三、使用BeautifulSoup定位网页元素1、首先需要导入BeautifulSoup库2、使用find/find_all函数查找所需的标签元素 四、获取元素的…
数据审计 -本福德定律 Benford‘s law （sample database classicmodels _No.6）
数据审计 -本福德定律 Benford’s law
准备工作，可以去下载 classicmodels 数据库资源如下 [ 点击：classicmodels]
也可以去我的博客资源下载 文章目录 数据审计 -本福德定律 Benfords law 前言一、什么是 本福德定律？二、数学公式三、应用…
电脑数据丢失是什么原因 易我数据恢复软件下载 easyrecovery数据恢复软件下载 电脑数据删除了怎么恢复 电脑数据库损坏了怎么找回
目录
一、电脑数据丢失是什么原因
二、电脑数据丢失如何恢复
三、EasyRecovery恢复电脑数据的方法介绍 电脑是我们大家熟悉并且常用的数据存储设备，也是综合性非常强的数据处理设备。对于电脑设备来讲，最主要的数据存储介质是硬盘，电脑硬…
数据分析-Pandas数据的直方图探查
数据分析-Pandas数据的直方图探查
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表&…
990-28产品经理:Different types of IT risk 不同类型的IT风险
Your IT systems and the information that you hold on them face a wide range of risks. If your business relies on technology for key operations and activities, you need to be aware of the range and nature of those threats. 您的IT系统和您在其中持有的信息面临…
数据分析-Pandas数据的画图设置
数据分析-Pandas数据的画图设置
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表&#x…
ChatGPT数据分析应用——漏斗分析
ChatGPT数据分析应用——漏斗分析
漏斗分析在数据分析中也比较常用，主要是用于发现各个转化流程中哪个环节有问题。接下来我们让ChatGPT解释这个方法的概念并提供相应的案例。发送如下内容给ChatGPT。 ChatGPT收到上述内容后，返回如下结果。
漏斗…
数据挖掘实战 —— 抖音用户浏览行为数据分析与挖掘(代码部分）
文章： 数据挖掘实战 —— 抖音用户浏览行为数据分析与挖掘(一） 数据挖掘实战 —— 抖音用户浏览行为数据分析与挖掘(二） 数据挖掘实战 —— 抖音用户浏览行为数据分析与挖掘(总） 代码： 数据挖掘实战 —— 抖音用户浏览行为数据分析与挖掘(代码…
Python数据可视化库之bashplotlib使用详解
概要
在数据可视化领域，Python拥有许多优秀的库，如Matplotlib、Seaborn等，它们可以创建漂亮而复杂的图形。但是，有时候我们可能需要在终端中绘制简单的图形，这时候Bashplotlib就派上了用场。Bashplotlib是一个Python库，可以在终端中绘制基本的图形，如条形图、散点图等。…
Python数据分析案例38——我国个人工作总收入影响因素分析
案例背景
偶然之间找到了CSFP(中国家庭追踪调查)的数据集，一个很全的家庭调查数据集。所以就想对大家现在最关心的工资和其影响因素做一点分析。
得到的结论还挺有价值的，有符合逻辑的，也有反直觉的。 数据来源
CFPS由北京大学中国社会科学…
每天一个数据分析题（一百九十）
关于主成分分析和因子分析，下列说法正确的是（）
A. 各个主成分之间是相互正交的
B. 各个因子之间不是相互正交的
C. 各个主成分的含义通常是明确的
D. 各个因子的含义通常是明确的
题目来源于CDA模拟题库
点击此处获取答案
flink重温笔记（十）：Flink 高级 API 开发——flink 四大基石之 State（涉及Checkpoint）
Flink学习笔记 前言：今天是学习 flink 的第 10 天啦！学习了 flink 四大基石之 State （状态），主要是解决大数据领域增量计算的效果，能够保存已经计算过的结果数据状态！重点学习了 state 的类型划…
数字化转型导师坚鹏：金融科技咨询方法论
金融科技咨询方法论
——方法、做法、演法、心法 课程背景：
数字化转型背景下，很多机构存在以下问题：
不知道先进的金融科技咨询方法论？
不知道如何运作金融科技咨询项目？
不知道如何汇报咨询项目关键成果&…
R语言数学建模（三）—— 模型工作流
R语言数学建模（三）—— 模型工作流 文章目录 R语言数学建模（三）—— 模型工作流前言一、模型工作流1.1 模型的起点和终点在哪里？1.2 Workflow基础1.3 将原始变量添加到workflow()1.4 workflow()如何使用formula基于树的…
第三篇【传奇开心果系列】Python的自动化办公库技术点案例示例：深度解读Pandas股票市场数据分析
传奇开心果博文系列 系列博文目录Python的自动化办公库技术点案例示例系列 博文目录前言一、Pandas进行股票市场数据分析常见步骤和示例代码1. 加载数据2. 数据清洗和准备3. 分析股票价格和交易量4. 财务数据分析 二、扩展思路介绍1. 技术指标分析2. 波动性分析3. 相关性分析4.…
【Python数据分析系列】读取Excel文件中的多个sheet表（案例+源码）
这是我的第231篇原创文章。
一、引言 在Python中，您可以使用pandas库来便捷地读取Excel文件中的多个sheet。假如我有一个光谱响应函数.xlsx的excel文件，里面有多个sheet表： 一个excel文件相当于一个数据库，存着一张或多张数据表&…
对接华泰极速行情丨DolphinDB INSIGHT 插件使用教程
INSIGHT 是华泰证券依托大数据存储、实时分析等领域的技术积累，整合接入国内多家交易所高频行情数据，为投资者提供集行情接入、推送、回测、计算及分析等功能于一体的行情数据服务解决方案。基于 INSIGHT 官方提供的行情数据服务 C SDK（TCP 版…
【python】爬取链家二手房数据做数据分析【附源码】
一、前言、 在数据分析和挖掘领域中，网络爬虫是一种常见的工具，用于从网页上收集数据。本文将介绍如何使用 Python 编写简单的网络爬虫程序，从链家网上海二手房页面获取房屋信息，并将数据保存到 Excel 文件中。
二、效果图&#…
1688高复购率产品揭秘！电商卖家如何打造潜在爆款？！
在竞争激烈的电商市场中，精准定位爆款产品是每个卖家都追求的目标。而复购率作为一个重要的指标，可以帮助卖家更好地了解消费者的购买行为和需求，从而精准地挑选出具有潜力的爆款产品。
一、反映客户忠诚度
复购率反映了消费者对产品的满意…
Python数据处理实战（0）-常用功能以及操作
系列文章： 0、基本常用功能及其操作（本文操持更新）
1，20G文件，分类，放入不同文件，每个单独处理
2，数据的归类并处理
3，txt文件指定的数据处理并可视化作图
4…
【python】六个常见爬虫案例【附源码】
大家好，我是博主英杰，整理了几个常见的爬虫案例，分享给大家，适合小白学习
一、爬取豆瓣电影排行榜Top250存储到Excel文件 近年来，Python在数据爬取和处理方面的应用越来越广泛。本文将介绍一个基于Python的爬虫程序&a…
数据分析-Pandas数据y轴双坐标设置
数据分析-Pandas数据y轴双坐标设置
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表&…
无人机生态环境监测、图像处理与GIS数据分析
构建“天空地”一体化监测体系是新形势下生态、环境、水文、农业、林业、气象等资源环境领域的重大需求，无人机生态环境监测在一体化监测体系中扮演着极其重要的角色。通过无人机航空遥感技术可以实现对地表空间要素的立体观测，获取丰富多样的地理空间数…
NineData云原生智能数据管理平台新功能发布｜2024年2月版
SQL开发：全功能支持百度云 GaiaDB
介绍：支持通过 SQL 开发所有能力管理 GaiaDB 实例。更多信息，请参见：真香！NineData SQL 开发全面适配 GaiaDB
场景：企业使用 GaiaDB 管理企业数据，需要一个一…
数据分析-Pandas数据分组箱线图
数据分析-Pandas数据分组箱线图
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表&#x…
DataFunSummit 2023：洞察现代数据栈技术的创新与发展（附大会核心PPT下载）
随着数字化浪潮的推进，数据已成为企业竞争的核心要素。为了应对日益增长的数据挑战，现代数据栈技术日益受到业界的关注。DataFunSummit 2023年现代数据栈技术峰会正是在这样的背景下应运而生，汇聚了全球数据领域的精英，共同探讨现…
近地面无人机植被定量遥感与生理参数反演技术应用
李老师（副教授），长期从事无人机近地面植被遥感，植被生理参数，多角度遥感，RGB/多光谱/高光谱数据处理，LiDAR点云处理等领域研究工作，具有资深的技术底蕴和专业背景。
专题一、近十年…
创新驱动！HubSpot引领CRM革命
在当今高速发展的数字化时代，企业的国际化布局和市场开拓已经成为了一种必然的趋势。随着企业出海步伐的加快，有效的客户关系管理（CRM）和营销自动化工具变得尤为重要。这就是HubSpot发力的领域。HubSpot，作为一家领先的…
2024年1月京东牛奶乳品行业分析：TOP10品牌销量及销额排行榜
鲸参谋监测的京东平台1月份牛奶乳品市场销售数据已出炉！
根据鲸参谋电商数据分析平台显示，今年1月份，京东平台上牛奶乳品的销量约1600万件，环比上个月增长87%，同比去年下滑16%；销售额约12亿元，…
长沙银行数字化案例入选《2024IDC中国金融业数据资产管理实践与案例报告》
全球数字化经济浪潮下，以数字技术为代表的的新一轮技术变革正跨步引领经济发展趋势。中国金融业作为2026年底数据要素应用总体目标所聚焦的十二个行业和领域之一，金融业数据资产管理成功经验正逐步被探索应用。 近日，全球权威知名市场调研机构…
python数据分析numpy基础之cumprod求数组累计积
1 python数据分析numpy基础之cumprod求数组累计积
python的numpy库的cumprod()函数，用于获取数组沿指定轴每个位置的累计积(cumulative product)。
本文的累计积是指第1个数到第n个数的积。比如数组a[a1,a2,a3,a4,a5]，那么第1个数的累计积为a1…
Hive案例分析之消费数据
Hive案例分析之消费数据
部分数据展示
1.customer_details
customer_id,first_name,last_name,email,gender,address,country,language,job,credit_type,credit_no
1,Spencer,Raffeorty,sraffeorty0dropbox.com,Male,9274 Lyons Court,China,Khmer Safety,Technician III,jc…
2024宠物行业未来发展趋势：京东宠物健康（宠物营养保健和医疗）市场品类数据分析报告
近段时间，广州某知名宠物医院的医疗事故正在被大众热议，也让越来越多从业者开始关心宠物医疗行业的未来形势。
在2022年下半年，京东平台专门设立了一个一级大类目：宠物健康（将其从原本的宠物生活类目中独立出来&#…
电商API接口与数据分析、数据挖掘的结合
电商API接口与数据分析的结合为电子商务领域带来了革命性的变化。这种结合不仅提高了数据的可用性和价值，还为商家提供了深入的市场洞察和决策支持。
以下是电商API接口与数据分析结合的几个关键点：
实时数据获取：API接口使得电商平台能够实…
基于PyTorch深度学习实战入门系列-(2)Numpy基础上
导入Numpy模块 import numpy as np创建数组（一维数组、小数数组、二维数组） # 创建一个一维数组
n1 np.array([1, 2, 3])
# 创建一个含有小数的一维数组
n2 np.array([0.1, 0.2, 0.3])
# 创建一个简单的二维数组
n3 np.array([[1, 2], [3, 4]])
print…
Spark实战-基于Spark日志清洗与数据统计以及Zeppelin使用
Saprk-日志实战
一、用户行为日志
1.概念
用户每次访问网站时所有的行为日志(访问、浏览、搜索、点击)用户行为轨迹，流量日志2.原因
分析日志：网站页面访问量网站的粘性推荐3.生产渠道
(1)Nginx(2)Ajax4.日志内容 日志数据内容：1.访问的…
电商数据分析17——电商平台评价系统的数据分析与管理
电商平台评价系统的数据分析与管理
在数字经济时代，电商平台已成为消费者购物的首选。随之而来，评价系统作为连接消费者与产品的重要桥梁，对于购买决策和产品改进起着至关重要的作用。通过数据分析来优化评价管理，不仅可以提升产…
Hive招聘数据分析
招聘数据分析
一、部分数据展示
鞍山易升科技有限公司,大专,1年工作经验,数据分析师,1,6000,少于50人,计算机软件,鞍山,辽宁
河北展源新能源科技有限公司,大专,3-4年工作经验,数据分析师,2,7000,150-500人,新能源,保定,河北
河北奥润顺达窗业有限公司,本科,1年工作经验,数据分…
数据可视化原理-腾讯-分类散点图
在做数据分析类的产品功能设计时，经常用到可视化方式，挖掘数据价值，表达数据的内在规律与特征展示给客户。 可是作为一个产品经理，（1）如果不能够掌握各类可视化图形的含义，就不知道哪类数据该用…
电商数据分析18——电商广告投放的数据分析与优化
目录 写在开头1. 电商广告投放的挑战与机遇1.1 广告投放的主要目标与挑战1.2 广告数据分析的价值 2. 数据分析在广告投放中的应用2.1 目标受众分析与精准定位2.2 广告效果评估与ROI分析2.3 A/B测试与广告内容优化 3. 广告投放优化的实践案例3.1 案例分享：精准定向提…
每天一个数据分析题（一百九十六）
在多元线性回归模型的自变量选择方法中，关于向后回归法和逐步回归法的描述，以下哪些是正确的？
A. 向后回归法开始时包含所有自变量，并逐步剔除每个不显著的变量。
B. 逐步回归法结合了向前回归法和向后回归法，可以在…
可视化图表：柱坐标系与对应图表详解
一、柱坐标系及其构成
柱状坐标系是一种常见的可视化图表坐标系，用于显示柱状图（也称为条形图）的数据。它由两个相互垂直的轴组成，一个是水平轴（X轴），另一个是垂直轴（Y轴࿰…
电力载波远程抄表系统
在这个科技飞速发展的时代，你还在为每月爬楼梯、敲门抄电表而烦恼吗？电力载波远程抄表系统，就是为你解决这个小痛点的黑科技！
想象一下，清晨醒来，一杯咖啡在手，手机轻轻一点，本 月电…
高校水电预付费系统有什么作用？
Hey小伙伴们，今天来聊聊咱们大学里的一个超级实用的设施——水电预付费系统！你是不是还在为每个月的水电账单烦恼呢？别担心，这个系统就是你的生活小帮手！
首先，想象一下这 样的场景：开学初&…
【代码】Python3｜无GUI环境中使用Seaborn作图的学习路线及代码（阴影折线图）
我有个需求是需要画图，让GPT帮我生成了一下学习计划。 学习路线依照GPT的来的，使用的Prompt工具是https://github.com/JushBJJ/Mr.-Ranedeer-AI-Tutor。 文章目录 PrerequisiteMain Curriculum1.1 Seaborn介绍Seaborn基础保存图形为文件练习 1.2 单变量数…
数据分析之数据预处理、分许建模、可视化
数据分析通常包括数据预处理、建模和可视化这三个主要步骤。下面我会简要介绍每个步骤的内容： 数据预处理：数据预处理是数据分析的第一步，旨在清洗和准备原始数据以便后续分析。这个步骤通常包括以下任务： 缺失值处理：…
ChatGPT数据分析应用——热力图分析
ChatGPT数据分析应用——热力图分析
热力图分析既可以算作一种可视化方法，也可以算作一种分析方法，主要用于直观地展示数据的分布情况。接下来我们让ChatGPT解释这个方法的概念并提供相应的案例。发送如下内容给ChatGPT。 ChatGPT收到上述内容后&…
案例研究｜辛格林电梯借助DataEase实现数据整合与智能展示
辛格林电梯（SIGLEN）于2012年创立，是电梯领域的领军品牌之一。该公司总部位于广东佛山，是全国首批获得A1级电梯制造资质的企业，拥有省级工程技术研究中心。辛格林电梯专注于研发和生产高品质电梯产品，涵盖别…
ChatGPT在地学、GIS、气象、农业、生态、环境等领域中的应用
以ChatGPT、LLaMA、Gemini、DALLE、Midjourney、Stable Diffusion、星火大模型、文心一言、千问为代表AI大语言模型带来了新一波人工智能浪潮，可以面向科研选题、思维导图、数据清洗、统计分析、高级编程、代码调试、算法学习、论文检索、写作、翻译、润色、文献辅助…
MapReduce-Partition分区
Partition分区
1.默认Partitioner分区
(key.hashcode() & Interger.MAX_VALUE) % numReduceTasksnumReduceTasks默认为：1
//输出文件一个默认分区根据key的hashCode对ReduceTasks个数取模。
用户控制那个key存储到那个分区2.手动设置分区
//设置分区
job.set…
最新ChatGPT支持下的PyTorch机器学习与深度学习
近年来，随着AlphaGo、无人驾驶汽车、医学影像智慧辅助诊疗、ImageNet竞赛等热点事件的发生，人工智能迎来了新一轮的发展浪潮。尤其是深度学习技术，在许多行业都取得了颠覆性的成果。另外，近年来，Pytorch深度学习框架受…
‘ jupyter ‘ 不是内部或外部命令，也不是可运行的程序或批处理文件。
安装anaconda后，在 Dos黑窗口 运行 jupyter notebook 的两个问题 原因：没配置环境变量 解决方法：
在 系统环境变量Path 中 添加两个地址
这里以anaconda安装在 D:\anaconda\install 下为例 （根据个人安装具体位置而定ÿ…
python数据分析numpy基础之布尔数组方法sum和any和all
1 python数据分析numpy基础之布尔数组方法sum和any和all
在前面文章介绍的sum、mean、std等统计方法中，布尔值True被转为1，False被转为0。而any和all，则将非0转为True，0转为False。
1.1 sum()
python的numpy库的sum()函数&…
18个惊艳的可视化大屏（第23辑）：电子政务，一目了然如胸。
hello，我是贝格前端工场老司机，这是第23期了，本次带来可视化大屏在电子政务领域的应应用案例，喜欢文章的别忘点赞关注，文章底部也有其他行业的案例。 数据展示与监控：
可视化大屏可以将政务数据以图表、地…
PandasAI—让AI做数据分析
安装 pip install pandasai !pip install --upgrade pandas pandasai 导入依赖项
import pandas as pdfrom pandasai import PandasAIfrom pandasai.llm.openai import OpenAI使用pandas创建一个数据框
df pd.DataFrame({"country": ["United States",…
数据可视化原理-腾讯-3D网格热力图
在做数据分析类的产品功能设计时，经常用到可视化方式，挖掘数据价值，表达数据的内在规律与特征展示给客户。 可是作为一个产品经理，（1）如果不能够掌握各类可视化图形的含义，就不知道哪类数据该用…
Python数据分析实验一：Python数据采集与存储
目录 一、实验目的与要求二、实验过程三、主要程序清单和运行结果1、爬取 “中国南海网” 站点上的相关信息2、爬取天气网站上的北京的历史天气信息 四、程序运行结果五、实验体会 一、实验目的与要求
1、目的： 理解抓取网页数据的一般处理过程；熟悉应用…
深入解读可视化运维的内容、领域、价值和系统搭建
大家好，我是贝格前端工场，接触过很多可视化运维项目，包括IT、电力、物流、生产制造等，本文系统总结一下可视化运维相关知识，老规矩别忘了关注转发，有事请私信。 一、可视化运维定义
可视化运维是指通过可视…
R语言系列1——R语言基础：入门篇
目录 写在开头：1. R语言的基本语法1.1 变量与数据类型1.2 基本操作符与表达式 2. 数据结构简介2.1 向量(Vector)2.2 矩阵(Matrix)2.3 数组(Array)2.4 数据框(Data Frame)2.5 列表(List) 3. 基础函数与包的使用3.1 常用内置函数3.2 安装与加载R包3.2.1 安装R包3.2.2 …
一篇文章带你了解Python数据分析
目录
一、什么是数据分析？
二、为什么学习数据分析？
三、数据分析实现流程 一、什么是数据分析？
是把隐藏在一些看似杂乱无章的数据背后的信息提炼出来，总结出所研究对象的内在规律。
使得数据的价值最大化 指定促销活动的方…
数据可视化基础篇-图形语法
当我们在制作仪表盘或其他数据可视化时离不开对图表的选择，不同的数据信息该怎么选择图表可能是不少人会遇到的问题。
要解决这个问题我们首先需要理解数据可视化的生成规律或者说是“语法”，目前主流的数据可视化理论认为，可视化是由基础标…
「AI工程师」数据处理与分析-工作指导
工作指导书
一、工作职责 负责数据的收集、清洗、整合和处理，确保数据质量和准确性。进行数据分析和挖掘，提取有价值的信息，为业务决策提供支持。构建和维护数据处理和分析的流程和工具，提高数据处理效率。与其他团队成员合作，共同解决数据处理和分析过程中遇到的问题。二…
R统计学2 - 数据分析入门问题21-40
往期R统计学文章：
R统计学1 - 基础操作入门问题1-20
21. 如何对矩阵按行 (列) 作计算？
使用函数 apply()
vec 1:20
# 转换为矩阵
mat matrix (vec , ncol4)
# [,1] [,2] [,3] [,4]
# [1,] 1 6 11 16
# [2,] 2 7 12 17
# [3,] …
【DevOps基础篇】容器化架构基础设施监控方案
【DevOps基础篇】容器化架构基础设施监控方案 目录 【DevOps基础篇】容器化架构基础设施监控方案要监视什么不同监控系统方案比较1. Datadog2. Prometheus3. ELK（Elasticsearch、Logstash、Kibana）4. Sysdig5. 自行打造！如何选择总结推荐超级课程： Docker快速入门到精通
当…
数据分析-Pandas两种分组箱线图比较
数据分析-Pandas两种分组箱线图比较
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表&am…
【数据分析】在Python中，使用apriori算法挖掘药材的频繁项集，并挖掘关联规则
本文代码及数据下载 文章目录 使用Pandas和Mlxtend进行关联分析：从药物处方数据到关联规则开始之前加载和准备数据发现频繁项集生成关联规则美化输出保存结果到Excel绘制关联规则网络图 使用Pandas和Mlxtend进行关联分析：从药物处方数据到关联规则
关联…
【最新版】ChatGPT/GPT4科研应用与AI绘图论文写作（最新增加Claude3、Gemini、Sora、GPTs技术及AI领域中的集中大模型的最新技术）
2023年随着OpenAI开发者大会的召开，最重磅更新当属GPTs，多模态API，未来自定义专属的GPT。微软创始人比尔盖茨称ChatGPT的出现有着重大历史意义，不亚于互联网和个人电脑的问世。360创始人周鸿祎认为未来各行各业如果不能搭上这班车…
Android 学习之追踪应用的安装情况
先上结论，急用的话直接看结论 结论一、借助 API 读取安装信息，然后上报二、借助手动埋点，然后上报三、对比 前提过程 结论
一、借助 API 读取安装信息，然后上报
通过 PackageManager 的 API，我们可以得知自身应用安装…
每天一个数据分析题（一百八十五）
给定下述Python代码段，试问哪个选项正确描述了该代码段的功能？ data_raw[‘gender’] data_raw[‘gender’].map({‘Male’: 1, ‘Female’: 0})
A. 代码中对gender变量进行了独热编码(One-Hot Encoding)，并将gender中的缺失值填充为类别平…
72_Pandas.DataFrame保存并读取带pickle的系列（to_pickle、read_pickle）
72_Pandas.DataFrame保存并读取带pickle的系列（to_pickle、read_pickle）
要将 pandas.DataFrame、pandas.Series 对象保存为 pickle 文件，请使用 to_pickle() 方法，并使用 pd.read_pickle() 函数读取保存的 pickle 文件。
在此对…
temu跨境电商按关键字搜索temu商品 API 返回值说明
temu.item_search
公共参数
前往测试 名称 类型 必须 描述 key String 是 调用key（必须以GET方式拼接在URL中） secret String 是 调用密钥 api_name String 是 API接口名称（包括在请求地址中）[item_sear…
第五篇【传奇开心果系列】Python的自动化办公库技术点案例示例：深度解读Pandas在教育数据和研究数据处理领域的应用
传奇开心果博文系列 系列博文目录Python的自动化办公库技术点案例示例系列 博文目录果果老师推荐🔥🔥🔥🌹🌹🌹果子哥个人微信：lxm1093220242前言一、Pandas 在教育和学术研究中的常见应用介绍二…
Hive超市零售案例
超市零售案例
一、部分数据展示
Fiskars 剪刀| 蓝色,61,中国,华东,杭州,用品,曾惠,2,浙江,办公用品,US-2019-1357144,130
GlobeWeis 搭扣信封| 红色,43,中国,西南,内江,信封,许安,2,四川,办公用品,CN-2019-1973789,125
Cardinal 孔加固材料| 回收,4,中国,西南,内江,装订机,许…
数字化转型导师坚鹏：银行业科技产品及零售贷款咨询方法与案例
银行业科技产品及零售贷款咨询方法与实战案例 课程背景：
数字化转型背景下，很多机构存在以下问题：
不知道银行业科技产品咨询方法？
不知道零售贷款咨询方法与案例？
不知道信贷中台咨询方法与案例？
…
数据分析-Pandas如何画图验证数据随机性
数据分析-Pandas如何画图验证数据随机性
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表…
Pandas教程16：DataFrame列标题批量重命名+空df数据判断+列名顺序重排
---------------pandas数据分析集合--------------- Python教程71：学习Pandas中一维数组Series Python教程74：Pandas中DataFrame数据创建方法及缺失值与重复值处理 Pandas数据化分析，DataFrame行列索引数据的选取，增加，…
HubSpot和NETFARMER是什么关系？
HubSpot和NETFARMER之间的关系是合作伙伴关系，特别是在亚太地区。NETFARMER作为HubSpot的合作伙伴，专注于帮助企业在海外市场获得更多客户，实现业务增长和成功。
NETFARMER具备丰富的经验和专业的营销团队，他们深入了解亚太地区各…
R语言系列2——R语言数据处理技巧
目录 写在开头1. 数据导入与导出1.1 基础操作详解1.1.1 导入数据1.1.2 导出数据 1.2 高级技巧详解1.2.1 自定义导入1.2.2 自定义导出 1.3 常见问题 2. 数据清洗基础2.1 缺失值处理2.1.1 删除含缺失值的行或列2.1.2 填充缺失值2.1.3 预测模型填充2.1.4 使用特定值填充 2.2 数据类…
【数据分析】专栏文章索引
为了方便 快速定位 和 便于文章间的相互引用等 作为一个快速准确的导航工具
数据分析 目录：
（一）数据分析介绍
（二）环境搭建
（三）matploatlib绘图
（四）numpy
&…
GeoPy1.1 地理数据处理入门
原作者：Damon 高校教师，中科院 GIS 博士
本文为原文章基础上，加上自己以及GPT4.0的总结整理而来
原活动链接 目录 前言小练习：求一周的平均温度小练习：将文件夹下的文件路径都打印出来：小练习：…
每天一个数据分析题（一百九十九）
指标体系由各种不同类型指标构成，以下关于各个指标类型的描述正确的是（）
A. 一般业务方最关心的指标被认为是根指标。
B. 根指标与最常用的派生指标结合，生成组合指标。
C. 根指标与最常用的维度取值相结合，生成组合…
Python数据处理实战（5）-上万行log数据提取并分类进阶版
系列文章：
0、基本常用功能及其操作
1，20G文件，分类，放入不同文件，每个单独处理
2，数据的归类并处理
3，txt文件指定的数据处理并可视化作图
4，上万行log数据提取并作图进阶版
…
python数据分析numpy基础之sort对数组排序
1 python数据分析numpy基础之sort对数组排序
numpy数组和python的内置列表类似，也可以进行排序，numpy.sort()返回排序后的数组副本，而ndarray.sort()对数组进行就地排序，会改变原数组。
用法
numpy.sort(a, axis-1, kindNone, …
数据分析师必备：五款数据可视化工具对比与推荐
在数字化时代，数据可视化产品成为了企业和个人进行数据分析、信息呈现的重要工具。市面上涌现了众多数据可视化产品，它们各具特色，功能各异。本文为大家简要介绍五款市面上热门的数据可视化产品。
一、Tableau
Tableau是一款功能强大的数据…
附近商圈 | EXCEL查询经纬度附近的商圈
需求 最近有用户向笔者咨询如何使用小O地图“查找坐标附近的商圈”的需求。
小O地图EXCEL插件的地理工具，坐标转换地址功能，提供根据经纬度坐标转换地址详细信息的功能，在返回的地址信息中，包含有商圈信息。 如下图，输…
探索性数据分析EDA的数据可视化
大家好，数据可视化是探索性数据分析的重要组成部分，因为它有助于分析和可视化数据，以获得对数据分布、变量之间的关系和潜在异常值的启示性见解。Python具有丰富的库，可以快速高效地创建可视化。
在Python中，通常使用…
设备点检管理系统的实施
设备点检管理系统的实施包括以下关键步骤：
确定检查对象和范围：根据生产需求和设备重要性，确定需要纳入点检系统的设备范围，以便有针对性地进行后续管理与监控。
制定点检计划：制定详细的点检计划，包括检…
8个常用数据分析方法，轻松搞定各种业务分析
对于数据分析思路的培养是一个不断练习积累的过程，刚入行的小白可以先套用一些常用的数据分析方法或模型，掌握基础的分析思路。本文给大家讲解8个常见的数据分析方法，帮助大家快速上手数据分析，解决实际工作问题。 1、杜邦分析法…
数据分析-Pandas最简单的方法画矩阵散点图
数据分析-Pandas直接画矩阵散点图
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表&…
“遥感新纪元：GPT技术引领地球观测的智慧革新“
遥感技术主要通过卫星和飞机从远处观察和测量我们的环境，是理解和监测地球物理、化学和生物系统的基石。ChatGPT是由OpenAI开发的最先进的语言模型，在理解和生成人类语言方面表现出了非凡的能力。本文重点介绍ChatGPT在遥感中的应用，人工智能…
HelpLook AI 升级！一键生成SEO设置关键要素
| 现代SEO营销为何选择与AI同行
众多企业面临SEO优化日趋复杂的挑战，投入的时间和资源不断攀升。然而，HelpLook利用AI技术，一键完成SEO关键词和描述的生成，无需额外付费或繁琐操作，轻松提升网站曝光和点击率ÿ…
Hive函数 EXPLODE 和 POSEXPLODE 使用示例
Hive函数 EXPLODE 和 POSEXPLODE 使用示例
在Hive中， explode 和 posexplode 是两个常用的函数，用于处理复杂数据类型，如数组和map。以下是它们的具体应用示例和介绍：
1. 创建了一个名为 students 的表，包括 group_n…
2024考研国家线公布，各科分数线有哪些变化？考研国家线哪些涨了，哪些跌了？可视化分析告诉你
结论在文章结尾 2024考研国家线 一、近五年国家线趋势图-学术硕士 文学 管理学 工学照顾专业 体育学 交叉学科 军事学 历史学 理学 享受少数名族照顾政策的考生 中医类照顾专业 教育类 艺术类 医学 工学 哲学 法学 农学 经济学 二、近五年国家线趋势图-专业硕士 中医 应用心理 …
用Origin快速拟合荧光寿命、PL Decay (TRPL)数据分析处理
需要准备材料：Origin、PL Decay数据txt文件
首先打开Origin画图软件
导入数据，按照下图箭头操作直接导入
双击你要导入的PL Decay的txt数据文件，然后点OK
继续点OK
数据导入后首先删除最大光子数之前的无效数据，分析的时候用…
API分享：淘宝拍立淘API接口|按图搜索商品列表API|电商爆品搜索API
今天来跟大家分享一个非常有用的API，以图搜索商品列表API：item_search_img。通过此API可以实现传入一个图片链接，来获取到该图片上的商品信息，商品列表，支持翻页展示。
item_search_img-按图搜索淘宝商品（…
郭炜老师mooc第十一章数据分析和展示(numpy,pandas, matplotlib)
多维数组库numpy numpy创建数组的常用函数 # numpy数组import numpy as np #以后numpy简写为np
print(np.array([1,2,3])) #>>[1 2 3]
print(np.arange(1,9,2)) #>>[1 3 5 7] 不包括9
print(np.linspace(1,10,4)) #>>[ 1. 4. 7. 10.]
# linespace(x,y,n)&…
Apache Doris 2.1.0 版本发布：开箱盲测性能大幅优化，复杂查询性能提升 100%
亲爱的社区小伙伴们，我们很高兴地向大家宣布，在 3 月 8 日我们引来了 Apache Doris 2.1.0 版本的正式发布，欢迎大家下载使用。
在查询性能方面， 2.1 系列版本我们着重提升了开箱盲测性能，力争不做调优的情况下取得较好…
拼多多商品详情接口数据采集
拼多多商品详情接口数据采集是一个相对专业的任务，通常涉及到使用API接口或第三方采集工具等技术手段。以下是一些基本步骤和注意事项，供您参考：
请求示例，API接口接入Anzexi58 申请开发者账号：如果您打算使用API接口…
BI数据分析案例详解：零售人货场分析该怎么做？
在当今快节奏、高竞争的商业环境中，人货场分析已成为企业成功的关键因素之一。科技的进步和数据的日益丰富使得企业对人流、货物流和场地布局的深入洞察变得愈发重要。通过科学的人货场分析，企业能更好地理解顾客行为、优化供应链、提高运营效率…
低代码与数据分析：重塑软件开发与数据分析的未来
随着技术的不断进步和数字化转型的加速，软件开发和数据分析已经成为了许多企业不可或缺的核心能力。在这个过程中，低代码平台以其高效、灵活的特性，正逐渐在软件开发领域崭露头角。同时，数据分析技术也在不断发展，为企…
数据分析-Pandas多维数据平行坐标可视化
数据分析-Pandas多维数据平行坐标可视化
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表…
数字化转型导师坚鹏：金融机构数字化运营
金融机构数字化运营 课程背景：
很多金融机构存在以下问题：
不清楚数字化运营对金融机构发展有什么影响？
不知道如何提升金融机构数字化运营能力？
不知道金融机构如何开展数字化运营工作？
课程特色：…
PHAMB: 病毒数据分箱
Genome binning of viral entities from bulk metagenomics data | Nature Communications
安装
### New dependencies *Recommended*
conda install -c conda-forge mamba
mamba create -n phamb python3.9
conda activate phamb
mamba install -c conda-forge -c biocond…
举个栗子！Alteryx 技巧（10）：解决连数据库时出现中文乱码的问题
在日常工作中，我们经常遇到需要连接 Oracle 数据库的场景。当采用 ODBC 的方式进行连接时，可能会出现中文乱码。那么，应该如何解决中文乱码这个问题呢？ 本期《举个栗子！Alteryx 技巧》，我们就来分享方法吧…
生态碳汇涡度相关监测与通量数据分析
朱老师（副教授）：来自国内重点高校，长期从事涡度通量观测与分析研究，发表SCI论文多篇，主持国家与地方科研项目多个，在生态环境数据处理与分析中具有丰富的实践项目经验。 本文基于MATLAB语言、以…
画图实战-Python实现某产品全年销量数据多种样式可视化
画图实战-Python实现某产品全年销量数据多种样式可视化 学习心得Matplotlib说明什么是Matplotlib？Matplotlib特性Matplotlib安装 产品订单量-折线图某产品全年订单量数据数据提取和分析绘制折线图 产品订单&销售额-条形图某产品全年订单&销售额数据绘制条形…
提升数据分析效率，选择IBM SPSS Statistics专业统计分析软件
在当今信息爆炸的时代，数据已经成为决策的重要依据。对于研究人员、学者、企业管理者等群体来说，如何高效地进行数据分析并得出准确结论至关重要。而IBM SPSS Statistics作为一款专业统计分析软件，为用户提供了强大的工具和功能，助…
CDA-LevelⅡ【考题整理-带答案】
关于相关分析中应注意的问题，下面说法错误的是：B 如果两变量间的相关系数为0，则说明二者独立 。解释：只能说明两者不存在线性相关关系现通过参数估计得到一个一元线性回归模型为y3x4，在回归系数检验中下列说法错误的是…
Python中Pandas常用函数及案例详解
Pandas是一个强大的Python数据分析工具库，它为Python提供了快速、灵活且表达能力强的数据结构，旨在使“关系”或“标签”数据的操作既简单又直观。Pandas的核心数据结构是DataFrame，它是一个二维标签化数据结构，可以看作是一个表格…
1月笔记本电脑行业分析：多品牌下滑但ThinkPad逆势增长！
2024年1月，笔记本行业市场格局出现较大的变化。长期在京东平台保持头部联想和惠普，被ThinkPad挤下（虽然是联想旗下品牌），排名掉至第二和第三。ThinkPad以超2.7亿的月销售额成绩拿下第一，市占比16%。
与去年…
解锁海外市场，HubSpot网站建设全攻略
在全球化日益加剧的今天，构建符合海外市场需求的网站已成为企业走向国际化的关键一步。今天运营坛将带领大家认识到全球化意识在网站建设中的重要性，并着重介绍为何选择HubSpot作为构建海外网站的首选工具，同时探讨网站设计和用户体验的关键因…
神策分析 Copilot 成功通过网信办算法备案，数据分析 AI 化全面落地
近日，神策数据严格遵循《互联网信息服务深度合成管理规定》，已完成智能数据问答算法备案。该算法基于大模型技术，专注于为客户提供数据指标查询和数据洞察方面的专业回答。 神策分析 Copilot 运用神策数据智能数据问答算法，聚焦分…
【四 （1）数据可视化之如何选用正确的图表】
目录 文章导航一、数据分析中可视化的作用1、揭示数据关联和模式2、支持数据分析和决策3、提升沟通和共享效果4、强调关键信息和发现5、增强故事叙述和记忆效果6、有效增强数据交互性数据7、复杂信息易理解8、数据多维度显示 二、如何选用合适的图表1、简洁性避免使用过于复杂或…
3 数据分析--Numpy
Numpy：用于存储和处理大型矩阵，比python自身的嵌套列表结构要高校很多
anaconda：是一个开源的python发行版本，包括conda，python以及一大堆安装好的工具包 ipython 开发环境，解释器 jupyter notebook是编辑…
数据分析-Pandas的Andrews曲线可视化解读
数据分析-Pandas的Andrews曲线可视化解读
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据…
R统计学3 - 数据分析入门问题41-60
往期R统计学文章：
R统计学1 - 基础操作入门问题1-20
R统计学2 - 数据分析入门问题21-40
41. R 语言如何做双坐标图？
# 创建模拟数据
year <- 2014:2024
gdp <- data.frame(year, GDP = sort(rnorm(11, 1000, 100)))
ur <- data.frame(year, UR = rnorm(11, 5, 1…
StarRocks 易用性全面提升：数据导入可以如此简单
作为新一代分析型数据库，StarRocks 一直因性能卓越、功能全面而深受广大用户喜爱。在追求功能和性能的同时，易用性方面，StarRocks 也在一直围绕一线运维人员的作业细节持续提升，尤其从 V3.0 起，社区投入大量开发资源全…
数据分析-Pandas的直接用Matplotlib绘图
数据分析-Pandas的直接用Matplotlib绘图
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表…
中文分词库：jieba的词性对照表
jieba词性对照表
字母词性a形容词ad副形词ag形容词性语素an名形词b区别词c连词d副词dg副词素e叹词f方位词g语素h前接成分i成语j简称略称k后接成分l习用语m数词mq数量词n名词ng名词性语素nr人名ns地名nt机构团体名nz其他专名o拟声词p介词q量词r代词rg代词性语素rr人称代词rz指示…
电商数据分析20——电商平台用户分层与细分策略的数据分析
目录 写在开头1. 用户分层与细分的重要性1.1 用户分层与细分的定义1.2 对电商营销策略的影响2. 数据分析在用户分层与细分中的应用2.1 用户行为数据的收集与分析2.1.1. 数据收集机制2.1.2. 关键用户行为指标2.2 用户属性和行为的聚类分析2.2.1. 聚类分析在用户细分中的应用2.2.…
【excel】常用的50个函数与基础操作(统计函数)
统计函数
（1）数组函数操作
1.【SUM】求和 SUM（数字1，数字2，数字3…）
2.【SUMIF】单条件求和 SUMIF （条件区域，条件，求和区域）
3.【SUMIFS】(单)多条件求和…
Python实现24点游戏
24点游戏是一种数学益智游戏，它的目标是通过使用加法、减法、乘法和除法这四种基本算术运算，使得四个数字的结果等于24。这个游戏不仅能锻炼玩家的数学计算能力，还能提高逻辑思维和快速反应能力。
游戏规则非常简单：
游戏通常使…
举个栗子！Minitab 技巧（7）：用 Minitab 实现最小二乘法回归分析
企业分析场景中，我们难免需要研究两个或多个变量之间是否存在某种关系。举个例子，零售批发或交通运输等行业往往需要分析单位时间下的运输效能。
比如，随着单位桶数变化，运输时间会如何增加？按常理而言，桶…
1688 API接口在数据分析与营销决策中的应用探索
在当今数字化快速发展的时代，数据分析与营销决策已成为企业运营中不可或缺的重要环节。而1688 API接口，作为阿里巴巴旗下的一个强大的数据交互平台，为企业在数据分析与营销决策方面提供了丰富的数据源和灵活的操作方式。本文将深入探讨1688 A…
execl多维度数据建模（一）--选择列表框进行数据联动
目的： 当1.2部分的选择改变时，3,4,5,6部分的数据都会联动改变 1、建模过程
（1）打开原始数据表
原始数据如下： （2）公式--名称管理器--新建--定义名称：
a.输入“名称”
b.应用位置…
第五章：数据操作Ⅱ 第二节：数据分析：拆分、应用、合并
我们可以使用plyr()来对数据进行拆分、应用和合并，plyr()的输入可以是数组、数据框、列表，输出也可以是数组、数据框、列表，还可以不输出任何结果，因此可以极大的减少数据转换的负担。 Plyr包中，数据处理函数的名称由5…
用python进行医学数据分析中缺失值的处理方法案例
在医学数据分析中，处理缺失值是一个常见的挑战。缺失值可能是由于各种原因造成的，如数据收集过程中的错误、遗漏或设备故障等。处理缺失值的方法有很多，包括删除含有缺失值的行、填充缺失值、使用插值方法等。以下是一个使用Python进行医学数…
解锁数据可视化新境界：山海鲸可视化免费编辑与组件探索
作为一名长期使用山海鲸可视化的资深用户，我在数据可视化看板的制作过程中，深刻感受到了这款软件带来的便捷与高效。今天，我想与大家分享一些我在使用山海鲸可视化制作数据可视化看板时的经验，给对这款产品同样感兴趣的朋友同行一…
【Excel自动化办公】使用openpyxl对Excel进行读写操作
目录
一、环境安装
1.1 创建python项目
1.2 安装openpyxl依赖
二、Excel数据读取操作
三、Excel数据写入操作
3.1 创建空白工作簿
3.2 写数据
四、设置单元格样式
4.1 字体样式
4.2 设置单元格背景填充色
4.3 设置单元格边框样式
4.4 单元格对齐方式
4.5 数据筛选…
数据分析-Pandas序列时间移动窗口化操作
数据分析-Pandas序列时间移动窗口化操作
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表…
GeoPy1.2 地理数据处理入门（数据读取及展示）
原作者：Damon 高校教师，中科院 GIS 博士
本文为原文章基础上，加上自己以及GPT4.0的总结整理而来
原活动链接
链接 提取码：7cbe –来自百度网盘超级会员V5的分享 目录 引言1. 读取csv文件2. 读取栅格数据（geotiff&am…
Telegraf--采集指定信息
Telegraf 采集字段解释 根据需求选取需要采集的字段，直接配置在fieldpass中，这样的好处是节约流量，更加简洁明了。下面加粗的部分是telegraf.conf中配置的指标，其他指标根据需求添加即可。 2024年3月18日10:55:41 更新说明： 添加自定义温度指标采集 CPU信息 usage_iowait:…
Python数据分析与可视化笔记 三 了解数据 数据分类 集中趋势 离散程度 相关性测量 数据缺失 噪声 离群点
数据分为定性数据和定量数据。 定性数据包括两个基本层次，即定序(ordinal)和定义(nominal)层次。定序变量是指该变量只是对某些特性的“多少”进行排序，但各等级之间的差别不确定。例如评价一个事物有“好”、“一般”、“不好”三个等级，但各…
直观与交互：山海鲸可视化软件与Excel传统表格的对比
作为一名长期使用Excel进行数据处理和分析的用户，最近我尝试了一款名为山海鲸的可视化软件，发现它与Excel传统表格之间存在诸多明显的差异。接下来，我将从个人体验视角出发，谈谈这两种工具的不同之处。
首先，从数据呈…
一起学数据分析_3（模型建立与评估_1）
使用前面清洗好的数据来建立模型。使用自变量数据来预测是否存活（因变量）？
（根据问题特征，选择合适的算法）算法选择路径： 1.切割训练集与测试集
import pandas as pd
import numpy as np
impo…
数据分析可视化神器---streamlit框架，各种图表绘制，布局以及生产综合案例剖析
✨✨ 欢迎大家来到景天科技苑✨✨
🎈🎈 养成好习惯，先赞后看哦~🎈🎈 🏆 作者简介：景天科技苑 🏆《头衔》：大厂架构师，华为云开发者社区专家博主，…
数据分析-Pandas数据分类处理
数据分析-Pandas数据分类处理
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表ÿ…
python爬虫基础实验：通过DBLP数据库获取数据挖掘顶会KDD在2023年的论文收录和相关作者信息
Task1 读取网站主页整个页面的 html 内容并解码为文本串（可使用urllib.request的相应方法），将其以UTF-8编码格式写入page.txt文件。
Code1
import urllib.requestwith urllib.request.urlopen(https://dblp.dagstuhl.de/db/conf/kdd/kdd202…
探索山海鲸可视化：相较于Excel的独特优势分析
作为一名新用户，我近期开始接触并尝试使用山海鲸可视化工具，这款软件最初吸引我的点在其免费可视化编辑、本地化部署的特点，用了一段时间后，我发现相较于之前使用的Excel来制作可视化看板，两者在多个方面有着显著的区别…
初学者指南 | PostgreSQL中的加密机制如何运作？
在这篇文章中，我们将介绍可用于加密和解密PostgreSQL数据库中数据的不同方法。拥有一些 Linux 和 PostgreSQL 经验是必要的，但拥有加密经验并不是必需的，有经验当然更好。本文是使用 Ubuntu 23.04上运行的 PostgreSQL16编写的。首先ÿ…
数据可视化：守护食品安全的利器
在当今食品安全日益受到关注的背景下，数据可视化技术成为保障食品安全的重要利器。通过数据可视化，我们能够实时监测食品生产、加工、运输和销售等环节，及时发现和解决食品安全问题，保障公众健康。数据可视化如何为食品安全保驾护…
BI让数据分析不在困难，分解企业数据分析流程
一、数据培养
数据分析最关键的是什么？其实从名字上就可以看出来，数据是一切的关键，没有数据的话数据分析从何谈起呢。但数据的积累不是一天两天就能成功的，企业的一定要有培养数据的意识，在业务活动中沉淀数据&#…
销售数据分析怎么做？用好这5个数据分析方法与模型就足够了。
企业经营其实简单来说就是做买卖，有了买卖自然就产生了销售数据，那怎么能让这些销售数据产生价值呢？答案就是数据分析。通过对销售数据的分析，可以帮助企业及时洞察市场动向，发现企业销售过程中的问题，调整…
游戏平台出海运营有难度吗？
随着全球互联网的飞速发展，游戏产业已经成为了文化娱乐领域的重要支柱。在这个背景下，越来越多的游戏平台开始寻求出海运营，以拓展海外市场，实现更大的商业价值。然而，游戏平台出海运营并非易事，其中涉及到…
1.Python数据分析—数据分析与挖掘详讲
1.Python数据分析—数据分析与挖掘详讲 一个人简介二数据分析与挖掘概述三什么是数据分析和挖掘四数据分析与挖掘在不同领域的应用4.1医疗领域：4.1.1 建立疾病数据库：4.1.2 临床决策支持：4.1.3 疾病预警和监控： 4.2 电子商务领域&…
解析什么是数据中台：企业数字化转型的核心引擎
在当今这个快速变化的商业环境中，数字化转型已成为企业持续增长和保持竞争力的必由之路。数据中台作为这一转型过程中的关键策略，正逐渐受到越来越多企业的关注和重视。本文将深入探讨数据中台的核心能力，分析企业为何需要这一战略࿰…
河南大学数据分析可视化实验-数据分析基础
计算机与信息工程学院实验报告 姓名： 杨馥瑞 学号：2212080042专业：数据科学与大数据分析技术 年级： 2022
课程： 数据分析和可视化 主讲教师： 周黎鸣
辅导教师： 周黎鸣 …
GEE遥感云大数据林业应用典型案例及GPT模型应用
近年来遥感技术得到了突飞猛进的发展，航天、航空、临近空间等多遥感平台不断增加，数据的空间、时间、光谱分辨率不断提高，数据量猛增，遥感数据已经越来越具有大数据特征。遥感大数据的出现为相关研究提供了前所未有的机遇…
爬虫实战-Python爬取百度当天热搜内容
爬虫实战-Python爬取百度当天热搜内容 学习建议学习目标预期内容目标分解热搜地址热搜标题热搜简介热搜指数小总结 代码实现总结 学习建议
本文仅用于学习使用，不做他用；本文仅获取页面的内容，作为学习和对Python知识的了解，不会…
计算数据集的几何平均数geometric_mean
【小白从小学Python、C、Java】 【计算机等考500强证书考研】 【Python-数据分析】 计算数据集的几何平均数 geometric_mean
[太阳]选择题 geometric_mean的作用是？ import statistics
a [1, 2, 3, 4] average_a statistics.geometric_mean(a) print(average_a)…
Doris/StarRocks数据库教程 (PB级实时数仓大数据分析平台、大规模分布式集群架构)
一、风哥Doris/StarRocks数据库培训 (PB级实时数仓大数据分析平台、大规模分布式集群架构)
本课程由风哥发布的DorisStarRocks大数据技术课程，学完本课程可以掌握Doris/StarRocks数据库基础知识，DorisStarRocks数据库基础知识，DorisStarRock…
数据挖掘|数据集成|基于Python的数据集成关键问题处理
数据挖掘|数据集成|基于Python的数据集成关键问题处理 1. 实体识别2. 数据冗余与相关性分析3. 去除重复记录4. 数据值冲突的检测与处理5. 基于Python的数据集成5.1 merge()方法5.2 Concat()方法 数据集成是把来自多个数据库或文件等不同数据源的数据整合成一致的数据存储。其中…
【数据分析】Pandas内容补充
Pandas内容补充
1.lambda函数
①f lambda x:x ** 2
f lambda( x:x ** 2)
print(f(100)) # 10000②f lambda x:fun1(x)
def fun1(x):return str(x) "hahla"
f lambda x:fun1(x)
print(f(100)) # 100hahla③f (lambda x,y:x y)(32,23)
f (lambda x,y:x y…
数据分析-Pandas数据分类的转换控制
数据分析-Pandas数据分类的转换控制
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表&am…
好用的GPTs：指定主题搜索、爬虫、数据清洗、数据分析自动化
好用的GPTs：指定主题搜索、爬虫、数据清洗、数据分析自动化 Scholar：搜索 YOLO小目标医学方面最新论文Scraper：爬虫自动化数据清洗数据分析 点击 Explore GPTs：
Scholar：搜索 YOLO小目标医学方面最新论文
搜索 Scho…
大数据分析-基于Python的电影票房信息数据的爬取及分析
概要 现如今，人民群众对物质生活水平的要求已不再局限于衣食住行，对于精神文化有了更多的需求。电影在我国越来越受欢迎，电影业的发展越来越迅猛，为了充分利用互联网技术的发展，掌握电影业的态势，对信息进行…
电商平台客户反馈的数据分析与应用
目录 写在开头1 客户反馈对产品改进的作用1.1 发现产品存在的问题1.2 提供改进的方向1.3 增强用户参与感 2 数据分析在客户反馈处理中的应用2.1 客户反馈内容的文本分析2.2 情感分析与趋势识别2.3 客户反馈的归类和优先级排序2.4 挖掘隐藏信息 3. 利用客户反馈改进电商运营的案…
电商数据分析25——电商平台优惠券营销效果的数据分析
目录 写在开头1. 优惠券营销的战略意义1.1 优惠券对消费者行为的影响1.1.1 改变购买决策1.1.2 增加购买意愿 1.2 优惠券在促销活动中的应用1.2.1 提高产品销量1.2.2 增强市场占有率 2. 数据分析在优惠券营销中的应用2.1 优惠券使用率和转化率分析2.2 消费者行为分析与细分2.3 优…
全流程ArcGIS Pro技术应用
GIS是利用电子计算机及其外部设备，采集、存储、分析和描述整个或部分地球表面与空间信息系统。简单地讲，它是在一定的地域内，将地理空间信息和 一些与该地域地理信息相关的属性信息结合起来，达到对地理和属性信息的综合管理。GIS的…
数据分析 | NumPy
NumPy，全称是 Numerical Python，它是目前 Python 数值计算中最重要的基础模块。NumPy 是针对多维数组的一个科学计算模块，这个模块封装了很多数组类型的常用操作。
使用numpy来创建数组
import numpy as npdata np.array([1, 2, 3])
print…
数据分析面试题（11~20）
11、对数据分析的看法，你怎么理解数据分析师这个职业？
①职责是收集、处理和分析大量的数据，并从中提取出有用的信息。
②工作范围包括数据清洗、数据建模、数据可视化等。 数据收集和清洗：收集各种来源的数据，并清洗…
ChatGPTGPT4科研应用、数据分析与机器学习、论文高效写作、AI绘图技术教程
原文链接：ChatGPTGPT4科研应用、数据分析与机器学习、论文高效写作、AI绘图技术教程https://mp.weixin.qq.com/s?__bizMzUzNTczMDMxMg&mid2247598506&idx2&sn14f96667bfbeba5f51366a1f019e3d64&chksmfa82004dcdf5895bba2784ba10f6715f6f5e4c59c9b1…
怎么建设数据中台？详解数据中台架构内的三大平台
一、什么是数据中台？
要知道“中台”是什么，就得先了解“前台”和“后台”。
前台，就是我们日常使用的过程中可以直接看到和感知到的东西，比如你打开某东app买了个3080显卡，在这个过程中你看到的页面以及搜索、点击详…
大数据数据分析-scala、IDEA、jdk之间的搭配关系
Scala主要是一门面向对象编程语言和函数式编程语言。
一、大数据框架（处理海量/流式数据）
- ---以HADOOP 2. x为系列的大数据生态系统处理框架 离线数据分析，分析的数据为N1天数据 -----MapReduce 并行计算框架，分而治之…
数据分析概述、Conda环境搭建及JupyterLab的搭建
1. 数据分析职责概述
当今世界对信息技术的依赖程度在不断加深，每天都会有大量的数据产生，我们经常会感到数据越来越多，但是要从中发现有价值的信息却越来越难。这里所说的信息，可以理解为对数据集处理之后的结果，是从…
数据分析-Pandas序列滑动窗口配置参数
数据分析-Pandas序列滑动窗口配置参数
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表&…
数据可视化助力林业智能管理
数据可视化是当下科技发展中的一项重要工具，它在各行各业都展现了强大的应用价值。在智慧林业领域，数据可视化更是发挥了独特的作用，为林业管理和生态保护提供了有效的支持和解决方案。下面我就以可视化从业者的角度，来简单聊聊这…
Python数据分析作业一：NumPy库的使用
目录 一、前言二、题目及答案解析 一、前言 NumPy（Numerical Python） 是 Python 中用于科学计算的基础包，用于科学计算和数据分析，也是大量 Python 数学和科学计算包的基础。NumPy 的核心基础是 N 维数组（N-dimensiona…
零基础入门转录组数据分析——DESeq2差异分析
零基础入门转录组数据分析——DESeq2差异分析 目录 零基础入门转录组数据分析——DESeq2差异分析1. 转录组分析基础知识2. DESeq2差异分析（Rstudio）3. 结语 1. 转录组分析基础知识
1.1 什么是转录组？ 转录组（transcriptome&#…
数据分析-Pandas类别的排序和顺序
数据分析-Pandas类别的排序和顺序
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表&…
【史上最详细教程】数据分析三剑客之numpy
目录
一、numpy模块介绍
二、环境搭建
三、numpy创建数组
3.1 创建一维数组
3.2 创建二维数组
3.3 数组和列表的区别是什么？
3.4 其它快速创建数组的方式
四、numpy爆破属性
五、numpy索引与切片
5.1 索引
5.2 切片
六、统计&聚合&矩阵操作
6.…
数据分析-Pandas分类数据的类别排序和顺序
数据分析-Pandas类别的排序和顺序
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表&…
数据科学详解与人工智能关系
一、数据科学是什么 数据科学是一个混合交叉学科，它涉及数学、统计学、计算机科学和领域知识，旨在从数据中提取有意义的信息和知识。数据科学家利用各种技术和工具来收集、处理、分析和解释大量的数据，以便为组织和企业做出决策和预测。数据科…
大模型与数据分析：探索Text-to-SQL
当今大模型如此火热，作为一名数据同学，持续在关注LLM是如何应用在数据分析中的，也关注到很多公司推出了AI数智助手的产品，比如火山引擎数智平台VeDI—AI助手、 Kyligence Copilot AI数智助理、ThoughtSpot等，通过接入人…
生产计划数据模型，实现能源企业数字化高效管理
随着市场经济的快速发展，能源企业在经济发展中的地位也随之提高。但由于能源企业在生产计划经济管理上存在指标不平衡、市场观念落后和环保意识欠缺等问题，导致企业的经济效益降低。目前，提高企业的生产计划管理是改善能源企业现状最有利的途…
pandas的综合练习
事先说明：
由于每次都要导入库和处理中文乱码问题，我都是在最前面先写好，后面的代码就不在写了。要是copy到自己本地的话，就要把下面的代码也copy下。
# 准备工作import pandas as pd
import numpy as np
from matplotlib impor…
【python】python turtle绘制坤坤打球
一、效果图： 二、准备工作 （1)、导入必要的模块： 代码首先导入了需要使用的模块：requests、lxml和csv。
import requests
from lxml import etree
import csv 如果出现模块报错 进入控制台输入：建议使用国内镜像源
p…
【CDA二级数据分析备考思维导图】
CDA二级数据分析备考思维导图 CDA二级复习备考资料共计七个章节，如需资料，请留言，概览如下图：一、数据采集与处理1.数据采集方法2.市场调研和数据录入3、数据探索与可视化4、数据预处理方法 总结：以上为自己学习数据分…
python综合实战案例-数据分析
Python是进行数据分析的好工具，今天就是借助一个案例给大家进行数据分析讲解。 本例设计一个log.txt⽂件，该文件记录了某个项⽬中某个 api 的调⽤情况，采样时间为每分钟⼀次，包括调⽤次数、响应时间等信息，⼤约18万条数…
数据分析-Pandas分类数据的操作方法
数据分析-Pandas分类数据的操作方法
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表&am…
数据分析-Pandas分类数据的比较如何避坑
数据分析-Pandas分类数据的比较如何避坑
数据分析和处理中，难免会遇到各种数据，那么数据呈现怎样的规律呢？不管金融数据，风控数据，营销数据等等，莫不如此。如何通过图示展示数据的规律？
数据表…
大数据安全分析相关与安全分析的场景
数据采集与预处理 数据源是大数据分析的基础和前提，进行安全分析需要收集的数据源： 日志数据：设备与系统的日志和安全告警信息流量数据：网络流量数据、包括netflow数据和全流量镜像数据支持数据：资产信息、账号信息、漏…
数据分析POWER BI之power query
1.导入数据 ctrla全选--数据--获取数据--其他来源--来自表格/区域 导入数据，进入编辑模式 2.整理与清除 清除：删除所选列的非打印字符 转换--格式--清除 修整：删除前面和后面的空格 转换---格式---修整（修整后前面后面的空格没有了…
用BI来做金蝶的数据分析，真能随时自助分析？
BI数据分析快的事，大家都知道，那用BI来分析金蝶ERP上的数据也很快，也能随时想怎么分析就怎么分析，想分析哪些数据就分析哪些数据吗？
用BI分析金蝶数据，不仅可随时自助分析，还可极大提高分析效率…
python、execl数据分析（数据描述）
一 python
1.各函数
1.1python库的安装与导入 #pip install os#pip install matplotlib#pip install seaborn#pip install scikit-learn#pip install scipy#修 改 工 作 目 录import osos.getcwd () # 查看当前工作环境os.chdir( F :\my course\database ) # 修改工作环境o…
数据分析之Power Pivot多表数据建模
Power Pivot 介绍： 可以融合多个数据表可夺标关联搭建复杂数据模型一次建模，一键刷新DAX函数编写公式计算可将数据模型轻松移植到PBI和SQL中 1.将数据导入power pivot(power pivot------添加到数据模型)
2.导入其他表格，并有一定的关联 导入…
R语言学习——Rstudio软件
R语言免费但有点难上手，是数据挖掘的入门级别语言，拥有顶级的可视化功能。
优点：
1统计分析（可以实现各种分析方法）和计算（有很多函数）
2强大的绘图功能
3扩展包多，适合领域多
…
Pandas基础指南：模块解析与应用
Pandas是一个强大的Python数据分析库，提供了快速、灵活和表达式丰富的数据结构，旨在使“关系”或“标签”数据的处理既简单又直观。它是基于NumPy库构建的，可以用来处理从简单到复杂的数据分析任务。Pandas主要包含两种类型的数据结构&#x…
环境影响与碳排放生命周期评估应用及案例分析
生命周期分析 (Life Cycle Analysis, LCA) 是评价一个产品系统生命周期整个阶段——从原材料的提取和加工，到产品生产、包装、市场营销、使用、再使用和产品维护，直至再循环和最终废物处置——的环境影响的工具。这种方法被认为是一种“从摇篮到坟墓”的…
2月京东天猫淘宝茗茶电商数据分析（茗茶行业未来趋势分析）
随着消费者对健康饮食和品质生活的追求，茗茶行业受到许多青睐和关注。
根据鲸参谋数据显示，今年2月，茗茶行业在某东平台上销售数据呈现出一种特殊的趋势。销售量总计约450万件，同比去年下滑了7%。；销售额总计6.4亿元&…
卷起来——高级数据分析师
要成为一名高级数据分析师，需要掌握一系列的技能，包括数据处理、统计分析、机器学习、数据可视化以及业务理解等，喜欢或者想往这方面发展的童鞋们，卷起来，点击以下链接中的链接，备注"分析"进群交…
Python数据分析三
一、Python之运算符与或非
在Python中，可以使用逻辑运算符来对条件进行组合和操作。常见的逻辑运算符包括与（and）、或（or）和非（not）。以下是对这些运算符的详细讲解以及示例代码：
…
智能电表怎么预防偷电？
大家好，今天我们要聊的是一个和我们日常生活紧密相关的话题——如何用智能电表预防偷电。首先，我们要明确一点，智能电表的设计初衷是为了提高电力管理效率，保障公正公平，而不是给不法分子提供机会。所以，让…
谈谈 Python 中的 McNemar 检验(二)
前一篇文章说了McNemar检验，除了最常用的用法是用来检验列联表的相似性之外，它还可以用来检验两个相关样本是否来自同一分布。这里主要说一下后面这个问题。前一个问题，请看如下的文献：
谈谈 Python 中的 McNemar 检验(一)-CSDN博…
【42 可视化大屏 | 某瓣电影Top250数据分析可视化大屏】
文章目录 🏳️🌈 1 普版大屏🏳️🌈2 Flask版大屏🏳️🌈3 FlaskMysql版大屏🏳️🌈 4. 可视化项目源码数据 大家好，我是 👉【Python当打之年(点击跳转)…
Altair Compose® 数学运算、编程、数据分析及可视化
Altair Compose 数学运算、编程、数据分析及可视化
分析数据、开发算法或创建模型 - Altair Compose 旨在将你的想法付诸实施。
Altair Compose 是一个用于数学计算、数据操作和可视化、编程和调试脚本的环境，对重复运算和流程自动化非常有用。Altair Compose 让用…
2024年2月吸尘器行业线上电商（京东天猫淘宝）综合排行榜
鲸参谋监测的线上电商平台（淘宝天猫京东）2月吸尘器行业销售数据公开。
根据鲸参谋电商数据平台显示，吸尘器行业2月销量累计约53万件，环比上个月下滑29%，同比去年下滑19%；销售额累计约4亿，环比上…
酒店智能水电表管理解决方案：提升效率、节约成本与环保并重
随着科技的不断发展，智能水电表管理解决方案在酒店行业中得到了广泛应用。这一解决方案结合了物联网技术和智能管理系统，旨在提升酒店水电资源利用效率，降低运营成本，同时也致力于环保与可持续发展。本文将从多个方面介绍酒店智能…
企业指标体系的落地与推广：让指标体系真正发挥作用
一、精心策划实施计划，确保项目有序进行 为确保指标体系的顺利落地与推广，我们精心策划了实施计划。首先，我们制定了详细的时间表，明确了项目启动、关键节点和结束时间，确保项目能够按期推进。同时，我们还将…
大数据导论-大数据分析——沐雨先生
【实验目的】
掌握Pthon/R语言进行大数据分析，包括分类任务和聚类任务。掌握kNN、决策树、SVM分类器、kmeans聚类算法的Python或R语言编程方法。
【实验内容】
使用Python或R语言完成大数据分析任务 1、使用kNN、决策树、SVM模型，对iris数据集进行分类…
HelpLook AI ChatBot：自定义Prompts综合指南
AI问答机器人（AI Chatbot）日益在各行业普及，但回答准确率的不足仍是其面临的痛点。用户在与AI问答机器人的互动中常发现，机器人难以完全理解和准确回答复杂问题。HelpLook可以通过自定义提示词（Prompts）和集…
【python】爬取4K壁纸保存到本地文件夹【附源码】
欢迎来到英杰社区https://bbs.csdn.net/topics/617804998 图片信息丰富多彩，许多网站上都有大量精美的图片资源。有时候我们可能需要批量下载这些图片，而手动一个个下载显然效率太低。因此，编写一个简单的网站图片爬取程序可以帮助我们…
数字化坚鹏：小熊电器面向数字化转型的大数据顶层设计实践培训
小熊电器面向数字化转型的大数据顶层设计实践培训圆满结束
——努力打造“数据技术营销”三轮驱动的数字化领先企业
小熊电器股份有限公司由李一峰创立于2006年，是一家专业从事创意小家电研发、设计、生产和销售的实业型企业。2019年8月23日正式在深交所挂牌上市。…
游戏赛道新机会：善用数据分析，把握游戏赛道广告变现良机 | TOPON变现干货
12月10日，由罗斯基联合TopOn、钛动科技共同主办的《游戏赛道新机会》主题系列沙龙在武汉举办。活动邀请了国内外多家业内知名公司的负责人到场分享，现场嘉宾分别从自己擅长的领域出发，通过数据分析，案例复盘等多个维度方向进行讲解…
【python plotly库介绍】从视觉到洞见：桑基图在业务分析中的应用【保姆级教程过于详细珍藏版】
👤作者介绍：10年大厂数据\经营分析经验，现任大厂数据部门负责人。 本文结构：工具介绍python实现库 - 案例 - 分析思路与过程 实战专栏：https://blog.csdn.net/cciehl/category_12615648.html 备注说明： 企业…
R语言数据分析基础（三）
在R语言中，数据类型主要包括以下几种： 数值型（Numeric）: 数值型数据包括整数（integer）和双精度数（double）。整数是没有小数部分的数字，而双精度数可以有小数部分。在R中&…
数据分析之POWER Piovt的KPI设置
内容总结： 1.两个表格关联不上：需要添加辅助列，建立关联 2.添加辅助列后还关联不上：将虚线变为实线 3.根据需求要增加一些度量值 4.设置KPI后，绝对值选1后设定百分比 5.在透视表里面加入KPI状态 导入所关联的数据后建立…
基恩士数码显微镜数据采集项目经验分享
在最近的项目中，我有幸参与了基恩士数码显微镜的开发与数据采集工作。这次的经历让我对科学研究中的数据收集和分析有了更深入的了解，我分享我在项目中的角色以及我们所取得的成果。 作为一个科研工作者，我始终被数字化技术在科学研究中的作用…
生信数据分析——GO+KEGG富集分析
生信数据分析——GOKEGG富集分析 目录 生信数据分析——GOKEGG富集分析1. 富集分析基础知识2. GO富集分析（Rstudio）3. KEGG富集分析（Rstudio） 1. 富集分析基础知识
1.1 为什么要做功能富集分析？ 转录组学数据得到的基…
R语言数据分析基础（二）
R语言和Python的pandas库都用于数据处理和分析，但它们在语法和功能上有所不同。R语言主要用于统计计算和图形生成，而pandas则专注于数据处理和分析。
以下是一些R语言中实现pandas相似操作的方法： 数据框（Data Frame）…
网络安全新视角：数据可视化的力量
在当今数字化时代，网络安全已成为各大企业乃至国家安全的重要组成部分。随着网络攻击的日益复杂和隐蔽，传统的网络安全防护措施已难以满足需求，急需新型的解决方案以增强网络防护能力。数据可视化技术，作为一种将复杂数据转换为图…
通过PandasAI使用自然语言进行数据分析
通过PandasAI使用自然语言进行数据分析 介绍
PandasAI是一个Python库，可以很容易地用自然语言向数据提问。它可以帮助您使用生成人工智能来探索、清理和分析数据。
使用PandasAI
这里使用Anaconda和Jupyter使用PandasAI
进入一个文件目录 创建一个 Notebook …
Spark-Scala语言实战（8）
在之前的文章中，我们学习了如何在spark中使用RDD方法的map,sortby,collect。想了解的朋友可以查看这篇文章。同时，希望我的文章能帮助到你，如果觉得我的文章写的不错，请留下你宝贵的点赞，谢谢。
Spark-Scala语言实战&…
R语言 for循环问题
今天偶然发现在R的for循环中，作为循环计次的i， 并不会因为在循环体中的赋值变化而变化。 记录一下，还没有找到相关的解释。
Python数据分析与可视化笔记 五 数据清洗 特征工程 特征选择方法
数据清洗 数据清洗的主要目的是对缺失值、噪声数据、不一致数据、异常数据进行处理和对上述数据质量问题分析时发现的问题进行处理，使得清洁后的数据格式符合标准、不存在异常数据等。
1.缺失值的处理
（1）忽略有缺失值的数据。若某条数据存…
数据分析之Tebleau 的度量名称和度量值
度量名称 包含所有的维度 度量值 包含所有的度量 度量名称包含上面所有的维度，度量值包含上面所有的度量 当同时创建两个或两个以上度量或维度时，会自动创建度量名称和度量值 拖入省份为行(这会是还没有值的) 可以直接将销售金额拖到数值这里 或者将销售…
机器学习每周挑战——旅游景点数据分析
数据的截图，数据的说明：
# 字段 数据类型
# 城市 string
# 名称 string
# 星级 string
# 评分 float
# 价格 float
# 销量 int
# 省/市/区 string
# 坐标 string
# 简介 string
# 是否免费 bool
# 具体地址 string拿到数据…
Spark-Scala语言实战（9）
之前的文章中，我们学习了如何在spark中使用RDD方法的flatMap,take,union。想了解的朋友可以查看这篇文章。同时，希望我的文章能帮助到你，如果觉得我的文章写的不错，请留下你宝贵的点赞，谢谢。
Spark-Scala语言实战&am…
python项目练习——7.网站访问日志分析器
项目功能分析：
这个项目可以读取网站的访问日志文件，统计访问量、独立访客数、访问来源等信息，并以图表或表格的形式展示出来。这个项目涉及到文件操作、数据处理、数据可视化等方面的技术。 示例代码： import re from collectio…
数据分析之Tebleau可视化：折线图、饼图、环形图
1.折线图的绘制 方法一： 拖入订单日期和销售金额，自动生成一个折线图 方法二： 选中订单日期和销售金额（摁住ctrl可以选择多个纬度） 点击右边的智能推荐，选择折线图 2.双线图的绘制、双轴的设置 方法一&…
WebScraper网页数据爬取可视化工具使用（无需编码）
前言
Web Scraper 是一个浏览器扩展，可以实现无需编码即可爬取网页上的数据。只需按照规则进行配置，即可实现一键爬取导出数据。
安装
进入Google应用商店安装此插件，安装步骤如下： 进入Google应用商店需要外网VPN才能访问&…
数据分析之Power BI
POWER QUERY 获取清洗 POWER PIVOT建模分析 如何加载power pivot 文件-选项-加载项-com加载项-转到 POWER VIEW 可视呈现 如何加载power view 文件-选项-自定义功能区-不在功能区中的命令-新建组-power view-添加-确定 POWER MAP可视地图
【python】获取4K壁纸保存到本地文件夹【附源码】
图片信息丰富多彩，许多网站上都有大量精美的图片资源。有时候我们可能需要批量下载这些图片，而手动一个个下载显然效率太低。因此，编写一个简单的网站图片爬取程序可以帮助我们高效地获取所需的图片资源。
目标网站： 如果出现模…
JavaParser 手动安装和配置
目录
前言
一、安装 Maven 工具
1.1 Maven 软件的下载
1.2 Maven 软件的安装
1.3 Maven 环境变量配置
1.4 通过命令检查 Maven 版本
二、配置 Maven 仓库
2.1 修改仓库目录
2.2 添加国内镜像
三、从 Github 下载 JavaParser
3.1 下载并解压 JavaParser
3.2 从路径打…
每天一个数据分析题（二百三十二）
在Transformer架构中，以下哪个组件负责捕获输入序列中的位置信息？
A. Multi-head Attention
B. Feed-forward Neural Network
C. Positional Encoding
D. Layer Normalization
题目来源于CDA模拟题库
点击此处获取答案
数据湖与湖仓一体是如何演变而来的？详谈大数据存储架构的变迁
在大数据存储架构的发展历程中，可以划分为三个显著的演进阶段。首先，随着Hadoop和Hive等初期项目的出现，数据仓库（Data Warehouse）的概念得以确立；随着数据仓库的不断演化，同时有了云与对象存储…
GIS与数字孪生共舞，打造未来智慧场景
作为一名数字孪生资深用户，近日我深刻理解到GIS（地理信息系统）在构建数字孪生体中的关键作用。
数字孪生技术旨在构建现实世界的虚拟镜像，而GIS则是这一镜像中不可或缺的空间维度框架和导航灯塔。数字孪生的核心是通过数字化方式…
金蝶BI方案的报表，主打做得快、易理解
金蝶做数据分析报表慢、步骤多、数据不够直观？但奥威-金蝶BI方案的报表就不一样了，不仅做得快，还十分好理解，因为它做出来的是随时可以按需自助的BI智能数据可视化分析报表。
有多快？
注册奥威BI SaaS平台࿰…
机器学习每周挑战——信用卡申请用户数据分析
数据集的截图
# 字段 说明
# Ind_ID 客户ID
# Gender 性别信息
# Car_owner 是否有车
# Propert_owner 是否有房产
# Children 子女数量
# Annual_income 年收入
# Type_Income 收入类型
# Education 教育程度
# Marital_status 婚姻状况
# Housing_type 居住…
商业分析师BA与数据分析有什么关系？
文章主题:BA工作与数据分析
分享嘉宾：丛珊
职业：某事业单位BA分析师
在实际工作中，需求分析工作可以有多种分类方法，对于大型、集成型信息系统的需求分析，通常可以区分为业务需求、功能需求、数据需求、性能需求与安…
EXCEL地理数据处理工具（地图任务）
版本号 作者 修订内容 发布日期 1.0 小O 更新至0705版 2022-4-28 1.1 小O 更新至0772版 2024年4月3日 一、概述
小O地图EXCEL插件版提供基于EXCEL表格进行地理数据处理、地图可视化、地图绘图等功能，地理工具是用户使用频率很高的功能模块。地理工具能…
酒店能源监测管理系统：实现节能减排与提升管理效率的利器
随着全球能源问题的日益突出和可持续发展理念的深入人心，酒店业也在积极探索节能减排的途径。在这一背景下，酒店能源监测管理系统应运而生，成为了酒店行业提升管理效率、降低能源消耗的重要工具。本文将从多个角度介绍酒店能源监测管理系统的…
3.Python数据分析—数据分析入门知识图谱索引(知识体系中篇)
3.Python数据分析—数据分析入门知识图谱&索引-知识体系中篇 一个人简介二数据获取和处理2.1 数据来源：2.2 数据清洗：2.2.1 缺失值处理：2.2.2 异常值处理： 2.3 数据转换：2.3.1 数据类型转换：2.3.2 数据…
【数据分析案列】--- 北京某平台二手房可视化数据分析
一、引言
本案列基于北京某平台的二手房数据，通过数据可视化的方式对二手房市场进行分析。通过对获取的数据进行清冼（至关重要），对房屋价格、面积、有无电梯等因素的可视化展示，我们可以深入了解北京二手房市场的特点…
数据可视化-ECharts Html项目实战（9）
在之前的文章中，我们学习了如何在ECharts中编写气泡图，词云图。想了解的朋友可以查看这篇文章。同时，希望我的文章能帮助到你，如果觉得我的文章写的不错，请留下你宝贵的点赞，谢谢。
数据可视化-ECharts Ht…
MATLAB绘制堆叠填充图--巧用句柄
MATLAB绘制堆叠填充图–巧用句柄 目录 MATLAB绘制堆叠填充图--巧用句柄1. 主要原理讲解1.1 主要函数1.2 句柄原理 2. 绘图示例2.1 准备数据2.2 绘制堆叠填充图-使用句柄控制图形属性2.3 设置填充颜色和样式2.4 添加标题和标签2.5 绘图效果 3. 结语 堆叠填充图是一种常见的数据可…
数据分析（三）线性回归模型实现
1. 惩罚线性回归模型概述
线性回归在实际应用时需要对普通最小二乘法进行一些修改。普通最小二乘法只在训练数据上最小化错误，难以顾及所有数据。
惩罚线性回归方法是一族用于克服最小二乘法（ OLS）过拟合问题的方法。岭回归是惩罚线性回归的…
数据可视化高级技术(Echarts)
目录
（一）数据可视化概念及Echarts基础知识
数据可视化的好处：
数据可视化的目标
数据可视化的基本流程
（二）数据图表
类别比较图表：
数据关系图表：
数据分布图表：
时间序列…
从零开始学Python数据分析：菜鸟也能成高手（文末送书）
🤵♂️ 个人主页：艾派森的个人主页 ✍🏻作者简介：Python学习者 🐋 希望大家多多支持，我们一起进步！😄 如果文章对你有帮助的话， 欢迎评论 💬点赞Ǵ…
【数据分析面试】6.计算对话总数（SQL）
题目：计算对话总数
给定了名为 messenger_sends 的消息发送表格，找出总共有多少个唯一的对话。
注：在某些记录中，receiver_id 和 sender_id 从初始消息中互换了。这些记录应视为同一个对话。
示例：
输入࿱…
4.机器学习-十大算法之一线性回归算法(LinearRegression)案例讲解
机器学习-十大算法之一线性回归算法案例讲解 一摘要二个人简介三什么是线性回归四LinearRegression使用方法五糖尿病数据线性回归预测1.数据说明2.导包3.导入数据4.脱敏处理5.抽取训练数据和预测数据6.创建模型7.预测8.线性回归评估指标9.研究每个特征和标记结果之间的关系.来分…
进销存管理系统：食品批发零售迈向数字化未来-亿发
随着消费逐步复苏，食品批发零售行业也迎来了客流的回升，实体店重新焕发了生机。然而，随着数字化时代的来临，传统的食品批发零售企业面临着新的挑战和机遇。些企业正积极实施数字化转型，通过布局线上线下多业态的融合发…
26版SPSS操作教程（初级第十四章）
前言
#由于导师最近布置了学习SPSS这款软件的任务，因此想来平台和大家一起交流下学习经验，这期推送内容接上一次第十三章的学习笔记，希望能得到一些指正和帮助~
粉丝及官方意见说明
#针对官方爸爸的意见说的推送缺乏操作过程的数据案例文件…
【能源数据分析-00】能源领域数据集集锦（动态更新）
一、前言
大数据科学在能源领域的深度应用，已经深刻改变了这一行业的垂直格局。它为我们提供了宝贵的见解，帮助降低下游市场的成本，使石油生产商能够更好地应对市场繁荣期的需求。近期，石油价格的剧烈下跌给全球经济带来了沉重打…
数据分析之POWER BI Desktop可视化应用案列
在power bi中导入数据
导入前期建好的模型 简单介绍（power bi desktop） 将右边字段全部展开 各类数据 所作的模型 在excel中是单向的，power bi 中可以是双向的 右键单击----点击属性 选择两个---在两个方向上应用安全筛选器 变为双向的…
Python快速入门系列-8（Python数据分析与可视化）
第八章：Python数据分析与可视化 8.1 数据处理与清洗8.1.1 数据加载与查看8.1.2 数据清洗与处理8.1.3 数据转换与整理8.2 数据可视化工具介绍8.2.1 Matplotlib8.2.2 Seaborn8.2.3 Plotly8.3 数据挖掘与机器学习简介8.3.1 Scikit-learn8.3.2 TensorFlow总结在本章中，我们将探讨…
数据可视化为什么能在智慧港口中发挥作用？
随着全球贸易活动日益频繁，港口作为国际贸易的重要节点，其运营效率与智能化程度直接影响着整个物流链的效能。在此背景下，智慧港口的概念应运而生，它借助先进的信息技术手段对传统港口进行改造升级，其中，数…
Spark-Scala语言实战（13）
在之前的文章中，我们学习了如何在spark中使用键值对中的keys和values,reduceByKey,groupByKey三种方法。想了解的朋友可以查看这篇文章。同时，希望我的文章能帮助到你，如果觉得我的文章写的不错，请留下你宝贵的点赞，谢…
内容更新版：AI大模型智能大气科学探索之：ChatGPT在大气科学领域建模、数据分析、可视化与资源评估中的高效应用及论文写作
深度探讨人工智能在大气科学中的应用，特别是如何结合最新AI模型与Python技术处理和分析气候数据。课程介绍包括GPT-4等先进AI工具，旨在大家掌握这些工具的功能及应用范围。内容覆盖使用GPT处理数据、生成论文摘要、文献综述、技术方法分析等实战案例&…
单细胞RNA测序（scRNA-seq）SRA数据下载及fastq-dumq数据拆分
单细胞RNA测序（scRNA-seq）入门可查看以下文章：
单细胞RNA测序（scRNA-seq）工作流程入门
单细胞RNA测序（scRNA-seq）细胞分离与扩增
1. NCBI查询scRNA-seq SRA数据
NCBI地址： https…
Spark-Scala语言实战（12）
在之前的文章中，我们学习了如何在spark中使用键值对中的join,rightOuterJoin,leftOuterJoin三种方法。想了解的朋友可以查看这篇文章。同时，希望我的文章能帮助到你，如果觉得我的文章写的不错，请留下你宝贵的点赞，谢谢…
能耗监测管理系统与技术方案
能耗监测管理系统是目前能源管理中重要的技术手段，它通过集成现代监测技术和信息技术，实现对能源消耗的实时监控、数据分析和决策支持，帮助企业或机构实现能源的高效管理和节能降耗。本篇文章将从能耗监测管理系统的组成、关键技术、应用领域…
Python数据分析与可视化笔记 九 分类问题
分类 分类是找出数据库中一组数据对象的共同特点，并按照分类模式将其划分为不同的类，其目的是通过分类模型，将数据库中的数据项映射到某个给定的类别。 分类学习是一类监督学习的问题，训练数据会包含其分类结果，根据分…
Python语言在地球科学领域中的应用
Python是功能强大、免费、开源，实现面向对象的编程语言，Python能够运行在Linux、Windows、Macintosh、AIX操作系统上及不同平台（x86和arm），Python简洁的语法和对动态输入的支持，再加上解释性语言的本质&…
深入探索MySQL：成本模型解析与查询性能优化，及未来深度学习与AI模型的应用展望
码到三十五 ： 个人主页 在数据库管理系统中，查询优化器是一个至关重要的组件，它负责将用户提交的SQL查询转换为高效的执行计划。在MySQL中，查询优化器使用了一个称为“成本模型”的机制来评估不同执行计划的优劣，并选择…
互联网、电商行业实时大数据分析最佳实践|实时大数据分析最重要的数据采集|电商API采集接口
电商API采集接口的分类 此API目前支持以下基本接口： item_get 获得淘宝商品详情item_get_pro 获得淘宝商品详情高级版item_review 获得淘宝商品评论item_fee 获得淘宝商品快递费用item_password 获得淘口令真实urlitem_list_updown 批量获得淘宝商品上下架时间selle…
【数据分析面试】10. 计算平均通勤时间（SQL：timestampdiff() 和datediff()区别）
题目
假设你在Uber工作。rides表包含了关于Uber用户在美国各地的行程信息。
编写一个查询，以获取纽约（NY）每位通勤者的平均通勤时间（以分钟为单位），以及纽约所有通勤者的平均通勤时间（以分钟为…
数据分析——数据规范化
数据规范化是数据分析中的一个重要步骤，其目的在于确保数据的一致性和可比性，提高数据质量和分析结果的准确性。以下是一些数据规范化的常见方法和技术：
数据清洗：此步骤主要清除数据中的重复项、空格、格式错误等，确…
看完不会来揍我 | R包的下载与安装 | 再也没有一个包可以逃出你的手掌心啦
好久不见！非常抱歉有一段时间没有更新正经内容啦！主要是最近接了一个项目和一个一对一指导，实在是精力有限，又不想随便写几篇应付大家。毕竟，咱们主打高质量嘛！来！大声喊出来！ 「要知…
大数据时代下，如何利用信息化、数字化、数智化成为行业领先者
在大数据时代背景下，企业的竞争力提升离不开信息化、数字化和数智化的联动作用。首先，企业需通过信息化手段，将业务流程、管理方式等进行标准化和系统化，提高效率和减少错误。同时，借助数字化技术如云计算、物联网等&a…
小象超市（原美团买菜） 的大屏图表
文章目录 概要技术细节技术名词解释小结 概要
20203年12月1日，美团旗下自营零售品牌“美团买菜”升级为全新品牌“小象超市”。 ，“小象超市”坚持美团自营零售模式，通过在社区设立的集存储、分拣、配送为一体的便民服务站，为社区…
【六 （2）机器学习-机器学习建模步骤/kaggle房价回归实战】
一、确定问题和目标：
1、业务需求分析：
与业务团队或相关利益方进行深入沟通，了解他们的需求和期望。 分析业务流程，找出可能的瓶颈、机会或挑战。 思考机器学习如何帮助解决这些问题或实现业务目标。
2、问题定义：…
数据分析之Logistic回归分析中的【多元有序逻辑回归】
1、定义 多元有序逻辑回归用于分析有序分类因变量与一个或多个自变量之间的关系。有序逻辑回归适用于因变量具有自然排序但没有固定间距的类别，例如疾病严重程度（轻度、中度、重度）或调查问卷中的满意度评分（非常不满意、不满意、…
基于R语言生物信息学大数据分析与绘图技术
随着高通量测序以及生物信息学的发展，R语言在生物大数据分析以及数据挖掘中发挥着越来越重要的作用。想要成为一名优秀的生物数据分析者与科研团队不可或缺的人才，除了掌握对生物大数据挖掘与分析技能之外，还要具备一定的统计分析能力与SCI论…
电商技术揭秘五：电商平台的个性化营销与数据分析
文章目录 引言1. 个性化营销的概念与价值1.1 个性化营销的定义1.1.1 个性化营销的基本概念1.1.2 个性化营销在电商领域的重要性 1.2 个性化营销的核心价值1.2.1 提升用户体验1.2.2 增加转化率和客户忠诚度1.2.3 优化营销资源配置 2. 用户画像与行为分析2.1 用户画像的构建2.1.1…
【六 （1）机器学习-机器学习算法简介】
目录 文章导航一、机器学习二、基于学习方式的分类三、监督学习常见类型四、无监督学习常见类型五、强化学习常见分类 文章导航
【一 简明数据分析进阶路径介绍（文章导航）】
一、机器学习
机器学习是一门多领域交叉学科，涉及概率论、统计学…
MATLAB近红外光谱分析技术应用
郁磊副教授，主要从事MATLAB编程、机器学习与数据挖掘、数据可视化和软件开发、生理系统建模与仿真、生物医学信号处理，具有丰富的实战应用经验，主编《MATLAB智能算法30个案例分析》、《MATLAB神经网络43个案例分析》相关著作。已发表多篇高水…
数据分析 -- numpy
文章目录 numpy库简介numpy操作数组创建数组属性数组变更 numpy库简介
开源的Python库，它提供了高性能的多维数值计算能力；由“Numerical Python”缩写而来，并且它是Pandas库的基础；NumPy提供了许多有用的功能，例如数…
生信数据分析——绘制差异热图
生信数据分析——绘制差异热图 差异分析的热图（Heat Map）在生物信息学数据分析中，特别是在基因表达差异分析中，是一个非常直观和有用的工具。
本教程将从导入的数据结构开始，一步步带大家在R中绘制好看的热图，最后对热图进行解读，确保读者理解代码的同时学会解读热图里…
Kaggle:收入分类
先看一下数据的统计信息
import pandas as pd # 加载数据（保留原路径，但在实际应用中建议使用相对路径或环境变量）
data pd.read_csv(r"C:\Users\11794\Desktop\收入分类\training.csv", encodingutf-8, encoding_errorsrepl…
鱼哥赠书活动第17期：看完这本《Python数据分析》菜鸟也能做Python数据分析？
鱼哥赠书活动第17期：看完这本《Python数据分析》菜鸟也能做Python数据分析？ 一、Python是办公自动化的重要工具二、Python是提升职场竞争力的利器三、Python是企业数字化的重要平台四、Python是AI发展的重要通道之一内容简介:第一部分（第1~7章…
每天一个数据分析题（二百五十一）
作为一种比较新颖的微调方法，LoRA的核心思想是什么？
A. 为预训练模型增加额外的参数
B. 对模型中的某些部分进行重新加权
C. 通过使用辅助任务进行微调
D. 在预训练模型的基础上添加定位的线性层
题目来源于CDA模拟题库
点击此处获取答案
机器学习模型调优简介
机器学习模型调优是提升模型性能的关键步骤，涉及调整模型的参数、选择适当的算法以及优化数据处理方式等。以下是一些常见的机器学习模型调优方法：
超参数调整： 网格搜索：通过搜索超参数空间中的每一个可能的组合来找到最优的超参…
数据可视化：智慧农业发展的催化剂
数据可视化在智慧农业中发挥着不可替代的作用。随着科技的不断进步，农业领域也在不断探索创新，以提高生产效率、优化资源利用，从而实现可持续发展。而数据可视化技术的应用，则成为了实现智慧农业目标的重要途径。下面我就从可视化…
26版SPSS操作教程（初级第十七章）
前言
#由于导师最近布置了学习SPSS这款软件的任务，因此想来平台和大家一起交流下学习经验，这期推送内容接上一次第十六章的学习笔记，希望能得到一些指正和帮助~
粉丝及官方意见说明
#针对官方爸爸的意见说的推送缺乏操作过程的数据案例文件…
关于 Python 的 import，你了解多少？
多线程和多进程是 Python 中两种实现多任务的不同策略，二者都可以在特定的场景下在一定程度上提高程序的运行速度、性能以及吞吐，但二者的运行机制却有很大的差别。
在 Python 中，多线程以_并发（concurrent）的方式运行…
9proxy—数据采集工具全面测评
9Proxy数据采集工具Unlock the web with 9Proxy, the top residential proxy provider. Get unlimited bandwidth, affordable prices, and secure HTTPS and Socks5 configurations.https://9proxy.com/?utm_sourceblog&utm_mediumcsdn&utm_campaignyan 前言 在当今数…
数据大屏：现代数据分析与可视化的重要工具
数据大屏：现代数据分析与可视化的重要工具
随着信息技术和数据分析的不断发展，数据大屏作为一种高效、直观的数据展示工具，越来越受到各行各业的青睐。数据大屏通过大屏幕媒介，利用先进的显示技术，将大量的数据和关键…
电商-广告投放效果分析（KMeans聚类、数据分析-pyhton数据分析
电商-广告投放效果分析（KMeans聚类、数据分析） 文章目录 电商-广告投放效果分析（KMeans聚类、数据分析）项目介绍数据数据维度概况数据13个维度介绍 导入库，加载数据数据审查相关性分析数据处理建立模型聚类结果特征分析…
数合建模平台简介--4月新版
数合建模平台是一个综合性的数据建模及可视化平台，旨在为用户提供一站式全链路数据生命周期管理解决方案。该平台不仅能够帮助用户有效管理数据资产，还能深入挖掘数据价值，为政府机构、企业、科研机构以及第三方软件服务商等不同客户群体提供…
泰坦尼克号幸存者数据分析
泰坦尼克号幸存者数据分析 1、泰坦尼克号数据集2、数据集加载与概览3、泰坦尼克号幸存者数据分析4、哪些人可能成为幸存者？ 1、泰坦尼克号数据集 泰坦尼克号的沉没是世界上最严重的海难事故之一，造成了大量的人员伤亡。这是一艘号称当时世界上最大的邮轮…
Spark-Scala语言实战（14）
在之前的文章中，我们学习了如何在spark中使用键值对中的fullOuterJoin，zip，combineByKey三种方法。想了解的朋友可以查看这篇文章。同时，希望我的文章能帮助到你，如果觉得我的文章写的不错，请留下你宝贵的点…
特征工程(I)--探索性数据分析
有这么一句话在业界广泛流传：数据和特征决定了机器学习的上限，而模型和算法只是逼近这个上限而已。由此可见，特征工程在机器学习中占有相当重要的地位。在实际应用当中，可以说特征工程是机器学习成功的关键。
特征工程是数据分析…
【六 （2）机器学习-EDA探索性数据分析模板】
目录 文章导航一、EDA：二、导入类库三、导入数据四、查看数据类型和缺失情况五、确认目标变量和ID六、查看目标变量分布情况七、特征变量按照数据类型分成定量变量和定性变量八、查看定量变量分布情况九、查看定量变量的离散程度十、查看定量变量与目标变量关系十一…
item_get_desc-获得淘宝商品描述api接口：如何通过接口获取商品信息、订单信息、物流信息可以用于数据分析、商品推荐、行业研究等领域
在当今电商繁荣的时代，淘宝作为中国最大的电商平台之一，拥有海量的商品信息。然而，如何高效地获取并利用这些信息，对于商家和开发者来说都至关重要。幸运的是，淘宝开放平台提供了丰富的API接口，其中包括用于…
Python数据分析十六
一、Python的字典的操作方法popitem和setdefault
当你使用Python中的字典数据类型时，可能会经常用到一些操作方法，比如popitem()和setdefault()。下面我将为你详细讲解这两个方法，并给出相应的代码示例。
1.popitem()方法：
pop…
【50/年 4G 618/3年】搭建博客 个人网站 大厂云服务器选择建议 盘点全网最新活动
更新日期：4月7日（阿里云价格回调，京东云采购季持续进行）
本文纯原创，侵权必究 《最新对比表》已更新在文章头部—腾讯云文档，文章具有时效性，请以腾讯文档为准！ 【腾讯文档实时更新…
基于R语言lavaan结构方程模型（SEM）技术应用
结构方程模型（Sructural Equation Modeling，SEM）是分析系统内变量间的相互关系的利器，可通过图形化方式清晰展示系统中多变量因果关系网，具有强大的数据分析功能和广泛的适用性，是近年来生态、进化、环境、…
全面解析十七种数据分析方法，具象数据分析思维
本文干货信息汇总：FineBI自助式BI数据分析工具下载>>https://s.fanruan.com/vfp40FineBI数据分析模板库>>https://s.fanruan.com/fnbjg 一、介绍 在当今数据驱动的商业环境中，数据分析已经成为了企业获取竞争优势的关键工具。无论是为了优化…
【功能更新】强化知识库管理与AI问答机器人性能
三月HelpLook带来了3大类功能焕新，主要聚焦于：知识库的管理功能升级和AI问答机器人的优化，让我们看看更新了哪些新功能！ 那么，接下来就让我们来详细了解一下本次升级都带来了哪些新功能吧！ 知识库使用与管理…
Python基础较难理解的知识
在Python的基础知识中，有一些概念和特性可能相对难以理解。下面是一些较为常见且具有挑战性的主题，每个主题都会提供实例以帮助解释。
1. 面向对象编程（Object-Oriented Programming, OOP）
面向对象编程是一种程序设计思想&…
【白菜基础】蛋白组学之生信分析（1）
刚换了一个新课题组，新老板的研究方向为蛋白组学，从未接触过蛋白组学的我准备找一组模拟数据进行生信分析的入门学习。
蛋白组学数据挖掘流程图，参考公众号：蛋白质组学数据挖掘思路解析 (qq.com) 一、认识数据
我们组的数据主要…
奥威BI零售方案，一套解决80%通用需求的数据分析方案
这意味着什么，意味着只需要点击应用奥威BI零售数据分析方案，就可以解决80%的通用分析需求，日常经营决策所需的分析指标再也不用花费大量时间去整理计算，事关运营决策的人、货、场分析都能立即获取，立即掌握数据情况。 …
机器学习_PySpark-3.0.3字符标签索引化(StringIndex)实例
机器学习_PySpark-3.0.3字符标签索引化(StringIndex)实例
StringIndexer 是 PySpark-3.0.3 中用于将字符串列转换为数值索引的转换器。
它会根据字符串的出现频率为每个唯一字符串分配一个整数索引。
如果你的字符串类型的日期列是连续的, 频率相同, StringIndexer 会为每个…
充电桩电力监控管理系统
随着电动汽车行业的迅速发展，充电桩已成为城市基础设施中不可或缺的一部分。然而，大规模的充电桩布局也带来了电力监控管理的挑战，充电桩电力监控管理系统应运而生，它是一套集数据采集、监控、管理为一体的智能系统。通过对充电设…
人工智能数据分析Python常用库 04 matplotlib库
文章目录 一、matplotlib库的作用与环境配置1、环境配置示例2、改变绘图风格3、保存图片 二、绘制二维图形1、折线图（1）示例（2）调整线条颜色：（3）调整线条风格（4）调整线宽…
编程新手必看，学习python中字符串数据类型内容（8）
1、 Python3 字符串
字符串是 Python 中最常用的数据类型。我们可以使用引号( ’ 或 " )来创建字符串。 创建字符串很简单，只要为变量分配一个值即可。例如：
var1 Hello World!
var2 "Runoob"Python 访问字符串中的值 Python 不支持单…
平滑处理在眼动追踪数据分析中的应用
眼动追踪数据的平滑处理技术
眼动追踪技术作为研究人类视觉注意、界面设计效果评估以及增强现实（AR）和虚拟现实（VR）中交云互动的重要工具，其准确性和流畅性对实验结果和用户体验至关重要。然而，由于测量误…
基于R语言的选举数据的模型建立与预测分析
本文利用选举数据，通过K-近邻、支持向量机、人工神经网络等三类分类算法，利用R语言统计软件，实现选举数据的模型建立与预测分析。并对三个模型的预测结果进行对比分析，从而选择最优分类策略，进而为选举提供有效、有力的数据支持。 1.数据探索
1.1 数据来源及说明 数据来源…
“SRP模型+”多技术融合在生态环境脆弱性评价模型构建、时空格局演变分析与RSEI指数生态质量评估及拓展应用
近年来，国内外学者在生态系统的敏感性、适应能力和潜在影响等方面开展了大量的生态脆弱性研究，他们普遍将生态脆弱性概念与农牧交错带、喀斯特地区、黄土高原区、流域、城市等相结合，评价不同类型研究区的生态脆弱特征，其研究内容…
Apache Doris 基于 Job Scheduler 实现秒级触发任务调度能力
作者｜SelectDB 技术团队
在数据管理愈加精细化的需求背景下，定时调度在其中扮演着重要的角色。它通常被应用于以下场景：
定期数据更新，如周期性数据导入和 ETL 操作，减少人工干预，提高数据处理的效率和准…
数据仓库的概念和作用？如何搭建数据仓库？
随着企业规模的扩大和数据量的爆炸性增长，有效管理和分析海量数据成为企业数字化转型的关键。而在互联网的普及过程中，信息技术已深入渗透各行业，逐渐融入企业的日常运营。然而，企业在信息化建设中面临了一系列困境和挑战…
OLAP在线实时 数据分析平台
随着业务的增长，精细化运营的提出，产品对数据部门提出了更高的要求，包括需要对实时数据进行查询分析，快速调整运营策略；对小部分人群做 AB 实验，验证新功能的有效性；减少数据查询时间࿰…
汽车4S行业的信息化特点与BI建设挑战
汽车行业也是一个非常大的行业，上下游非常广，像主机厂，上游的零配件，下游的汽车流通，汽车流通之后的汽车后市场，整个链条比较长。今天主要讲的是汽车流通，汽车4S集团。一个汽车4S集团下面授权代…
BI数据分析软件：选择最适合企业发展的工具
随着大数据时代的到来，数据分析在各个行业中扮演着越来越重要的角色。而BI数据分析软件作为数据处理和可视化的核心工具，既能帮助企业更好地理解和利用数据，又能提升决策的准确性和效率。在市面上，有许多优秀的BI数据分析软件可以…
3. DAX 时间函数-- DATE 日期--一生二，二生三，三生万物
在数据分析过程中，经常需要从一个数据推到另外一个数据，日期数据也是如此，需要从一个日期推到另外一个相关的日期，或者从一群日期推到另外一个相关的日期/一群相关的日期。这一期说的就是日期之间彼此推衍的函数，会比之…
怎么快速围绕“人、货、场”做零售数据分析？
做零售数据分析多了，不难发现零售数据分析的关键就是“人、货、场”，那么怎么又快又灵活地分析这三个关键点？不妨参考下奥威BI零售数据分析方案。
奥威BI零售数据分析方案是一套吸取大量项目经验，结合零售企业数据分析共性需求打…
人工智能数据分析Python常用库 03 pandas库
文章目录 一、对象创建1、Series对象（1）用列表创建（2）用一维numpy数组创建（3）用字典创建（4）data为标量的情况 2、DataFrame对象（1）通过Series对象创建&#x…
电商用户行为数据分析
本文针对淘宝app的运营数据，以行业常见指标对用户行为进行分析，包括UV、PV、新增用户分析、漏斗流失分析、留存分析、用户价值分析、复购分析等内容。本文使用的分析工具以MySQL为主，涉及分组汇总，引用变量，视图&#…
R数据分析：网状meta分析的理解与实操
meta分析之前有给大家写过，但是meta分析只能比较两个方法。经常是被用来证明在现有研究中显示矛盾结果的干预方法到底有没有效的时候使用，通过证据综合得到某种干预到底有没有用的结论。但是如果我要证明好几种方法到底哪个最优，这个时候meta…
检查字符串数组中的每个字符串是否仅由数字组成numpy.char.isnumeric()
【小白从小学Python、C、Java】 【计算机等级考试500强双证书】 【Python-数据分析】 检查字符串数组中的每个字符串 是否仅由数字组成 numpy.char.isnumeric() [太阳]选择题 请问关于以下代码最后的输出结果是？ import numpy as np a np.array([123, ab12]) print…
pe格式从入门到图形化显示（九）-重定位表
文章目录 前言一、什么是Windows PE格式中的重定位表表？二、解析重定位表并显示1.重定位表的结构2.解析重定位表3.显示重定位表 前言
通过分析和解析Windows PE格式，并使用qt进行图形化显示 一、什么是Windows PE格式中的重定位表表？
重定位…
2月智能手表线上电商市场（京东天猫淘宝）分析：华为手表成最大赢家！
近年来，各大厂商纷纷积极布局健康管理领域，智能手表成为可穿戴市场的热门产品。随着越来越多的厂商进入，智能手表的芯片技术、显示屏技术、传感器技术等都在不断进步，整体性能和功能得到显著提升，使得用户体验更加出色…
pandas，polars，pyspark的df对象常见用法对比
案例背景
最近上班需要处理的都是百万，千万级的数据，pandas的性能已经不够看了（虽然它在处理数据上是真的很好用），公司都是用的polar和pyspark，我最近也学习了一些，然后写篇文章对比一下他们的…
R语言数据操纵：常用函数
目录
处理循环的函数
lapply函数
apply函数
mapply函数
tapply函数
split函数
排序的函数
sort函数与order函数
总结数据信息的函数
head函数与tail函数
summary函数
str函数
table函数
any函数
all函数
xtab函数
object.size函数 这篇文章主要介绍R语言中处理…
API接口在数据分析中的应用：淘宝商品信息获取实例
在数字化时代，数据分析已经成为各行各业不可或缺的一部分。无论是市场调研、竞争对手分析，还是产品优化、用户行为研究，数据分析都发挥着至关重要的作用。而API接口作为数据获取的重要渠道，其在数据分析中的应用也日益广泛。本文将…
2月珍珠饰品电商数据分析：价格翻倍，销售额暴增140%！
珍珠饰品这两年受到国内消费者的追捧，这股热潮随着电商直播的快速发展延续至今。与此同时，年轻人群体正成为珍珠消费的主力军，他们在各大直播间频繁亮相，以实际购买力展现了对珍珠饰品的热爱与追捧。
今年2月份，珍珠饰…
26版SPSS操作教程（高级教程第二章）
前言
#经过20多天的坚持学习，本人也终于开启SPSS高级教程的副本了，茫茫长征路，需要我们一起共同去征服；
#由于导师最近布置了学习SPSS这款软件的任务，因此想来平台和大家一起交流下学习经验，这期推送内容…
【六 （4）机器学习-回归任务-鲍鱼年龄预测xgboost、lightgbm实战】
目录 文章导航一、xgboost简介二、lightgbm简介三、代码实现1、导入类库2、导入数据3、类别参数预处理4、数据集划分、模型初始化、参数优化、保存模型4、对测试集进行预测 文章导航
【一 简明数据分析进阶路径介绍（文章导航）】
一、xgboost简介
XGBo…
智慧园区革新之路：山海鲸可视化技术引领新变革
随着科技的飞速发展，智慧园区已成为城市现代化建设的重要组成部分。山海鲸可视化智慧园区解决方案，作为业界领先的数字化革新方案，正以其独特的技术优势和丰富的应用场景，引领着智慧园区建设的新潮流。
本文将带大家一起了解一下…
解密辛普森悖论：如何在数据分析中保持清醒头脑
解密辛普森悖论：如何在数据分析中保持清醒头脑
之前也参加fine Bi的 培训，学到了辛普森悖论，今天为大家介绍一下 文章目录 解密辛普森悖论：如何在数据分析中保持清醒头脑前言我们来举一个例子数据分析解释管理应用的启示 前言
什…
基于R语言BIOMOD2模型的物种分布模拟
随着生物多样性全球大会的举办，不论是管理机构及科研单位、高校都在积极准备，根据国家林草局最新工作指示，我国将积极整合、优化自然保护地，加快推进国家公园体制试点，构建以国家公园为主体的自然保护地体系。针对我国…
AI大模型引领未来智慧科研暨ChatGPT自然科学应用
以ChatGPT、LLaMA、Gemini、DALLE、Midjourney、Stable Diffusion、星火大模型、文心一言、千问为代表AI大语言模型带来了新一波人工智能浪潮，可以面向科研选题、思维导图、数据清洗、统计分析、高级编程、代码调试、算法学习、论文检索、写作、翻译、润色、文献辅助…
AI技术创业机会之大数据分析与决策支持
大数据分析与决策支持作为AI技术的重要应用领域，蕴含着丰富的创业机遇。以下详述了大数据分析与决策支持背景下AI技术的创业机会及其具体细节与内容，以5000字篇幅深入探讨各细分领域，为有志于投身这一领域的创业者提供全面、深入的商业洞察与方向指引。
一、智能数据分析与…
基于机器学习的信用卡办卡意愿模型预测项目
基于机器学习的信用卡办卡意愿模型预测项目
在金融领域，了解客户的信用卡办卡意愿对于银行和金融机构至关重要。借助机器学习技术，我们可以根据客户的历史数据和行为模式预测其是否有办理信用卡的倾向。本项目通过Python中的机器学习库，构建…
Pandas进行数据分析
dataframe添加列：df2.drop(新增加的列:,axis1,inplaceTrue) 在Pandas中，DataFrame的列是Series对象，而Series对象具有一系列字符串处理方法。要对Series中的字符串进行操作，需要使用.str属性来访问这些字符串方法。删除列中的横线…
Excel全套213集教程
Excel全套213集教程
包含技术入门93集
图表17集
数据透视35集
公式函数68
基础入门 93节 https://www.alipan.com/s/cMxuPstkS1x 提取码: 77dd 点击链接保存，或者复制本段内容，打开「阿里云盘」APP ，无需下载极速在线查看，视…
pe格式从入门到图形化显示（四）-节表
文章目录 前言一、什么是Windows PE格式节表？二、解析节表并显示1.节表数据结构以及字段描述2.节表的属性3.解析4.显示 前言
通过分析和解析Windows PE格式，并使用qt进行图形化显示 一、什么是Windows PE格式节表？
PE格式的节表（…
山海鲸智慧交通：可视化技术助力城市交通管理升级
随着城市化进程的加速和汽车保有量的不断增加，交通拥堵、安全事故频发等问题日益凸显。在这样的背景下，智慧交通成为了解决城市交通难题的重要途径。山海鲸智慧交通可视化解决方案，以其创新的技术和卓越的性能，为城市交通管理提供…
ArcGIS在洪水灾害普查、风险评估及淹没制图中的技术应用
2020年国务院办公厅印发《关于开展第一次全国自然灾害综合风险普查的通知》，定于2020年至2022年开展第一次全国自然灾害综合风险普查。水旱灾害风险普查是全国自然灾害综合风险普查的重要组成部分。其中，我国有超过 60%的国土面积、90%以上的人口均受到不…
【Qt\C++】二维图形化故障树
文章目录 一、故障树是什么？二、相关知识点三、生成故障树1、故障树节点2、定义故障树的树状结构以及读取保存1.使用QTreeView和QStandardItemModel来显示故障树2.使用QXmlStreamReader和QXmlStreamWriter来保存故障树3、定义故障树的图形化结构1.自定义QGraphicsItem2.重绘QG…