文章目录
1.转置函数 df.T2.排序和排名 sort_values 、sort_index()、rank()3.非重复与汇总计数 unique()、value_counts()4.描述统计 describe()5.分组统计
import pandas
as pd
df
=pd
.read_csv
('DataAnalyst.csv',encoding
='gbk')
df
.info
()
<class 'pandas.core.frame.DataFrame'>
RangeIndex: 6823 entries, 0 to 6822
Data columns (total 19 columns):
city 6823 non-null object
companyFullName 6823 non-null object
companyId 6823 non-null int64
companyLabelList 6121 non-null object
companyShortName 6823 non-null object
companySize 6823 non-null object
businessZones 4833 non-null object
firstType 6816 non-null object
secondType 6817 non-null object
education 6823 non-null object
industryField 6823 non-null object
positionId 6823 non-null int64
positionAdvantage 6823 non-null object
positionName 6823 non-null object
positionLables 6791 non-null object
bottom 6823 non-null int64
top 6823 non-null int64
avg 6823 non-null float64
workYear 6823 non-null object
dtypes: float64(1), int64(4), object(14)
memory usage: 1012.9+ KB
df
.head
(4)
citycompanyFullNamecompanyIdcompanyLabelListcompanyShortNamecompanySizebusinessZonesfirstTypesecondTypeeducationindustryFieldpositionIdpositionAdvantagepositionNamepositionLablessalaryworkYear
0上海纽海信息技术(上海)有限公司8581['技能培训', '节日礼物', '带薪年假', '岗位晋升']1号店2000人以上['张江']技术数据开发硕士移动互联网2537336知名平台数据分析师['分析师', '数据分析', '数据挖掘', '数据']7k-9k应届毕业生1上海上海点荣金融信息服务有限责任公司23177['节日礼物', '带薪年假', '岗位晋升', '扁平管理']点融网500-2000人['五里桥', '打浦桥', '制造局路']技术数据开发本科金融2427485挑战机会,团队好,与大牛合作,工作环境好数据分析师-CR2017-SH2909['分析师', '数据分析', '数据挖掘', '数据']10k-15k应届毕业生2上海上海晶樵网络信息技术有限公司57561['技能培训', '绩效奖金', '岗位晋升', '管理规范']SPD50-150人['打浦桥']设计数据分析本科移动互联网2511252时间自由,领导nic数据分析师['分析师', '数据分析', '数据']4k-6k应届毕业生3上海杭州数云信息技术有限公司上海分公司7502['绩效奖金', '股票期权', '五险一金', '通讯津贴']数云150-500人['龙华', '上海体育场', '万体馆']市场与销售数据分析本科企业服务,数据服务2427530五险一金 绩效奖金 带薪年假 节日福利大数据业务分析师【数云校招】['商业', '分析师', '大数据', '数据']6k-8k应届毕业生
1.转置函数 df.T
df
.T
0123456789...6866686768686869687068716872687368746875
city上海上海上海上海上海上海上海上海上海上海...北京北京北京北京北京北京北京北京北京北京companyFullName纽海信息技术(上海)有限公司上海点荣金融信息服务有限责任公司上海晶樵网络信息技术有限公司杭州数云信息技术有限公司上海分公司上海银基富力信息技术有限公司上海青之桐投资管理有限公司上海好体信息科技有限公司上海安硕信息技术股份有限公司上海崇杏健康管理咨询有限公司五五海淘(上海)科技股份有限公司...云联世纪(北京)数据服务有限公司福建省中天地征信有限公司北京亿盛融华投资管理有限公司北京亿盛融华投资管理有限公司北京亿盛融华投资管理有限公司北京亿盛融华投资管理有限公司北京亿盛融华投资管理有限公司北京亿盛融华投资管理有限公司北京亿盛融华投资管理有限公司北京亿盛融华投资管理有限公司companyId8581231775756175021308762809520022186312120858109...146872138882151898151898151898151898151898151898151898151898companyLabelList['技能培训', '节日礼物', '带薪年假', '岗位晋升']['节日礼物', '带薪年假', '岗位晋升', '扁平管理']['技能培训', '绩效奖金', '岗位晋升', '管理规范']['绩效奖金', '股票期权', '五险一金', '通讯津贴']['年底双薪', '通讯津贴', '定期体检', '绩效奖金']['美女多', '出国旅游', '不打卡', '带薪年假']['年底双薪', '股票期权', '扁平管理', '领导好']['岗位晋升', '顶尖团队', '福利优厚', '股票期权']['扁平管理', '弹性工作', '岗位晋升', '领导好']['股票期权', '带薪年假', '绩效奖金', '岗位晋升']...['弹性工作', '节日礼物', '领导好', '五险一金']NaNNaNNaNNaNNaNNaNNaNNaNNaNcompanyShortName1号店点融网SPD数云银基富力青桐资本足球魔方安硕信息(amarsoft)上海崇杏55海淘...云联数据中天地征信亿盛资本亿盛资本亿盛资本亿盛资本亿盛资本亿盛资本亿盛资本亿盛资本companySize2000人以上500-2000人50-150人150-500人15-50人50-150人150-500人2000人以上15-50人150-500人...少于15人50-150人150-500人150-500人150-500人150-500人150-500人150-500人150-500人150-500人businessZones['张江']['五里桥', '打浦桥', '制造局路']['打浦桥']['龙华', '上海体育场', '万体馆']['上海影城', '新华路', '虹桥']NaN['龙华', '植物园', '上海南站']['黄兴公园', '长白新村', '延吉']['上海电视台', '南京西路', '人民广场']['漕宝路', '万源城', '东兰路']...NaN['德胜门', '新街口', '北太平庄']NaNNaNNaNNaNNaNNaNNaNNaNfirstType技术技术设计市场与销售技术金融类技术产品/需求/项目类技术技术...市场与销售技术其它金融类市场/商务/销售类市场/商务/销售类产品/需求/项目类其他市场/商务/销售类金融类secondType数据开发数据开发数据分析数据分析软件开发天使投资/VC/PE后端开发产品设计/需求分析后端开发后端开发...销售后端开发教育|培训风控销售销售项目管理房地产|建筑业销售风控education硕士本科本科本科本科本科本科硕士本科本科...不限本科大专不限大专大专大专大专大专不限industryField移动互联网金融移动互联网企业服务,数据服务其他金融移动互联网,电子商务金融移动互联网,医疗健康电子商务...电子商务,移动互联网移动互联网,数据服务金融、教育金融、教育金融、教育金融、教育金融、教育金融、教育金融、教育金融、教育positionId2537336242748525112522427530224581925805431449715256862824168521605795...2465479209319924660982465818246966524696822469686247094924658392471674positionAdvantage知名平台挑战机会,团队好,与大牛合作,工作环境好时间自由,领导nic五险一金 绩效奖金 带薪年假 节日福利在大牛下指导留用机会,精品投行,优秀团队,氛围轻松薪资福利待遇好,晋升空间大健康体检扁平管理,上升空间大,领导好,弹性工作向大牛学习,有留司机会...无责底薪+高提成+五险+年底双薪+带薪年假以解决技术难题为乐趣的工作最有吸引力薪资高待遇好这是一个自我追寻的时代来亿盛资本看看吧。工作自由、法定假日休息高薪双休五险一金时间自由朝九晚五高薪五险一金双休朝九晚五带薪年假20天高薪五险一金双休朝九晚五无加班可培训高薪 无加班 双休 五险一金 挑战高薪,挑战自我positionName数据分析师数据分析师-CR2017-SH2909数据分析师大数据业务分析师【数云校招】BI开发/数据分析师助理分析师数据工程师数据咨询顾问(2017年毕业)数据处理工程师(实习生)数据处理实习生...数据中心场地销售爬虫数据-实习生分析师助理交易员分析师外汇分析师金融证券分析师 助理金融证券分析师 可培训金融证券分析师 讲师 助理金融证券分析师助理讲师助理1W五险双休诚聘金融分析师助理可兼职positionLables['分析师', '数据分析', '数据挖掘', '数据']['分析师', '数据分析', '数据挖掘', '数据']['分析师', '数据分析', '数据']['商业', '分析师', '大数据', '数据']['分析师', '数据分析', '数据', 'BI']['实习', '投资', 'FA', '行业研究', '分析师']['数据']['需求分析', '顾问', '咨询', '咨询顾问', '数据']['后端开发', '数据']['数据']...['销售', '销售', '数据']['爬虫', '数据']['分析师', '数据分析']['风控', '经理', '行业研究', '分析师']['分析师', '资金管理']['分析师', '金融', '证券']['项目管理', '专员', '助理', '实习生', '风控', '采购', '分析师',...['分析师', '职业培训', '教育', '培训', '金融', '证券', '股票', ...['实习生', '主管', '经理', '顾问', '销售', '客户代表', '分析师',...['分析师', '金融']salary7k-9k10k-15k4k-6k6k-8k2k-3k10k-15k7k-14k5k-7k4k-8k2k-4k...3k-6k3k-6k8K-16K5K-10K8K-10K10K-20K15K-30K15K-30K10K-20K8K-15KworkYear应届毕业生应届毕业生应届毕业生应届毕业生应届毕业生应届毕业生应届毕业生应届毕业生应届毕业生应届毕业生...不限不限不限不限不限不限不限不限不限不限
17 rows × 6876 columns
2.排序和排名 sort_values 、sort_index()、rank()
df
.sort_values
(by
=['positionId','city'],ascending
=False)
citycompanyFullNamecompanyIdcompanyLabelListcompanyShortNamecompanySizebusinessZonesfirstTypesecondTypeeducationindustryFieldpositionIdpositionAdvantagepositionNamepositionLablessalaryworkYear
6330北京普信资产管理有限公司59239['节日礼物', '技能培训', '绩效奖金', '岗位晋升']龙宝斋财富2000人以上['京广桥']开发/测试/运维类软件开发本科金融2583183五险一金,年底奖金大数据风控研发工程师['专家', '高级', '软件开发']15K-30K3-5年6054北京普信恒业科技发展(北京)有限公司3786['管理规范', '技能培训', '扁平管理', '弹性工作']宜信2000人以上NaN开发/测试/运维类数据开发本科移动互联网,金融2582910大牛团队,互联网金融,零食水果,灵活工时BI数据分析师['数据分析', '数据', 'BI', '分析师', '商业智能']15k-25k3-5年5003苏州苏州朗动网络科技有限公司51527NaN朗动网络科技50-150人['独墅湖']开发/测试/运维类数据开发本科移动互联网,企业服务2582554管理扁平化,福利待遇优,发展前景好数据工程师['数据挖掘', '数据']10k-20k3-5年6605北京北京富通基业投资有限公司156832['节日礼物', '美女多', '帅哥多', '技能培训']北京富通基业投资有限公司50-150人['西二旗']市场/商务/销售类销售不限金融2582349周末双休/高提成/每月员工趴分析师助理/销售人员['顾问', '销售', '分析师']4k-6k不限4569杭州杭州游米信息科技有限公司57206['节日礼物', '专项奖金', '股票期权', '带薪年假']杭州游米信息科技有限公司15-50人['长河', '江南', '西兴']开发/测试/运维类后端开发本科游戏2582102有上线游戏,千万级流水,绩效奖金数据平台开发工程师['中级', '初级', 'web', '数据分析', 'Python', '全栈']8k-15k不限3687北京紫梧桐(北京)资产管理有限公司138874NaN蛋壳公寓150-500人['朝阳门', '东四', '朝外']产品/需求/项目类数据分析大专移动互联网2582053上班弹性制 发展前景好BI数据分析实习生['数据分析', '实习生', '数据', 'BI', '商业智能']2k-3k不限3673北京完美世界(北京)网络技术有限公司10369['绩效奖金', '五险一金', '带薪年假', '年度旅游']完美世界2000人以上['大屯', '北苑', '亚运村']运营/编辑/客服运营本科移动互联网,游戏2582044办公环境好 优秀团队 福利多多数据编辑['内容', '编辑']10k-20k不限6756北京完美世界(北京)网络技术有限公司10369['绩效奖金', '五险一金', '带薪年假', '年度旅游']完美世界2000人以上['大屯', '北苑', '亚运村']运营/编辑/客服运营本科移动互联网,游戏2582044办公环境好 优秀团队 福利多多数据编辑['内容', '编辑']10k-20k不限3918广州广州市亿博信息技术有限公司149488NaN亿博信息50-150人['琶洲', '新港']开发/测试/运维类数据开发大专移动互联网2581993双休,五险一金,节假日福利需求分析师['数据分析', '需求分析', '分析师']8k-13k1-3年1724北京北京东方国信科技股份有限公司16875['大数据软件', '技能培训', '节日礼物', '年底双薪']东方国信2000人以上['望京', '来广营']开发/测试/运维类数据开发本科数据服务2581982六险一金、双休、年终奖、北京工作居住证数据开发工程师['中级', '大数据', '数据库', '数据']7k-13k1-3年5400北京北京东方国信科技股份有限公司16875['大数据软件', '技能培训', '节日礼物', '年底双薪']东方国信2000人以上['望京', '来广营']开发/测试/运维类数据开发本科数据服务2581982六险一金、双休、年终奖、北京工作居住证数据开发工程师['中级', '大数据', '数据库', '数据']7k-13k1-3年512上海上海恒格信息科技有限公司124007NaN上海恒格信息50-150人['东方路', '八佰伴', '潍坊']产品/需求/项目类数据分析大专移动互联网,数据服务2581968一起奋斗大数据架构师/Hadoop['大数据', '架构师', 'hadoop', '数据']15k-25k3-5年172上海上海前隆金融信息服务有限公司24873['绩效奖金', '年终分红', '五险一金', '带薪年假']前隆金融(手机贷)500-2000人['外滩', '东外滩', '周家嘴路']金融类风控本科金融2581963牛人多,平台大数据建模['建模', '数据']20k-30k1-3年110上海上海星艾网络科技有限公司34331['结婚生育红包', '社团活动经费', '免费晚餐', '上门推拿']么么直播50-150人['万源城', '静安新城', '漕宝路']运营/编辑/客服运营不限移动互联网,社交网络2581935老板逗逼,大牛云集,弹性时间,福利暖心数据分析主管['数据', '数据分析']6k-8k1-3年......................................................1645北京迪希希埃(北京)互联网数据研究中心28992['绩效奖金', '年终奖金', '带薪年假', '办公手机']DCCI互联网数据中心50-150人['国展', '左家庄', '三元桥']设计用户研究本科企业服务,数据服务178547人才流动机制、弹性工作、福利、定期体检数据分析师['分析师', '数据分析', '数据']4k-6k1-3年5552北京迪希希埃(北京)互联网数据研究中心28992['绩效奖金', '年终奖金', '带薪年假', '办公手机']DCCI互联网数据中心50-150人['国展', '左家庄', '三元桥']设计用户研究本科企业服务,数据服务178547人才流动机制、弹性工作、福利、定期体检数据分析师['分析师', '数据分析', '数据']4k-6k1-3年796上海上海中通吉网络技术有限公司23348['绩效奖金', '五险一金', '带薪年假', '免费班车']ZTO-express2000人以上NaN技术DBA大专电子商务175853人性化管理+亲情1+1+预上市公司需求分析师['分析师', '需求分析']10k-20k5-10年3277北京宝宝树(北京)信息技术有限公司70['商业医疗保险', '股票期权', '带薪年假', '扁平管理']宝宝树500-2000人['团结湖', '朝阳公园', '三里屯']技术后端开发本科社交网络171511内部发展空间大 期权 扁平化架构管理高级数据分析工程师['数据分析', '数据']20k-35k5-10年6449北京宝宝树(北京)信息技术有限公司70['商业医疗保险', '股票期权', '带薪年假', '扁平管理']宝宝树500-2000人['团结湖', '朝阳公园', '三里屯']技术后端开发本科社交网络171511内部发展空间大 期权 扁平化架构管理高级数据分析工程师['数据分析', '数据']20k-35k5-10年4110广州优视科技有限公司2202['年度分红', '年度奖金', '股票期权', '每年2次加薪']阿里巴巴移动事业群-UC2000人以上['员村', '天河公园', '棠下']设计用户研究本科移动互联网148830待遇高福利好、五险一金、 前景好 、五天高级数据分析师['分析师', '数据分析', '数据']16k-25k5-10年2687北京北京缘路科技有限公司285['家属免费团建', '股票期权', '10天年假', '带薪出境游']口碑旅行15-50人['中关村', '北京大学', '苏州街']技术后端开发本科移动互联网,旅游130334百分比期权 全球首款移动决策引擎 带薪旅游数据抓取工程师['数据']15k-30k3-5年2297北京北京陌陌科技有限公司129['岗位晋升', '帅哥多', '管理规范', '技能培训']陌陌150-500人['望京', '大山子', '花家地']产品产品经理本科社交网络127572参与见证最有趣的社交产品陌陌的设计数据产品经理['产品经理', '产品', '数据']10k-18k1-3年5538北京北京陌陌科技有限公司129['岗位晋升', '帅哥多', '管理规范', '技能培训']陌陌150-500人['望京', '大山子', '花家地']产品产品经理本科社交网络127572参与见证最有趣的社交产品陌陌的设计数据产品经理['产品经理', '产品', '数据']10k-18k1-3年1917北京上海安硕信息技术股份有限公司21863['岗位晋升', '顶尖团队', '福利优厚', '股票期权']安硕信息(amarsoft)2000人以上NaN技术企业软件本科金融120777职业发展前景良好需求分析师 【北京】['分析师', '需求分析']8k-16k1-3年5420北京上海安硕信息技术股份有限公司21863['岗位晋升', '顶尖团队', '福利优厚', '股票期权']安硕信息(amarsoft)2000人以上NaN技术企业软件本科金融120777职业发展前景良好需求分析师 【北京】['分析师', '需求分析']8k-16k1-3年2306北京北京陌陌科技有限公司129['岗位晋升', '帅哥多', '管理规范', '技能培训']陌陌150-500人['望京', '大山子', '花家地']产品产品经理本科社交网络108569六险一金 有竞争力的薪资 优美办公环境数据产品经理['产品经理', '产品', '数据']10k-18k1-3年5539北京北京陌陌科技有限公司129['岗位晋升', '帅哥多', '管理规范', '技能培训']陌陌150-500人['望京', '大山子', '花家地']产品产品经理本科社交网络108569六险一金 有竞争力的薪资 优美办公环境数据产品经理['产品经理', '产品', '数据']10k-18k1-3年3832北京北京字节跳动科技有限公司62['扁平管理', '弹性工作', '大厨定制三餐', '就近租房补贴']今日头条2000人以上['知春路', '双榆树', '大钟寺']技术DBA本科移动互联网,数据服务100561过亿用户+优厚薪资期权+三餐+住房补数据抓取和处理(高级)工程师['数据']20k-40k不限6669北京北京字节跳动科技有限公司62['扁平管理', '弹性工作', '大厨定制三餐', '就近租房补贴']今日头条2000人以上['知春路', '双榆树', '大钟寺']技术DBA本科移动互联网,数据服务100561过亿用户+优厚薪资期权+三餐+住房补数据抓取和处理(高级)工程师['数据']20k-40k不限1007深圳深圳市珍爱网信息技术有限公司6718['发展上升型', '朝阳行业', '创业氛围浓厚', '年终分红']珍爱网2000人以上['南头', '科技园', '桂庙路口']职能高端职能职位本科社交网络,生活服务80307业务分析,自由度高,项目有发展前景。数据分析师['分析师', '数据分析', '数据']8k-15k1-3年
6876 rows × 17 columns
df
.positionId
.sort_values
()
1007 80307
6669 100561
3832 100561
5539 108569
2306 108569
5420 120777
1917 120777
5538 127572
2297 127572
2687 130334
4110 148830
6449 171511
3277 171511
796 175853
...
3673 2582044
6756 2582044
3687 2582053
4569 2582102
6605 2582349
5003 2582554
6054 2582910
6330 2583183
Name: positionId, Length: 6876, dtype: int64
>>>df
.sort_index
()
citycompanyFullNamecompanyIdcompanyLabelListcompanyShortNamecompanySizebusinessZonesfirstTypesecondTypeeducationindustryFieldpositionIdpositionAdvantagepositionNamepositionLablessalaryworkYear
0上海纽海信息技术(上海)有限公司8581['技能培训', '节日礼物', '带薪年假', '岗位晋升']1号店2000人以上['张江']技术数据开发硕士移动互联网2537336知名平台数据分析师['分析师', '数据分析', '数据挖掘', '数据']7k-9k应届毕业生1上海上海点荣金融信息服务有限责任公司23177['节日礼物', '带薪年假', '岗位晋升', '扁平管理']点融网500-2000人['五里桥', '打浦桥', '制造局路']技术数据开发本科金融2427485挑战机会,团队好,与大牛合作,工作环境好数据分析师-CR2017-SH2909['分析师', '数据分析', '数据挖掘', '数据']10k-15k应届毕业生2上海上海晶樵网络信息技术有限公司57561['技能培训', '绩效奖金', '岗位晋升', '管理规范']SPD50-150人['打浦桥']设计数据分析本科移动互联网2511252时间自由,领导nic数据分析师['分析师', '数据分析', '数据']4k-6k应届毕业生3上海杭州数云信息技术有限公司上海分公司7502['绩效奖金', '股票期权', '五险一金', '通讯津贴']数云150-500人['龙华', '上海体育场', '万体馆']市场与销售数据分析本科企业服务,数据服务2427530五险一金 绩效奖金 带薪年假 节日福利大数据业务分析师【数云校招】['商业', '分析师', '大数据', '数据']6k-8k应届毕业生4上海上海银基富力信息技术有限公司130876['年底双薪', '通讯津贴', '定期体检', '绩效奖金']银基富力15-50人['上海影城', '新华路', '虹桥']技术软件开发本科其他2245819在大牛下指导BI开发/数据分析师['分析师', '数据分析', '数据', 'BI']2k-3k应届毕业生5上海上海青之桐投资管理有限公司28095['美女多', '出国旅游', '不打卡', '带薪年假']青桐资本50-150人NaN金融类天使投资/VC/PE本科金融2580543留用机会,精品投行,优秀团队,氛围轻松助理分析师['实习', '投资', 'FA', '行业研究', '分析师']10k-15k应届毕业生......................................................6865北京佰润明辉(北京)投资有限公司121899NaN佰润明辉150-500人['团结湖', '朝阳公园', '三里屯', '团结湖', '朝阳公园', '三里屯']金融投融资不限金融,移动互联网1702627五险一金 年终奖 领导nice 发展空间大金融二级市场证券分析师/交易员/操盘手 零基础带薪培训['分析师', '金融', '证券']15k-30k不限6870北京北京亿盛融华投资管理有限公司151898NaN亿盛资本150-500人NaN市场/商务/销售类销售大专金融、教育2469665工作自由、法定假日休息外汇分析师['分析师', '资金管理']8K-10K不限6871北京北京亿盛融华投资管理有限公司151898NaN亿盛资本150-500人NaN市场/商务/销售类销售大专金融、教育2469682高薪双休五险一金时间自由朝九晚五金融证券分析师 助理['分析师', '金融', '证券']10K-20K不限6872北京北京亿盛融华投资管理有限公司151898NaN亿盛资本150-500人NaN产品/需求/项目类项目管理大专金融、教育2469686高薪五险一金双休朝九晚五带薪年假20天金融证券分析师 可培训['项目管理', '专员', '助理', '实习生', '风控', '采购', '分析师',...15K-30K不限6873北京北京亿盛融华投资管理有限公司151898NaN亿盛资本150-500人NaN其他房地产|建筑业大专金融、教育2470949高薪五险一金双休朝九晚五无加班可培训金融证券分析师 讲师 助理['分析师', '职业培训', '教育', '培训', '金融', '证券', '股票', ...15K-30K不限6874北京北京亿盛融华投资管理有限公司151898NaN亿盛资本150-500人NaN市场/商务/销售类销售大专金融、教育2465839高薪 无加班 双休 五险一金 金融证券分析师助理讲师助理['实习生', '主管', '经理', '顾问', '销售', '客户代表', '分析师',...10K-20K不限6875北京北京亿盛融华投资管理有限公司151898NaN亿盛资本150-500人NaN金融类风控不限金融、教育2471674挑战高薪,挑战自我1W五险双休诚聘金融分析师助理可兼职['分析师', '金融']8K-15K不限
6876 rows × 17 columns
df
['rank']=df
.companyId
.rank
(method
='min')
df
.sort_values
('companyId')
citycompanyFullNamecompanyIdcompanyLabelListcompanyShortNamecompanySizebusinessZonesfirstTypesecondTypeeducationindustryFieldpositionIdpositionAdvantagepositionNamepositionLablessalaryworkYearrank
1630北京北京欧应科技有限公司43['五险一金', '扁平化管理', '创业型企业', '岗位晋升']唯医网150-500人['东大桥', 'CBD', '朝外']设计数据分析硕士移动互联网2100781五险一金 津贴补助 晋升空间 管理规范数据分析师['分析师', '数据分析', '数据']8k-15k1-3年1.02064北京北京创锐文化传媒有限公司53['技能培训', '节日礼物', '季度奖金', '岗位晋升']聚美优品2000人以上['东直门', '海运仓', '东四']市场与销售市场/营销本科电子商务2345435发展空间大、绩效奖品、节日福利数据分析['数据分析', '数据']10k-20k1-3年2.02178北京北京创锐文化传媒有限公司53['技能培训', '节日礼物', '季度奖金', '岗位晋升']聚美优品2000人以上['东直门', '海运仓', '东四']产品产品经理本科电子商务1666634餐补+下午茶+绩效奖金+节日福利+晋升空间大数据产品经理['产品经理', '产品', '数据']15k-25k1-3年2.05485北京北京创锐文化传媒有限公司53['技能培训', '节日礼物', '季度奖金', '岗位晋升']聚美优品2000人以上['东直门', '海运仓', '东四']产品产品经理本科电子商务1666634餐补+下午茶+绩效奖金+节日福利+晋升空间大数据产品经理['产品经理', '产品', '数据']15k-25k1-3年2.04682成都北京创锐文化传媒有限公司53['技能培训', '节日礼物', '季度奖金', '岗位晋升']聚美优品2000人以上NaN技术运维本科电子商务1793663五险一金,餐补,带薪年假,零食大数据运维['大数据', '运维', '数据']15k-20k3-5年2.0.........................................................4912西安北京天晓科技有限公司157418['年底双薪', '绩效奖金', '五险']天晓科技50-150人['郭杜']开发/测试/运维类软件开发本科数据服务,其他2574676这是实现你人生价值最好的平台云计算、大数据(Hadoop\Spark) 高级软件工程师['软件开发']10k-20k3-5年6868.04907西安北京天晓科技有限公司157418['年底双薪', '绩效奖金', '五险']天晓科技50-150人['郭杜']开发/测试/运维类数据开发本科数据服务,其他2574688这是实现你人生价值最好的平台云计算、大数据数据分析师['数据分析', '算法', '数据挖掘', '大数据', '数据', '分析师']8k-15k3-5年6868.01629北京北京云合文化传媒有限公司157426NaN北京云合文化传媒有限公司15-50人NaN产品/需求/项目类数据分析本科数据服务,移动互联网2574813一年两次公平公正的竞选机制数据分析师['数据分析', '数据', '分析师']6k-12k1-3年6871.05582北京北京信立达医药科技有限公司157453NaN北京信立达15-50人['学院路']其他服务业本科医疗健康2578326五险一金,双休数据管理['医疗', '数据']4k-8k1-3年6872.01802北京北京信立达医药科技有限公司157453NaN北京信立达15-50人['学院路']其他服务业本科医疗健康2578326五险一金,双休数据管理['医疗', '数据']4k-8k1-3年6872.04763南京南京蔚思盾财务管理咨询有限公司157647['绩效奖金', '午餐补助', '交通补助', '带薪年假']蔚思盾少于15人['洪武路']综合职能类财务本科金融,企业服务2578503五险一金、带薪年假、节日福利、绩效奖金等财务分析师['财务', '分析师']5k以上3-5年6874.03580北京量子数聚(北京)科技有限公司157665NaN量子数聚50-150人['世纪城']产品/需求/项目类数据分析本科数据服务2579118晋升空间大 周末双休 公司前景好 优秀团队分析师助理['企业信用风险分']2k-4k不限6875.04723成都成都鸿易盛企业管理咨询有限公司157744NaN成都鸿易盛50-150人['人民北路']市场/商务/销售类销售不限金融、电子商务2580536环境优美,工作氛围轻松,充满激情的团队网络销售/客服/分析师助理['金融', '实习生', '在线', '经理', '销售']3K-6K不限6876.0
6876 rows × 18 columns
3.非重复与汇总计数 unique()、value_counts()
>>>df
.city
.unique
()
array(['上海', '深圳', '北京', '广州', '杭州', '成都', '南京', '武汉', '西安', '厦门', '长沙',
'苏州', '天津'], dtype=object)
>>>df
.city
.value_counts
()
北京 4177
上海 980
深圳 527
杭州 407
广州 335
成都 135
南京 83
武汉 69
西安 51
苏州 37
厦门 30
长沙 25
天津 20
Name: city, dtype: int64
4.描述统计 describe()
参考:https://www.cnblogs.com/zhoulixiansen/p/10533286.html
>>>df
.describe
()
companyIdpositionIdrank
count6876.0000006.876000e+036876.000000mean56473.4704772.188696e+063425.300175std48416.9478134.472044e+051987.766396min43.0000008.030700e+041.00000025003.0000002.049360e+061719.75000050F668.0000002.352736e+063438.000000751076.0000002.495215e+065154.000000max157744.0000002.583183e+066876.000000
>>>df
.companyId
.describe
()
count 6876.000000
mean 56473.470477
std 48416.947813
min 43.000000
25% 10003.000000
50% 46668.000000
75% 101076.000000
max 157744.000000
Name: companyId, dtype: float64
>>>df
.mean
()
companyId 5.647347e+04
positionId 2.188696e+06
rank 3.425300e+03
dtype: float64
>>>df
.sum()
city 上海上海上海上海上海上海上海上海上海上海上海上海上海上海上海上海上海上海上海上海上海上海上海...
companyFullName 纽海信息技术(上海)有限公司上海点荣金融信息服务有限责任公司上海晶樵网络信息技术有限公司杭州...
companyId 388311583
companyShortName 1号店点融网SPD数云银基富力青桐资本足球魔方安硕信息(amarsoft)上海崇杏55海淘莉...
companySize 2000人以上500-2000人50-150人150-500人15-50人50-150人15...
education 硕士本科本科本科本科本科本科硕士本科本科本科本科本科本科硕士本科硕士本科本科本科本科硕士本科...
industryField 移动互联网金融移动互联网企业服务,数据服务其他金融移动互联网,电子商务金融移动互联网,医疗健...
positionId 15049471471
positionAdvantage 知名平台挑战机会,团队好,与大牛合作,工作环境好时间自由,领导nic五险一金 绩效奖金 带薪...
positionName 数据分析师数据分析师-CR2017-SH2909数据分析师大数据业务分析师【数云校招】BI开...
salary 7k-9k10k-15k4k-6k6k-8k2k-3k10k-15k7k-14k5k-7k4...
workYear 应届毕业生应届毕业生应届毕业生应届毕业生应届毕业生应届毕业生应届毕业生应届毕业生应届毕业生应...
rank 2.35524e+07
dtype: object
>>>df
.var
()
companyId 2.344201e+09
positionId 1.999918e+11
rank 3.951215e+06
dtype: float64
>>>df
.companyId
.cumsum
()
0 8581
1 31758
2 89319
3 96821
4 227697
5 255792
6 257794
...
6866 386957517
6867 387096399
6868 387248297
6869 387400195
6870 387552093
6871 387703991
6872 387855889
6873 388007787
6874 388159685
6875 388311583
Name: companyId, Length: 6876, dtype: int64
5.分组统计
>>>df
['bins']=pd
.cut
(df
.companyId
,bins
=4,
labels
=list('abcd'))
>>>df
['bins']=pd
.cut
(df
.companyId
,bins
=[0,5,20,9999999999],
labels
=['0~5','5~20','20~'])
>>>pd
.qcut
()