- 博客(180)
- 收藏
- 关注
RSS订阅原创 未明学院：技能帖 | Pandas的那些统计学函数——数据筛选及其它常用函数
这里是未明学院的技能分享贴~我们会定期分享： 好用到“难以自拔”的Python工具 好玩到“停不下来”的Python体验 好酷到“不忍错过”的Python技巧“数据科学家们80%的精力消耗在查找、数据清理、数据组织上，只剩于20%时间用于数据分析等。” ——IBM...
2020-02-06 16:50:17
584
原创 未明学院：技能帖 | 如何用Python实现微信自动回复新年祝福
第一步：注册微信机器人网址：http://www.turingapi.com/注册账号后，可以新建一个机器人创建成功后，我们可以获得我们的一个apikey（后面程序中要用到）第二步：编写代码利用下面的函数实现微信机器人自动回复消息。下面的函数是，对我们所接受到的微信消息进行一个判断，如果它里面包含“新年快乐”这4个字，那么微信机器人会从我们设定的新年祝福语中随...
2020-02-04 16:46:55
633
原创 未明学院：爬取一波B站排行榜，告诉你UP主怎么给视频取个奥利给的名字
B站有一个神奇的视频，它的时长只有短短的14秒，标题只有短短的4个字，但播放量却已经突破了1500万。视频的内容也很简单，一张动图就可以看完：（如果让你重新来过，你会不会爱我...）然而这部视频的标题仅有4个大字：“影 流 之 主”。你永远想不到，起一个什么样的标题，会让视频突然就火了；就像你永远也想不到，《英雄联盟》的玩家们居然会这么喜欢看一个大叔扭...
2020-02-04 16:29:59
1684
原创 未明学院：数据说 | 春节不只有催婚和拜年，还有吃和远方
春节将至，各位小伙伴应该只有两个状态“放假回家”或“坐等放假”脑中应该只环绕着两个问题“过年去哪玩？”“过年玩点啥？”今天，我们用大数据整理出了一份????2020春节出游指南????节前必读！人口流动预测根据交通运输部的数据，今年春运期间，客流分布差异明显，热门迁入迁出省市相对集中。省份方面，预计春运期间客流量主要集中在中东部地区，客运量排名前十位的省份为：广东、...
2020-01-21 15:43:52
539
原创 未明学院：数据说 | 故宫600年，从“百年IP”到一代网红
“当生命已经缄默，建筑却依旧在述说。”迄今，已经600岁的紫禁城用这句话来描述是再合适不过了。时光流转，朝代更迭，在这座巍峨的宫殿里，身处权力中心的人来来去去，唯有紫禁城带着这百年的记忆，凝成故宫这样一个文化标记，承载着中国人对于历史的想象。9999间半屋永乐十八年（1420年）紫禁城建成，一座长方形城池，南北长961米，东西宽753米，四面围有高10米的城...
2020-01-15 17:42:54
631
原创 未明学院：技能帖 | Pandas的那些统计学函数
这里是未明学院的技能分享贴~我们会定期分享： 好用到“难以自拔”的Python工具 好玩到“停不下来”的Python体验 好酷到“不忍错过”的Python技巧在数据分析任务中，最开始要处理的就是数据的统计工作，那么在pandas中有哪些主要的统计函数呢，我们总结了日常工作中常用的统计处理函数，分享给大家。统计汇总...
2020-01-09 10:58:40
473
原创 未明学院：爬取微博关注列表，带你一窥“饭碗cp”的人际网
最近，《庆余年》迎来大结局，成功收官，而最后小言公子突然刺向范闲的那一剑也成为悬念，让众多观众为之抓狂。在期待第二季的同时，很多小伙伴也被两大主演“范闲”张若昀和“鸡腿姑娘”李沁成功圈粉。我们利用爬虫爬取了两大主演在微博上的用户关注情况，并且绘制了人际关系网络图，快来看看吧~~数据来源首先，我们爬取两位主演在微博上所关注的信息(前200名)。接下来，我们使用爬虫...
2020-01-09 10:32:40
661
2
原创 未明学院：技能帖 | 教你实现《黑客帝国》中的代码雨
这里是未明学院的技能分享贴我们会定期分享： 好用到“难以自拔”的Python工具 好玩到“停不下来”的Python体验 好酷到“不忍错过”的Python技巧很多小伙伴一定看过好莱坞大片《黑客帝国》吧，这部好莱坞系列大片，最令人好奇的除了其中让观众们一头雾水的剧情之外，就当属酷炫的代码雨了。让我们来看看怎么使用Python...
2019-12-31 17:26:54
485
原创 未明学院：数据说 | 766万Youtube粉丝，她究竟有什么魔力？
李子柒，何许人也？李子柒--知名古风美食短视频博主。让我们来看一看提到李子柒，大家想到的标签。这个古朴典雅的姑娘，在视频里分享自己干农活，做传统工艺，烹饪各种佳肴野味。其中广为人知的是她做的各种美味，包括佛跳墙，玲珑熟醉蟹，柿饼，豌豆凉粉，酸枣糕……视频中，不仅制作工序传统繁复，其整体风格及陈设也古色古香，让观众如痴似醉。这种田园牧歌式的生活，让久居城市的我们好奇...
2019-12-27 17:16:37
395
原创 未明学院：技能帖 | 词云图前置--jieba分词
在自然语言处理过程中，为了能更好地处理句子，往往需要把句子拆开分成一个一个的词语，以便更好地分析句子的特性，这个过程叫分词。怎么分词？利用jieba中文分词组件。三种jieba切词模式介绍jieba切词有三种模式的选择，分别为全模式，精准模式，搜索引擎模式。1.全模式：把句子中所有的可以成词的词语都扫描处理，速度非常快，但是不能解决歧义。2.精准模式：试图将句子...
2019-12-27 16:35:57
328
原创 未明学院：数据说 | 是谁在影响2.6亿“Z世代”的消费力？
“什么是Z世代？”看到这的你可能也会有这样的疑问。“Z世代”是指在1995-2009年间出生的一代人。作为即将登场的消费主力军，市场的镁光灯逐渐聚焦在他们身上。相较于千禧一代（出生于1980-1994年的一代），“Z世代”仿佛更引人注目。为什么“Z世代”值得关注为什么“Z世代”值得关注？根据联合国发布的人口调查统计显示：“Z世代”人口将超过千禧一代，占全世界 77亿人...
2019-12-24 09:49:26
363
原创 未明学院：用A/B测试取代拍脑袋决策
今天我们来讲一个互联网时代的领头羊公司--谷歌最常用的决策方法：A/B测试。它不仅可以用在计算机科学方面，还可以用于商业决策、广告投放、政治竞选等多个领域。它的核心思想就是数据驱动，使用实验和数据来告诉我们哪种方案是可能的最佳方案。什么是A/B测试？A/B测试是一种产品优化的方法，首先为同一个优化目标制定两个（或多个）方案（以页面为例）。接着让一部分用户使用 A方案，...
2019-12-19 17:39:34
368
原创 未明学院：学员来稿 | 2019年中国电影分析报告
作者 | L同学Python数据分析11月班学员从 2008年到2018年，中国电影票房以年均35%的速度迅速上升。2017年，中国电影市场更是一跃成为全球第二大电影市场。而尽管2019年已经步入尾声，中国电影市场依然保持火热。尤其是随着制作水平的发展，越来越精良的国产电影，更是受到了广大消费者的欢迎。这篇报告对采用Tushare在2019年1月-11月的票房数据，及豆瓣上电影...
2019-12-19 17:16:44
2094
原创 未明学院：给Python初学者：你必须知道的Jupyter Notebook (二)
这里是未明学院的技能分享贴~我们会定期分享： 好用到“难以自拔”的Python工具 好玩到“停不下来”的Python体验 好酷到“不忍错过”的Python技巧本文我们将继续分享Jupyter Notebook的使用方法。我们先了解下主要用于文本编辑的Markdown Cell的使用。01 标题的编写键入“#”号，可以进行标...
2019-12-16 13:48:33
251
原创 未明学院：给Python初学者：你必须知道的Jupyter Notebook
这里是未明学院的技能分享贴~ 我们会定期分享： 好用到“难以自拔”的Python工具 好玩到“停不下来”的Python体验 好酷到“不忍错过”的Python技巧工欲善其事必先利其器，相信大部分的初学者都是从Python IDE开始Python之路的。科普一下：IDE，Integrated Development Enviro...
2019-12-16 13:30:14
251
原创 未明学院：“翻车”之后：从数据看李佳琦在舆论场中如何化险为夷
双十一的快递已经陆续送上门来，围绕着这次全民购物狂欢，淘宝直播间里的“口红一哥”李佳琦无疑身处话题中心，热搜不断。我们通过“李佳琦Austin”的微博及抖音数据也可见一斑。李佳琦微博转评赞数据趋势图从微博数据可以看出，不论是每日发微数量，还是微博的转评赞数，都远超于前十月平均水平，当然其中有“双十一”转发抽奖活动带来的影响，但并不妨碍其热度。李佳琦抖音播放评...
2019-12-13 14:53:39
894
原创 未明学院：职场人，如何应对“All+数据分析”时代？
为什么职场人要具备数据分析能力大家常说人在江湖，身不由己。随着行业逐渐成熟、竞争不断加大、人口红利和资源红利的优势逐渐消失，很多行业的发展都逐渐缓慢下来。过去的粗犷化运营造成很大的资源浪费，企业无法承受，大家逐渐发现了数据驱动的价值。现下的大环境，数据已经渗透到当今每一个行业和业务职能领域，成为了重要的生产因素。在这样的大环境下，要想更好地处理自己的工作、顺应数据化浪潮，都有必要...
2019-12-12 15:59:03
245
原创 未明学院：Python2与Python3的主要区别
原创：未明学院先说一下Python 由来，1989年，荷兰人Guido（人称“龟叔”），为了打发圣诞节假期，龟叔开始写Python语言的编译器，并于1991年正式发布。01、代码特点Python 2于2000年10月16日发布，稳定版本是Python 2.7。Python 3于2008年12月3日发布，不完全兼容Python 2。python2 的代码混乱，重复较多，冗余...
2019-10-05 17:28:52
303
原创 未明学院：别盲目关注数据了，好的数据指标更重要
拿什么数据说话越来越多互联网公司看重数据，“拿数据说话”成了行业默认的理念，人们认为数据可以帮助他们在工作中增强执行力、制定正确目标、提高效率，数据在工作——尤其是互联网行业的工作，发挥着非常重要的作用。对于运营来说，把握关键的数据指标，比如日活、月活、转化率、留存率等指标，可以帮助他们改善工作环节中的问题，提高运营效率。对于网页设计师来说，了解什么样的网页更能吸引用户，透过数据了解用...
2019-09-26 17:40:19
257
原创 未明学院：Python可视化库Matplotlib绘图入门详解
Matplotlib是Python的绘图库，其中的pyplot包封装了很多画图的函数。Matplotlib.pyplot 包含一系列类似 MATLAB 中绘图函数的相关函数。每个 Matplotlib.pyplot 中的函数会对当前的图像进行一些修改，例如：产生新的图像，在图像中产生新的绘图区域，在绘图区域中画线，给绘图加上标记，等等…… Matplotlib.pyplot 会自动记住当前的图...
2019-09-25 17:43:20
382
原创 未明学院：12个惊艳的数据可视化经典案例
原创：未明学院数据是强大的。藏在数据背后的信息在等待挖掘和分析，发挥它真正的作用。数据是冗杂的。每时每刻每分每秒都在生产数据的现代，数据量的庞大是无法想象的。还好，人的智慧是无限的，创造了数据可视化的方式，帮助我们解释数据，发现数据背后的有用信息。数据可视化，简而言之，通过图表的方式解释数据，例如数据的模式、趋势、相关性等。数据可视化可以是静态或交互的。在过去，人们一...
2019-09-24 17:51:04
1544
原创 未明学院：国庆将至，快来Pick你最喜欢的旅行地
国庆节快到了，小伙伴们出门去浪的心是不是蠢蠢欲动，同时又不知去哪里？担心交通不方便，担心景区人太多，担心服务设施太差……还没出去玩，已经被一肚子担心闹得没心情了。别担心，为你准备了一份出行报告指南，助你找到自己满意的国庆旅行地~高德地图联合中国社会科学院社会学研究所权威发布了《2019中国主要旅游景区研究报告》，该报告基于高德旅游大数据、交通大数据综合分析得出，旨在为景区发展建设、...
2019-09-23 17:49:30
284
原创 未明学院：为什么说零售业的发展离不开大数据？
原创：未明学院传统线下的实体零售正步入“冰封”时代。两年多以来，全球实体零售舞台正在上演前所未有的关店潮、倒闭潮、裁员潮、转型潮、资金链断裂、股价暴跌甚至破产。这种现象的背后成因复杂，比如房租价格上涨、人员成本上涨、融资难、消费需求结构的改变等等。与此同时，互联网的飞速发展也让许多精明的商家看到了转机，部分线下商家转移到线上销售，部分商家采用“线上+线下”的方式经营。经营...
2019-09-19 17:51:44
340
原创 未明学院：如何用一行代码搞定数据透视表？
原创：未明学院Excel中数据透视表的使用非常广泛，其实Pandas也提供了一个类似的功能，应用起来比Excel更灵活，也更强大。虽然pivot_table看起来只是一个简单的函数，但是它能够快速地进行数据分析，帮你轻松搞定繁杂冗余的数据，提升学习工作的效率。本期我们将重点解释Pandas中的pivot_table函数，并教大家如何使用它来进行数据分析。注意，你需要确保你理解...
2019-09-19 17:37:55
263
原创 未明学院：猎聘《2019年中国AI&大数据人才报告》
近日，猎聘发布了《猎聘2019年中国AI&大数据人才就业趋势报告》。报告指出，AI&大数据人才在全球爆发式发展，而另一面在全球范围内呈现严重人才荒。中国人工智能人才缺口超过500万，大数据人才缺口高达150万。AI&大数据中高端人才画像01、人才呈年轻化趋势，并具有丰富工作经验猎聘大数据显示，从2019年1-7月，全国AI&大数据人才的年龄分布以25-3...
2019-09-18 13:40:38
887
原创 2019年月饼届的C位担当，你Pick谁？
中秋假期过完，小伙伴们吃月饼了吗？你们喜欢什么口味的月饼呢？五仁、莲蓉蛋黄、芝麻、红豆、水果……月饼和月亮就像一对CP，每年中秋都会上榜。赏月亮，吃月饼是中华民族千年来的中秋传统。关于月饼，每年都会因为口味的原因吸引人们的关注。继榴莲月饼后，今年的香辣钵钵鸡月饼也出道了。小明只能感慨——我大中华人民真是人(dou)才(shi)辈(chi)出(huo)。那么今年#月饼届的...
2019-09-18 13:29:49
300
原创 未明学院：这样学习数据分析，难怪你会放弃
原创：未明学院大数据是不可阻挡的发展趋势，依托于这一行业，互联网公司对数据分析人员需求也逐年递增，数据分析师也成为当前比较火的就业方向。许多职场人士对数据分析技能也越加重视，开始学习数据分析。数据分析的应用领域广泛，而各领域和方向采用的关键技术差异性较大，新手在面对新的领域不熟悉，容易感到不安，不确定应该如何往前进。作为一名在数据分析之路上走过弯路的“萌新”，小明同学归纳了新...
2019-09-18 13:20:36
418
原创 未明学院：从分析工具到职场应用，带你全方位了解数据分析
作者 | Z同学未明学院优秀学员1、数据分析学习一般而言，学习数据分析的人群主要有两类目的。一类是把它作为职业发展方向，之后从事相关的专业工作，比如量化投资研究员、数据分析师、算法工程师、大数据开发师、数据挖掘师等职业；另一类是把它当做辅助手段进行其他种类的工作，常见的有会计类、咨询类、文书类、风控类等工作。接下来的技能分支也主要按照这两个目的进行分类。2、数据...
2019-09-18 12:53:48
348
原创 未明学院：Python数据表处理——Groupby的妙用
原创：未明学院Python携带了许多犹如“外挂”的第三方库，其中Pandas库是同学们在学习Python过程中接触得最多的库之一，为了帮助大家更好地掌握Pandas库中的每一个知识点，小明同学请来了未明学院的王老师，给大家讲讲Pandas库下面的Groupby函数的使用，同学们拿出小本本吧~Groupby知识点Groupby简单来讲就是实现数据的快速分组聚合（求和、求均值等计...
2019-09-17 13:40:17
320
原创 未明学院：Python竟然还能用在这些行业？
Python自20世纪90年代初诞生以来，凭借着它简单易上手的特征以及应用的广泛性，超越了C、Java、R等其他语言，成为了目前世界上最受欢迎的编程语言。2019年IEEE Spectrum榜单中，Python语言蝉联三年第一。2019年编程语言流行指数(PYPL)排行榜公布的最新榜单中，多年王者Java跌落神坛，Python则登顶第一。在 Goldman Sachs 发布的一份针对全...
2019-09-17 13:30:06
513
原创 未明学院：如何使用python制作词云图？
原创： 未明学院我们经常在网上看到各种各种的词云图，其实这种图形使用Python做起来非常简单，今天就教给大家如何操作。（点击查看大图）首先，安装词云模块-wordcloud打开命令行/终端输入：pip install wordcloud,如下图所示。注打开终端的方式参考：windows：https://jingyan.baidu.com/article/e4511cf...
2019-09-17 12:42:48
250
原创 未明学院：人工智能大会超酷炫的AI黑科技
8月31日，2019世界人工智能大会在上海世博中心圆满落幕。这届世界人工智能大会以“智联世界，无限可能”为主题，微软、IBM、特斯拉、亚马逊、华为、阿里、腾讯等龙头企业负责人，26位独角兽企业创始人，以及50余位知名投资人共同畅谈行业发展趋势。并且，在开幕首日，马云与马斯克的“双马交锋”就引爆热点，刷屏朋友圈。各分论坛更是火花碰撞，前沿观点频出。当然，除了各大佬的演讲，最新AI产品...
2019-09-16 17:00:46
1402
原创 未明学院：来自券商研究所搬砖狗的自白
作者 |M同学未明学院优秀学员别人眼中的券商研究所实习生：“协助分析师并独立撰写深度个股报告、行业报告、专题报告；整理晨会纪要、搜集相关数据…"现实中的券商研究所实习生：“搜集数据-整理数据-搜集数据-整理数据…（无限循环）”本人是一名在国内top2券商研究部门的实习生，曾经在三家不同的券商研究部实习过，涉及行业研究，个股研究及固定收益等，对研究所工作有一定的了解。这里首...
2019-09-16 16:48:57
449
原创 未明学院：我一下班就切回私人微信，怎么了？
小时候，我们总是不理解为什么大人总有那么多烦恼。直到自己慢慢长大，开始在工作中体会种种心酸和不易，才知道“成年人的世界并不轻松”并不是一句矫情的话。腾讯视频截图演员在吐槽，有时为了工作不得不舍弃尊严因此，下班后的“喘息”时间显得格外宝贵。那么，如果有人在这个时候给你发工作消息，你会回复他吗？01回还是不回，没有标准答案有人说，消息还是得回。理由一：领导的消息，难道我...
2019-09-05 17:37:23
382
原创 未明学院：7张思维导图掌握数据分析关键库pandas
原创：未明学院Pandas是一个强大的分析结构化数据的工具集；它基于numpy，用于数据分析和数据挖掘，同时也提供数据清洗功能。pandas与numpy一起构成了数据分析的基础双生库。今天小明邀请了未明的王老师，给大家总结了pandas的核心知识，主要包括以下几个方面。pandas核心知识01、首先我们来认识一下pandas的一些基本概念。pandas概述02...
2019-09-03 17:12:46
559
原创 未明学院：我的算法岗圆梦之路，有多么热爱就有多少收获
作者：W同学未明训练营优秀学员港中文MSC在读（2019.12毕业）Offer：腾讯，华为，平安，OPPO视觉算法2020年秋招岗位正在投递我本科在一个211财经学校读计算机，因为没有进金融方面的专业，入校以来一直很绝望。但直到上了一门课——数据结构，让我走上了算法的美妙之路……1、算法带来的喜悦，我至今记得……我是一个知乎资深爱好者，有一天瞥见了藏在琳琅满...
2019-09-03 16:58:50
265
原创 未明学院：有趣or有用，九款人工智能小程序/APP推荐给你
近日，一家印度初创企业被曝出用真人工程师冒充AI编程。所谓AI编写代码的背后，是印度工程师们的随时待命和疯狂coding。不少网友吐槽：这果然是真人工·智能。不得不承认，用人工冒充智能的新闻并不少见。但这并不能抹杀所有的AI应用。今天小明给大家推荐的这九款小程序/APP，都是人工智能融入生活的有趣or有用的典型例子。小明保证，总有一款适合你~注：本文所涉内容并非广告，但万一...
2019-08-22 17:48:54
1944
原创 未明学院：Numpy核心要点有哪些？3张思维导图帮你梳理
Numpy是python语言中使用最频繁的基础库之一，主要是进行各种数据计算处理。我们用思维导图的形式给大家梳理了numpy的核心要点，主要是基本操作、索引与切片、常用函数方法这3个方面。numpy的核心要点1下面这张图主要是对numpy的基础操作进行了整理，包括导入模块，创建数组和数组属性3部分内容。numpy的基础操作2数组的索引操作是修改具体数组元素的前提...
2019-08-22 17:26:18
385
原创 未明学院：Pandas必备技能之“表格拼接”
原创：未明学院在进行数据处理和分析时，我们经常会面对很多互有联系的不同表格，我们所需要的数据很有可能分布在各个文件中，所以能够熟练地对各种不同的表格进行联合、合并是非常有用的。包含在pandas对象的数据可以通过多种方式联合在一起，本文主要介绍常用的三种方法，即append()，concat()，merge()，并通过电影数据进行讲解。【使用工具】Python3，Pandas...
2019-08-16 17:47:59
357
原创 未明学院：用excel不好吗？为什么还要学python？
原创：未明学院在互联网管理、金融、物流等领域，往往离不开数据处理、统计分析等辅助决策的操作。传统的商业分析（Business Analysis），定性占比很大，以相对简单的数据处理为辅助，人们使用的分析工具主要是Excel；然而，自Excel2007版起，最大支持的工作表大小为16,384 列 × 1,048,576 行，超出最大行列数单元格中的数据将会丢失。在大数据背景的...
2019-08-14 17:55:59
379
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人