“年终”文章回顾及新菜单发布¶
1 前言¶
虽然还没真正到农历年底,但逐渐寒冷的天气和提上日程的year end review似乎给做个“年终回顾”这一行为增添了些正确性。
我们的项目起步于5月底,作为重要组成部分的公众号,对我们而言,是一个记录数据科学相关知识的地方。它可以激励我们学一点新的知识,也便于日后回过头来再看看,温故知新。如果还能给读者提供些价值,那自然是再好不过了。
因此,我们文章的选择总是有点随心所欲,时间久了,不免让大家觉得有些杂乱。趁此机会,我们重新整理了文章的分类,发布了新的菜单。更重要的,我们也想借此机会,重新回顾一下发布的文章,做一个“年终总结”。
2 科技正餐¶
科技正餐专注于比较硬核的编程及人工智能的内容,也是我们输出最多的一块。它分为三个子部分:人工智能、编程精华和分析工具。
2.1 人工智能¶
人工智能板块侧重于机器学习、AI(Artificial Intelligence)等方面的算法和应用,包括以下四点:
- 经验分享
- 深度学习
- 算法
- 竞赛
在经验分享中,我们主要是基于自身经验(踩过的坑)以及高质量的资源,如《Rules of Machine Learning》、《A Recipe for Training Neural Networks》及Kaggle论坛等,分享了在运用机器学习建模的整个过程中的tricks。
对我们而言,这些经验都是宝贵的,是无法直接查到的,可能是踩过坑,花了不少时间才学会的。
深度学习部分主要介绍了Tensorflow这一机器学习框架,包括如何在Apple Silicon Macs上安装,各种callbacks,如何自定义模型以及偏应用地搭建一个模型来识别鲜花图像。想更好的学习Tensorflow不妨来我们的深度学习专题看看。
算法部分包括数据结构与算法中的递归、搜索、排序,机器学习中的决策树以及multi-task算法还有在策略中可以使用的双重差分模型。
竞赛部分是我们参加过的竞赛,或是开源的高分解决方案的解读。向大佬们学习总是能收获很多。
2.2 编程精华¶
编程精华涉及了我们常用的编程语言及相关应用,包括以下三点:
- Python
- SQL
- 应用
我们使用最多的就是Python和SQL了。在Python部分,我们介绍了常见的数据结构,包括字典、列表和元组以及好用的闭包。我们还介绍了流行的、处理大数据的PySpark这个包。
在SQL部分,我们先介绍了常见的数据仓库。接着,我们着重介绍了工作中常用的SnowFlake这一如今炙手可热的数据仓库,包括它的架构和权限,以及使用过程中的实践指南。最后,我们介绍了可以解析SQL语句的Python包:sqlparse。
应用部分包括了各种好玩的应用。技术不仅很酷、也很实用。我们介绍了用Python打造淘宝抢单机器人、预订网球场地、爬取心仪的岗位信息和PDF文件、自建论坛以及在12306智能订票。我们也介绍了A/B测试,这一无论在工作还是生活中,都十分有用的分析方法论。
2.3 分析工具¶
分析工具介绍了程序开发过程中不可或缺的基础设施:
- Git
- 容器
Git主要提供了版本控制和工作管理的功能。我们介绍了GitHub如何使用以及常用命令。GitHub也可以很好玩,我们介绍了GitHub一些酷炫的功能,比如GitHub Action,用GitHub做在线简历等。
Docker使开发者可以将应用、依赖打包到容器当中,便于开发。我们形象地介绍了Docker是什么,也手把手地教大家如何在Windows系统中运行Docker。
3 科技甜点¶
如此多硬核的知识可能让大家应接不暇。我们还提供了科技甜点,让大家看点好玩的,放松心情。它侧重于软硬件方面的体验及其他经验分享,分为四个部分:经验分享、产品体验、App和iOS。
3.1 经验分享¶
经验分享包括最初的我们的故事以及如何科学地写出公众号文章。
3.2 产品体验¶
产品体验主要是硬件方面的使用心得,包括M1 Mac mini、Apple Watch S5、iPad Pro和罗技鼠标。我们并不带货,也没有广告费,因此,这是我们最真实的测评。
3.3 App¶
App部分包括了一些好用的软件,包括好看的个人笔记应用Notion、上传图片的PicGo图床、代码生成工具Copilot、代码托管平台GitHub、实用的电脑软件们以及分析网站流量的Google Analytics。
3.4 iOS¶
我们的团队中有资深果粉,因此我们向大家介绍了iOS使用过程中的一些实用工具。相信有了它们,使用体验能得到极大提高。
4 总结¶
从我们项目Kick off到如今也快半年了。虽然我们粉丝不多,但是我们仍孜孜不倦地输出着数据科学的相关知识,并以此为乐。
这篇“年终总结”介绍了我们重新整理的新菜单,希望大家有兴致时能点点看看。我们也回顾了发布的50多篇文章及视频,如果其中有1%的内容是对你有用的,我们的目的就达到了。
最后,感谢各位读者的陪伴!