ETL系统选型参考指标 10 一月 2022 01:43 dean (0) 分类 指标 权重 备注 基本功能25% 对操作系统的支持 5% 是否支持 windows/unix/linux 对多数据源的支持 10% 支持数据源类型,格式等 外部程序调用 5% SHE [更多...]
Spark SQL 获取前一条不为空和后一条不为空的值 06 十二月 2021 10:35 dean (0) WITH special_date AS( SELECT '元旦' AS activity_content, 'A001' AS type_code, '2022-1-1' AS begin_da [更多...]
Kettle使用杂记 11 十二月 2020 10:01 dean (0) 最近参加的一个项目使用Kettle进行数据库清理，使用的是MySQL数据库，使用Kettle过程有一些需要注意的事情，在这里随手记录。 [更多...]
手动安装 Scrapy 22 六月 2020 11:46 dean Python, Scrapy (0) 之前安装Scrapy的时候，都是使用工具来安装，这样解决包依赖的问题比较方便，但是最近在使用工具安装Scrapy却一直安装不了，后来在网上找到手工安装的过程，记录如下： 1.安装lxml: pip i [更多...]
TF-IDF 的短文本分类简述 22 五月 2020 09:10 dean (0) TF-IDF是Term Frequency - Inverse Document Frequency的缩写，即“词频-逆文本频率”。它由两部分组成，TF和IDF。 [更多...]
Python 读取 Excel 文件 09 五月 2020 11:04 dean Python (0) 在日常工作中，使用Python读取数据文件还是非常频繁，这里记录下如何读取Excel文件。 [更多...]
MySQL 5.7 中文全文检索 07 五月 2020 04:33 dean (0) MySQL 5.7 中文全文检索 详细见 https://www.cnblogs.com/miracle-luna/p/11147859.html [更多...]
使用 Redis 实现延时队列 01 五月 2020 06:58 dean ASP.NET (0) 延时在日常应用中大有用途，例如定时取消订单、默认好评等，都可以使用延时队列来实现。这里介绍基于Redis实现的延时队列。 [更多...]
微信小程序实现点击tabBar刷新页面 30 四月 2020 12:17 dean (0) 在很多APP应用中，点击底下tabBar时，会存在两种情况： 情景1、如果点击的tabBar不是当前tabBar时，会切换到被点击的tabBar； 情景2、如果点击的tabBar是当前tabBar时， [更多...]
ASP.NET MVC 使用复杂类型踩坑 28 四月 2020 07:02 dean ASP.NET (0) 在ASP.NET MVC中使用复杂类型作为参数的时候，会有一个坑等着你，如果不小心踩到了，使用一般的调试方式与办法，完全没办法解决问题。此篇记录如何避开这个坑。 [更多...]
PyCharm 2020.1专业版完美激活 24 四月 2020 11:40 dean Python (0) PyCharm2020是由JetBrains打造的一款Python IDE，VS2010的重构插件Resharper就是出自JetBrains之手。同时支持Google App Engine，PyCharm支持IronPython。这些功能在先进代码分析程序的支持下，使 PyCharm 成为 Python 专业开发人员和刚起步人员使用的有力工具。 [更多...]
MySQL table "xxxx" is full 23 四月 2020 09:03 dean (0) 在执行SQL语句的时候，MySQL报1114 - The table 'xxxxx' is full。这个是表容易达到系统上限，可以通过调整MySQL参数进行优化，这里记录需要调整的参数与办法。 [更多...]
在阿里云ECS发送邮件 22 四月 2020 08:31 dean ASP.NET (0) 在阿里云上新购ECS默认都是禁用了25端口的，这个是阿里云出于反垃圾邮件所作的措施。如果系统中需要发送邮件，如果使用STMP默认的25端口，则会导致发送失败。此篇记录在ECS如何实现邮件的发送。 [更多...]