分类 coding 下的文章

运行了几个python后台守护进程,需要重启的时候不能简单 killall python 很容易会误杀其他服务
所以备忘以下的脚本

已验证有效

#!/bin/sh

function PidFind()  
{
    PIDCOUNT=`ps -ef | grep $1 | grep -v "grep" | grep -v $0 | awk '{print $2}' | wc -l`;  

    if [ ${PIDCOUNT} -gt 1 ] ; then  
        echo "There are too many process contains name[$1]"  
    elif [ ${PIDCOUNT} -le 0 ] ; then  
        echo "No such process[$1]!"  
    else  
        PID=`ps -ef | grep $1 | grep -v "grep" | grep -v ".sh" | awk '{print $2}'` ;  
        echo "Find the PID of this progress!--- process:$1 PID=[${PID}] ";  

        echo "Kill the process $1 ...";          
        kill -9  ${PID};  
        echo "kill -9 ${PID} $1 done!";  
    fi  
}
#查找并kill掉 带有 newdoc.daemon 名称的进程
PidFind newdoc.daemon

#restart daemon
/path/to/startscript/chkdaemon.sh

当搜索结果不唯一时,脚本也会拒绝执行杀进程

参考文:https://jingyan.baidu.com/article/b7001fe1a5dbc40e7382dd75.html

对于没有运行错误的脚本却发生了高负载、无响应、堵塞或死循环等问题。从进程只能看到异常 php-fpm 存在。需要具体了解详情可以做一下操作

找到 php-fpm.conf 所在路径,编辑之

find / -name php-fpm.conf

查找结果: /usr/local/php/etc/php-fpm.conf

vi /usr/local/php/etc/php-fpm.conf

查看(无则添加)slowlog 值 ,将 request_slowlog_timeout 设为 非0 (0 代表不记录慢日志)
举例如下

...
request_slowlog_timeout = 5s
slowlog = var/log/slow.log

保存,重启 php-fpm
跟踪慢日志

lnmp php-fpm restart
tail -f /usr/local/php/var/log/slow.log

日志会定位到发生运行缓慢的第几行什么命令

朋友求助,他儿子停学不停课家长在家要监督上网课,容易错过上课签到。找来了个python的课程表导入工具问我怎么整。(链接文末)。
我看了下,要自己整理excel模板,还得手动编辑json文件,又要py环境。对文科生确实不太友善的样子。

我想既然目的是生成一个可以导入outlook日历/google日历/ios日历的 ics文件,我直接看看源码是个什么结构语法吧。

py代码片段

def icsCreateAndSave():
    icsString = "BEGIN:VCALENDAR\nMETHOD:PUBLISH\nVERSION:2.0\nX-WR-CALNAME:课程表\nPRODID:-//Apple Inc.//Mac OS X 10.12//EN\nX-APPLE-CALENDAR-COLOR:#FC4208\nX-WR-TIMEZONE:Asia/Shanghai\nCALSCALE:GREGORIAN\nBEGIN:VTIMEZONE\nTZID:Asia/Shanghai\nBEGIN:STANDARD\nTZOFFSETFROM:+0900\nRRULE:FREQ=YEARLY;UNTIL=19910914T150000Z;BYMONTH=9;BYDAY=3SU\nDTSTART:19890917T000000\nTZNAME:GMT+8\nTZOFFSETTO:+0800\nEND:STANDARD\nBEGIN:DAYLIGHT\nTZOFFSETFROM:+0800\nDTSTART:19910414T000000\nTZNAME:GMT+8\nTZOFFSETTO:+0900\nRDATE:19910414T000000\nEND:DAYLIGHT\nEND:VTIMEZONE\n"
    global classTimeList, DONE_ALARMUID, DONE_UnitUID
    eventString = ""
    for classInfo in classInfoList :
        i = int(classInfo["classTime"]-1)
        className = classInfo["className"]+"|"+classTimeList[i]["name"]+"|"+classInfo["classroom"]
        endTime = classTimeList[i]["endTime"]
        startTime = classTimeList[i]["startTime"]
        index = 0
        for date in classInfo["date"]:
            eventString = eventString+"BEGIN:VEVENT\nCREATED:"+classInfo["CREATED"]
            eventString = eventString+"\nUID:"+classInfo["UID"][index]
            eventString = eventString+"\nDTEND;TZID=Asia/Shanghai:"+date+"T"+endTime
            eventString = eventString+"00\nTRANSP:OPAQUE\nX-APPLE-TRAVEL-ADVISORY-BEHAVIOR:AUTOMATIC\nSUMMARY:"+className
            eventString = eventString+"\nDTSTART;TZID=Asia/Shanghai:"+date+"T"+startTime+"00"
            eventString = eventString+"\nDTSTAMP:"+DONE_CreatedTime
            eventString = eventString+"\nSEQUENCE:0\nBEGIN:VALARM\nX-WR-ALARMUID:"+DONE_ALARMUID
            eventString = eventString+"\nUID:"+DONE_UnitUID
            eventString = eventString+"\nTRIGGER:"+DONE_reminder
            eventString = eventString+"\nDESCRIPTION:事件提醒\nACTION:DISPLAY\nEND:VALARM\nEND:VEVENT\n"

            index += 1
    icsString = icsString + eventString + "END:VCALENDAR"

竟然不是json也不是xml。
BEGIN:VCALENDAR 这格式好眼熟,和10多年前我做二维码名片的时候那个VCARD协议很像,经过一番搜索,果然!
那就自己做一个网页版的好了!

最终成品如下:

https://gen8.orz.com.cn/beta/classtab/

用法:
设定一周的课程安排、
设置提前提醒的时间、
设置提醒的截止日期(不设置会永远每周循环下去),
点生成,就能到一个ics文件
在iphone/ipad/win10的outlook/部分安卓手机 上打开ics文件(或浏览器下载)
即可把日程导入到日历,可以随时查看和得到提醒。

微信图片_20200312071852.png

作为变体,也适用于 周例行工作提醒、电视节目(追番)表、健身计划 提醒。

以下是实现的原理结构,前端细节就不po了,源码打包了可以下载自行研究

源码下载










- 阅读剩余部分 -

上篇已经解决了如何大批量查询号码归属地的问题。
此时已经把一批号码资料导出成了csv(部分数据由于录入并不规范,所以存在不少无效错误的数据需要在入库和查询归属地接口前加工处理)
以下需要注意的若干点的备忘:

  1. 处理csv要去掉换行符及包裹数据的双引号;
  2. 文本编码,建议统一处理为utf-8;
  3. 多个csv 遍历建议处理完后移动或标记文件,避免遇错中断时无法分辨哪些数据已经处理;
  4. phone调用返回结果可能为None(归属地库无匹配);
  5. 手机号码合法性检查(长度、组成);
  6. 客户端或用户录入可能会自动在手机号码间插入字符“ ”或“-”, 例如 138-0013-8000;


- 阅读剩余部分 -

需要一个精确到城市且保持更新的归属地库,以下收集了一些,纯备忘不推荐

线上接口

免费接口(淘宝)

https://tcc.taobao.com/cc/json/mobile_tel_segment.htm?tel=13922121234

返回

__GetZoneResult_ = {
    mts:'1392212',
    province:'广东',
    catName:'中国移动',
    telString:'13922121234',
    areaVid:'30517',
    ispVid:'3236139',
    carrier:'广东移动'
}

缺点:只精确到省份和运营商

付费接口(NOWAPI)

https://www.nowapi.com/api/phone.get

免费版每小时 200次请求频率限制,
缺点:收费,不支持批量

其他还有很多类似的接口没有继续再试下去,被贫穷勒住了命运的咽喉的我..决定换个思路

下载归属地库

果不其然这思路也不是什么蓝海处女地,搜索之下已经被各路数据商人开发过了,一个一个“2020最新归属地库”待价而沽

中间浪费的时间略... 兜转许久又回到python门前。 找到了 phone库

https://github.com/ls0f/phone

安装

pip install phone

代码

from phone import Phone
p = Phone()
res = p.find('13922121234')

print(res)
print(res["city"])

输出

{'phone_type': '移动', 'city': '广州', 'phone': '13922121234', 'area_code': '020', 'province': '广东', 'zip_code': '510000'}
广州
进程已结束,退出代码 0

虽然数据库不是非常的新(2018.10) 够用而且可以本地跑,爱怎么批量或高并发都没关系,性能没有后顾之忧了。

*有点跑题,不改了