分类目录归档:shell学习

shell在seo方面的一些小应用:服务器日志分析_数据采集_文本文档处理等。

Shell简单的数据分析

使用shell来统计首页排名率,查排名的工具是用python写的,然后这个脚本只是查首页排名,如果再第一页无排名的话就会显示”首页无排名”,一来这个脚本效率非常快,二来只是想看看整体首页排名的情况如何;先看看python导出的排名数据大概的格式如下: 继续阅读

shell获取百度真实URL

有时候觉得shell挺好玩的,为了预防忘记,主要是博主脑子不好使,特别容易忘东西,保持一下shell的语感还是要的,那就得想想需求了是吧,有需求才是重点,之前的文章有用python写的,然并卵,而且感觉好像之前我的seo博客都没有记录用shell获取URL的文章,记录下吧,用的是lynx这个命令,好像市面上也比较少用,还挺好用的,结合-dump就直接提取页面中所有的url了,然后按需求提取自己想要的url。 继续阅读

Shell实现方便的服务器日志分析

Shell这东西吧,应该只是面向过程编程,所以有很多地方不是可以跟Python比的,但是存在就是合理的,Shell有它自身的方便强大之处,个人接触到的应该是文本文件,还有服务器日志分析上的处理,用shell实现起来非常的方便,而且shell本身也相当好学,学习成本估计最差也就最多花个几十个小时吧!呵呵,其实不确定呢,也说不定一两个小时可以完全应付服务器日志分析了;至于其它方面应用还很少,当然简单的数据采集也是ok的,估计更新完这个都不知道可以在seo还有什么应用了!看大家还有什么需求吧: 继续阅读

Shell批量采集百度下拉框关键词

Shell批量采集百度下拉框关键词,这边自己顺便也记录一下,另外也用python写一下,对比shell与Python脚本,其实python的代码也很简短,shell吧感觉还是用来处理一下文本文档,分析服务器日志这块比较快手,暂时别的地方没太多用,下面直接上shell的代码详解,环境是windows的cygwin,python批量采集百度下拉框关键词的链接是http://bigwayseo.com/464 继续阅读

Shell通过egrep和awk快速提取文本想要内容

Shell现在对于篼雨本人来说使用最多的还是文本内容处理,而在seo方面的应用场景,最多的是服务器日志分析,这些都会慢慢更新到,首先感谢在ITSEO网站上看到的这个shell相关的文章,阅读研究发现在日志分析中,shell真的相当地高效、灵活和方便;又或者说在用excel处理一些文档的时候很复杂也可以用到shell,所以学会shell对于现在的办公人士来说也可以提高办公效率等等;下面代码实例告诉shell的一些应用场景! 继续阅读

shell是什么及应用

通俗的理解shell就是类似于DOS下的command和后来的cmd.exe,就是一个命令行解析器,比如说我们辨别真假百度蜘蛛的时候有一个命令叫nslookup,我们在cmd敲上nslookup再输入服务器日志中的IP地址就能反查真假百度蜘蛛,shell也差不多,但区别于它也同样是一门程序设计语言!
而Cygwin是一个在windows平台上运行的类UNIX模拟环境,所以篼雨也就使用了Cygwin来敲命令行,shell在seo中运用得最多就是服务器日志分析。 继续阅读