您正在查看: 标签 云计算 下的文章
icon-plus

CentOS 7 上安装python爬虫框架Scrapy

最近听说Python写爬虫很厉害,想体验一下

于是我就抱着这样的心态开始了我的Scrapy之旅

第一步当然是Scrapy的安装了,这玩意我发现在windows下倒是挺好装的,照着教程一路走就行了

官方的安装教程在这

http://doc.scrapy.org/en/latest/intro/install.html

想要麻烦点的话可以看开源中国的某大神写的教程

http://my.oschina.net/dragonblog/blog/173290

整个Scrapy的环境依赖如下:

icon-plus

【手记】CentOS 7 搭建 LAMP 环境

一、配置防火墙,开启80端口、3306端口

CentOS7.0默认使用的是firewall作为防火墙,这里改为iptables防火墙。

1、关闭firewall:

systemctl stop firewalld.service#停止firewall
systemctl disable firewalld.service#禁止firewall开机启动

2、安装iptables防火墙

yum install iptables-services#安装

icon-plus

yum工具的使用

在说这个之前,我要先说下我对yum工具的认识,在我的认识中,yum工具其实只是一个软件管理器,相当与Windows下的各种软件管家或者Android下的应用商店一样的东西而已,不过这个工具却不仅仅只是安装卸载应用软件这么简单,他还提供维持linux系统稳定的必须系统软件,包括内核也在它的管理范围之内。所以在linux下,这样的软件管理工具已经成为各发行版必备的东西。在debian阵营中他的名字叫dpkg,在ubuntu中它的名字叫apt,在OpenSUSE中,他的名字叫zypper,在Red Hat中,它的名字叫rpm,在CentOS中,它的名字就叫做yum。
 由于CentOS是属于RedHat阵营的,俗称盗版Red Hat Enterprise(误),所以它具有Red Hat阵营的基本特性,也就是包括rpm在内的系统架构方式。因此会CentOS的同学,用其他Red Hat阵营的linux发行版都很容易适应。
 其实CentOS 6到CentOS 7这两个版本之间产生了很多的变化,比如原来的iptables已不再使用,主打防火墙是firewalld,在实际使用中还会体验到更多的明显变化。所以我们在学习yum之前,应该要先了解CentOS。
查看linux内核的办法

   # uname -a
   Linux myServer 3.10.0-123.13.1.el7.x86_64 #1 SMP Tue Dec 9 23:06:09 UTC 2014 x86_64 x86_64 x86_64 GNU/Linux

icon-plus

sftp工具的使用

这个工具可以使用跟ssh协议进行文件传输,在一些情况下还是挺好用的
用连接远程计算机

   sftp root@192.168.1.1


登录成功后用help可以看到sftp的基本指令

icon-plus

基于CentOS 7的多网卡配置

最近接手了学校的一个云计算的项目,是关于openstack的服务器架设的,涉及到了CentOS 7,个人对Red Hat阵营的命令不太熟,于是把最近学来的适用与CentOS的一些基础命令做一些笔记
根据指导老师的要求,计划将会对以下内容进行学习笔记

   1、linux的多网卡配置
   2、vi编辑器的使用
   3、yum工具的使用
   4、服务的查询、停止、重启
   5、常用linux命令(文件管理等)
   6、了解linux

查看物理网卡接口

   lspci | grep NetWork,查看PCI插槽上的网络设备
   lsusb,查看USB插槽处的网卡设备


查看网卡信息

   ifconfig 查看正在活动中的网卡(net-tools)
   ifconfig -a 查看所有网络连接设备

注:如果提示找不到ifconfig,就安装一下net-tools