网络爬虫第三方库如何安装

㈠ Python第三方库安装

你的图片太花了，看不到几个字母。

不过，你这个问题描述，也能大致理解是什么情况。建议做如下处理试一下：

（1）找到你的 Python 安装目录，找到下面的 site-packages 文件夹，这个文件夹用于存放第三方库，而且也是环境变量路径（如果你在安装Python时勾选了写入环境变量的话，如果没有就自己加入进去即可）；

（2）将你自己的库文件放到这个文件夹里；

（3）之后就可以像使用其他库一样使用了，如import sys这种的；

（4）注意记住你自己的库文件名，且不要与已有第三方库和标准库重名。

㈡ 如何在安装pip3以及第三方python库

一。先安装python3

1. 先到官方网站下载python3的安装包，去downloads/source/ 下载的是Python-3.5.2.tar.xz

2. 上传包到服务器

3.解压

tar -xf Python-3.5.2.tar.xz

4.编译安装

安装必要依赖（至少需要如下两个，我个人就遇到如下两个）

yum install openssl-devel -y

yum install zlib-devel -y

好了现在可以安心的编译咯：

cd Python-3.5.2./configure --prefix=/opt/Python #安装目录可以自己定义无所谓。
make
make install

编译完成后会在如 /opt/下生成Python的文件夹 ，没错这就是编译完成的python －－为了方便之行小伙伴们可以自己定义一个软连接如下：

# ln -s /opt/Python/bin/python3 /usr/bin/python3

这样就可以直接食用python3了如下：

㈢ 如何安装python的第三方模块

在Python中，安装第三方模块，是通过setuptools这个工具完成的。Python有两个封装了setuptools的包管理工具：easy_install和pip。目前官方推荐使用pip。
如果你正在使用Mac或Linux，安装pip本身这个步骤就可以跳过了。
如果你正在使用Windows，请参考安装Python一节的内容，确保安装时勾选了pip和Add python.exe to Path。
在命令提示符窗口下尝试运行pip，如果Windows提示未找到命令，可以重新运行安装程序添加pip。
现在，让我们来安装一个第三方库——Python Imaging Library，这是Python下非常强大的处理图像的工具库。一般来说，第三方库都会在Python官方的pypi.python.org网站注册，要安装一个第三方库，必须先知道该库的名称，可以在官网或者pypi上搜索，比如Python Imaging Library的名称叫PIL，因此，安装Python Imaging Library的命令就是：
pip install PIL

耐心等待下载并安装后，就可以使用PIL了。
有了PIL，处理图片易如反掌。随便找个图片生成缩略图：
>>> import Image
>>> im = Image.open('test.png')
>>> print im.format, im.size, im.mode
PNG (400, 300) RGB
>>> im.thumbnail((200, 100))
>>> im.save('thumb.jpg', 'JPEG')

其他常用的第三方库还有MySQL的驱动：MySQL-python，用于科学计算的NumPy库：numpy，用于生成文本的模板工具Jinja2，等等。
模块搜索路径
当我们试图加载一个模块时，Python会在指定的路径下搜索对应的.py文件，如果找不到，就会报错：
>>> import mymole
Traceback (most recent call last):
File "<stdin>", line 1, in <mole>
ImportError: No mole named mymole

默认情况下，Python解释器会搜索当前目录、所有已安装的内置模块和第三方模块，搜索路径存放在sys模块的path变量中：
>>> import sys
>>> sys.path
['', '/Library/Python/2.7/site-packages/pycrypto-2.6.1-py2.7-macosx-10.9-intel.egg', '/Library/Python/2.7/site-packages/PIL-1.1.7-py2.7-macosx-10.9-intel.egg', ...]

如果我们要添加自己的搜索目录，有两种方法：
一是直接修改sys.path，添加要搜索的目录：
>>> import sys
>>> sys.path.append('/Users/michael/my_py_scripts')

这种方法是在运行时修改，运行结束后失效。
第二种方法是设置环境变量PYTHONPATH，该环境变量的内容会被自动添加到模块搜索路径中。设置方式与设置Path环境变量类似。注意只需要添加你自己的搜索路径，Python自己本身的搜索路径不受影响。

㈣ python怎样安装第三方库

方法1：下载源码，手动运行setup.py install去安装
下载对应的源码，往往都是.tar.gz，.zip的压缩包，解压后，打开windows的cmd，切换到对应目录，运行：
setup.py install
即可去安装。
方法2：利用第三方安装工具（如pip，easy_install，distribute等）去自动化安装
利用的目前常见的一些自动化安装工具，比如pip，easy_install，distribute等，自动帮你下载源码，并安装。
而且很多时候，由于要安装的包，还要依赖一些其他的别的包，而这类自动化安装工具，会自动帮你解决依赖关系，自动帮你下载并安装所缺少的那些包，所以相对来说，就省去了你的麻烦了。

㈤ python 怎么使用第三方库

这是关于Python的第13篇文章，也是关于《编程小白的第1本Python入门书》内容的最后一篇，主要介绍下如何使用第三方库。
1. 第三方库
Python相当于一个手机，第三方库相当于手机里各种各样的APP。
当我们想搭建网站时，可以选择功能全面的Django、轻量的Flask等web框架；当我们想做一个爬虫时，可以使用Scrapy框架；当我们想做数据分析时，可以选择Pandas数据框架等，这些都是一些很成熟的第三方库。
那么，如何根据自己的需求找到相应的库呢？
可以在 这个网站上按照分类去查找需要的库。
2. 安装第三方库
这里主要介绍如何在PyCharm中安装第三方库。
1）打开PyCharm——顶部菜单File——选择Default Settings；
2）搜索project interpreter，选择当前Python环境，然后底部点击“+”号添加库；
3）搜索数据库名称——选中该库后点击底部的Install Package，在安装成功后会出现成功提示，此时可以返回到之前的Project Interpreter中查看自己安装的库，点击“-”号可以卸载掉不需要的库。
3. 使用第三方库
使用第三方库时，只要在在PyCharm中输入库之后就可以使用了。输入库用import，比如输入requests库为：import requests。
第一阶段关于Python的基础知识大致先到这里，第二阶段的分享会以Python爬虫为主。

㈥ python爬虫需要安装哪些库

一、 请求库

1. requests
requests 类库是第三方库，比 Python 自带的 urllib 类库使用方便和

2. selenium
利用它执行浏览器动作，模拟操作。
3. chromedriver
安装chromedriver来驱动chrome。

4. aiohttp
aiohttp是异步请求库，抓取数据时可以提升效率。

二、 解析库
1. lxml
lxml是Python的一个解析库，支持解析HTML和XML，支持XPath的解析方式，而且解析效率非常高。
2. beautifulsoup4
Beautiful Soup可以使用它更方便的从 HTML 文档中提取数据。

3. pyquery
pyquery是一个网页解析库，采用类似jquery的语法来解析HTML文档。
三、 存储库
1. mysql
2. mongodb
3. redis
四、 爬虫框架scrapy
Scrapy 是一套异步处理框架，纯python实现的爬虫框架，用来抓取网页内容以及各种图片
需要先安装scrapy基本依赖库，比如lxml、pyOpenSSL、Twisted

㈦ python 第三方库怎么安装

【方法一】: 通过setuptools来安装python模块
首先下载
NOTE: 最好下载个setuptools，本人是15.2版本，里面包含了ez_setup
运行 python ez_setup.py
D:\work\installation\setuptools-15.2\setuptools-15.2>python ez_setup.py > 1.txt
Extracting in c:\users\admini~1\appdata\local\temp\tmpbxikxf
Now working in c:\users\admini~1\appdata\local\temp\tmpbxikxf\setuptools-15.2
Installing Setuptools
......
Copying setuptools-15.2-py2.7.egg to c:\python27\lib\site-packages
setuptools 15.2 is already the active version in easy-install.pth
Installing easy_install-script.py script to C:\Python27\Scripts
Installing easy_install.exe script to C:\Python27\Scripts
Installing easy_install-2.7-script.py script to C:\Python27\Scripts
Installing easy_install-2.7.exe script to C:\Python27\Scripts

Installed c:\python27\lib\site-packages\setuptools-15.2-py2.7.egg
Processing dependencies for setuptools==15.2
Finished processing dependencies for setuptools==15.2

运行 easy_install py
D:\work>easy_install py #py 为第三方库文件
Searching for py
Best match: py 1.4.26
Adding py 1.4.26 to easy-install.pth file

Using c:\python27\lib\site-packages
Processing dependencies for py
Finished processing dependencies for py

【方法二】: 通过pip来安装python模块
安装 easy_install pip
D:\work>easy_install pip
Searching for pip
Best match: pip 6.1.1
Processing pip-6.1.1-py2.7.egg
pip 6.1.1 is already the active version in easy-install.pth
Installing pip-script.py script to C:\Python27\Scripts
Installing pip.exe script to C:\Python27\Scripts
Installing pip2.7-script.py script to C:\Python27\Scripts
Installing pip2.7.exe script to C:\Python27\Scripts
Installing pip2-script.py script to C:\Python27\Scripts
Installing pip2.exe script to C:\Python27\Scripts

Using c:\python27\lib\site-packages\pip-6.1.1-py2.7.egg
Processing dependencies for pip
Finished processing dependencies for pip

运行 pip install xlrd
Usage:
pip <command> [options]

Commands:
install Install packages.
uninstall Uninstall packages.
freeze Output installed packages in requirements format.
list List installed packages.
show Show information about installed packages.
search Search PyPI for packages.
wheel Build wheels from your requirements.
zip DEPRECATED. Zip indivial packages.
unzip DEPRECATED. Unzip indivial packages.
help Show help for commands.

General Options:
-h, --help Show help.
--isolated Run pip in an isolated mode, ignoring
environment variables and user configuration.
-v, --verbose Give more output. Option is additive, and can be
used up to 3 times.
-V, --version Show version and exit.
-q, --quiet Give less output.
--log <path> Path to a verbose appending log.
--proxy <proxy> Specify a proxy in the form
[user:passwd@]proxy.server:port.
--retries <retries> Maximum number of retries each connection should
attempt (default 5 times).
--timeout <sec> Set the socket timeout (default 15 seconds).
--exists-action <action> Default action when a path already exists:
(s)witch, (i)gnore, (w)ipe, (b)ackup.
--trusted-host <hostname> Mark this host as trusted, even though it does
not have valid or any HTTPS.
--cert <path> Path to alternate CA bundle.
--client-cert <path> Path to SSL client certificate, a single file
containing the private key and the certificate
in PEM format.
--cache-dir <dir> Store the cache data in <dir>.
--no-cache-dir Disable the cache.
--disable-pip-version-check
Don't periodically check PyPI to determine
whether a new version of pip is available for
download. Implied with --no-index.

【方法三】:直接从网上下载下可执行文件来安装.
比如说，去 >>> pythonlibs <<< 网站，提供了很多Python非官方包下载，二进制文件，下载安装方便.

㈧ python如何安装网络爬虫

你的模块没有安装
你在win系统下用pip工具安装第三方模块
pip install 模块名
然后再执行你上面的代码就可以了

㈨ python第三方库安装到哪里

1、首先通过pip安装的第三方库，一般都在python安装路径下的Libsite-packages目录，这里可以通过pip安装一个第三方库看一下，如下图所示。