1 В избранное 0 Ответвления 0

OSCHINA-MIRROR/china_wangyu-FoolSpider

Присоединиться к Gitlife
Откройте для себя и примите участие в публичных проектах с открытым исходным кодом с участием более 10 миллионов разработчиков. Приватные репозитории также полностью бесплатны :)
Присоединиться бесплатно
В этом репозитории не указан файл с открытой лицензией (LICENSE). При использовании обратитесь к конкретному описанию проекта и его зависимостям в коде.
Клонировать/Скачать
run.py 932 Байты
Копировать Редактировать Web IDE Исходные данные Просмотреть построчно История
china_wangyu Отправлено 11.02.2018 11:49 50e575c
from huaban.lib import Page, Agent, EsModel
from bs4 import BeautifulSoup
'''
* @authors china_wangyu (china_wangyu@aliyun.com)
* @date 2018-02-11 12:39:30
* @version 1.0.1
'''
if __name__ == '__main__':
EsModel = EsModel.EsModel()
EsModel.connection(db='test', user='root', password='root')
EsModel.set_table("user")
data = {
'name': 'test',
'url': '123.html'
}
EsModel.insert(data)
# url = 'http://www.meisupic.com/topic.php?topic_id=90'
# headers = {
# "User-Agent": "Mozilla/5.0 (Linux; Android 4.1.1; Nexus 7 Build/JRO03D) AppleWebKit/535.19 (KHTML, like Gecko) Chrome/18.0.1025.166 Safari/535.19"
# }
# agent = Agent.Agent()
# page = Page.Page(url, headers)
# page.set_proxy(agent.ip)
# result = page.get_page()
# params = {
# 'home': 3,
# }
# page.set_params(params)
# result1 = page.get_page()
# print(result1)

Опубликовать ( 0 )

Вы можете оставить комментарий после Вход в систему

1
https://api.gitlife.ru/oschina-mirror/china_wangyu-FoolSpider.git
git@api.gitlife.ru:oschina-mirror/china_wangyu-FoolSpider.git
oschina-mirror
china_wangyu-FoolSpider
china_wangyu-FoolSpider
master