【pyhon】理想论坛爬虫1.05版，将读取和写DB分离成两个文件

下午再接再厉仿照Nodejs版的理想帖子爬虫把Python版的也改造了下，但美中不足的是完成任务的线程数量似乎停滞在100个左右，让人郁闷。原因还待查。

先把代码贴出来吧，也算个阶段性成果.

爬虫代码：

# 理想论坛爬虫1.05，用于爬取主贴再爬子贴，数据存到文件里，再由insertDB.py读取插DB
from bs4 import BeautifulSoup
import requests
import threading
import re
import time
import datetime
import os
import json

user_agent='Mozilla/4.0 (compatible;MEIE 5.5;windows NT)'
headers={'User-Agent':user_agent}

# 存储数据文件的目录
folder=""

# 主帖数组
topics=[]

# 主帖总数，也是爬虫/线程总数
Total=0

# 已完成任务的爬虫/线程数
Completed=0

# 已经插入DB的记录数
Inserted=0

# sql数组
sqls=[]

# 帖子爬虫类
class topicCrawler(threading.Thread):
    # 构造函数
    def __init__(self,name,url,id):
        threading.Thread.__init__(self,name=name)
        # 以下是传进来的值
        self.name=name   # 线程名，等于帖子标题
        self.initUrl=url # 输出用
        self.url=url     # 爬行用当前地址及下一页地址
        self.id=id       # 线程id

        # 以下是自己生成的值
        self.infos=[]    # 找到的子贴信息
        self.msgs=[]     # 要输出的消息数组

    # 将信息添加进消息数组
    def addmsg(self,msg):
        currTime=time.strftime('%H:%M:%S',time.localtime(time.time()))
        self.msgs.append(currTime+' '+msg);

    # 将子贴信息存到文件
    def saveFile(self):
        filename=folder+"/"+str(self.id)+'.json'
        with open(filename,'w',encoding='utf-8') as fObj:
            json.dump(self.infos,fObj)

    # 线程要运行的函数
    def run(self):
        while(self.url!="none"):
            self.addmsg('开始读取页面:'+self.url)

            try:
                rsp=requests.get(self.url,headers=headers)
                self.url="none"
                soup= BeautifulSoup(rsp.text,'html.parser',from_encoding='gb2312')
                self.addmsg('已经取得页面信息')

                # 找出一页里每条发言
                childTopicCount=0
                for divs in soup.find_all('div',class_="postinfo"):
                    # 用正则表达式将多个空白字符替换成一个空格
                    RE = re.compile(r'(\s+)')
                    line=RE.sub(" ",divs.text)
                    arr=line.split(' ')
                    arrLength=len(arr)

                    if arrLength==7:
                        info={'楼层':arr[1],
                              '作者':arr[2].replace('只看：',''),
                              '日期':arr[4],
                              '时间':arr[5],'title':self.name,'url':self.initUrl}
                        self.infos.append(info);
                        childTopicCount=childTopicCount+1
                    elif arrLength==8:
                        info={'楼层':arr[1],
                              '作者':arr[2].replace('只看：',''),
                              '日期':arr[5],
                              '时间':arr[6],'title':self.name,'url':self.initUrl}
                        self.infos.append(info);
                        childTopicCount=childTopicCount+1

                self.addmsg('获取到'+str(childTopicCount)+'个子贴')

                #找下一页所在地址
                for pagesDiv in soup.find_all('div',class_="pages"):
                    if(self.url=="none"):
                        for strong in pagesDiv.find_all('strong'):
                            self.addmsg('当前为第'+strong.text+'页')

                            # 找右边的兄弟节点
                            nextNode=strong.next_sibling
                            if nextNode and nextNode.get("href"): # 如果右边的兄弟节点存在，且其有href属性
                                self.url='http://www.55188.com/'+nextNode.get("href")

                if self.url!="none":
                    self.addmsg('找到下一页')
                    continue
                else:
                    self.addmsg('没有下一页了,小爬读取工作结束')

                    countWillbeInsert=len(self.infos)

                    if countWillbeInsert==0:
                        self.addmsg('小爬居然没有读到任何子贴数据!')
                    else:
                        # 准备写DB的insert语句
                        self.addmsg('小爬准备向文件存入'+str(countWillbeInsert)+'条记录')
                        self.saveFile();
                        self.addmsg('小爬#'+self.id+'工作完成')

                        # 一次性输出全部信息
                        allMsg="";
                        allMsg=allMsg+'\n小爬ID:'+self.id+'\n';
                        allMsg=allMsg+'小爬名:'+self.name+'\n';
                        allMsg=allMsg+'小爬战斗和生活的地方:'+self.initUrl+'\n';
                        for msg in self.msgs:
                            allMsg=allMsg+'#'+self.id+' '+msg+'\n'
                        print(allMsg)

                        # 输出比例
                        global Completed
                        Completed=Completed+1
                        percent=round(Completed*100/Total,2)
                        print('----共有'+str(Total)+'个小爬 '+',已有'+str(Completed)+'个('+str(percent)+'%)的小爬完成任务')

            except Exception as e:
                print("#"+self.id+" 线程"+self.name+"发生异常:"+str(e))
                self.addmsg('小爬工作出现异常:'+str(e))

                continue

# 找出论坛页中的贴子
def getTopics(pageUrl):
    print("开始读取页面"+pageUrl+"的帖子");

    try:
        rsp=requests.get(pageUrl,headers=headers)
        soup= BeautifulSoup(rsp.text,'html.parser',from_encoding='gb2312')

        # 找出span
        for spans in soup.find_all('span',class_="forumdisplay"):
            #找出link
            for link in spans.find_all('a'):
                if link and link.get("href"):
                    topicLink="http://www.55188.com/"+link.get("href")
                    topicText=link.text
                    topic={'link':topicLink,'text':topicText} 

                    if topic not in topics:
                        topics.append(topic)
                        print('读取到帖子:'+topic['text'])

        print("读取页面"+pageUrl+"的帖子完毕");
    except Exception as e:
        print("线程"+self.name+"发生异常:"+str(e))

# 入口函数
def main():
    # 创建目录
    currTime=time.strftime('%H_%M_%S',time.localtime(time.time()))
    global folder
    folder="./"+currTime
    os.makedirs(folder)

    # 找帖子
    st=datetime.datetime.now();
    for i in range(1,4):
        print("\n第"+str(i)+"页")
        pageUrl='http://www.55188.com/forum-8-'+str(i)+'.html' # 这个页是论坛页，即第1页，第2页等
        getTopics(pageUrl);
    et=datetime.datetime.now();

    global Total
    Total=len(topics);# 得到总数
    print('共找到'+str(Total)+'个帖子地址,用时'+str((et-st).seconds)+'秒');

    # 开始爬帖子的子贴
    index=0;
    for topic in topics:
        index=index+1

        title=topic['text']
        topicUrl=topic['link']

        tc=topicCrawler(name=title,url=topicUrl,id=str(index))
        tc.start()

# 启动一个线程的测试函数
def test():
    #http://www.55188.com/thread-8332680-1-3.html
    tc=topicCrawler(name=')
    tc.start()

# 开始
main()

爬虫的输出示例：

C:\Users\horn1\AppData\Local\Programs\Python\Python36\lib\site-packages\bs4\__init__.py:146: UserWarning: You provided Unicode markup but also provided a value for from_encoding. Your from_encoding will be ignored.
  warnings.warn("You provided Unicode markup but also provided a value for from_encoding. Your from_encoding will be ignored.")
读取到帖子: 它，最有可能成为下一个贵州燃气！
读取到帖子: 2018年4月17日实时看盘交流
读取到帖子: T+4荐股赢金钻选股赛马场 2018年4月第11期（04.18—04.24）报名帖！（总第798期）
读取到帖子: 天天急先锋 T+0选股大赛 （2018.04.18）第416期报名帖
读取到帖子: 琪新实战宝箱之超级短线
读取到帖子: 寻找最佳的获利模式
读取到帖子: 买点货
读取到帖子: 投机病院第十九期（大投交流帖）
读取到帖子: 中国2月份增持美国国债规模创六个月来最大
读取到帖子: 次新股今天反弹开始
读取到帖子: 马到来了 继续开车（一）
读取到帖子: 吐了吃，肠胃不老好
读取到帖子: 仁义宾实盘：4月16日盘后策略分析—上证拖累出机会，今天提醒个股，提醒低位潜伏！
读取到帖子: 困惑+前进：追寻成长之路（2018年之桃花庵歌）
读取到帖子: 超短实盘实战！第一期（2018-4-9）
读取到帖子: 债务：ＧＤＰ是多少？GDP主要靠房地产，房地产绑架银行，对此，你还抱什么幻想？
读取到帖子: 故事会真牛又收拾一批人
读取到帖子: 新手的成长
读取到帖子: 每天赚点
读取到帖子: 淡定小生2018实盘交流贴
读取到帖子: 摔杯为号 准备 干！！！！
读取到帖子: 2018年4月17日荐股
读取到帖子: 相信党有大智慧大能力，打赢贸易摩擦！
读取到帖子: 房地产——增持介入二线地产板块
读取到帖子: 一个红K都不会给你！
读取到帖子: 鲁L蒲公英4.17短线看盘：大中小盘转换，危险大于机遇！
读取到帖子: 粉色魔窟与你同在------第50期（将超前热点分享十即时实盘+宏观调控解盘进行到底）
读取到帖子: 大盘
读取到帖子: 鲁L蒲公英◆股票期货实战操盘日志 ～【荣誉不代表未来，实战在每天打响！】
读取到帖子: 全球交易局势混乱不堪，华尔街策略师和投资者均感困惑
读取到帖子: 大底已现，明日一阳吞三阴！
读取到帖子: 股市已经提前反应美帝国依次宰割的路线
读取到帖子: 老张猜股2016（第6期）：灯塔
读取到帖子: 感恩节活动——熊市也能稳定获利（续）
读取到帖子: 群林常阳武星路☆☆2018☆04☆☆
读取到帖子: 未来牛市会以什么方式运行？
读取到帖子: 宇辉战舰2018实盘交流
读取到帖子: 强烈推荐
读取到帖子: 宇辉战舰2016实盘交流第二季
读取到帖子: 板哥来了！---板哥专贴
读取到帖子: 丁酉静水流深，轻进潺湲潆鎏
读取到帖子: 即时亮单实盘贴，兼议年化6%-9%的长线理财投资
读取到帖子: 《超短追涨》、《超短抄底》、《短波买点》指标在不同环境下应用
读取到帖子: 阴线之美
读取到帖子: 十年投机-股市实盘直播
读取到帖子: 宇辉战舰午评2018.04.17
读取到帖子: 股市动能结构力学，横空出世！！！
读取到帖子: 跷跷板创业板走弱，暂时这样操作吧
读取到帖子: 大盘看破3000点，创业板看多破2000点
读取到帖子: 都过来看看 是不是一块 狗头金
读取到帖子: 应该出现一轮牛市，抗击特朗普，上策！
读取到帖子: 机构布局转向"人工智能+"等领域 6股享大餐
读取到帖子: 2018.04.17盘前三股，每天都有
读取到帖子: 20180417【早盘剧透】
读取到帖子: 04月17日股市早班车
读取到帖子: 每日荐股实战超短赢利即走-4.17
读取到帖子: 免费分享：今日大盘
读取到帖子: 《大鱼冲浪》——大鱼自我检验、自娱自乐的股票池
读取到帖子: 老九谈股：4-17大盘分析（短线筑底！）
读取到帖子: 叶子看盘——独角兽新政后首只独角兽将上市
读取到帖子: 看看股池出票300302同有科技
读取到帖子: 2018年4月17日开盘前荐股
读取到帖子: 周二操作策略
读取到帖子: 周二市场操作策略
读取到帖子: 九龙峰老师公式优化组合，成功率94%，只为理想赚人气 （公式已发放）
读取到帖子: 【易明投资】 每日股市内参荟萃 2018-04-17
读取到帖子: 避险情绪升温军工板块引关注 六股爆发在即
读取到帖子: 一现象暗示大跌不慌北向资金正悄悄吸筹(附股)
读取到帖子: 税延养老险方案落地 预计带来千亿增量 4股受益
读取到帖子: 中国贸易出现逆差影响恒指  天鸽随时将迎来大幅反弹
读取页面http://www.55188.com/forum-8-1.html的帖子完毕

第2页
开始读取页面http://www.55188.com/forum-8-2.html的帖子
读取到帖子: 推荐股票
读取到帖子: 推荐股票
读取到帖子: 4月17日 早盘 消息汇总+独家点评 附个股总结
读取到帖子: 鬼夫人看盘：创业板冲高回落，大盘和上证50探底回升
读取到帖子: 宇辉战舰早评2018.04.17
读取到帖子: 服装——逢低介入品牌服装
读取到帖子: 4月17日早间新闻精选
读取到帖子: 【两市融资余额昨日增加14.85亿元】
读取到帖子: 个人观点
读取到帖子: 不是真想对着干，K线规律的自然体现，转机初现（股市早点）
读取到帖子: 免费分享：左侧交易
读取到帖子: 早盘内参：消息称贾跃亭已让出FF大股东地位 恒大为FF最大股东
读取到帖子: 个人思路
读取到帖子: 4月17日国内四大证券报纸头版头条内容精华摘要
读取到帖子: 软件行业迎来爆发 两股进入主升周期
读取到帖子: 紧盯成本 滴滴、车和家联手布局 无人驾驶网约车
读取到帖子: 爽，被关4个半月2018新年第一停牌票《国际医学》今天出关。老夫出关啦！！爽，爽，爽
读取到帖子: 个人观点
读取到帖子: 中兴突遭“禁运”，美股供应商跌惨，这一细分板块却迎国产替代机
读取到帖子: 美股超预期表现，操作什么方向为宜？
读取到帖子: 【红猫猫闲谈】-----想生存于股市，先磨练好自己的心态
读取到帖子: 五月全球苜个体育竞技网络第一胶盛天网络300494重点关注
读取到帖子: 中国经济一季度成绩单今日揭晓 三大焦点值得关注
读取到帖子: 4月17日早间必读
读取到帖子: 推荐股票
读取到帖子: 《智囊I系列：筹码双峰技术的操作展示》
读取到帖子: 【红猫猫闲谈】-----散户心态图谱-猫猫操盘很失败
读取到帖子: 中信评中兴被美禁运芯片：短期影响大 上游可替代性弱
读取到帖子: 财联社4月17日早报（周二）
读取到帖子: 港汇出现紧张影响不大  天鸽互动本轮关注6.6元
读取到帖子: 【十一假日征文】——如何从集合竞价选出今天涨停股
读取到帖子: 关注航母概念股！
读取到帖子: 免费分享：今日计划
读取到帖子: 【驱动联盟】内参——2018.4.17
读取到帖子: 开盘论市：跌破3129点之后，随时会再跌破3062点。
读取到帖子: 退无可退，无需再退！
读取到帖子: 个人观点
读取到帖子: 中兴通讯为啥卖美国技术给伊朗？是真的制裁就是应该的。
读取到帖子: 惊天中阳线将在近期出现
读取到帖子: 不到2880点的反抽，都是刀口上摸的蜜
读取到帖子: 4月17日午间收评：创业板早盘高开低走，数字中国板块全线回落
读取到帖子: 2018年，陪大家聊聊股票，帮助朋友们从亏损走向盈利。
读取到帖子: 寻人启事：等着你 西域911
读取到帖子: 蔡康侨说A股~~~(2018 Q2) 节后变盘向上、变数在6月
读取到帖子: 主力的心思你别猜——一个老手的经验分享
读取到帖子: 《智囊S系列：操作简介》
读取到帖子: 免费分享：下跌机会股
读取到帖子: 买进002460
读取到帖子: 18年新楼   一起见证大盘筑底过程   走向牛市的关键之年
读取到帖子: 不要抄底。
读取到帖子: 四大证券报头版内容精华摘要(4月17日)
读取到帖子: 推荐股票
读取到帖子: 今天明天是最后的出场日！
读取到帖子: 不止损，每只抄底必盈利实盘记录！
读取到帖子: 抢钱，手慢没有.........
读取到帖子: 用MACD实盘玩股票型基金，欢迎共同探讨MACD指标运用
读取到帖子: 最新公告揭露重大利好七股
读取到帖子: 银行暴跌
读取到帖子: 马上就是春天
读取到帖子: 唯美量价
读取到帖子: 青海连续发现5个“亿吨级”油气田
读取到帖子: 2018-4-17早间信息
读取到帖子: 时隔十三年，香港金管局再度出手，掀起“港币保卫战”
读取到帖子: 天天急先锋T+0选股思路(2018.04.17)-新北洋002376 资金介入明显 再启升势
读取到帖子: 小散1.5W何时变5W。。。再续前缘，冲击百万实盘
读取到帖子: 新实盘开七年（12年盈利8倍,13年盈利6倍,14年盈利11倍,15年盈利10倍,计划16年10倍）
读取到帖子: 立帖见证实盘操作，三万多开始，经常贴图更新，一起见证！！！
读取到帖子: 对着电脑自说自话的记录
读取到帖子: 成熟并且完美的操作思路
读取到帖子: 十万变百万
读取页面http://www.55188.com/forum-8-2.html的帖子完毕

第3页
开始读取页面http://www.55188.com/forum-8-3.html的帖子
读取到帖子: 中证20180417
读取到帖子: 资金异动股票池（每日更新）
读取到帖子: 想在股市持续而稳定的赚钱，你需要一个交易流程
读取到帖子: 擅长抄底逃顶
读取到帖子: 4月16日 复盘 这边风景独好—海南集体涨停
读取到帖子: T+0荐股002181粤传媒概念互联网彩票文化传媒互联网+蓄势充分巨量涨停
读取到帖子: FAANG股票走势动荡 华尔街期待财报担当“定海神针”
读取到帖子: 港元贬值，人民币升值。
读取到帖子: 重要资讯速读4.17
读取到帖子: 美股又在涨，特朗普不是输了吗？
读取到帖子: 603718海利生物超跌严重强势反弹
读取到帖子: 琪楼周荐股活动第359期（2018年4月9日——4月13日）科华控股603161思路分享
读取到帖子: 理想论坛股市最新最全内参讯息+红红果果,不断更新打造理想第一和谐高楼贴（第四季）
读取到帖子: 超短直播（第一季）
读取到帖子: 强强联合，每期5个点短线实战宝箱第1期
读取到帖子: 琪新牧牛，我的眼中只有牛（16）
读取到帖子: 上证20180417
读取到帖子: 玩裸K画线高手一定能还原此图。
读取到帖子: 财楼——大财女变线操盘系统理念战法汇总暨实战应用交流，打造最有特色的价值帖（一）
读取到帖子: 牛皮终于吹破了
读取到帖子: 上海证券交易所每日交易信息  交易日期:2018年4月16日
读取到帖子: 事实大癌股根外围无关，就是圈钱太多造成的阳痿不举
读取到帖子: 老九谈股：明天将有反弹机会出现！
读取到帖子: 人在山水间(十一)
读取到帖子: 社保基金连续八季度持有5股(名单)
读取到帖子: 时报20180417
读取到帖子: 保险银行明天调整到位。
读取到帖子: 海南板块集体涨停潮 主力看好的龙头股曝光
读取到帖子: 今日四牛四熊
读取到帖子: 提醒600179安通控股
读取到帖子: 见证实力----今日上午提醒的天广中茂收盘涨停
读取到帖子: 天天急先锋 T+0选股大赛 （2018.04.17）永恒荐股 603712 七一二
读取到帖子: 天天急先锋选股思路---300684  中石科技  波段底部信号，走势资金转好。
读取到帖子: 贴上“标签”的讨饭碗，。。。
读取到帖子: 全球股基重现资金净流入 青睐新兴市场股基
读取到帖子: 4月16日晚间公告集锦
读取到帖子: 明日看反弹力度再决定如何操盘
读取到帖子: 海南集体涨停，谁是真正王者？
读取到帖子: 关于涨停
读取到帖子: 金叉数量公式
读取到帖子: 今日大跌真相 最强板块如何吃肉(附股)
读取到帖子: T+4荐股选股2018年4月第5期---600896 览海投资 海南三沙强势涨停，后市有冲高!
读取到帖子: 海南板块掀起涨停潮 数字中国概念逆势走强
读取到帖子: T+4荐股2018年4月第4期第1名300589江龙船艇 荐股思路
读取到帖子: 拥抱阳光龙理论2018成功的路上并不拥挤,我们一起迈步前行,找到好老师就有好方法!
读取到帖子: 4.16日大盘分析
读取到帖子: T+4荐股赢金钻选股赛马场 2018年4月第10期（04.17—04.23）报名帖！（总第797期）
读取到帖子: 北有雄安南海南，唯有国强能久安
读取到帖子: T+4荐股第4名002618丹邦科技上升趋势荐股前日涨停
读取到帖子: 一点心语——炒股，戒急用忍!
读取到帖子: 深圳证券市场主板A股交易公开信息(2018年04月16日)
读取到帖子: 深圳证券市场中小企业板交易公开信息(2018年04月16日)
读取到帖子: 深圳证券市场创业板交易公开信息(2018年04月16日)
读取到帖子: 重要的日子，不要离开盘面
读取到帖子: 周二2018.4.17推荐
读取到帖子: 2018钻石璀璨！！每日实盘选股涨停战法帖
读取到帖子: 股魂看盘（4月16：机会正在接近中）
读取到帖子: 天天急先锋---0029172017金奥博 基本面一般 技术形态可以
读取到帖子: 周末两件大事 历史级机遇来袭(附股)
读取到帖子: 2018年4月16日实时看盘交流
读取到帖子: 苗苗短线宝箱一八年【元月第四周】
读取到帖子: T+4荐股 2018年4月第04期------------002237恒邦股份获奖思路分享
读取到帖子: 天天急先锋 T+0选股大赛 （2018.04.17）第415期报名帖
读取到帖子: 琪楼周荐股第359期获奖思路分享——300705九典制药  次新医疗高送预期创新高
读取到帖子: T+4荐股赛2018年4月第5期第1名思路--603335 迪生力
读取到帖子: T+4荐股4月第05期总第792期） 思路：300177 中海达  北斗导航概念
读取到帖子: 亦正☆亦邪实盘直播间（政策事件找热点，量能位置寻龙头），楼中附日复盘分析
读取到帖子: 看大盘分时走势预测图要领（争取天天更新）
读取到帖子: 实战技术分享---Advanced Get
读取到帖子: 最新公告揭露重大利好七股
读取页面http://www.55188.com/forum-8-3.html的帖子完毕
共找到210个帖子地址,用时1秒

小爬ID:4
小爬名: 天天急先锋 T+0选股大赛 （2018.04.18）第416期报名帖
小爬战斗和生活的地方:http://www.55188.com/thread-8339611-1-1.html
#4 13:49:55 开始读取页面:http://www.55188.com/thread-8339611-1-1.html
#4 13:49:55 已经取得页面信息
#4 13:49:55 获取到4个子贴
#4 13:49:55 没有下一页了,小爬读取工作结束
#4 13:49:55 小爬准备向文件存入4条记录
#4 13:49:55 小爬#4工作完成

----共有210个小爬 ,已有1个(0.48%)的小爬完成任务

小爬ID:49
小爬名: 大盘看破3000点，创业板看多破2000点
小爬战斗和生活的地方:http://www.55188.com/thread-8339790-1-1.html
#49 13:49:55 开始读取页面:http://www.55188.com/thread-8339790-1-1.html
#49 13:49:56 已经取得页面信息
#49 13:49:56 获取到3个子贴
#49 13:49:56 没有下一页了,小爬读取工作结束
#49 13:49:56 小爬准备向文件存入3条记录
#49 13:49:57 小爬#49工作完成

小爬ID:12
小爬名: 吐了吃，肠胃不老好
小爬战斗和生活的地方:http://www.55188.com/thread-8339840-1-1.html
#12 13:49:55 开始读取页面:http://www.55188.com/thread-8339840-1-1.html
#12 13:49:56 已经取得页面信息
#12 13:49:56 获取到2个子贴
#12 13:49:56 没有下一页了,小爬读取工作结束
#12 13:49:56 小爬准备向文件存入2条记录
#12 13:49:57 小爬#12工作完成

小爬ID:46
小爬名: 宇辉战舰午评2018.04.17
小爬战斗和生活的地方:http://www.55188.com/thread-8339786-1-1.html
#46 13:49:55 开始读取页面:http://www.55188.com/thread-8339786-1-1.html
#46 13:49:56 已经取得页面信息
#46 13:49:56 获取到5个子贴
#46 13:49:56 没有下一页了,小爬读取工作结束
#46 13:49:56 小爬准备向文件存入5条记录
#46 13:49:57 小爬#46工作完成

小爬ID:16
小爬名: 债务：ＧＤＰ是多少？GDP主要靠房地产，房地产绑架银行，对此，你还抱什么幻想？
小爬战斗和生活的地方:http://www.55188.com/thread-8339799-1-1.html
#16 13:49:55 开始读取页面:http://www.55188.com/thread-8339799-1-1.html
#16 13:49:56 已经取得页面信息
#16 13:49:56 获取到6个子贴
#16 13:49:56 没有下一页了,小爬读取工作结束
#16 13:49:56 小爬准备向文件存入6条记录
#16 13:49:57 小爬#16工作完成

小爬ID:53
小爬名: 2018.04.17盘前三股，每天都有
小爬战斗和生活的地方:http://www.55188.com/thread-8339451-1-1.html
#53 13:49:55 开始读取页面:http://www.55188.com/thread-8339451-1-1.html
#53 13:49:57 已经取得页面信息
#53 13:49:57 获取到12个子贴
#53 13:49:58 没有下一页了,小爬读取工作结束
#53 13:49:58 小爬准备向文件存入12条记录
#53 13:49:59 小爬#53工作完成

小爬ID:21
小爬名: 摔杯为号 准备 干！！！！
小爬战斗和生活的地方:http://www.55188.com/thread-8339829-1-1.html
#21 13:49:55 开始读取页面:http://www.55188.com/thread-8339829-1-1.html
#21 13:49:56 已经取得页面信息
#21 13:49:57 获取到10个子贴
#21 13:49:57 没有下一页了,小爬读取工作结束
#21 13:49:57 小爬准备向文件存入10条记录
#21 13:49:59 小爬#21工作完成

小爬ID:17
小爬名: 故事会真牛又收拾一批人
小爬战斗和生活的地方:http://www.55188.com/thread-8339750-1-1.html
#17 13:49:55 开始读取页面:http://www.55188.com/thread-8339750-1-1.html
#17 13:49:57 已经取得页面信息
#17 13:49:57 获取到11个子贴
#17 13:49:57 没有下一页了,小爬读取工作结束
#17 13:49:57 小爬准备向文件存入11条记录
#17 13:50:00 小爬#17工作完成

小爬ID:38
小爬名: 强烈推荐
小爬战斗和生活的地方:http://www.55188.com/thread-8339775-1-1.html
#38 13:49:55 开始读取页面:http://www.55188.com/thread-8339775-1-1.html
#38 13:49:57 已经取得页面信息
#38 13:49:57 获取到5个子贴
#38 13:49:59 没有下一页了,小爬读取工作结束
#38 13:49:59 小爬准备向文件存入5条记录
#38 13:50:02 小爬#38工作完成

小爬ID:9
小爬名: 中国2月份增持美国国债规模创六个月来最大
小爬战斗和生活的地方:http://www.55188.com/thread-8339770-1-1.html
#9 13:49:55 开始读取页面:http://www.55188.com/thread-8339770-1-1.html
#9 13:49:56 已经取得页面信息
#9 13:49:56 获取到7个子贴
#9 13:49:56 没有下一页了,小爬读取工作结束
#9 13:49:56 小爬准备向文件存入7条记录
#9 13:50:02 小爬#9工作完成

小爬ID:24
小爬名: 房地产——增持介入二线地产板块
小爬战斗和生活的地方:http://www.55188.com/thread-8339759-1-1.html
#24 13:49:55 开始读取页面:http://www.55188.com/thread-8339759-1-1.html
#24 13:49:56 已经取得页面信息
#24 13:49:56 获取到9个子贴
#24 13:49:56 没有下一页了,小爬读取工作结束
#24 13:49:56 小爬准备向文件存入9条记录
#24 13:50:02 小爬#24工作完成

小爬ID:22
小爬名: 2018年4月17日荐股
小爬战斗和生活的地方:http://www.55188.com/thread-8339531-1-1.html
#22 13:49:55 开始读取页面:http://www.55188.com/thread-8339531-1-1.html
#22 13:49:57 已经取得页面信息
#22 13:49:58 获取到17个子贴
#22 13:49:58 没有下一页了,小爬读取工作结束
#22 13:49:58 小爬准备向文件存入17条记录
#22 13:50:03 小爬#22工作完成
----共有210个小爬 ,已有2个(0.95%)的小爬完成任务

小爬ID:10
小爬名: 次新股今天反弹开始
小爬战斗和生活的地方:http://www.55188.com/thread-8339507-1-1.html
#10 13:49:55 开始读取页面:http://www.55188.com/thread-8339507-1-1.html
#10 13:49:56 已经取得页面信息
#10 13:49:57 获取到6个子贴
#10 13:49:57 没有下一页了,小爬读取工作结束
#10 13:49:57 小爬准备向文件存入6条记录
#10 13:50:03 小爬#10工作完成

小爬ID:81
小爬名: 免费分享：左侧交易
小爬战斗和生活的地方:http://www.55188.com/thread-8339358-1-2.html
#81 13:49:55 开始读取页面:http://www.55188.com/thread-8339358-1-2.html
#81 13:50:00 已经取得页面信息
#81 13:50:01 获取到13个子贴
#81 13:50:02 没有下一页了,小爬读取工作结束
#81 13:50:02 小爬准备向文件存入13条记录
#81 13:50:03 小爬#81工作完成

小爬ID:89
小爬名: 中兴突遭“禁运”，美股供应商跌惨，这一细分板块却迎国产替代机
小爬战斗和生活的地方:http://www.55188.com/thread-8339591-1-2.html
#89 13:49:55 开始读取页面:http://www.55188.com/thread-8339591-1-2.html
#89 13:50:00 已经取得页面信息
#89 13:50:01 获取到7个子贴
#89 13:50:01 没有下一页了,小爬读取工作结束
#89 13:50:01 小爬准备向文件存入7条记录
#89 13:50:04 小爬#89工作完成

小爬ID:51
小爬名: 应该出现一轮牛市，抗击特朗普，上策！
小爬战斗和生活的地方:http://www.55188.com/thread-8339567-1-1.html
#51 13:49:55 开始读取页面:http://www.55188.com/thread-8339567-1-1.html
#51 13:50:01 已经取得页面信息
#51 13:50:02 获取到12个子贴
#51 13:50:02 没有下一页了,小爬读取工作结束
#51 13:50:02 小爬准备向文件存入12条记录
#51 13:50:04 小爬#51工作完成

小爬ID:73
小爬名: 4月17日 早盘 消息汇总+独家点评 附个股总结
小爬战斗和生活的地方:http://www.55188.com/thread-8339493-1-2.html
#73 13:49:55 开始读取页面:http://www.55188.com/thread-8339493-1-2.html
#73 13:49:59 已经取得页面信息
#73 13:49:59 获取到5个子贴
#73 13:50:01 没有下一页了,小爬读取工作结束
#73 13:50:01 小爬准备向文件存入5条记录
#73 13:50:04 小爬#73工作完成

小爬ID:48
小爬名: 跷跷板创业板走弱，暂时这样操作吧
小爬战斗和生活的地方:http://www.55188.com/thread-8339789-1-1.html
#48 13:49:55 开始读取页面:http://www.55188.com/thread-8339789-1-1.html
#48 13:49:58 已经取得页面信息
#48 13:49:58 获取到4个子贴
#48 13:50:02 没有下一页了,小爬读取工作结束
#48 13:50:02 小爬准备向文件存入4条记录
#48 13:50:04 小爬#48工作完成

小爬ID:95
小爬名: 推荐股票
小爬战斗和生活的地方:http://www.55188.com/thread-8339469-1-2.html
#95 13:49:55 开始读取页面:http://www.55188.com/thread-8339469-1-2.html
#95 13:49:57 已经取得页面信息
#95 13:49:57 获取到8个子贴
#95 13:49:58 没有下一页了,小爬读取工作结束
#95 13:49:58 小爬准备向文件存入8条记录
#95 13:50:04 小爬#95工作完成

小爬ID:26
小爬名: 鲁L蒲公英4.17短线看盘：大中小盘转换，危险大于机遇！
小爬战斗和生活的地方:http://www.55188.com/thread-8339791-1-1.html
#26 13:49:55 开始读取页面:http://www.55188.com/thread-8339791-1-1.html
#26 13:49:56 已经取得页面信息
#26 13:49:57 获取到7个子贴
#26 13:49:57 没有下一页了,小爬读取工作结束
#26 13:49:57 小爬准备向文件存入7条记录
#26 13:50:04 小爬#26工作完成

----共有210个小爬 ,已有4个(1.9%)的小爬完成任务

小爬ID:82
小爬名: 早盘内参：消息称贾跃亭已让出FF大股东地位 恒大为FF最大股东
小爬战斗和生活的地方:http://www.55188.com/thread-8339523-1-2.html
#82 13:49:55 开始读取页面:http://www.55188.com/thread-8339523-1-2.html
#82 13:50:03 已经取得页面信息
#82 13:50:04 获取到5个子贴
#82 13:50:04 没有下一页了,小爬读取工作结束
#82 13:50:04 小爬准备向文件存入5条记录
#82 13:50:05 小爬#82工作完成

小爬ID:70
小爬名: 中国贸易出现逆差影响恒指  天鸽随时将迎来大幅反弹
小爬战斗和生活的地方:http://www.55188.com/thread-8339442-1-1.html
#70 13:49:55 开始读取页面:http://www.55188.com/thread-8339442-1-1.html
#70 13:50:01 已经取得页面信息
#70 13:50:02 获取到7个子贴
#70 13:50:02 没有下一页了,小爬读取工作结束
#70 13:50:02 小爬准备向文件存入7条记录
#70 13:50:05 小爬#70工作完成

小爬ID:86
小爬名: 紧盯成本 滴滴、车和家联手布局 无人驾驶网约车
小爬战斗和生活的地方:http://www.55188.com/thread-8339409-1-2.html
#86 13:49:55 开始读取页面:http://www.55188.com/thread-8339409-1-2.html
#86 13:50:01 已经取得页面信息
#86 13:50:01 获取到8个子贴
#86 13:50:02 没有下一页了,小爬读取工作结束
#86 13:50:02 小爬准备向文件存入8条记录
#86 13:50:05 小爬#86工作完成

小爬ID:50
小爬名: 都过来看看 是不是一块 狗头金
小爬战斗和生活的地方:http://www.55188.com/thread-8339433-1-1.html
#50 13:49:55 开始读取页面:http://www.55188.com/thread-8339433-1-1.html
#50 13:50:02 已经取得页面信息
#50 13:50:03 获取到16个子贴
#50 13:50:03 没有下一页了,小爬读取工作结束
#50 13:50:03 小爬准备向文件存入16条记录
#50 13:50:05 小爬#50工作完成

小爬ID:80
小爬名: 不是真想对着干，K线规律的自然体现，转机初现（股市早点）
小爬战斗和生活的地方:http://www.55188.com/thread-8339506-1-2.html
#80 13:49:55 开始读取页面:http://www.55188.com/thread-8339506-1-2.html
#80 13:49:58 已经取得页面信息
#80 13:49:58 获取到7个子贴
#80 13:49:58 没有下一页了,小爬读取工作结束
#80 13:49:58 小爬准备向文件存入7条记录
#80 13:50:05 小爬#80工作完成

小爬ID:74
小爬名: 鬼夫人看盘：创业板冲高回落，大盘和上证50探底回升
小爬战斗和生活的地方:http://www.55188.com/thread-8339598-1-2.html
#74 13:49:55 开始读取页面:http://www.55188.com/thread-8339598-1-2.html
#74 13:50:02 已经取得页面信息
#74 13:50:02 获取到9个子贴
#74 13:50:02 没有下一页了,小爬读取工作结束
#74 13:50:02 小爬准备向文件存入9条记录
#74 13:50:05 小爬#74工作完成

小爬ID:56
小爬名: 每日荐股实战超短赢利即走-4.17
小爬战斗和生活的地方:http://www.55188.com/thread-8338591-1-1.html
#56 13:49:55 开始读取页面:http://www.55188.com/thread-8338591-1-1.html
#56 13:50:01 已经取得页面信息
#56 13:50:01 获取到8个子贴
#56 13:50:02 没有下一页了,小爬读取工作结束
#56 13:50:02 小爬准备向文件存入8条记录
#56 13:50:06 小爬#56工作完成

小爬ID:85
小爬名: 软件行业迎来爆发 两股进入主升周期
小爬战斗和生活的地方:http://www.55188.com/thread-8339412-1-2.html
#85 13:49:55 开始读取页面:http://www.55188.com/thread-8339412-1-2.html
#85 13:50:02 已经取得页面信息
#85 13:50:03 获取到11个子贴
#85 13:50:03 没有下一页了,小爬读取工作结束
#85 13:50:03 小爬准备向文件存入11条记录
#85 13:50:06 小爬#85工作完成

小爬ID:102
小爬名: 关注航母概念股！
小爬战斗和生活的地方:http://www.55188.com/thread-8339364-1-2.html
#102 13:49:55 开始读取页面:http://www.55188.com/thread-8339364-1-2.html
#102 13:50:00 已经取得页面信息
#102 13:50:01 获取到12个子贴
#102 13:50:02 没有下一页了,小爬读取工作结束
#102 13:50:02 小爬准备向文件存入12条记录
#102 13:50:06 小爬#102工作完成

小爬ID:69
小爬名: 税延养老险方案落地 预计带来千亿增量 4股受益
小爬战斗和生活的地方:http://www.55188.com/thread-8339441-1-1.html
#69 13:49:55 开始读取页面:http://www.55188.com/thread-8339441-1-1.html
#69 13:50:03 已经取得页面信息
#69 13:50:04 获取到9个子贴
#69 13:50:04 没有下一页了,小爬读取工作结束
#69 13:50:04 小爬准备向文件存入9条记录
#69 13:50:06 小爬#69工作完成

小爬ID:32
小爬名: 股市已经提前反应美帝国依次宰割的路线
小爬战斗和生活的地方:http://www.55188.com/thread-8339783-1-1.html
#32 13:49:55 开始读取页面:http://www.55188.com/thread-8339783-1-1.html
#32 13:49:56 已经取得页面信息
#32 13:49:56 获取到7个子贴
#32 13:49:56 没有下一页了,小爬读取工作结束
#32 13:49:56 小爬准备向文件存入7条记录
#32 13:49:57 小爬#32工作完成

小爬ID:28
小爬名: 大盘
小爬战斗和生活的地方:http://www.55188.com/thread-8338342-1-1.html
#28 13:49:55 开始读取页面:http://www.55188.com/thread-8338342-1-1.html
#28 13:49:57 已经取得页面信息
#28 13:49:58 获取到12个子贴
#28 13:49:59 没有下一页了,小爬读取工作结束
#28 13:49:59 小爬准备向文件存入12条记录
#28 13:50:06 小爬#28工作完成

小爬ID:94
小爬名: 4月17日早间必读
小爬战斗和生活的地方:http://www.55188.com/thread-8339401-1-2.html
#94 13:49:55 开始读取页面:http://www.55188.com/thread-8339401-1-2.html
#94 13:50:02 已经取得页面信息
#94 13:50:03 获取到11个子贴
#94 13:50:04 没有下一页了,小爬读取工作结束
#94 13:50:04 小爬准备向文件存入11条记录
#94 13:50:06 小爬#94工作完成

小爬ID:66
小爬名: 【易明投资】 每日股市内参荟萃 2018-04-17
小爬战斗和生活的地方:http://www.55188.com/thread-8339434-1-1.html
#66 13:49:55 开始读取页面:http://www.55188.com/thread-8339434-1-1.html
#66 13:50:02 已经取得页面信息
#66 13:50:03 获取到10个子贴
#66 13:50:06 没有下一页了,小爬读取工作结束
#66 13:50:06 小爬准备向文件存入10条记录
#66 13:50:06 小爬#66工作完成

小爬ID:23
小爬名: 相信党有大智慧大能力，打赢贸易摩擦！
小爬战斗和生活的地方:http://www.55188.com/thread-8339831-1-1.html
#23 13:49:55 开始读取页面:http://www.55188.com/thread-8339831-1-1.html
#23 13:49:56 已经取得页面信息
#23 13:49:56 获取到6个子贴
#23 13:49:56 没有下一页了,小爬读取工作结束
#23 13:49:56 小爬准备向文件存入6条记录
#23 13:50:02 小爬#23工作完成

小爬ID:64
小爬名: 周二市场操作策略
小爬战斗和生活的地方:http://www.55188.com/thread-8339423-1-1.html
#64 13:49:55 开始读取页面:http://www.55188.com/thread-8339423-1-1.html
#64 13:50:01 已经取得页面信息
#64 13:50:01 获取到8个子贴
#64 13:50:02 没有下一页了,小爬读取工作结束
#64 13:50:02 小爬准备向文件存入8条记录
#64 13:50:03 小爬#64工作完成

小爬ID:3
小爬名: T+4荐股赢金钻选股赛马场 2018年4月第11期（04.18—04.24）报名帖！（总第798期）
小爬战斗和生活的地方:http://www.55188.com/thread-8339573-1-1.html
#3 13:49:55 开始读取页面:http://www.55188.com/thread-8339573-1-1.html
#3 13:50:06 已经取得页面信息
#3 13:50:06 获取到20个子贴
#3 13:50:06 没有下一页了,小爬读取工作结束
#3 13:50:06 小爬准备向文件存入20条记录
#3 13:50:07 小爬#3工作完成

小爬ID:62
小爬名: 2018年4月17日开盘前荐股
小爬战斗和生活的地方:http://www.55188.com/thread-8339530-1-1.html
#62 13:49:55 开始读取页面:http://www.55188.com/thread-8339530-1-1.html
#62 13:49:59 已经取得页面信息
#62 13:49:59 获取到9个子贴
#62 13:50:01 没有下一页了,小爬读取工作结束
#62 13:50:01 小爬准备向文件存入9条记录
#62 13:50:04 小爬#62工作完成
----共有210个小爬 ,已有3个(1.43%)的小爬完成任务

小爬ID:57
小爬名: 免费分享：今日大盘
小爬战斗和生活的地方:http://www.55188.com/thread-8339368-1-1.html
#57 13:49:55 开始读取页面:http://www.55188.com/thread-8339368-1-1.html
#57 13:50:00 已经取得页面信息
#57 13:50:02 获取到10个子贴
#57 13:50:02 没有下一页了,小爬读取工作结束
#57 13:50:02 小爬准备向文件存入10条记录
#57 13:50:04 小爬#57工作完成

小爬ID:31
小爬名: 大底已现，明日一阳吞三阴！
小爬战斗和生活的地方:http://www.55188.com/thread-8338635-1-1.html
#31 13:49:55 开始读取页面:http://www.55188.com/thread-8338635-1-1.html
#31 13:49:59 已经取得页面信息
#31 13:49:59 获取到20个子贴
#31 13:50:02 当前为第1页
#31 13:50:02 找到下一页
#31 13:50:02 开始读取页面:http://www.55188.com/thread-8338635-2-1.html
#31 13:50:07 已经取得页面信息
#31 13:50:07 获取到2个子贴
#31 13:50:07 当前为第2页
#31 13:50:07 当前为第2页
#31 13:50:07 没有下一页了,小爬读取工作结束
#31 13:50:07 小爬准备向文件存入22条记录
#31 13:50:07 小爬#31工作完成

小爬ID:105
小爬名: 开盘论市：跌破3129点之后，随时会再跌破3062点。
小爬战斗和生活的地方:http://www.55188.com/thread-8339721-1-2.html
#105 13:49:55 开始读取页面:http://www.55188.com/thread-8339721-1-2.html
#105 13:50:03 已经取得页面信息
#105 13:50:03 获取到8个子贴
#105 13:50:03 没有下一页了,小爬读取工作结束
#105 13:50:03 小爬准备向文件存入8条记录
#105 13:50:04 小爬#105工作完成

小爬ID:25
小爬名: 一个红K都不会给你！
小爬战斗和生活的地方:http://www.55188.com/thread-8339577-1-1.html
#25 13:49:55 开始读取页面:http://www.55188.com/thread-8339577-1-1.html
#25 13:49:57 已经取得页面信息
#25 13:49:57 获取到11个子贴
#25 13:49:57 没有下一页了,小爬读取工作结束
#25 13:49:57 小爬准备向文件存入11条记录
#25 13:50:04 小爬#25工作完成

小爬ID:67
小爬名: 避险情绪升温军工板块引关注 六股爆发在即
小爬战斗和生活的地方:http://www.55188.com/thread-8339436-1-1.html
#67 13:49:55 开始读取页面:http://www.55188.com/thread-8339436-1-1.html
#67 13:50:03 已经取得页面信息
#67 13:50:03 获取到9个子贴
#67 13:50:03 没有下一页了,小爬读取工作结束
#67 13:50:03 小爬准备向文件存入9条记录
#67 13:50:05 小爬#67工作完成

小爬ID:84
小爬名: 4月17日国内四大证券报纸头版头条内容精华摘要
小爬战斗和生活的地方:http://www.55188.com/thread-8339526-1-2.html
#84 13:49:55 开始读取页面:http://www.55188.com/thread-8339526-1-2.html
#84 13:50:00 已经取得页面信息
#84 13:50:02 获取到6个子贴
#84 13:50:02 没有下一页了,小爬读取工作结束
#84 13:50:02 小爬准备向文件存入6条记录
#84 13:50:05 小爬#84工作完成

小爬ID:68
小爬名: 一现象暗示大跌不慌北向资金正悄悄吸筹(附股)
小爬战斗和生活的地方:http://www.55188.com/thread-8339438-1-1.html
#68 13:49:55 开始读取页面:http://www.55188.com/thread-8339438-1-1.html
#68 13:50:02 已经取得页面信息
#68 13:50:02 获取到14个子贴
#68 13:50:02 没有下一页了,小爬读取工作结束
#68 13:50:02 小爬准备向文件存入14条记录
#68 13:50:05 小爬#68工作完成

小爬ID:93
小爬名: 中国经济一季度成绩单今日揭晓 三大焦点值得关注
小爬战斗和生活的地方:http://www.55188.com/thread-8339405-1-2.html
#93 13:49:55 开始读取页面:http://www.55188.com/thread-8339405-1-2.html
#93 13:50:00 已经取得页面信息
#93 13:50:01 获取到10个子贴
#93 13:50:01 没有下一页了,小爬读取工作结束
#93 13:50:01 小爬准备向文件存入10条记录
#93 13:50:05 小爬#93工作完成

小爬ID:54
小爬名: 20180417【早盘剧透】
小爬战斗和生活的地方:http://www.55188.com/thread-8339527-1-1.html
#54 13:49:55 开始读取页面:http://www.55188.com/thread-8339527-1-1.html
#54 13:49:59 已经取得页面信息
#54 13:50:00 获取到6个子贴
#54 13:50:00 没有下一页了,小爬读取工作结束
#54 13:50:00 小爬准备向文件存入6条记录
#54 13:50:05 小爬#54工作完成

小爬ID:88
小爬名: 个人观点
小爬战斗和生活的地方:http://www.55188.com/thread-8339467-1-2.html
#88 13:49:55 开始读取页面:http://www.55188.com/thread-8339467-1-2.html
#88 13:50:00 已经取得页面信息
#88 13:50:02 获取到7个子贴
#88 13:50:02 没有下一页了,小爬读取工作结束
#88 13:50:02 小爬准备向文件存入7条记录
#88 13:50:05 小爬#88工作完成
----共有210个小爬 ,已有5个(2.38%)的小爬完成任务

----共有210个小爬 ,已有6个(2.86%)的小爬完成任务
----共有210个小爬 ,已有7个(3.33%)的小爬完成任务

小爬ID:92
小爬名: 五月全球苜个体育竞技网络第一胶盛天网络300494重点关注
小爬战斗和生活的地方:http://www.55188.com/thread-8339610-1-2.html
#92 13:49:55 开始读取页面:http://www.55188.com/thread-8339610-1-2.html
#92 13:50:01 已经取得页面信息
#92 13:50:01 获取到10个子贴
#92 13:50:03 没有下一页了,小爬读取工作结束
#92 13:50:03 小爬准备向文件存入10条记录
#92 13:50:05 小爬#92工作完成

小爬ID:30
小爬名: 全球交易局势混乱不堪，华尔街策略师和投资者均感困惑
小爬战斗和生活的地方:http://www.55188.com/thread-8339768-1-1.html
#30 13:49:55 开始读取页面:http://www.55188.com/thread-8339768-1-1.html
#30 13:49:57 已经取得页面信息
#30 13:49:59 获取到7个子贴
#30 13:50:01 没有下一页了,小爬读取工作结束
#30 13:50:01 小爬准备向文件存入7条记录
#30 13:50:05 小爬#30工作完成

小爬ID:87
小爬名: 爽，被关4个半月2018新年第一停牌票《国际医学》今天出关。老夫出关啦！！爽，爽，爽
小爬战斗和生活的地方:http://www.55188.com/thread-8339596-1-2.html
#87 13:49:55 开始读取页面:http://www.55188.com/thread-8339596-1-2.html
#87 13:50:02 已经取得页面信息
#87 13:50:04 获取到8个子贴
#87 13:50:05 没有下一页了,小爬读取工作结束
#87 13:50:05 小爬准备向文件存入8条记录
#87 13:50:05 小爬#87工作完成

小爬ID:71
小爬名: 推荐股票
小爬战斗和生活的地方:http://www.55188.com/thread-8339479-1-2.html
#71 13:49:55 开始读取页面:http://www.55188.com/thread-8339479-1-2.html
#71 13:49:59 已经取得页面信息
#71 13:49:59 获取到5个子贴
#71 13:50:02 没有下一页了,小爬读取工作结束
#71 13:50:02 小爬准备向文件存入5条记录
#71 13:50:05 小爬#71工作完成

小爬ID:55
小爬名: 04月17日股市早班车
小爬战斗和生活的地方:http://www.55188.com/thread-8339533-1-1.html
#55 13:49:55 开始读取页面:http://www.55188.com/thread-8339533-1-1.html
#55 13:50:02 已经取得页面信息
#55 13:50:03 获取到9个子贴
#55 13:50:03 没有下一页了,小爬读取工作结束
#55 13:50:03 小爬准备向文件存入9条记录
#55 13:50:06 小爬#55工作完成

小爬ID:52
小爬名: 机构布局转向"人工智能+"等领域 6股享大餐
小爬战斗和生活的地方:http://www.55188.com/thread-8339429-1-1.html
#52 13:49:55 开始读取页面:http://www.55188.com/thread-8339429-1-1.html
#52 13:50:03 已经取得页面信息
#52 13:50:03 获取到8个子贴
#52 13:50:04 没有下一页了,小爬读取工作结束
#52 13:50:04 小爬准备向文件存入8条记录
#52 13:50:06 小爬#52工作完成

小爬ID:103
小爬名: 免费分享：今日计划
小爬战斗和生活的地方:http://www.55188.com/thread-8339355-1-2.html
#103 13:49:55 开始读取页面:http://www.55188.com/thread-8339355-1-2.html
#103 13:50:02 已经取得页面信息
#103 13:50:02 获取到11个子贴
#103 13:50:02 没有下一页了,小爬读取工作结束
#103 13:50:02 小爬准备向文件存入11条记录
#103 13:50:06 小爬#103工作完成

小爬ID:90
小爬名: 美股超预期表现，操作什么方向为宜？
小爬战斗和生活的地方:http://www.55188.com/thread-8339524-1-2.html
#90 13:49:55 开始读取页面:http://www.55188.com/thread-8339524-1-2.html
#90 13:50:02 已经取得页面信息
#90 13:50:02 获取到6个子贴
#90 13:50:02 没有下一页了,小爬读取工作结束
#90 13:50:02 小爬准备向文件存入6条记录
#90 13:50:06 小爬#90工作完成
----共有210个小爬 ,已有9个(4.29%)的小爬完成任务

小爬ID:206
小爬名: T+4荐股4月第05期总第792期） 思路：300177 中海达  北斗导航概念
小爬战斗和生活的地方:http://www.55188.com/thread-8338498-1-3.html
#206 13:49:55 开始读取页面:http://www.55188.com/thread-8338498-1-3.html
#206 13:50:04 已经取得页面信息
#206 13:50:06 获取到15个子贴
#206 13:50:06 没有下一页了,小爬读取工作结束
#206 13:50:06 小爬准备向文件存入15条记录
#206 13:50:06 小爬#206工作完成

小爬ID:60
小爬名: 叶子看盘——独角兽新政后首只独角兽将上市
小爬战斗和生活的地方:http://www.55188.com/thread-8339478-1-1.html
#60 13:49:55 开始读取页面:http://www.55188.com/thread-8339478-1-1.html
#60 13:50:01 已经取得页面信息
#60 13:50:01 获取到10个子贴
#60 13:50:05 没有下一页了,小爬读取工作结束
#60 13:50:05 小爬准备向文件存入10条记录
#60 13:50:06 小爬#60工作完成

小爬ID:79
小爬名: 个人观点
小爬战斗和生活的地方:http://www.55188.com/thread-8339458-1-2.html
#79 13:49:55 开始读取页面:http://www.55188.com/thread-8339458-1-2.html
#79 13:50:02 已经取得页面信息
#79 13:50:02 获取到6个子贴
#79 13:50:04 没有下一页了,小爬读取工作结束
#79 13:50:04 小爬准备向文件存入6条记录
#79 13:50:07 小爬#79工作完成
----共有210个小爬 ,已有11个(5.24%)的小爬完成任务

小爬ID:75
小爬名: 宇辉战舰早评2018.04.17
小爬战斗和生活的地方:http://www.55188.com/thread-8339495-1-2.html
#75 13:49:55 开始读取页面:http://www.55188.com/thread-8339495-1-2.html
#75 13:50:03 已经取得页面信息
#75 13:50:03 获取到8个子贴
#75 13:50:04 没有下一页了,小爬读取工作结束
#75 13:50:04 小爬准备向文件存入8条记录
#75 13:50:07 小爬#75工作完成

小爬ID:59
小爬名: 老九谈股：4-17大盘分析（短线筑底！）
小爬战斗和生活的地方:http://www.55188.com/thread-8339529-1-1.html
#59 13:49:55 开始读取页面:http://www.55188.com/thread-8339529-1-1.html
#59 13:50:04 已经取得页面信息
#59 13:50:05 获取到16个子贴
#59 13:50:05 没有下一页了,小爬读取工作结束
#59 13:50:05 小爬准备向文件存入16条记录
#59 13:50:07 小爬#59工作完成

----共有210个小爬 ,已有13个(6.19%)的小爬完成任务

小爬ID:63
小爬名: 周二操作策略
小爬战斗和生活的地方:http://www.55188.com/thread-8339418-1-1.html
#63 13:49:55 开始读取页面:http://www.55188.com/thread-8339418-1-1.html
#63 13:49:58 已经取得页面信息
#63 13:49:58 获取到8个子贴
#63 13:50:00 没有下一页了,小爬读取工作结束
#63 13:50:00 小爬准备向文件存入8条记录
#63 13:50:03 小爬#63工作完成

小爬ID:7
小爬名: 买点货
小爬战斗和生活的地方:http://www.55188.com/thread-8339838-1-1.html
#7 13:49:55 开始读取页面:http://www.55188.com/thread-8339838-1-1.html
#7 13:49:59 已经取得页面信息
#7 13:49:59 获取到13个子贴
#7 13:50:00 没有下一页了,小爬读取工作结束
#7 13:50:00 小爬准备向文件存入13条记录
#7 13:50:04 小爬#7工作完成
----共有210个小爬 ,已有15个(7.14%)的小爬完成任务

小爬ID:77
小爬名: 4月17日早间新闻精选
小爬战斗和生活的地方:http://www.55188.com/thread-8339497-1-2.html
#77 13:49:55 开始读取页面:http://www.55188.com/thread-8339497-1-2.html
#77 13:49:59 已经取得页面信息
#77 13:49:59 获取到6个子贴
#77 13:50:03 没有下一页了,小爬读取工作结束
#77 13:50:03 小爬准备向文件存入6条记录
#77 13:50:05 小爬#77工作完成

小爬ID:76
小爬名: 服装——逢低介入品牌服装
小爬战斗和生活的地方:http://www.55188.com/thread-8338850-1-2.html
#76 13:49:55 开始读取页面:http://www.55188.com/thread-8338850-1-2.html
#76 13:50:06 已经取得页面信息
#76 13:50:06 获取到20个子贴
#76 13:50:06 当前为第1页
#76 13:50:06 找到下一页
#76 13:50:06 开始读取页面:http://www.55188.com/thread-8338850-2-2.html
#76 13:50:08 已经取得页面信息
#76 13:50:08 获取到1个子贴
#76 13:50:08 当前为第2页
#76 13:50:08 当前为第2页
#76 13:50:08 没有下一页了,小爬读取工作结束
#76 13:50:08 小爬准备向文件存入21条记录
#76 13:50:09 小爬#76工作完成

小爬ID:78
小爬名: 【两市融资余额昨日增加14.85亿元】
小爬战斗和生活的地方:http://www.55188.com/thread-8339499-1-2.html
#78 13:49:55 开始读取页面:http://www.55188.com/thread-8339499-1-2.html
#78 13:50:01 已经取得页面信息
#78 13:50:01 获取到7个子贴
#78 13:50:02 没有下一页了,小爬读取工作结束
#78 13:50:02 小爬准备向文件存入7条记录
#78 13:50:05 小爬#78工作完成

小爬ID:83
小爬名: 个人思路
小爬战斗和生活的地方:http://www.55188.com/thread-8339461-1-2.html
#83 13:49:55 开始读取页面:http://www.55188.com/thread-8339461-1-2.html
#83 13:49:57 已经取得页面信息
#83 13:49:58 获取到6个子贴
#83 13:49:58 没有下一页了,小爬读取工作结束
#83 13:49:58 小爬准备向文件存入6条记录
#83 13:50:05 小爬#83工作完成

小爬ID:72
小爬名: 推荐股票
小爬战斗和生活的地方:http://www.55188.com/thread-8339484-1-2.html
#72 13:49:55 开始读取页面:http://www.55188.com/thread-8339484-1-2.html
#72 13:50:01 已经取得页面信息
#72 13:50:01 获取到5个子贴
#72 13:50:02 没有下一页了,小爬读取工作结束
#72 13:50:02 小爬准备向文件存入5条记录
#72 13:50:05 小爬#72工作完成
----共有210个小爬 ,已有8个(3.81%)的小爬完成任务

----共有210个小爬 ,已有16个(7.62%)的小爬完成任务

小爬ID:44
小爬名: 阴线之美
小爬战斗和生活的地方:http://www.55188.com/thread-8244173-1-1.html
#44 13:49:55 开始读取页面:http://www.55188.com/thread-8244173-1-1.html
#44 13:50:04 已经取得页面信息
#44 13:50:04 获取到20个子贴
#44 13:50:04 当前为第1页
#44 13:50:04 找到下一页
#44 13:50:04 开始读取页面:http://www.55188.com/thread-8244173-2-1.html
#44 13:50:07 已经取得页面信息
#44 13:50:07 获取到20个子贴
#44 13:50:07 当前为第2页
#44 13:50:07 找到下一页
#44 13:50:07 开始读取页面:http://www.55188.com/thread-8244173-3-1.html
#44 13:50:12 已经取得页面信息
#44 13:50:12 获取到20个子贴
#44 13:50:12 当前为第3页
#44 13:50:12 找到下一页
#44 13:50:12 开始读取页面:http://www.55188.com/thread-8244173-4-1.html
#44 13:50:18 已经取得页面信息
#44 13:50:18 获取到20个子贴
#44 13:50:18 当前为第4页
#44 13:50:18 找到下一页
#44 13:50:18 开始读取页面:http://www.55188.com/thread-8244173-5-1.html
#44 13:50:20 已经取得页面信息
#44 13:50:20 获取到0个子贴
#44 13:50:20 没有下一页了,小爬读取工作结束
#44 13:50:20 小爬准备向文件存入80条记录
#44 13:50:20 小爬#44工作完成

小爬ID:33
小爬名: 老张猜股2016（第6期）：灯塔
小爬战斗和生活的地方:http://www.55188.com/thread-8195605-1-1.html
#33 13:49:55 开始读取页面:http://www.55188.com/thread-8195605-1-1.html
#33 13:50:05 已经取得页面信息
#33 13:50:05 获取到20个子贴
#33 13:50:07 当前为第1页
#33 13:50:07 找到下一页
#33 13:50:07 开始读取页面:http://www.55188.com/thread-8195605-2-1.html
#33 13:50:09 已经取得页面信息
#33 13:50:10 获取到20个子贴
#33 13:50:10 当前为第2页
#33 13:50:10 找到下一页
#33 13:50:10 开始读取页面:http://www.55188.com/thread-8195605-3-1.html
#33 13:50:12 已经取得页面信息
#33 13:50:13 获取到20个子贴
#33 13:50:13 当前为第3页
#33 13:50:13 找到下一页
#33 13:50:13 开始读取页面:http://www.55188.com/thread-8195605-4-1.html
#33 13:50:18 已经取得页面信息
#33 13:50:18 获取到20个子贴
#33 13:50:18 当前为第4页
#33 13:50:18 找到下一页
#33 13:50:18 开始读取页面:http://www.55188.com/thread-8195605-5-1.html
#33 13:50:20 已经取得页面信息
#33 13:50:20 获取到0个子贴
#33 13:50:20 没有下一页了,小爬读取工作结束
#33 13:50:20 小爬准备向文件存入80条记录
#33 13:50:21 小爬#33工作完成
----共有210个小爬 ,已有10个(4.76%)的小爬完成任务

小爬ID:39
小爬名: 宇辉战舰2016实盘交流第二季
小爬战斗和生活的地方:http://www.55188.com/thread-7675256-1-1.html
#39 13:49:55 开始读取页面:http://www.55188.com/thread-7675256-1-1.html
#39 13:50:04 已经取得页面信息
#39 13:50:04 获取到20个子贴
#39 13:50:05 当前为第1页
#39 13:50:05 找到下一页
#39 13:50:05 开始读取页面:http://www.55188.com/thread-7675256-2-1.html
#39 13:50:10 已经取得页面信息
#39 13:50:10 获取到20个子贴
#39 13:50:10 当前为第2页
#39 13:50:10 找到下一页
#39 13:50:10 开始读取页面:http://www.55188.com/thread-7675256-3-1.html
#39 13:50:15 已经取得页面信息
#39 13:50:15 获取到20个子贴
#39 13:50:15 当前为第3页
#39 13:50:15 找到下一页
#39 13:50:15 开始读取页面:http://www.55188.com/thread-7675256-4-1.html
#39 13:50:18 已经取得页面信息
#39 13:50:18 获取到20个子贴
#39 13:50:19 当前为第4页
#39 13:50:19 找到下一页
#39 13:50:19 开始读取页面:http://www.55188.com/thread-7675256-5-1.html
#39 13:50:21 已经取得页面信息
#39 13:50:21 获取到0个子贴
#39 13:50:21 没有下一页了,小爬读取工作结束
#39 13:50:21 小爬准备向文件存入80条记录
#39 13:50:21 小爬#39工作完成

小爬ID:34
小爬名: 感恩节活动——熊市也能稳定获利（续）
小爬战斗和生活的地方:http://www.55188.com/thread-8131674-1-1.html
#34 13:49:55 开始读取页面:http://www.55188.com/thread-8131674-1-1.html
#34 13:50:04 已经取得页面信息
#34 13:50:05 获取到20个子贴
#34 13:50:05 当前为第1页
#34 13:50:05 找到下一页
#34 13:50:05 开始读取页面:http://www.55188.com/thread-8131674-2-1.html
#34 13:50:08 已经取得页面信息
#34 13:50:08 获取到20个子贴
#34 13:50:09 当前为第2页
#34 13:50:09 找到下一页
#34 13:50:09 开始读取页面:http://www.55188.com/thread-8131674-3-1.html
#34 13:50:14 已经取得页面信息
#34 13:50:15 获取到20个子贴
#34 13:50:15 当前为第3页
#34 13:50:15 找到下一页
#34 13:50:15 开始读取页面:http://www.55188.com/thread-8131674-4-1.html
#34 13:50:18 已经取得页面信息
#34 13:50:19 获取到20个子贴
#34 13:50:19 当前为第4页
#34 13:50:19 找到下一页
#34 13:50:19 开始读取页面:http://www.55188.com/thread-8131674-5-1.html
#34 13:50:21 已经取得页面信息
#34 13:50:21 获取到0个子贴
#34 13:50:21 没有下一页了,小爬读取工作结束
#34 13:50:21 小爬准备向文件存入80条记录
#34 13:50:21 小爬#34工作完成

小爬ID:5
小爬名: 琪新实战宝箱之超级短线
小爬战斗和生活的地方:http://www.55188.com/thread-8283644-1-1.html
#5 13:49:55 开始读取页面:http://www.55188.com/thread-8283644-1-1.html
#5 13:50:07 已经取得页面信息
#5 13:50:07 获取到20个子贴
#5 13:50:07 当前为第1页
#5 13:50:07 找到下一页
#5 13:50:07 开始读取页面:http://www.55188.com/thread-8283644-2-1.html
#5 13:50:11 已经取得页面信息
#5 13:50:11 获取到20个子贴
#5 13:50:11 当前为第2页
#5 13:50:11 找到下一页
#5 13:50:11 开始读取页面:http://www.55188.com/thread-8283644-3-1.html
#5 13:50:15 已经取得页面信息
#5 13:50:15 获取到20个子贴
#5 13:50:15 当前为第3页
#5 13:50:15 找到下一页
#5 13:50:15 开始读取页面:http://www.55188.com/thread-8283644-4-1.html
#5 13:50:19 已经取得页面信息
#5 13:50:19 获取到20个子贴
#5 13:50:19 当前为第4页
#5 13:50:19 找到下一页
#5 13:50:19 开始读取页面:http://www.55188.com/thread-8283644-5-1.html
#5 13:50:21 已经取得页面信息
#5 13:50:21 获取到0个子贴
#5 13:50:21 没有下一页了,小爬读取工作结束
#5 13:50:21 小爬准备向文件存入80条记录
#5 13:50:21 小爬#5工作完成

小爬ID:27
小爬名: 粉色魔窟与你同在------第50期（将超前热点分享十即时实盘+宏观调控解盘进行到底）
小爬战斗和生活的地方:http://www.55188.com/thread-8303338-1-1.html
#27 13:49:55 开始读取页面:http://www.55188.com/thread-8303338-1-1.html
#27 13:50:05 已经取得页面信息
#27 13:50:06 获取到20个子贴
#27 13:50:06 当前为第1页
#27 13:50:06 找到下一页
#27 13:50:06 开始读取页面:http://www.55188.com/thread-8303338-2-1.html
#27 13:50:11 已经取得页面信息
#27 13:50:11 获取到20个子贴
#27 13:50:11 当前为第2页
#27 13:50:11 找到下一页
#27 13:50:11 开始读取页面:http://www.55188.com/thread-8303338-3-1.html
#27 13:50:15 已经取得页面信息
#27 13:50:16 获取到20个子贴
#27 13:50:16 当前为第3页
#27 13:50:16 找到下一页
#27 13:50:16 开始读取页面:http://www.55188.com/thread-8303338-4-1.html
#27 13:50:19 已经取得页面信息
#27 13:50:19 获取到20个子贴
#27 13:50:20 当前为第4页
#27 13:50:20 找到下一页
#27 13:50:20 开始读取页面:http://www.55188.com/thread-8303338-5-1.html
#27 13:50:21 已经取得页面信息
#27 13:50:21 获取到0个子贴
#27 13:50:21 没有下一页了,小爬读取工作结束
#27 13:50:21 小爬准备向文件存入80条记录
#27 13:50:21 小爬#27工作完成

小爬ID:45
小爬名: 十年投机-股市实盘直播
小爬战斗和生活的地方:http://www.55188.com/thread-8289620-1-1.html
#45 13:49:55 开始读取页面:http://www.55188.com/thread-8289620-1-1.html
#45 13:49:59 已经取得页面信息
#45 13:49:59 获取到20个子贴
#45 13:50:00 当前为第1页
#45 13:50:00 找到下一页
#45 13:50:00 开始读取页面:http://www.55188.com/thread-8289620-2-1.html
#45 13:50:05 已经取得页面信息
#45 13:50:05 获取到20个子贴
#45 13:50:05 当前为第2页
#45 13:50:05 找到下一页
#45 13:50:05 开始读取页面:http://www.55188.com/thread-8289620-3-1.html
#45 13:50:09 已经取得页面信息
#45 13:50:10 获取到20个子贴
#45 13:50:10 当前为第3页
#45 13:50:10 找到下一页
#45 13:50:10 开始读取页面:http://www.55188.com/thread-8289620-4-1.html
#45 13:50:15 已经取得页面信息
#45 13:50:16 获取到20个子贴
#45 13:50:16 当前为第4页
#45 13:50:16 找到下一页
#45 13:50:16 开始读取页面:http://www.55188.com/thread-8289620-5-1.html
#45 13:50:19 已经取得页面信息
#45 13:50:19 获取到20个子贴
#45 13:50:20 当前为第5页
#45 13:50:20 找到下一页
#45 13:50:20 开始读取页面:http://www.55188.com/thread-8289620-6-1.html
#45 13:50:21 已经取得页面信息
#45 13:50:21 获取到0个子贴
#45 13:50:21 没有下一页了,小爬读取工作结束
#45 13:50:21 小爬准备向文件存入100条记录
#45 13:50:21 小爬#45工作完成

小爬ID:37
小爬名: 宇辉战舰2018实盘交流
小爬战斗和生活的地方:http://www.55188.com/thread-8230485-1-1.html
#37 13:49:55 开始读取页面:http://www.55188.com/thread-8230485-1-1.html
#37 13:50:06 已经取得页面信息
#37 13:50:06 获取到20个子贴
#37 13:50:06 当前为第1页
#37 13:50:06 找到下一页
#37 13:50:06 开始读取页面:http://www.55188.com/thread-8230485-2-1.html
#37 13:50:10 已经取得页面信息
#37 13:50:10 获取到20个子贴
#37 13:50:10 当前为第2页
#37 13:50:10 找到下一页
#37 13:50:10 开始读取页面:http://www.55188.com/thread-8230485-3-1.html
#37 13:50:15 已经取得页面信息
#37 13:50:15 获取到20个子贴
#37 13:50:15 当前为第3页
#37 13:50:15 找到下一页
#37 13:50:15 开始读取页面:http://www.55188.com/thread-8230485-4-1.html
#37 13:50:20 已经取得页面信息
#37 13:50:20 获取到20个子贴
#37 13:50:20 当前为第4页
#37 13:50:20 找到下一页
#37 13:50:20 开始读取页面:http://www.55188.com/thread-8230485-5-1.html
#37 13:50:21 已经取得页面信息
#37 13:50:21 获取到0个子贴
#37 13:50:21 没有下一页了,小爬读取工作结束
#37 13:50:21 小爬准备向文件存入80条记录
#37 13:50:21 小爬#37工作完成

小爬ID:8
小爬名: 投机病院第十九期（大投交流帖）
小爬战斗和生活的地方:http://www.55188.com/thread-8230940-1-1.html
#8 13:49:55 开始读取页面:http://www.55188.com/thread-8230940-1-1.html
#8 13:50:01 已经取得页面信息
#8 13:50:01 获取到20个子贴
#8 13:50:02 当前为第1页
#8 13:50:02 找到下一页
#8 13:50:02 开始读取页面:http://www.55188.com/thread-8230940-2-1.html
#8 13:50:07 已经取得页面信息
#8 13:50:07 获取到20个子贴
#8 13:50:07 当前为第2页
#8 13:50:07 找到下一页
#8 13:50:07 开始读取页面:http://www.55188.com/thread-8230940-3-1.html
#8 13:50:11 已经取得页面信息
#8 13:50:11 获取到20个子贴
#8 13:50:11 当前为第3页
#8 13:50:11 找到下一页
#8 13:50:11 开始读取页面:http://www.55188.com/thread-8230940-4-1.html
#8 13:50:16 已经取得页面信息
#8 13:50:16 获取到20个子贴
#8 13:50:16 当前为第4页
#8 13:50:16 找到下一页
#8 13:50:16 开始读取页面:http://www.55188.com/thread-8230940-5-1.html
#8 13:50:20 已经取得页面信息
#8 13:50:21 获取到20个子贴
#8 13:50:21 当前为第5页
#8 13:50:21 找到下一页
#8 13:50:21 开始读取页面:http://www.55188.com/thread-8230940-6-1.html
#8 13:50:22 已经取得页面信息
#8 13:50:22 获取到0个子贴
#8 13:50:22 没有下一页了,小爬读取工作结束
#8 13:50:22 小爬准备向文件存入100条记录
#8 13:50:22 小爬#8工作完成

小爬ID:13
小爬名: 仁义宾实盘：4月16日盘后策略分析—上证拖累出机会，今天提醒个股，提醒低位潜伏！
小爬战斗和生活的地方:http://www.55188.com/thread-8338415-1-1.html
#13 13:49:55 开始读取页面:http://www.55188.com/thread-8338415-1-1.html
#13 13:49:59 已经取得页面信息
#13 13:50:00 获取到20个子贴
#13 13:50:00 当前为第1页
#13 13:50:00 找到下一页
#13 13:50:00 开始读取页面:http://www.55188.com/thread-8338415-2-1.html
#13 13:50:07 已经取得页面信息
#13 13:50:07 获取到20个子贴
#13 13:50:07 当前为第2页
#13 13:50:07 找到下一页
#13 13:50:07 开始读取页面:http://www.55188.com/thread-8338415-3-1.html
#13 13:50:10 已经取得页面信息
#13 13:50:10 获取到20个子贴
#13 13:50:11 当前为第3页
#13 13:50:11 找到下一页
#13 13:50:11 开始读取页面:http://www.55188.com/thread-8338415-4-1.html
#13 13:50:15 已经取得页面信息
#13 13:50:15 获取到20个子贴
#13 13:50:15 当前为第4页
#13 13:50:15 找到下一页
#13 13:50:15 开始读取页面:http://www.55188.com/thread-8338415-5-1.html
#13 13:50:18 已经取得页面信息
#13 13:50:18 获取到20个子贴
#13 13:50:18 当前为第5页
#13 13:50:18 找到下一页
#13 13:50:18 开始读取页面:http://www.55188.com/thread-8338415-6-1.html
#13 13:50:21 已经取得页面信息
#13 13:50:21 获取到8个子贴
#13 13:50:21 当前为第6页
#13 13:50:21 当前为第6页
#13 13:50:21 没有下一页了,小爬读取工作结束
#13 13:50:21 小爬准备向文件存入108条记录
#13 13:50:22 小爬#13工作完成

小爬ID:43
小爬名: 《超短追涨》、《超短抄底》、《短波买点》指标在不同环境下应用
小爬战斗和生活的地方:http://www.55188.com/thread-8329906-1-1.html
#43 13:49:55 开始读取页面:http://www.55188.com/thread-8329906-1-1.html
#43 13:50:06 已经取得页面信息
#43 13:50:06 获取到20个子贴
#43 13:50:06 当前为第1页
#43 13:50:06 找到下一页
#43 13:50:06 开始读取页面:http://www.55188.com/thread-8329906-2-1.html
#43 13:50:10 已经取得页面信息
#43 13:50:10 获取到20个子贴
#43 13:50:10 当前为第2页
#43 13:50:10 找到下一页
#43 13:50:10 开始读取页面:http://www.55188.com/thread-8329906-3-1.html
#43 13:50:13 已经取得页面信息
#43 13:50:13 获取到14个子贴
#43 13:50:14 当前为第3页
#43 13:50:14 当前为第3页
#43 13:50:14 没有下一页了,小爬读取工作结束
#43 13:50:14 小爬准备向文件存入54条记录
#43 13:50:16 小爬#43工作完成
----共有210个小爬 ,已有17个(8.1%)的小爬完成任务
----共有210个小爬 ,已有18个(8.57%)的小爬完成任务

----共有210个小爬 ,已有20个(9.52%)的小爬完成任务
----共有210个小爬 ,已有21个(10.0%)的小爬完成任务
----共有210个小爬 ,已有22个(10.48%)的小爬完成任务

小爬ID:91
小爬名: 【红猫猫闲谈】-----想生存于股市，先磨练好自己的心态
小爬战斗和生活的地方:http://www.55188.com/thread-5444964-1-2.html
#91 13:49:55 开始读取页面:http://www.55188.com/thread-5444964-1-2.html
#91 13:50:04 已经取得页面信息
#91 13:50:05 获取到20个子贴
#91 13:50:05 当前为第1页
#91 13:50:05 找到下一页
#91 13:50:05 开始读取页面:http://www.55188.com/thread-5444964-2-2.html
#91 13:50:09 已经取得页面信息
#91 13:50:09 获取到20个子贴
#91 13:50:11 当前为第2页
#91 13:50:11 找到下一页
#91 13:50:11 开始读取页面:http://www.55188.com/thread-5444964-3-2.html
#91 13:50:15 已经取得页面信息
#91 13:50:15 获取到20个子贴
#91 13:50:15 当前为第3页
#91 13:50:15 找到下一页
#91 13:50:15 开始读取页面:http://www.55188.com/thread-5444964-4-2.html
#91 13:50:17 已经取得页面信息
#91 13:50:17 获取到7个子贴
#91 13:50:17 当前为第4页
#91 13:50:17 当前为第4页
#91 13:50:17 没有下一页了,小爬读取工作结束
#91 13:50:17 小爬准备向文件存入67条记录
#91 13:50:19 小爬#91工作完成
----共有210个小爬 ,已有24个(11.43%)的小爬完成任务

----共有210个小爬 ,已有25个(11.9%)的小爬完成任务

----共有210个小爬 ,已有26个(12.38%)的小爬完成任务

----共有210个小爬 ,已有27个(12.86%)的小爬完成任务

小爬ID:35
小爬名: 群林常阳武星路☆☆2018☆04☆☆
小爬战斗和生活的地方:http://www.55188.com/thread-8321778-1-1.html
#35 13:49:55 开始读取页面:http://www.55188.com/thread-8321778-1-1.html
#35 13:50:01 已经取得页面信息
#35 13:50:01 获取到20个子贴
#35 13:50:02 当前为第1页
#35 13:50:02 找到下一页
#35 13:50:02 开始读取页面:http://www.55188.com/thread-8321778-2-1.html
#35 13:50:10 已经取得页面信息
#35 13:50:10 获取到20个子贴
#35 13:50:11 当前为第2页
#35 13:50:11 找到下一页
#35 13:50:11 开始读取页面:http://www.55188.com/thread-8321778-3-1.html
#35 13:50:14 已经取得页面信息
#35 13:50:15 获取到20个子贴
#35 13:50:15 当前为第3页
#35 13:50:15 找到下一页
#35 13:50:15 开始读取页面:http://www.55188.com/thread-8321778-4-1.html
#35 13:50:18 已经取得页面信息
#35 13:50:18 获取到20个子贴
#35 13:50:18 当前为第4页
#35 13:50:18 找到下一页
#35 13:50:18 开始读取页面:http://www.55188.com/thread-8321778-5-1.html
#35 13:50:20 已经取得页面信息
#35 13:50:20 获取到0个子贴
#35 13:50:20 没有下一页了,小爬读取工作结束
#35 13:50:20 小爬准备向文件存入80条记录
#35 13:50:21 小爬#35工作完成

小爬ID:41
小爬名: 丁酉静水流深，轻进潺湲潆鎏
小爬战斗和生活的地方:http://www.55188.com/thread-7894136-1-1.html
#41 13:49:55 开始读取页面:http://www.55188.com/thread-7894136-1-1.html
#41 13:50:06 已经取得页面信息
#41 13:50:06 获取到20个子贴
#41 13:50:06 当前为第1页
#41 13:50:06 找到下一页
#41 13:50:06 开始读取页面:http://www.55188.com/thread-7894136-2-1.html
#41 13:50:10 已经取得页面信息
#41 13:50:10 获取到20个子贴
#41 13:50:10 当前为第2页
#41 13:50:10 找到下一页
#41 13:50:10 开始读取页面:http://www.55188.com/thread-7894136-3-1.html
#41 13:50:13 已经取得页面信息
#41 13:50:14 获取到20个子贴
#41 13:50:15 当前为第3页
#41 13:50:15 找到下一页
#41 13:50:15 开始读取页面:http://www.55188.com/thread-7894136-4-1.html
#41 13:50:18 已经取得页面信息
#41 13:50:18 获取到20个子贴
#41 13:50:18 当前为第4页
#41 13:50:18 找到下一页
#41 13:50:18 开始读取页面:http://www.55188.com/thread-7894136-5-1.html
#41 13:50:21 已经取得页面信息
#41 13:50:21 获取到0个子贴
#41 13:50:21 没有下一页了,小爬读取工作结束
#41 13:50:21 小爬准备向文件存入80条记录
#41 13:50:21 小爬#41工作完成

----共有210个小爬 ,已有28个(13.33%)的小爬完成任务

小爬ID:20
小爬名: 淡定小生2018实盘交流贴
小爬战斗和生活的地方:http://www.55188.com/thread-8229004-1-1.html
#20 13:49:55 开始读取页面:http://www.55188.com/thread-8229004-1-1.html
#20 13:50:04 已经取得页面信息
#20 13:50:04 获取到20个子贴
#20 13:50:05 当前为第1页
#20 13:50:05 找到下一页
#20 13:50:05 开始读取页面:http://www.55188.com/thread-8229004-2-1.html
#20 13:50:09 已经取得页面信息
#20 13:50:10 获取到20个子贴
#20 13:50:10 当前为第2页
#20 13:50:10 找到下一页
#20 13:50:10 开始读取页面:http://www.55188.com/thread-8229004-3-1.html
#20 13:50:13 已经取得页面信息
#20 13:50:14 获取到20个子贴
#20 13:50:14 当前为第3页
#20 13:50:14 找到下一页
#20 13:50:14 开始读取页面:http://www.55188.com/thread-8229004-4-1.html
#20 13:50:18 已经取得页面信息
#20 13:50:18 获取到20个子贴
#20 13:50:18 当前为第4页
#20 13:50:18 找到下一页
#20 13:50:18 开始读取页面:http://www.55188.com/thread-8229004-5-1.html
#20 13:50:21 已经取得页面信息
#20 13:50:21 获取到0个子贴
#20 13:50:21 没有下一页了,小爬读取工作结束
#20 13:50:21 小爬准备向文件存入80条记录
#20 13:50:21 小爬#20工作完成

----共有210个小爬 ,已有29个(13.81%)的小爬完成任务

----共有210个小爬 ,已有30个(14.29%)的小爬完成任务
----共有210个小爬 ,已有31个(14.76%)的小爬完成任务

----共有210个小爬 ,已有14个(6.67%)的小爬完成任务
----共有210个小爬 ,已有32个(15.24%)的小爬完成任务
----共有210个小爬 ,已有33个(15.71%)的小爬完成任务
----共有210个小爬 ,已有34个(16.19%)的小爬完成任务
----共有210个小爬 ,已有35个(16.67%)的小爬完成任务

小爬ID:100
小爬名: 港汇出现紧张影响不大  天鸽互动本轮关注6.6元
小爬战斗和生活的地方:http://www.55188.com/thread-8339390-1-2.html
#100 13:49:55 开始读取页面:http://www.55188.com/thread-8339390-1-2.html
#100 13:49:58 已经取得页面信息
#100 13:49:59 获取到8个子贴
#100 13:49:59 没有下一页了,小爬读取工作结束
#100 13:49:59 小爬准备向文件存入8条记录
#100 13:50:05 小爬#100工作完成
----共有210个小爬 ,已有23个(10.95%)的小爬完成任务

----共有210个小爬 ,已有41个(19.52%)的小爬完成任务
----共有210个小爬 ,已有42个(20.0%)的小爬完成任务

小爬ID:19
小爬名: 每天赚点
小爬战斗和生活的地方:http://www.55188.com/thread-8327665-1-1.html
#19 13:49:55 开始读取页面:http://www.55188.com/thread-8327665-1-1.html
#19 13:50:02 已经取得页面信息
#19 13:50:03 获取到20个子贴
#19 13:50:04 当前为第1页
#19 13:50:04 找到下一页
#19 13:50:04 开始读取页面:http://www.55188.com/thread-8327665-2-1.html
#19 13:50:08 已经取得页面信息
#19 13:50:09 获取到20个子贴
#19 13:50:09 当前为第2页
#19 13:50:09 找到下一页
#19 13:50:09 开始读取页面:http://www.55188.com/thread-8327665-3-1.html
#19 13:50:12 已经取得页面信息
#19 13:50:13 获取到20个子贴
#19 13:50:13 当前为第3页
#19 13:50:13 找到下一页
#19 13:50:13 开始读取页面:http://www.55188.com/thread-8327665-4-1.html
#19 13:50:17 已经取得页面信息
#19 13:50:17 获取到20个子贴
#19 13:50:17 当前为第4页
#19 13:50:17 找到下一页
#19 13:50:17 开始读取页面:http://www.55188.com/thread-8327665-5-1.html
#19 13:50:20 已经取得页面信息
#19 13:50:20 获取到0个子贴
#19 13:50:20 没有下一页了,小爬读取工作结束
#19 13:50:20 小爬准备向文件存入80条记录
#19 13:50:21 小爬#19工作完成

小爬ID:47
小爬名: 股市动能结构力学，横空出世！！！
小爬战斗和生活的地方:http://www.55188.com/thread-5857146-1-1.html
#47 13:49:55 开始读取页面:http://www.55188.com/thread-5857146-1-1.html
#47 13:50:04 已经取得页面信息
#47 13:50:04 获取到20个子贴
#47 13:50:04 当前为第1页
#47 13:50:04 找到下一页
#47 13:50:04 开始读取页面:http://www.55188.com/thread-5857146-2-1.html
#47 13:50:10 已经取得页面信息
#47 13:50:10 获取到20个子贴
#47 13:50:10 当前为第2页
#47 13:50:10 找到下一页
#47 13:50:10 开始读取页面:http://www.55188.com/thread-5857146-3-1.html
#47 13:50:15 已经取得页面信息
#47 13:50:15 获取到20个子贴
#47 13:50:15 当前为第3页
#47 13:50:15 找到下一页
#47 13:50:15 开始读取页面:http://www.55188.com/thread-5857146-4-1.html
#47 13:50:17 已经取得页面信息
#47 13:50:17 获取到20个子贴
#47 13:50:17 当前为第4页
#47 13:50:17 找到下一页
#47 13:50:17 开始读取页面:http://www.55188.com/thread-5857146-5-1.html
#47 13:50:21 已经取得页面信息
#47 13:50:21 获取到20个子贴
#47 13:50:21 当前为第5页
#47 13:50:21 找到下一页
#47 13:50:21 开始读取页面:http://www.55188.com/thread-5857146-6-1.html
#47 13:50:22 已经取得页面信息
#47 13:50:22 获取到0个子贴
#47 13:50:22 没有下一页了,小爬读取工作结束
#47 13:50:22 小爬准备向文件存入100条记录
#47 13:50:22 小爬#47工作完成

小爬ID:18
小爬名: 新手的成长
小爬战斗和生活的地方:http://www.55188.com/thread-7987924-1-1.html
#18 13:49:55 开始读取页面:http://www.55188.com/thread-7987924-1-1.html
#18 13:50:05 已经取得页面信息
#18 13:50:06 获取到20个子贴
#18 13:50:06 当前为第1页
#18 13:50:06 找到下一页
#18 13:50:06 开始读取页面:http://www.55188.com/thread-7987924-2-1.html
#18 13:50:11 已经取得页面信息
#18 13:50:11 获取到20个子贴
#18 13:50:11 当前为第2页
#18 13:50:11 找到下一页
#18 13:50:11 开始读取页面:http://www.55188.com/thread-7987924-3-1.html
#18 13:50:15 已经取得页面信息
#18 13:50:15 获取到20个子贴
#18 13:50:15 当前为第3页
#18 13:50:15 找到下一页
#18 13:50:15 开始读取页面:http://www.55188.com/thread-7987924-4-1.html
#18 13:50:19 已经取得页面信息
#18 13:50:19 获取到20个子贴
#18 13:50:19 当前为第4页
#18 13:50:19 找到下一页
#18 13:50:19 开始读取页面:http://www.55188.com/thread-7987924-5-1.html
#18 13:50:21 已经取得页面信息
#18 13:50:21 获取到0个子贴
#18 13:50:21 没有下一页了,小爬读取工作结束
#18 13:50:21 小爬准备向文件存入80条记录
#18 13:50:21 小爬#18工作完成

----共有210个小爬 ,已有48个(22.86%)的小爬完成任务

小爬ID:1
小爬名: 它，最有可能成为下一个贵州燃气！
小爬战斗和生活的地方:http://www.55188.com/thread-8205979-1-1.html
#1 13:49:55 开始读取页面:http://www.55188.com/thread-8205979-1-1.html
#1 13:50:06 已经取得页面信息
#1 13:50:07 获取到20个子贴
#1 13:50:07 当前为第1页
#1 13:50:07 找到下一页
#1 13:50:07 开始读取页面:http://www.55188.com/thread-8205979-2-1.html
#1 13:50:11 已经取得页面信息
#1 13:50:11 获取到20个子贴
#1 13:50:11 当前为第2页
#1 13:50:11 找到下一页
#1 13:50:11 开始读取页面:http://www.55188.com/thread-8205979-3-1.html
#1 13:50:15 已经取得页面信息
#1 13:50:16 获取到20个子贴
#1 13:50:16 当前为第3页
#1 13:50:16 找到下一页
#1 13:50:16 开始读取页面:http://www.55188.com/thread-8205979-4-1.html
#1 13:50:19 已经取得页面信息
#1 13:50:19 获取到20个子贴
#1 13:50:19 当前为第4页
#1 13:50:19 找到下一页
#1 13:50:19 开始读取页面:http://www.55188.com/thread-8205979-5-1.html
#1 13:50:21 已经取得页面信息
#1 13:50:21 获取到0个子贴
#1 13:50:21 没有下一页了,小爬读取工作结束
#1 13:50:21 小爬准备向文件存入80条记录
#1 13:50:21 小爬#1工作完成
----共有210个小爬 ,已有12个(5.71%)的小爬完成任务

小爬ID:42
小爬名: 即时亮单实盘贴，兼议年化6%-9%的长线理财投资
小爬战斗和生活的地方:http://www.55188.com/thread-7580455-1-1.html
#42 13:49:55 开始读取页面:http://www.55188.com/thread-7580455-1-1.html
#42 13:50:04 已经取得页面信息
#42 13:50:05 获取到20个子贴
#42 13:50:06 当前为第1页
#42 13:50:06 找到下一页
#42 13:50:06 开始读取页面:http://www.55188.com/thread-7580455-2-1.html
#42 13:50:10 已经取得页面信息
#42 13:50:10 获取到20个子贴
#42 13:50:10 当前为第2页
#42 13:50:10 找到下一页
#42 13:50:10 开始读取页面:http://www.55188.com/thread-7580455-3-1.html
#42 13:50:15 已经取得页面信息
#42 13:50:15 获取到20个子贴
#42 13:50:16 当前为第3页
#42 13:50:16 找到下一页
#42 13:50:16 开始读取页面:http://www.55188.com/thread-7580455-4-1.html
#42 13:50:20 已经取得页面信息
#42 13:50:20 获取到20个子贴
#42 13:50:20 当前为第4页
#42 13:50:20 找到下一页
#42 13:50:20 开始读取页面:http://www.55188.com/thread-7580455-5-1.html
#42 13:50:21 已经取得页面信息
#42 13:50:21 获取到0个子贴
#42 13:50:21 没有下一页了,小爬读取工作结束
#42 13:50:21 小爬准备向文件存入80条记录
#42 13:50:22 小爬#42工作完成

----共有210个小爬 ,已有69个(32.86%)的小爬完成任务
----共有210个小爬 ,已有53个(25.24%)的小爬完成任务
----共有210个小爬 ,已有55个(26.19%)的小爬完成任务
----共有210个小爬 ,已有56个(26.67%)的小爬完成任务
----共有210个小爬 ,已有19个(9.05%)的小爬完成任务

----共有210个小爬 ,已有57个(27.14%)的小爬完成任务
----共有210个小爬 ,已有58个(27.62%)的小爬完成任务
----共有210个小爬 ,已有59个(28.1%)的小爬完成任务
----共有210个小爬 ,已有60个(28.57%)的小爬完成任务

----共有210个小爬 ,已有61个(29.05%)的小爬完成任务
----共有210个小爬 ,已有62个(29.52%)的小爬完成任务

----共有210个小爬 ,已有63个(30.0%)的小爬完成任务
----共有210个小爬 ,已有64个(30.48%)的小爬完成任务
----共有210个小爬 ,已有65个(30.95%)的小爬完成任务
----共有210个小爬 ,已有45个(21.43%)的小爬完成任务
----共有210个小爬 ,已有46个(21.9%)的小爬完成任务

----共有210个小爬 ,已有67个(31.9%)的小爬完成任务

小爬ID:14
小爬名: 困惑+前进：追寻成长之路（2018年之桃花庵歌）
小爬战斗和生活的地方:http://www.55188.com/thread-8234356-1-1.html
#14 13:49:55 开始读取页面:http://www.55188.com/thread-8234356-1-1.html
#14 13:50:04 已经取得页面信息
#14 13:50:05 获取到20个子贴
#14 13:50:05 当前为第1页
#14 13:50:05 找到下一页
#14 13:50:05 开始读取页面:http://www.55188.com/thread-8234356-2-1.html
#14 13:50:10 已经取得页面信息
#14 13:50:10 获取到20个子贴
#14 13:50:11 当前为第2页
#14 13:50:11 找到下一页
#14 13:50:11 开始读取页面:http://www.55188.com/thread-8234356-3-1.html
#14 13:50:15 已经取得页面信息
#14 13:50:15 获取到20个子贴
#14 13:50:15 当前为第3页
#14 13:50:15 找到下一页
#14 13:50:15 开始读取页面:http://www.55188.com/thread-8234356-4-1.html
#14 13:50:19 已经取得页面信息
#14 13:50:19 获取到20个子贴
#14 13:50:19 当前为第4页
#14 13:50:19 找到下一页
#14 13:50:19 开始读取页面:http://www.55188.com/thread-8234356-5-1.html
#14 13:50:21 已经取得页面信息
#14 13:50:21 获取到0个子贴
#14 13:50:21 没有下一页了,小爬读取工作结束
#14 13:50:21 小爬准备向文件存入80条记录
#14 13:50:21 小爬#14工作完成

小爬ID:99
小爬名: 财联社4月17日早报（周二）
小爬战斗和生活的地方:http://www.55188.com/thread-8339356-1-2.html
#99 13:49:55 开始读取页面:http://www.55188.com/thread-8339356-1-2.html
#99 13:50:03 已经取得页面信息
#99 13:50:04 获取到11个子贴
#99 13:50:04 没有下一页了,小爬读取工作结束
#99 13:50:04 小爬准备向文件存入11条记录
#99 13:50:07 小爬#99工作完成
----共有210个小爬 ,已有49个(23.33%)的小爬完成任务
----共有210个小爬 ,已有50个(23.81%)的小爬完成任务
----共有210个小爬 ,已有52个(24.76%)的小爬完成任务

小爬ID:40
小爬名: 板哥来了！---板哥专贴
小爬战斗和生活的地方:http://www.55188.com/thread-8046225-1-1.html
#40 13:49:55 开始读取页面:http://www.55188.com/thread-8046225-1-1.html
#40 13:50:04 已经取得页面信息
#40 13:50:04 获取到20个子贴
#40 13:50:05 当前为第1页
#40 13:50:05 找到下一页
#40 13:50:05 开始读取页面:http://www.55188.com/thread-8046225-2-1.html
#40 13:50:07 已经取得页面信息
#40 13:50:07 获取到20个子贴
#40 13:50:07 当前为第2页
#40 13:50:07 找到下一页
#40 13:50:07 开始读取页面:http://www.55188.com/thread-8046225-3-1.html
#40 13:50:11 已经取得页面信息
#40 13:50:12 获取到20个子贴
#40 13:50:12 当前为第3页
#40 13:50:12 找到下一页
#40 13:50:12 开始读取页面:http://www.55188.com/thread-8046225-4-1.html
#40 13:50:16 已经取得页面信息
#40 13:50:16 获取到20个子贴
#40 13:50:16 当前为第4页
#40 13:50:16 找到下一页
#40 13:50:16 开始读取页面:http://www.55188.com/thread-8046225-5-1.html
#40 13:50:20 已经取得页面信息
#40 13:50:21 获取到20个子贴
#40 13:50:21 当前为第5页
#40 13:50:21 找到下一页
#40 13:50:21 开始读取页面:http://www.55188.com/thread-8046225-6-1.html
#40 13:50:21 已经取得页面信息
#40 13:50:21 获取到0个子贴
#40 13:50:21 没有下一页了,小爬读取工作结束
#40 13:50:21 小爬准备向文件存入100条记录
#40 13:50:22 小爬#40工作完成

小爬ID:61
小爬名: 看看股池出票300302同有科技
小爬战斗和生活的地方:http://www.55188.com/thread-8339552-1-1.html
#61 13:49:55 开始读取页面:http://www.55188.com/thread-8339552-1-1.html
#61 13:50:01 已经取得页面信息
#61 13:50:01 获取到4个子贴
#61 13:50:01 没有下一页了,小爬读取工作结束
#61 13:50:01 小爬准备向文件存入4条记录
#61 13:50:04 小爬#61工作完成

----共有210个小爬 ,已有70个(33.33%)的小爬完成任务
----共有210个小爬 ,已有37个(17.62%)的小爬完成任务
----共有210个小爬 ,已有39个(18.57%)的小爬完成任务
----共有210个小爬 ,已有71个(33.81%)的小爬完成任务
----共有210个小爬 ,已有72个(34.29%)的小爬完成任务

小爬ID:201
小爬名: 苗苗短线宝箱一八年【元月第四周】
小爬战斗和生活的地方:http://www.55188.com/thread-8251326-1-3.html
#201 13:49:55 开始读取页面:http://www.55188.com/thread-8251326-1-3.html
#201 13:50:05 已经取得页面信息
#201 13:50:05 获取到20个子贴
#201 13:50:05 当前为第1页
#201 13:50:05 找到下一页
#201 13:50:05 开始读取页面:http://www.55188.com/thread-8251326-2-3.html
#201 13:50:08 已经取得页面信息
#201 13:50:09 获取到20个子贴
#201 13:50:09 当前为第2页
#201 13:50:09 找到下一页
#201 13:50:09 开始读取页面:http://www.55188.com/thread-8251326-3-3.html
#201 13:50:12 已经取得页面信息
#201 13:50:12 获取到20个子贴
#201 13:50:12 当前为第3页
#201 13:50:12 找到下一页
#201 13:50:12 开始读取页面:http://www.55188.com/thread-8251326-4-3.html
#201 13:50:17 已经取得页面信息
#201 13:50:17 获取到20个子贴
#201 13:50:17 当前为第4页
#201 13:50:17 找到下一页
#201 13:50:17 开始读取页面:http://www.55188.com/thread-8251326-5-3.html
#201 13:50:21 已经取得页面信息
#201 13:50:21 获取到20个子贴
#201 13:50:21 当前为第5页
#201 13:50:21 找到下一页
#201 13:50:21 开始读取页面:http://www.55188.com/thread-8251326-6-3.html
#201 13:50:22 已经取得页面信息
#201 13:50:22 获取到0个子贴
#201 13:50:22 没有下一页了,小爬读取工作结束
#201 13:50:22 小爬准备向文件存入100条记录
#201 13:50:22 小爬#201工作完成
----共有210个小爬 ,已有73个(34.76%)的小爬完成任务
----共有210个小爬 ,已有44个(20.95%)的小爬完成任务

----共有210个小爬 ,已有66个(31.43%)的小爬完成任务
----共有210个小爬 ,已有74个(35.24%)的小爬完成任务
----共有210个小爬 ,已有75个(35.71%)的小爬完成任务
----共有210个小爬 ,已有68个(32.38%)的小爬完成任务

小爬ID:36
小爬名: 未来牛市会以什么方式运行？
小爬战斗和生活的地方:http://www.55188.com/thread-8158615-1-1.html
#36 13:49:55 开始读取页面:http://www.55188.com/thread-8158615-1-1.html
#36 13:50:06 已经取得页面信息
#36 13:50:07 获取到20个子贴
#36 13:50:07 当前为第1页
#36 13:50:07 找到下一页
#36 13:50:07 开始读取页面:http://www.55188.com/thread-8158615-2-1.html
#36 13:50:11 已经取得页面信息
#36 13:50:11 获取到20个子贴
#36 13:50:11 当前为第2页
#36 13:50:11 找到下一页
#36 13:50:11 开始读取页面:http://www.55188.com/thread-8158615-3-1.html
#36 13:50:16 已经取得页面信息
#36 13:50:16 获取到20个子贴
#36 13:50:16 当前为第3页
#36 13:50:16 找到下一页
#36 13:50:16 开始读取页面:http://www.55188.com/thread-8158615-4-1.html
#36 13:50:20 已经取得页面信息
#36 13:50:20 获取到20个子贴
#36 13:50:20 当前为第4页
#36 13:50:20 找到下一页
#36 13:50:20 开始读取页面:http://www.55188.com/thread-8158615-5-1.html
#36 13:50:21 已经取得页面信息
#36 13:50:21 获取到0个子贴
#36 13:50:21 没有下一页了,小爬读取工作结束
#36 13:50:21 小爬准备向文件存入80条记录
#36 13:50:22 小爬#36工作完成

----共有210个小爬 ,已有76个(36.19%)的小爬完成任务
----共有210个小爬 ,已有77个(36.67%)的小爬完成任务

----共有210个小爬 ,已有78个(37.14%)的小爬完成任务
----共有210个小爬 ,已有38个(18.1%)的小爬完成任务
----共有210个小爬 ,已有40个(19.05%)的小爬完成任务
----共有210个小爬 ,已有43个(20.48%)的小爬完成任务

----共有210个小爬 ,已有47个(22.38%)的小爬完成任务

----共有210个小爬 ,已有51个(24.29%)的小爬完成任务

小爬ID:58
小爬名: 《大鱼冲浪》——大鱼自我检验、自娱自乐的股票池
小爬战斗和生活的地方:http://www.55188.com/thread-8319657-1-1.html
#58 13:49:55 开始读取页面:http://www.55188.com/thread-8319657-1-1.html
#58 13:50:07 已经取得页面信息
#58 13:50:07 获取到20个子贴
#58 13:50:07 当前为第1页
#58 13:50:07 找到下一页
#58 13:50:07 开始读取页面:http://www.55188.com/thread-8319657-2-1.html
#58 13:50:11 已经取得页面信息
#58 13:50:11 获取到20个子贴
#58 13:50:11 当前为第2页
#58 13:50:11 找到下一页
#58 13:50:11 开始读取页面:http://www.55188.com/thread-8319657-3-1.html
#58 13:50:16 已经取得页面信息
#58 13:50:16 获取到20个子贴
#58 13:50:16 当前为第3页
#58 13:50:16 找到下一页
#58 13:50:16 开始读取页面:http://www.55188.com/thread-8319657-4-1.html
#58 13:50:21 已经取得页面信息
#58 13:50:21 获取到20个子贴
#58 13:50:21 当前为第4页
#58 13:50:21 找到下一页
#58 13:50:21 开始读取页面:http://www.55188.com/thread-8319657-5-1.html
#58 13:50:21 已经取得页面信息
#58 13:50:21 获取到0个子贴
#58 13:50:21 没有下一页了,小爬读取工作结束
#58 13:50:21 小爬准备向文件存入80条记录
#58 13:50:22 小爬#58工作完成
----共有210个小爬 ,已有54个(25.71%)的小爬完成任务

----共有210个小爬 ,已有36个(17.14%)的小爬完成任务

----共有210个小爬 ,已有83个(39.52%)的小爬完成任务
----共有210个小爬 ,已有84个(40.0%)的小爬完成任务

----共有210个小爬 ,已有80个(38.1%)的小爬完成任务

----共有210个小爬 ,已有82个(39.05%)的小爬完成任务

----共有210个小爬 ,已有88个(41.9%)的小爬完成任务
----共有210个小爬 ,已有79个(37.62%)的小爬完成任务
----共有210个小爬 ,已有85个(40.48%)的小爬完成任务

----共有210个小爬 ,已有90个(42.86%)的小爬完成任务
----共有210个小爬 ,已有91个(43.33%)的小爬完成任务

----共有210个小爬 ,已有81个(38.57%)的小爬完成任务
----共有210个小爬 ,已有86个(40.95%)的小爬完成任务
----共有210个小爬 ,已有92个(43.81%)的小爬完成任务
----共有210个小爬 ,已有95个(45.24%)的小爬完成任务
----共有210个小爬 ,已有96个(45.71%)的小爬完成任务
----共有210个小爬 ,已有87个(41.43%)的小爬完成任务
----共有210个小爬 ,已有89个(42.38%)的小爬完成任务
----共有210个小爬 ,已有94个(44.76%)的小爬完成任务
----共有210个小爬 ,已有93个(44.29%)的小爬完成任务

小爬ID:2
小爬名: 2018年4月17日实时看盘交流
小爬战斗和生活的地方:http://www.55188.com/thread-8338581-1-1.html
#2 13:49:55 开始读取页面:http://www.55188.com/thread-8338581-1-1.html
#2 13:50:04 已经取得页面信息
#2 13:50:06 获取到20个子贴
#2 13:50:07 当前为第1页
#2 13:50:07 找到下一页
#2 13:50:07 开始读取页面:http://www.55188.com/thread-8338581-2-1.html
#2 13:50:11 已经取得页面信息
#2 13:50:11 获取到20个子贴
#2 13:50:11 当前为第2页
#2 13:50:11 找到下一页
#2 13:50:11 开始读取页面:http://www.55188.com/thread-8338581-3-1.html
#2 13:50:16 已经取得页面信息
#2 13:50:17 获取到20个子贴
#2 13:50:17 当前为第3页
#2 13:50:17 找到下一页
#2 13:50:17 开始读取页面:http://www.55188.com/thread-8338581-4-1.html
#2 13:50:21 已经取得页面信息
#2 13:50:21 获取到20个子贴
#2 13:50:21 当前为第4页
#2 13:50:21 找到下一页
#2 13:50:21 开始读取页面:http://www.55188.com/thread-8338581-5-1.html
#2 13:50:22 已经取得页面信息
#2 13:50:22 获取到0个子贴
#2 13:50:22 没有下一页了,小爬读取工作结束
#2 13:50:22 小爬准备向文件存入80条记录
#2 13:50:22 小爬#2工作完成

----共有210个小爬 ,已有97个(46.19%)的小爬完成任务

小爬ID:29
小爬名: 鲁L蒲公英◆股票期货实战操盘日志 ～【荣誉不代表未来，实战在每天打响！】
小爬战斗和生活的地方:http://www.55188.com/thread-7647942-1-1.html
#29 13:49:55 开始读取页面:http://www.55188.com/thread-7647942-1-1.html
#29 13:50:07 已经取得页面信息
#29 13:50:07 获取到20个子贴
#29 13:50:07 当前为第1页
#29 13:50:07 找到下一页
#29 13:50:07 开始读取页面:http://www.55188.com/thread-7647942-2-1.html
#29 13:50:12 已经取得页面信息
#29 13:50:12 获取到20个子贴
#29 13:50:12 当前为第2页
#29 13:50:12 找到下一页
#29 13:50:12 开始读取页面:http://www.55188.com/thread-7647942-3-1.html
#29 13:50:16 已经取得页面信息
#29 13:50:16 获取到20个子贴
#29 13:50:16 当前为第3页
#29 13:50:16 找到下一页
#29 13:50:16 开始读取页面:http://www.55188.com/thread-7647942-4-1.html
#29 13:50:21 已经取得页面信息
#29 13:50:21 获取到20个子贴
#29 13:50:21 当前为第4页
#29 13:50:21 找到下一页
#29 13:50:21 开始读取页面:http://www.55188.com/thread-7647942-5-1.html
#29 13:50:22 已经取得页面信息
#29 13:50:22 获取到0个子贴
#29 13:50:22 没有下一页了,小爬读取工作结束
#29 13:50:22 小爬准备向文件存入80条记录
#29 13:50:22 小爬#29工作完成

----共有210个小爬 ,已有98个(46.67%)的小爬完成任务

小爬ID:65
小爬名: 九龙峰老师公式优化组合，成功率94%，只为理想赚人气 （公式已发放）
小爬战斗和生活的地方:http://www.55188.com/thread-4131507-1-1.html
#65 13:49:55 开始读取页面:http://www.55188.com/thread-4131507-1-1.html
#65 13:50:05 已经取得页面信息
#65 13:50:06 获取到20个子贴
#65 13:50:06 当前为第1页
#65 13:50:06 找到下一页
#65 13:50:06 开始读取页面:http://www.55188.com/thread-4131507-2-1.html
#65 13:50:09 已经取得页面信息
#65 13:50:09 获取到20个子贴
#65 13:50:10 当前为第2页
#65 13:50:10 找到下一页
#65 13:50:10 开始读取页面:http://www.55188.com/thread-4131507-3-1.html
#65 13:50:13 已经取得页面信息
#65 13:50:13 获取到20个子贴
#65 13:50:14 当前为第3页
#65 13:50:14 找到下一页
#65 13:50:14 开始读取页面:http://www.55188.com/thread-4131507-4-1.html
#65 13:50:17 已经取得页面信息
#65 13:50:17 获取到20个子贴
#65 13:50:17 当前为第4页
#65 13:50:17 找到下一页
#65 13:50:17 开始读取页面:http://www.55188.com/thread-4131507-5-1.html
#65 13:50:21 已经取得页面信息
#65 13:50:21 获取到20个子贴
#65 13:50:21 当前为第5页
#65 13:50:21 找到下一页
#65 13:50:21 开始读取页面:http://www.55188.com/thread-4131507-6-1.html
#65 13:50:22 已经取得页面信息
#65 13:50:22 获取到0个子贴
#65 13:50:22 没有下一页了,小爬读取工作结束
#65 13:50:22 小爬准备向文件存入100条记录
#65 13:50:22 小爬#65工作完成

----共有210个小爬 ,已有99个(47.14%)的小爬完成任务

小爬ID:15
小爬名: 超短实盘实战！第一期（2018-4-9）
小爬战斗和生活的地方:http://www.55188.com/thread-8328409-1-1.html
#15 13:49:55 开始读取页面:http://www.55188.com/thread-8328409-1-1.html
#15 13:50:05 已经取得页面信息
#15 13:50:07 获取到20个子贴
#15 13:50:07 当前为第1页
#15 13:50:07 找到下一页
#15 13:50:07 开始读取页面:http://www.55188.com/thread-8328409-2-1.html
#15 13:50:10 已经取得页面信息
#15 13:50:11 获取到20个子贴
#15 13:50:11 当前为第2页
#15 13:50:11 找到下一页
#15 13:50:11 开始读取页面:http://www.55188.com/thread-8328409-3-1.html
#15 13:50:14 已经取得页面信息
#15 13:50:14 获取到20个子贴
#15 13:50:15 当前为第3页
#15 13:50:15 找到下一页
#15 13:50:15 开始读取页面:http://www.55188.com/thread-8328409-4-1.html
#15 13:50:18 已经取得页面信息
#15 13:50:18 获取到20个子贴
#15 13:50:18 当前为第4页
#15 13:50:18 找到下一页
#15 13:50:18 开始读取页面:http://www.55188.com/thread-8328409-5-1.html
#15 13:50:22 已经取得页面信息
#15 13:50:22 获取到20个子贴
#15 13:50:22 当前为第5页
#15 13:50:22 找到下一页
#15 13:50:22 开始读取页面:http://www.55188.com/thread-8328409-6-1.html
#15 13:50:22 已经取得页面信息
#15 13:50:22 获取到0个子贴
#15 13:50:22 没有下一页了,小爬读取工作结束
#15 13:50:22 小爬准备向文件存入100条记录
#15 13:50:22 小爬#15工作完成

----共有210个小爬 ,已有100个(47.62%)的小爬完成任务

小爬ID:6
小爬名: 寻找最佳的获利模式
小爬战斗和生活的地方:http://www.55188.com/thread-8302607-1-1.html
#6 13:49:55 开始读取页面:http://www.55188.com/thread-8302607-1-1.html
#6 13:50:02 已经取得页面信息
#6 13:50:02 获取到20个子贴
#6 13:50:04 当前为第1页
#6 13:50:04 找到下一页
#6 13:50:04 开始读取页面:http://www.55188.com/thread-8302607-2-1.html
#6 13:50:11 已经取得页面信息
#6 13:50:11 获取到20个子贴
#6 13:50:11 当前为第2页
#6 13:50:11 找到下一页
#6 13:50:11 开始读取页面:http://www.55188.com/thread-8302607-3-1.html
#6 13:50:15 已经取得页面信息
#6 13:50:15 获取到20个子贴
#6 13:50:15 当前为第3页
#6 13:50:15 找到下一页
#6 13:50:15 开始读取页面:http://www.55188.com/thread-8302607-4-1.html
#6 13:50:19 已经取得页面信息
#6 13:50:19 获取到20个子贴
#6 13:50:19 当前为第4页
#6 13:50:19 找到下一页
#6 13:50:19 开始读取页面:http://www.55188.com/thread-8302607-5-1.html
#6 13:50:22 已经取得页面信息
#6 13:50:22 获取到20个子贴
#6 13:50:22 当前为第5页
#6 13:50:22 找到下一页
#6 13:50:22 开始读取页面:http://www.55188.com/thread-8302607-6-1.html
#6 13:50:22 已经取得页面信息
#6 13:50:22 获取到0个子贴
#6 13:50:22 没有下一页了,小爬读取工作结束
#6 13:50:22 小爬准备向文件存入100条记录
#6 13:50:22 小爬#6工作完成

----共有210个小爬 ,已有101个(48.1%)的小爬完成任务

小爬ID:11
小爬名: 马到来了 继续开车（一）
小爬战斗和生活的地方:http://www.55188.com/thread-8302410-1-1.html
#11 13:49:55 开始读取页面:http://www.55188.com/thread-8302410-1-1.html
#11 13:50:05 已经取得页面信息
#11 13:50:05 获取到20个子贴
#11 13:50:05 当前为第1页
#11 13:50:05 找到下一页
#11 13:50:05 开始读取页面:http://www.55188.com/thread-8302410-2-1.html
#11 13:50:08 已经取得页面信息
#11 13:50:10 获取到20个子贴
#11 13:50:10 当前为第2页
#11 13:50:10 找到下一页
#11 13:50:10 开始读取页面:http://www.55188.com/thread-8302410-3-1.html
#11 13:50:14 已经取得页面信息
#11 13:50:14 获取到20个子贴
#11 13:50:14 当前为第3页
#11 13:50:14 找到下一页
#11 13:50:14 开始读取页面:http://www.55188.com/thread-8302410-4-1.html
#11 13:50:19 已经取得页面信息
#11 13:50:19 获取到20个子贴
#11 13:50:19 当前为第4页
#11 13:50:19 找到下一页
#11 13:50:19 开始读取页面:http://www.55188.com/thread-8302410-5-1.html
#11 13:50:22 已经取得页面信息
#11 13:50:22 获取到20个子贴
#11 13:50:22 当前为第5页
#11 13:50:22 找到下一页
#11 13:50:22 开始读取页面:http://www.55188.com/thread-8302410-6-1.html
#11 13:50:22 已经取得页面信息
#11 13:50:22 获取到0个子贴
#11 13:50:22 没有下一页了,小爬读取工作结束
#11 13:50:22 小爬准备向文件存入100条记录
#11 13:50:22 小爬#11工作完成

----共有210个小爬 ,已有102个(48.57%)的小爬完成任务

insertDB.py代码：

# 读取理想论坛爬虫1.05生成的数据，然后写入DB
import pymysql
import time
import datetime
import os
import json

# 数据库插值
def insertDB(sqls):
    conn=pymysql.connect(host=',db='test',charset='utf8')

    sum=0;# 插入成功总数

    for sql in sqls:
        count=conn.query(sql)    #单条是否成功    

        if count==0:
            print(sql+'插入记录失败');    

        sum+=count

    conn.commit()
    conn.close()

    return sum

# 入口函数
def main(folder):
    allinfos=[]
    for filename in os.listdir(folder):
        filePathname=folder+"/"+filename

        with open(filePathname,'r',encoding='utf-8') as fObj:
            infos=json.load(fObj)
            allinfos.extend(infos)

    sqls=[]
    for info in allinfos:
        sql="insert into test.topic8(floor,author,tdate,ttime,addtime,url,title) values ('"+info['楼层']+"','"+info['作者']+"','"+info['日期']+"','"+info['时间']+"',"+"now(),'"+info['url']+"','"+info['title']+"' "+" )"
        sqls.append(sql)

    print("将向数据库插入"+str(len(sqls))+"条记录")
    retval=insertDB(sqls)
    print("已向数据库插入"+str(retval)+"条记录")

# 开始
main("./13_40_14")

insertDB.py代码的输出：

C:\Users\horn1\Desktop\python\25>python insertDB.py
将向数据库插入4171条记录
已向数据库插入4171条记录

2018年4月17日14点06分

巴特西

【pyhon】理想论坛爬虫1.05版，将读取和写DB分离成两个文件

最新文章

热门文章