diff --git a/scripts/aabook_list.py b/scripts/aabook_list.py new file mode 100644 index 0000000..419e445 --- /dev/null +++ b/scripts/aabook_list.py @@ -0,0 +1,119 @@ + +# 定义小说映射 +novel_map_new = { + 269: '雪域往事', + 156643: '都市偷心龙爪手', + 85227: '明星潜规则之皇', + 88155: '娇娇师娘(与爱同行)', + 12829: '女人四十一枝花', + 116756: '风雨里的罂粟花', + 320500: '豪门浪荡史', + 329495: '女市长迷途沉沦:权斗', + 159927: '豪乳老师刘艳', + 308650: '山里的女人', + 163322: '翁媳乱情', + 103990: '欲望之门', + 59793: '红尘都市', + 231646: '那山,那人,那情', + 61336: '妻欲:欲望迷城(H 版)', + 104929: '都市奇缘', + 239682: '叶辰风流', +} +# 定义小说映射 +novel_map = { +} + + +novel_map_done = { + 261481: '我本风流', + 171107: '爱与欲的升华', + 171029: '亲爱的不要离开我', + 5049: '红楼春梦', + 5479: '倚天屠龙记(成人版)', + 71468: '襄阳战记', + 29242: '仙剑淫女传', + 237271: '新倚天行', + 231192: '神雕侠绿', + 31882: '新编蜗居H版', + 230877: '黄蓉的改变', + 187150: '黄蓉襄阳淫史', + 316162: '洛玉衡的堕落(大奉打更人H)', + 7678: '射雕别记(黄蓉的故事)', + 185302: '天地之间(精修版)', + 54344: '情欲两极 (情和欲的两极)', + 2072: '父女情', + 214610: '大黄的故事', + 2211: '隔墙有眼', + 221453: '当维修工的日子', + 153792: '荒村红杏', + 186052: '食色男女', + 68: '童年+静静的辽河', + 322665: '乡村活寡美人沟', + 160528: '我和我的母亲(改写寄印传奇)', + 23228: '风流人生', + 181617: '红楼遗秘', + 219454: '寻秦记(全本改编版)', + 49051: '情色搜神记', + 5860: '天若有情(一家之主)', + 161497: '步步高升', + 51870: '母爱的光辉', + 258388: '露从今夜白', + 202281: '异地夫妻', + 1960: '北方的天空', + 164544: '少妇的悲哀', + 158872: '我的极品老婆', + 3975: '出轨的诱惑', + 26442: '爱满江城', + 7776: '小城乱事', + 179710: '淫男乱女(小雄性事)', + 79161: '情迷芦苇荡:山乡艳事', + 99885: '江南第一风流才子(唐伯虎淫传)', + 54426: '水浒潘金莲', + 327794: '枕瑶钗([清]东涧老人)', + 161243: '我的青年岁月', + 137885: '破碎的命运', + 159266: '我的好儿媳(极品好儿媳)', + 166534: '女友与睡在隔壁的兄弟', + 40646: '女子医院的男医生', + 61535: '魅骨少妇(苏樱的暧昧情事)', + 13166: '青春性事:一个八零后的情欲往事', + 21563: '幸福的借种经历', + 51916: '乱情家庭', + 26787: '少妇人妻的欲望', + 59610: '金瓶梅(崇祯原本)', + 322155: '少年阿宾', + 89532: '宋家湾那些事儿', + 297078: '熟透了的村妇', + 350314: '多情村妇', + 53823: '蛮荒小村的风流韵事', + 82570: '潭河峪的那些事儿', + 72429: '杨家将外传_薛家将秘史', + 410: '农村的妞', + 37443: '山里人家', + 28478: '追忆平凡年代的全家故事', + 199014: '风流岁月', + 59737: '丝之恋-我与一对母女的故事', + 14733: '乡村乱情|奇思妙想', + 43: '空空幻', + 3858: '绿头巾', + 13483: '乡野欲潮:绝色村嫂的泛滥春情', + 67423: '欲海沉沦:一个换妻经历者的良心忏悔', + 51776: '我成了父亲与妻子的月老', + 54192: '郝叔和他的女人', + 68339: '和护士后妈生活的日子', + 15168: '妻子的会客厅:高官的秘密', + 7064: '男欢女爱', + 50555: '人生得意须纵欢', + 67114: '潜色官迹:小所长孽欲涅盘', + 1487: '神雕风流', + 4951: '合租情缘(出租屋里的真实换妻记录)', + 4701: '艰难的借种经历', + 162845: '人妻牌坊——我和人妻的故事', + 183692: '幸福家庭背后的隐私', + 203144: '我的校长生涯', + 140605: '东北大炕', + 24344: '淫乱一家亲(超级乱伦家庭)', + 25154: '全家人互爱共乐的日子', + 16941: '平凡的激情', + 70767: '合家欢', +} \ No newline at end of file diff --git a/scripts/config.py b/scripts/config.py new file mode 100644 index 0000000..27942b9 --- /dev/null +++ b/scripts/config.py @@ -0,0 +1,31 @@ +import logging +import os +import inspect +from datetime import datetime + +# MySQL 配置 +db_config = { + 'host': '172.18.0.3', + 'user': 'root', + 'password': 'mysqlpw', + 'database': 'stockdb' +} + +# 设置日志配置 +def setup_logging(log_filename=None): + # 如果未传入 log_filename,则使用当前脚本名称作为日志文件名 + if log_filename is None: + # 获取调用 setup_logging 的脚本文件名 + caller_frame = inspect.stack()[1] + caller_filename = os.path.splitext(os.path.basename(caller_frame.filename))[0] + + # 获取当前日期,格式为 yyyymmdd + current_date = datetime.now().strftime('%Y%m%d') + # 拼接 log 文件名,将日期加在扩展名前 + log_filename = f'./log/{caller_filename}_{current_date}.log' + + logging.basicConfig(level=logging.INFO, format='%(asctime)s %(levelname)s [%(filename)s:%(lineno)d] (%(funcName)s) - %(message)s', + handlers=[ + logging.FileHandler(log_filename), + logging.StreamHandler() + ]) \ No newline at end of file diff --git a/scripts/get_aabook.py b/scripts/get_aabook.py new file mode 100644 index 0000000..1ef5823 --- /dev/null +++ b/scripts/get_aabook.py @@ -0,0 +1,210 @@ +""" +Script Name: +Description: 获取 aabook.xyz 数据, prompt: + 我们需要访问 https://aabook.xyz/read-{chapid}.html 这个地址,并解析其中的元素,发起下载链接,格式化返回的数据,以下是需求详细描述: + chapid 参数,它代表的是小说编号,我们定义一个映射,比如 novel_map = {350316:'novel1', ...} 等等 + + 我们遍历 novel_map,对每一个key值,假设为 novel_id,传入上面的URL,组成一个访问地址,获取它的内容,它是一个HTML页面;把对应的 value 记为 novel_name;创建 {novel_name}.txt 文件; + 我们解析它的 body 中的