Skip to content

功能添加 优化#65

Open
RobotJohns wants to merge 2 commits intoJohnserf-Seed:mainfrom
RobotJohns:feature-db
Open

功能添加 优化#65
RobotJohns wants to merge 2 commits intoJohnserf-Seed:mainfrom
RobotJohns:feature-db

Conversation

@RobotJohns
Copy link

@RobotJohns RobotJohns commented Dec 7, 2021

1). 修改 路径为 './' 兼容 mac
2). 存储视频信息 描述,点赞,评论,以便 后期的数据二次加工
3). 优化以 视频描述作为 文件名称的时候 对于长文件名称以及 '\r\n' 非法进行处理
4). 添加GC
5). 空数据检测

一次性爬 2000+ 视频 不报异常

1). 修改 路径为 './'  兼容 mac
2). 存储视频信息 描述,点赞,评论,以便 后期的数据二次加工
3). 优化以 视频描述作为 文件名称的时候 对于长文件名称以及  '\r\n' 非法进行处理
4). 添加GC
优化  路径 兼容 ,mac
@mingtianshi
Copy link

还是不兼容mac的,没有创建目录

@mingtianshi
Copy link

你的TikTokMulti.py 中的 self.cf.set("save", "url", ".\Download\")导致的

@RobotJohns
Copy link
Author

额?不会吧...有没有打印出错误信息

@boluohong
Copy link

1). 修改 路径为 './' 兼容 mac 2). 存储视频信息 描述,点赞,评论,以便 后期的数据二次加工 3). 优化以 视频描述作为 文件名称的时候 对于长文件名称以及 '\r\n' 非法进行处理 4). 添加GC 5). 空数据检测

一次性爬 2000+ 视频 不报异常

这个PR解决了我一个issue中提到的拓展名异常问题
特来鸣谢!
#89

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

3 participants