从学术项目到爬虫实践：MediaCrawler 部署与优化
2024-12-18 1.4k 字 5 分钟

从学术项目到爬虫实践：MediaCrawler 部署与优化

Why MediaCrawler大家好！又是我==，本人最近忙得要死，没有精力去撰写 AUTOGEN 的 blog 了，虽然我也很想哈：），奈何时间实在不允许，有空大伙自己学学吧。今天要介绍的是 MediaCrawler 项目！ 背景最近啊，我忙啥呢？只能说我在和 Prof. He 合作做一个学术项目，需要从小红书上获取大量公开数据。但你知道的，小红书的防爬机制那叫一个严！ 传统的爬虫方法，比如 requests、scrapy、selenium 等，根本吃不开。复杂的动态加载、加密参数让我摸爬滚打好一阵子。最终还有万能验证码劝退，简直是造孽。 最后，我选择了 MediaCr
用 TinyTroupe 构建《龙与地下城》全自动模拟器
2024-11-19 1.2k 字 5 分钟

用 TinyTroupe 构建《龙与地下城》全自动模拟器

最近哥们儿搞了个好玩的：用 TinyTroupe 做了个 D&D 模拟器！最近哥们儿在刷开源项目的时候，瞅见了一个叫 TinyTroupe 的玩意儿。这东西原本是个超正经的生产力工具，用来模拟带有个性化特征的多智能体行为。微软的官方文档还列了一堆“正经”用途，比如： 广告分析：用虚拟用户群评估广告效果，省钱！ 产品反馈：让“虚拟专家”帮你挑出文档里的问题。 数据生成：生成一堆合成数据喂给你的模型。 脑暴场景：虚拟用户群低成本完成头脑风暴。 一看就很严肃是不是？但我脑洞大开，觉得这玩意儿不就是一个超适合 RPG 模拟的工具吗！于是就搞了一个 D&D 风格的 全自动冒险模拟器，
Hello World
2024-11-16 75 字 1 分钟

Hello World

Welcome to Hexo! This is your very first post. Check documentation for more info. If you get any problems when using Hexo, you can find the answer in troubleshooting or you can ask me on GitHub. Quick StartCreate a new post1$ hexo new "My New Post" More info: Writing Run server1$ hexo ser
backtop