1596941391qq/edge_source_skill
GitHub: 1596941391qq/edge_source_skill
AI驱动的信息源智能推荐工具,通过多维评分算法为OSINT研究、安全调查和对抗性SEO快速筛选高价值信息来源。
Stars: 0 | Forks: 0
# edge_source_skill
[](https://www.python.org/)
[](#数据来源)
[](#pipeline)
[](LICENSE)
**AI 驱动的来源智能推荐器** — 为前沿知识、对抗性 SEO 和 OSINT 研究寻找高深度的信息源。
## 功能简介
输入一个研究问题,即可获得一个经过评分和排序的信息源列表,包含阅读顺序和预期的知识价值。
```
python scripts/recommend_sources.py "I want adversarial SEO sources to understand edge mechanics"
```
输出:
- **查询标签** — 自动检测的主题集群
- **顶级来源** — 基于相关性 × 深度 × 可操作性 × 时效性 × 影响力进行评分
- **阅读顺序** — 快速执行 → 深度方法 → 对抗性反面案例
- **知识盲区** — 用于扩展覆盖范围的缺失来源类型
- **24小时实验** — 你今天就可以运行的一个可操作的测试
## Pipeline
这是 3 阶段内容智能 Pipeline 的**第 1 阶段**:
```
edge_source_skill ──→ EdgeKnowledge_Skill ──→ anything-to-md
(find sources) (crawl & analyze) (convert to MD)
```
| 阶段 | 仓库 | 功能 |
|---|---|---|
| 1 — 查找 | **edge_source_skill** | 为特定主题推荐高价值的来源 |
| 2 — 抓取 | [EdgeKnowledge_Skill](https://github.com/1596941391qq/EdgeKnowledge_Skill) | 深度抓取论坛、Reddit 和社区 |
| 3 — 转换 | [anything-to-md](https://github.com/1596941391qq/anything-to-md) | 将任何内容转换为适配 LLM 的 Markdown |
## 数据来源
| 文件 | 内容 |
|---|---|
| `references/karpathy-92-hn-2025.tsv` | 由 Karpathy 策划的 92 个长篇高信噪比信息源 |
| `references/deep-sources-github.tsv` | 扩展的深度来源 GitHub 项目(awesome 列表、OSINT 框架、安全工具) |
| `references/deep-sources-telegram.tsv` | Telegram 频道池(可持续导入) |
### 包含的深度 GitHub 来源
awesome · awesome-osint · OSINT-Framework · awesome-security · awesome-incident-response · papers-we-love · awesome-selfhosted · awesome-sysadmin · awesome-privacy · awesome-threat-detection · awesome-browser-security · awesome-malware-analysis · awesome-devsecops
## 评分公式
```
KnowledgeValue = 0.30×Relevance + 0.25×Depth + 0.25×Actionability + 0.10×Freshness + 0.10×Consequence
```
每个维度按 1–5 分评分。来源按加权的 KnowledgeValue 进行排序。
## Telegram 集成(可选)
```
pip install telethon
```
```
export TG_API_ID=your_id
export TG_API_HASH=your_hash
python scripts/import_telegram_sources.py --query "seo blackhat osint" --limit 30 --tags "telegram,seo,adversarial"
```
导入的频道会自动合并到推荐池中。
## 快速开始
```
git clone https://github.com/1596941391qq/edge_source_skill.git
cd edge_source_skill
pip install -r requirements.txt # or just run — minimal deps
python scripts/recommend_sources.py "your research question here"
```
## 相关项目
- [EdgeKnowledge_Skill](https://github.com/1596941391qq/EdgeKnowledge_Skill) — 第 2 阶段:深度抓取此工具推荐的来源
- [anything-to-md](https://github.com/1596941391qq/anything-to-md) — 第 3 阶段:将抓取到的内容转换为整洁的 Markdown
- [bypass-anything](https://github.com/1596941391qq/bypass-anything) — 用于浏览器自动化的反检测层
- [nichedigger](https://github.com/1596941391qq/nichedigger) — 基于 Reddit 的 PSEO 关键词挖掘
标签:AI推荐, DLL 劫持, ESC4, GitHub, LLM, Markdown, OSINT, Python, SEO, Shellcode, Unmanaged PE, URL抓取, 代码示例, 信息检索, 信息源, 内容转换, 大语言模型, 实时处理, 对抗性SEO, 情报分析, 技术调研, 搜索引擎优化, 数字取证, 数据分析, 数据抓取, 文档结构分析, 无后门, 智能推荐系统, 深度爬虫, 知识管理, 网络诊断, 自动化脚本, 边缘知识, 逆向工具