建立社工库分析和总结.docxVIP

关于建立社工库的经验总结

iframe2015-06-16共

iframe2015-06-16

共149740人围观，发现28个不明物体其他工具

“社工库”是运用社会工程学进行渗透测试时候积累的各方面数据的结构化数据库。

环境介绍

①Host：Fedora(English)(server)，win8(中文)

②Fedora安装apache，MysqlWorkbench，语言包（Fedora安装时选择）。

③Database：Mysql安装在Fedora,建库/表统一编码UTF8

，修改my.cnf中的datadir=单独的一个分区，tmpdir=空间足够大的空间(16G)。

④Win8:安装了notepad++，Navicat。MySql配置如下：

/etc/my.cnf[mysqld]

skip-name-resolve#datadir=/var/lib/mysqldatadir=/home/data/mysql/tmpdir=/MysqlTemp/#socket=/var/lib/mysql/mysql.socksocket=/home/data/mysql/mysql.sockuser=mysql

default-character-set = utf8max_allowed_packet = 200Mnet_buffer_length = 65536

wait_timeout = 2880000

interactive_timeout = 2880000symbolic-links=0

[mysqld_safe]

log-error=/var/log/mysqld.log

pid-file=/var/run/mysqld/mysqld.pid[mysql]socket=/home/data/mysql/mysql.sock[mysqldump]socket=/home/data/mysql/mysql.sock

[mysqladmin]socket=/home/data/mysql/mysql.sock

着重修改datadir,tmpdir,socket。

可能有的同学还用txtSearch，我觉得实在是有点慢，还?

准备篇

①txt体积不超过400M的一律先转化成UTF-8编码格式(8G内存图形化可以使用Notepad++)

②检查txt中是否有（双引号）（单引号），会导致意外终止。(还有其他原因后面提到)

③如果遇见分割成碎小体积的多份带有编码格式的txt，使用linux下的cat*1.txt时会出现编码问题（这也就是为什么先执行第一条），其实windows可用type*1.txt搞定。(注:windows下type*源文件和目标文件要保持不同目录，windows下的命令工具确实有点渣。咳~)

④sql格式的文件，建表时检查是否有索引，删除之，导入后再建，其速度回提高不少。

数据导入篇

①sql文件，删除key`user` (user);之类索引后，mysql执行

source xxx.sql导入，不用考虑编码问题，入库后直接使用workbench或

nevicat编辑数据库属性转UTF8编码即可，然后再添加索引。

②txt文件（使用tab间隔，回车换行），selectintooutfiletxt/bcp可以使用mysql命令loaddatainfilea.txtintotabletest.a;（默认缺省FIELDSTERMINATEDBY\tENCLOSEDBYESCAPEDBY\\,行缺省LINESTERMINATEDBY\nSTARTINGBY）

③txt文件（非tab的规律间隔符），可以使用操作简单的Navicat导入。

④txt文件（非规律间隔符），使用py处理成有序文本，再使用Navicat导入。

上图是不规则的空格+tab，下图编写代码处理下。

偶遇几个异常，统计下看看所占比例。

except：

count=count+1

来看看处理后的结果。

⑤关于mssql转mysql

㈠MySQL-Migration-Toolkit

㈡MssqltoAccess then accesstoMySQL

㈢BCP then Loaddatalocalinfiletxtintotablexx;

Win(mssql)cmd执行

bcp select * from dbname.dbo.info queryout info.tx