LeakScraper - مجموعة فعالة من أدوات لمعالجة وتصور ملفات نصية ضخمة التي تحتوي على مسوغات

LeakScraper عبارة عن مجموعة فعالة من الأدوات لمعالجة وتصور ملفات نصية ضخمة تحتوي على بيانات اعتماد. تم تصميم هذه الأدوات لمساعدة pentesters / redteamers القيام OSINT ، وجمع بيانات الاعتماد وبيانات الاعتماد حشو الهجمات.

التركيب

• أول الأشياء أولا: لديك خادم mongodb العمل .
• ثم :

   git clone -b mongodb https://github.com/Acceis/leakScraper
    cd leakScraper
    sudo ./leakScraper/install.sh

  وسوف يقوم بتركيب عدة باقات وحزم ديبيان (python-magic ، python3-pymongo وزجاجة).

متطلبات
لينكس (ديبيان) ، وثعبان 3.x وخادم mongodb. 

الاستخدام 
راجع ويكي يتم تقسيم 

أدوات
LeakScraper إلى ثلاثة أجزاء:

• leakStandardizer : أداة لتقييس التسريبات التي حصلت عليها من مكان شرعي على الإنترنت. يستغرق إدخال ملف يحتوي على بيانات اعتماد بعد تنسيق غريب يحتوي على أحرف غير ascii أو خطوط فارغة أو خطوط تحتوي على رسائل البريد الإلكتروني غير صالح أو لا كلمة مرور. وسوف ينتج ، بمساعدة منك (باستخدام التعبير العادي) ، ملفًا قابلاً للتمرير بسهولة باستخدام التنسيق التالي: email:hash:plain("عادي" لـ "كلمة مرور نص عادي").
• leakImporter : أداة لاستيراد ملف تسرب قياسي في قاعدة بيانات mongodb. سيعتني استخراج البيانات من الملف ، ووضعها في تنسيق شامل mysql ، إنشاء / إدارة الفهارس ...
• leakScracker : أداة وواجهة لحفر البيانات من قاعدة البيانات وعرضه بشكل جيد.

المسلمات

• و usecase غطت ما يلي: البحث في بيانات الاعتماد التي تنتمي إلى منظمة / شركة / هيكل معين. يتم ذلك عن طريق البحث في بيانات الاعتماد المرتبطة ببريد إلكتروني ينتمي إلى المنظمة المعنية. مثال: يتم البحث عن بيانات الاعتماد التي تنتمي إلى Microsoft عن طريق البحث في بيانات الاعتماد المرتبطة بالحسابات المسجلة في بريد إلكتروني تنتهي بـ "@ microsoft.com". هذا هو النهج الوحيد المغطى والذي يعني الكثير من حيث الخيارات الفنية (فهارس قواعد البيانات وتمثيل البيانات بشكل عام).
• يمكن أن تسرّب الوزن عدة غيغابايت. ويعني ذلك أن كل عملية (التوحيد القياسي والواردات والأبحاث) تستخدم خوارزميات موضعية من حيث الذاكرة . يمكنك أن تعرف مسبقاً حجم أدوات الأطروحات للذاكرة التي ستستخدم لمعالجة ملف معين ، ولن تقوم باستنفاد موارد الكمبيوتر (إلا إذا كان لديك قديمًا جدًا).
• إن معالجة الملفات الضخمة والعمل مع الكثير من البيانات يستغرق وقتًا. من المهم أن يكون لديك ملاحظات مرئية / في الوقت الفعلي لمعرفة مقدار الوقت الذي تستغرقه معالجة / استيراد ملف. من المهم أن تعرف ما إذا كنت قد بدأت للتو عملية لمدة 7 ساعات أو لمدة 1،200 سنة.

تنزيل leakScrope