Netglub

Really Open Source Information Gathering

Reference guide

326 Comments »

    1.Entities

    Infrastructure

    • Dns name : this is a computer hostname given in an internet domain(see RFC 1035, RFC 1123, and RFC 2181)
    -> ‘mail.mycompany.com’
    • Domain name : this is the domain name (see RFC 1035, RFC 1123, and RFC 2181).
    -> ‘mycompany.com’
    • Ip Address : the computer numerical adress on the net (see RFC 791,997).
    -> ’192.168.1.1′
    • Ip Subnetwork : the subnetwork adress is the one (see RFC 917)
    -> ’192.168.1.0/24′
    • Message Exchanger Record : Specific ressource record in a domain name system that identify a mail server (RFC 1035 and RFC 5321)
    -> ‘mx1.mail.mycompany.com’
    • Name Server Record : Specific ressource record in a a domain that identify a server that implements a name-service protocol (RFC 1034 and RFC 1035)
    -> ‘ns1.mycompany.com’
    • URL : Uniform Ressource Locator, it specifies where an identified resource is available and the mechanism for retrieve it. (see RFC 1738)
    -> ‘http://www.mycompany.com/mydoc.pdf’
    • WebSite : a collection of related webages, or medias contents that are adressed relative to a common URL.
    -> ‘http://www.mycompany.com’

    Personnal

    • Email Address : an etreprise or personnal mail adress
    -> ‘mike@mycompany.com’
    • Person : a person caracterized by a name, or both name and surname:
    -> ‘mike’ or ‘mike hell’
    • Phrase : a suite of strings untyped that allow pwerfull search:
    -> ‘mycompany filetype:pdf’ in order to retrieve every pdf available on mycompany site.

    2.Transforms

    Transforms are classified in 4 categories

    • default

    « domainIpToEmailWhois »
    « DomainToDomainTLD »
    « DomainToEmailPGP »
    « DomainToLocationWhois »
    « DomainToPersonPGP »
    « EmailToEmailSamePGP »
    « EmailToPersonPGP »
    « IpToDomainSharedIp »
    « IpToIpBlockCuts »
    « IpToLocation »
    « IpToWiki »
    « PersonToEmailPGP »
    « PersonToPersonPGP »
    « WebsiteToEntitiesNER »
    « WebsiteToUrlMirror »

    • dns_lookup

    « DDToIp »
    « DomainToDnsNameBrute »
    « DomainToDnsNameSE »
    « DomainToDnsNameZN »
    « DomainToMX »
    « DomainToNS »
    « IpBlockToDnsName »
    « IpToAsWhois »
    « IpToDnsName »
    « WebsiteToIp »

    • parse

    « DnsNameToWebsite »
    « DnsWebsiteToDomain »
    « DomainToDomainTopLevel »
    « DomainToWebsite »
    « EmailToDomain »
    « UrlToEntitiesNER »
    « UrlToUrl »
    « UrlToWebsite »
    « WebsiteToEmailMirror »
    « WebsiteToWebsiteMirror »

    • search_engine

    « DomainEmailToEmailSE »
    « DomainToDomainExpand »
    « DomainToEmailSEDomOnly »
    « EmailIpToWebsiteSE »
    « EmailWebsiteToUrlSE »
    « PersonToEmailSE »
    « PersonToWebsiteSE »
    « PhraseToUrlSE »
    « UrlToEmail »
    « UrlToUrlInk »
    « WebsiteToWebsiteInk »

    326 Responses

    Hi,
    Cool project from what I’ve got working so far.
    BUT….
    Are these transforms actually implemented ?

    Looking in the tarball only a couple of them appear to be present, even basic ones like DDToIp don’t seem to have any code, just a conf.xml

    Apologies if I’ve missed some of the instructions but any tips would be appreciated

  • Leave a Reply

    *