Opa gente boa noite, beleza?

Tô fazendo meu trabalho de conclusão de curso em cima do fediverse, e meus orientadores recomendaram crawlear as redes pra fazer algumas análises. Como entendo que tá todo mundo meio ferrado com esses scrappers pra GPTs da vida, queria saber se isso seria okay pelos admins e qual seria a forma mais “respeitosa” de coletar esses dados sem gerar custos pro hosting.

  • P4ulin_Kbana
    link
    fedilink
    arrow-up
    2
    ·
    6 days ago

    Não entendo de crawler, porém acho que depende do uso do conteúdo “scrappado”. Se for pra arquivar coisas, tá tudo bem, desde que respeite o desejo de alguém ser removido, mas se for pra treinar IA, aí é paia.

    • r2castroOP
      link
      fedilink
      arrow-up
      2
      ·
      6 days ago

      De forma alguma é pra treinar IA, tenho ódio dessas porra. É pra fazer um estudo sobre dinâmicas sociais no Fediverse e como podem ser diferentes de dinâmicas em redes centralizadas.