Jeśli mam bardzo długą listę nazw artykułów, jak mogę uzyskać streszczenie tych artykułów z Internetu lub z dowolnej bazy danych?
Nazwy artykułów są jak „Ocena użyteczności w Web Mining dla domeny zdrowia publicznego”.
Czy ktoś zna API, które może dać mi rozwiązanie? Próbowałem zaindeksować Google Scholar, jednak Google zablokował mój robot.
2
Wątpię, czy istnieje do tego jakiś ogólny interfejs API. Możesz spróbować zaindeksować różne usługi, takie jak Academia.edu, witryny wydawców i tak dalej. Niemniej jednak łatwiej byłoby najpierw zbudować lokalną bazę danych dokumentów, a następnie eksperymentować z wyodrębnianiem streszczeń.
—
Wojciech Walczak
Dzięki za odpowiedź! W tym celu zbudowałem już lokalną bazę danych. Problem z indeksowaniem z różnych usług polega na tym, że muszę tworzyć reguły analizy dla każdej witryny.
—
Alex Gao
A co powiesz na konwersję plików PDF na TXT, a następnie wyodrębnienie streszczeń za pomocą wyrażeń regularnych?
—
Wojciech Walczak
dzięki! Jednak umowa stanowi, że masowe pobieranie dokumentów jest niedozwolone. Powoduje to ból głowy.
—
Alex Gao