이 검색 엔진은 공공 기록을 찾는 데 덜 고통스럽습니다.

Bill Hankes는 더 큰 문제를 발견했을 때 언론인의 받은 편지함에서 보도 자료 스팸을 쓸어버릴 방법을 찾고 있었습니다.

시애틀의 한 뉴스룸을 방문했을 때 그는 기자가 45분 동안 미국 증권거래위원회(SEC) 문서를 샅샅이 뒤지며 쿼리를 데스크탑의 메모장과 SEC의 데이터 검색 시스템에 복사하는 것을 보았습니다. 그 후 기자는 이야기로 발전할 수 있는 덩어리를 발견하기를 희망하면서 특허청으로 출원을 자세히 살펴보기 위해 떠났습니다.

Hankes는 기자가 일주일 동안 이 과정에서 공개 기록을 검색하는 데 8시간을 보냈다고 추정했습니다.

'그런 다음 마이크로소프트가 SEC나 법원 시스템을 떠난 지 10분 후에 서류를 제출하면 어떻게 될까요?' 행크스가 물었다. '그는 그것을 그리워한다.'

이전에 Microsoft Bing의 이사였던 Hankes는 이를 더 나은 검색 도구로 해결할 수 있는 문제로 당연하게 여겼을 것입니다. 그래서 그는 또 다른 수색 베테랑인 David Kellum과 협력하여 스쿱 .

공공 기록을 찾고 조회하는 데 많은 시간과 노력이 소요되지 않아야 한다는 원칙에 따라 Sqoop을 설립한 Hankes는 '정부는 공개 의무를 존중하지만 언젠가는 이러한 자료를 쉽게 찾을 수 있도록 하지 않습니다.'라고 말했습니다.

언론인에게 무료로 제공되는 검색 엔진은 다음과 같은 다양한 출처의 기록을 수집합니다.

• SEC 신고서(내부자, 이벤트, 보고서, 대리인, 제안, 등록 및 소유권 포함)
• 특허(실용 신청, 실용 허가, 디자인 특허, 식물 특허 및 재발행 포함)
• 법원 문서(연방 지방 법원, 연방 파산 법원, 순회 항소 법원, 연방 청구 법원 및 국제 무역 법원의 문서 일부 그룹)
• 법무부 발표
• 미국 검찰청 발표

기자는 사람, 장소 또는 주제를 빠르게 검색하고 데이터 유형이나 형식을 기반으로 결과를 구체화할 수 있습니다. 검색 엔진의 다른 부분도 미세 조정하여 노이즈를 줄일 수 있습니다. 예를 들어, SEC 제출은 산업 또는 지리적 위치를 기반으로 세분화할 수 있으며 법원은 법원 유형별로 또는 개별 법원 자체로 드릴다운할 수 있습니다.

동일한 검색을 계속해서 실행하는 것은 지루할 수 있기 때문에 Sqoop은 두 가지 경고 유형도 제공합니다. 첫 번째는 리포터가 검색을 저장하고 검색 매개변수에 속하는 새 레코드가 나타날 경우 이메일 알림을 받을 수 있도록 합니다.

두 번째는 'Docket Watch'라고 하며 특정 사례에 대한 업데이트가 있을 때마다 경고를 보냅니다. Hankes는 이 기능이 Sqoop만의 고유한 기능이라고 주장합니다.

많은 정부 데이터베이스와 달리 기록은 관련 조각과 함께 수집됩니다. 예를 들어 커버 레터는 리소스 및 알림과 함께 목록에 나타납니다.

Sqoop은 또한 프리미엄 기능으로 '뉴스 가치 있는 알고리즘'을 구축하기 위해 노력하고 있습니다. Hankes는 모든 공개 기록이 추가 보고가 필요한 것은 아니며 대부분이 '커피를 뱉을 수 있는 뉴스'에 해당하지 않기 때문에 팀은 경고에 대한 '뉴스 가치 있는' 기준을 설정하는 도구를 구축하기 위해 노력하고 있다고 말했습니다.

이 알고리즘은 사건이나 기록의 다양한 측면(회사의 직원 수, 회사가 속한 산업, 해당 산업이 소송에 취약한지 여부 등)을 평가하여 뉴스 가치의 임계값을 충족하는지 여부를 결정합니다. 임계값을 충족하는 사례에 대해서만 언론인에게 경고합니다.

스쿱은 2015년 4월에 공식 출범했으며 '전국의 거의 모든 뉴스룸'에 5,000명의 등록된 기자가 있다고 Hankes는 말했습니다.

그것을 사용하지 않는 기자들을 위해 Hankes는 시작하기 위해 세 가지 아이디어를 제안했습니다.

• 비즈니스 리포터인 경우 해당 지역의 모든 SEC 문서에 대한 검색을 설정하십시오. '현재 위치에서 검색' 기능을 사용하여 홈페이지의 검색 상자 바로 아래에서 검색할 수 있습니다. Sqoop은 귀하의 IP 주소를 사용하므로 검색을 귀하로부터 15마일 또는 20마일 이내로 설정하거나 주 전체에서 실행하도록 선택할 수 있습니다. 검색을 구축할 수 있는 시립 검색 영역 목록도 있습니다.
• 관할 지역에 연방 지방 법원이 있는 경우 특정 보고서를 찾고 찾은 내용을 기반으로 시간이 지남에 따라 검색을 세분화할 수 있습니다.
• 활동을 모니터링하기 위해 해당 지역의 더 큰 비즈니스에 대한 검색을 설정하고 저장합니다. 이것은 저명한 비즈니스 사람들에게도 효과가 있습니다.

Try This를 통해 저널리즘 도구에 대해 자세히 알아보십시오! — 저널리즘을 위한 도구. 이 시도! 에 의해 구동 Google 뉴스 랩 . 에서도 지원합니다. 미국 언론 연구소 그리고 존 S.와 제임스 L. 나이트 재단 .