나는 열과 함께 몇 가지 긴 문자열과 필요한 계산하는 가장 많이 사용되는 단어에다.
내가 필요로 작동하는 무언가 다음과 같이 https://towardsdatascience.com/very-simple-python-script-for-extracting-most-common-words-from-a-story-1e3570d0b9d0. 말 부분에서 적어도...
그리고 그것은 매우 중요 내가 할 수있는 옵션을 블랙리스트를 어떤 단어를 지나는 계산합니다.
도 아래 간단한 접근 방식
with blacklist as (
select 'with' word union all
select 'that' union all
select 'add more as you see needed'
)
select lower(word) word, count(*) frequency
from data, unnest(regexp_extract_all(col, r'[\w]*')) word
where length(word) > 3
and word not in (select word from blacklist)
group by word
order by frequency desc